当前位置: 首页 > news >正文

公司企业邮箱怎么填写关键词优化公司如何选择

公司企业邮箱怎么填写,关键词优化公司如何选择,网站建设lieyanma,南通网站建设机构一. 前言 在Presto的Stage Performace中,每个Operator中都会有Driver个数的显示,如下图所示。本文主要介绍Presto中是如何决定Driver的个数的。 二. Driver个数 在Presto中,一个pipeline中启动多少个Driver,是由此Pipeline处理的S…
一. 前言

        在Presto的Stage Performace中,每个Operator中都会有Driver个数的显示,如下图所示。本文主要介绍Presto中是如何决定Driver的个数的。

二. Driver个数

       在Presto中,一个pipeline中启动多少个Driver,是由此Pipeline处理的Split个数决定的。代码实现的流程如下所示:

blocked = split.process();DriverSplitRunner::processFordriverFactory.createDriver

        因此Presto在处理每个Split的时候,都会创建一个Driver来处理该Split,Driver中包含处理该Split的所有Operator。

       既然Operator的个数决定了Driver的个数,那么Operator的个数又是怎么决定的呢?

       在Presto中,Operator的个数在TableScan中和非TableScan处理不太一样,如下将详细说明两者的区别。

     TableScanOperator的Split个数决定流程:

     TableScan的Split格式是有Connector的ConnectorSplitManager::getSplits接口决定的,在SourcePartitionedScheduler中,会通过调用ConnectorSplitManager的split获取所有的split进行调度,整体的代码执行流程:

SourcePartitionedSchedulerschedulescheduleGroup.nextSplitBatchFuture = splitSource.getNextBatchConnectorAwareSplitSource::getNextBatchsource.getNextBatch     ==> 调用到connector的getSplits接口获取所有的splits,因此connector返回的split的个数就是tablescan的split的个数

        非TableScan算子的Driver个数则是由DriverInstanceCount决定的,在SqlTaskExecution::scheduleDriversForTaskLifeCycle中根据DriverInstanceCount的个数决定创建多少个Driver来处理数据:

       DriverInstanceCount的设置值不同的Operator设置的不一样,比如ExchangeOperator的个数是由task_concurrency参数决定的,主要的代码实现流程为:

      LocalExecutionPlanner::createRemoteSource中决定DriverInstanceCount:

    又如TableWrite的个数则是由task_writer_count参数决定的:

 

三 . Driver个数的意义

      更多的Driver意味着更多的并发去同时处理数据,往往也意味着更好的性能。

http://www.hrbkazy.com/news/30890.html

相关文章:

  • 护肤品网站建站模板自己做一个网站
  • 做网站还是做淘宝seo投放
  • 计算机网络技术网站开发百度seo怎么操作
  • 中国工厂网官网整站seo排名
  • 韩雪冬网站公司品牌宣传方案
  • 企业作风建设包括哪些方面seo优化方案报价
  • 深圳价格实惠的网站建设公司免费制作永久个人网站
  • 吴桥县网站建设公司网站维护收费标准
  • 内蒙古自治区建设厅网站淘宝客推广有效果吗
  • 专业网站排名优化公司网站搜索优化
  • 云虚拟主机 多个网站百度首页优化
  • 网站建设最关键的两个素材大型的营销型网站
  • 网站建设情况怎么写范文整合营销活动策划方案
  • php学完可以做网站seo网站建设优化
  • 个人接单做网站的平台网络营销网络推广
  • 做服务的网站吗seo广告平台
  • 南宁哪些公司专业做网站seo快速工具
  • 目前跨境电商平台有哪些seo的培训课程
  • 专门做尾单的那个网站叫啥优化最狠的手机优化软件
  • 网站开发还是安卓开发好新闻报道最新消息今天
  • 做网站 框架信息流优化师面试常见问题
  • 高端网站定制北京百度个人中心登录
  • 做网站添加本地图片谷歌浏览器网页版入口在哪里
  • 建筑设计图纸平面图百度seo详解
  • 建网360 网站建设百度商店应用市场
  • 完整网站项目的逻辑搜一搜排名点击软件
  • 如果网站没有icp备案号如何写软文
  • wordpress 显示子分类个人博客seo
  • 陕西专业网站开发联系电话哈尔滨seo推广
  • 学做网站用什么服务器深圳网络推广团队