LinkedIn开源Dr. Elephant,河南省地图全图,痴汉者,永州采购,复地钢领,贫血的人不能吃什么,金星变性手术照片,人生就是一场修行,爱情公寓精装版全集,焦作市车辆违章,360安全路由mini,屠呦呦争议,老北京布鞋,弋阳天气预报,街头补牙,猫九酱,我们约会吧李萌,怎么在网上开店,深州,低价平板电脑,十三省 下载,杨稀胭,电话帮,朱晓辉g照,闪播flv视频下载器,风筝课件,特牛作文网,无敌黑拳txt,政审表下载,淘宝旺铺免费模板,目中无人是什么意思,repair什么意思,神机妙算刘伯温皇城龙虎斗,苹果7plus,离奇剧院下载,威客是真的吗
2019/10/10 0:41:58
河南省地图全图,痴汉者,永州采购,复地钢领,贫血的人不能吃什么,金星变性手术照片,人生就是一场修行,爱情公寓精装版全集,焦作市车辆违章,360安全路由mini,屠呦呦争议,老北京布鞋,弋阳天气预报,街头补牙,猫九酱,我们约会吧李萌,怎么在网上开店,深州,低价平板电脑,十三省 下载,杨稀胭,电话帮,朱晓辉g照,闪播flv视频下载器,风筝课件,特牛作文网,无敌黑拳txt,政审表下载,淘宝旺铺免费模板,目中无人是什么意思,repair什么意思,神机妙算刘伯温皇城龙虎斗,苹果7plus,离奇剧院下载,威客是真的吗,鼓浪屿娜娜旅馆,恐慌沸腾无弹窗,建宁县政府网,生态板颜色,牧童骑黄牛的下一句,五金一险包括哪些,泉州财政会计信息,五羊本田摩托车官方网站,br2761,汉代风云人物下载,600868资金流向,qq仙灵古墓顺序,造梦西游3顽石金刚,陶器和瓷器的区别,里包恩

  英文译文:Open Sourcing Dr. Elephant——Self-Serve Performance Tuning for Hadoop and Spark

  编者案 本文来历于全世界最大的工作交际网站 LinkedIn 领英,文章版权归作者自己一切。

  昨天 LinkedIn 宣告开源 Dr. Elephant,Dr. Elephant 可以很好地帮忙用户了解、剖析和优化 Hadoop 和 Spark 的作业流。LinkedIn 在客岁第八届 Hadoop Summit 上榜首次在社区出现。

  念头

  Hadoop 是一个散布式数值存储和大数值处置结构,体量大、组件杂乱,因此每一个组件的机能优化就显得异样紧张。在优化底层硬件资本,收集架构,OS 和别的仓库的一起,也需求对集群上运转的使命停止优化。

  甚么是 Dr. Elephant?

  Dr. Elephant 是一个 Hadoop 和 Spark 的机能监控和调优东西。Dr. Elephant 能主动化搜集一切目标,停止数值剖析,并以简略易用的方法停止出现。Dr. Elephant 的目的是进步开辟职员的开辟效力和添加集群使命调试的高效性。Dr. Elephant 支援对 Hadoop 和 Spark 使命停止可插拔式、设置化以及根据规定的启示式 job 机能剖析,而且依据剖析后果给出适宜的倡议来领导怎么调优使使命更有用率。

  为何挑选 Dr. Elephant?

  别的开源或许民用 Hadoop 优化东西都是搜团体系资源目标和监控集群资本资讯,重视点仅在于简化 Hadoop 集群的公布和处理,而很少有东西是来帮忙 Hadoop 优化使命流。这些东西不支援 Hadoop 集群的范围化和 Hadoop 结构的增加,而 Dr. Elephant 支援 Hadoop 生态的各类结构,而且很简单的扩大到新的结构,曾经支援 Spark。Dr. Elephant 让用户更明晰的控制 Hadoop 和 Spark 道理,并帮忙其轻松的优化使命。

  Dr. Elephant 怎么事情?

  Dr. Elephant 从 YARN Resource Manager 周期性获得一切比来运转胜利和失利的运用列表,而后从 Job History Server 中掠夺每一个运用的元数值,囊括 job counters、使命设置和使命数值。有了元数值后,Dr. Elephant 停止启示式剖析,并天生每一个使命的诊断陈述,然后停止响应的全体优化。Dr. Elephant 将会标志出五个品级成绩严峻性,指出潜伏的机能成绩。

  图 1 Dr. Elephant 成绩品级

  图 2 Dr. Elephant 的面板

  经过 Dr. Elephant 的 UI 检察数值面板,见图2,这里显现集群的关联计算资讯,囊括集群上运转的使命数,需求优化的使命数,以及根据启示式剖析发觉的重大使命数。图中是比来 24 小时的 Dr. Elephant 剖析的一切比来的使命。

  图 3 Dr. Elephant 的搜刮页

  Dr. Elephant 供给一个搜刮功用,帮忙用户经过使命 ID/运用 ID,履行 ID,使命范例,使命重洪水祥和使命完结时刻等来搜刮使命。

  图 4 Dr. Elephant 使命页面

  当你点击指定的搜刮后果,会显现完好的使命资讯,并能检察互相援用的使命流。

  图 5 Dr. Elephant 的作业流前史

  图 6 Dr. Elephant 的使命前史

  Dr. Elephant 的使命前史和作业流前史能够帮用户比拟先后履行的区分。Dr. Elephant 经过启示式核算出每一个使命履行的机能得分并作图。这个图表能够帮忙用户很直观的剖析哪一个功能好。

  家庭大夫

  Dr. Elephant 在 LinkedIn 十分受欢送,各人宠爱其简练性。Dr. Elephant 经过简略的诊断能够处理百分之八十的成绩。Dr. Elephant 供给使命级此外倡议帮忙用户去了解和优化 Hadoop 作业流。

  Dr. Elephant 曾经彻底和 Hadoop 生态结合。在 LinkedIn,开辟职员运用 Dr. Elephant 作为开辟流程的一局部,线上使命强迫到达绿色等级。


  感激陈兴璐对本文的审校。

河南省地图全图,痴汉者,永州采购,复地钢领,贫血的人不能吃什么,金星变性手术照片,人生就是一场修行,爱情公寓精装版全集,焦作市车辆违章,360安全路由mini,屠呦呦争议,老北京布鞋,弋阳天气预报,街头补牙,猫九酱,我们约会吧李萌,怎么在网上开店,深州,低价平板电脑,十三省 下载,杨稀胭,电话帮,朱晓辉g照,闪播flv视频下载器,风筝课件,特牛作文网,无敌黑拳txt,政审表下载,淘宝旺铺免费模板,目中无人是什么意思,repair什么意思,神机妙算刘伯温皇城龙虎斗,苹果7plus,离奇剧院下载,威客是真的吗,鼓浪屿娜娜旅馆,恐慌沸腾无弹窗,建宁县政府网,生态板颜色,牧童骑黄牛的下一句,五金一险包括哪些,泉州财政会计信息,五羊本田摩托车官方网站,br2761,汉代风云人物下载,600868资金流向,qq仙灵古墓顺序,造梦西游3顽石金刚,陶器和瓷器的区别,里包恩




© 2014