如何进行mr与spark的比较

如何进行mr与spark的比较,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。

成都网络公司-成都网站建设公司创新互联建站10年经验成就非凡,专业从事网站设计、成都网站建设,成都网页设计,成都网页制作,软文营销一元广告等。10年来已成功提供全面的成都网站建设方案,打造行业特色的成都网站建设案例,建站热线:18982081108,我们期待您的来电!

  1. mr目前不支持DAG计算模型,Tez尝试做这样的优化,但还不成熟。

  2. spark 1.2.0之前的版本,shuffle有问题,不够稳定,1.2.0使用了netty4,据称解决了问题,还没有进行尝试。

  3. spark生态圈更具优势,spark sql、spark streaming、spark graphx、spark mllib都基于spark core,之间可以无缝串联。

  4. spark更方便,spark-shell可以很快地进行一些原型验算。

  5. hadoop更heavy也更稳定。

看完上述内容,你们掌握如何进行mr与spark的比较的方法了吗?如果还想学到更多技能或想了解更多相关内容,欢迎关注创新互联行业资讯频道,感谢各位的阅读!


网站名称:如何进行mr与spark的比较
分享URL:http://www.hxwzsj.com/article/jiisjg.html

其他资讯

Copyright © 2025 青羊区翔捷宏鑫字牌设计制作工作室(个体工商户) All Rights Reserved 蜀ICP备2025123194号-14
友情链接: 成都网站制作 网站建设改版 营销型网站建设 网站建设方案 成都网站制作公司 成都网站设计 成都品牌网站建设 成都网站建设 营销网站建设 企业网站设计 成都网站建设 成都网站制作 成都企业网站设计 温江网站设计 网站设计制作 成都网站建设 重庆企业网站建设 成都商城网站建设 教育网站设计方案 宜宾网站设计 成都网站建设 网站建设