Hadoop集群任务分派

Hadoop分布式开发中集群的任务的分派，怎样为相应的机器分配相应的任务进行分布式运算呢
全部评论
partition？
点赞 回复 分享
发布于 2017-12-13 15:42
兄弟 我虽然对hadoop只有理论了解，但是对MongoDB做过存储的分布复制集设计与测试。 你这个问题是“怎样为相应的机器分配相应的任务进行分布式运算呢” 你有几台机器（服务器）？进行什么运算（是一分多，还是分别做不同的）？
点赞 回复 分享
发布于 2017-12-13 16:55
我看了你的评论大概懂了，我是个渣渣，只能提点想法，zookeeper一般是负责集群之间的通信的吧，你的意思是不是这个？但是至于zookeeper怎么分的，应该有他自己内部的算法，你需要做的应该就是把你的算法替换吧。我说的是基于我zookeeper ➕HDFS ➕Hbase做存储的基础，我觉得应该相同吧
点赞 回复 分享
发布于 2017-12-13 17:05
yarn分配计算资源来分配任务，zookeeper通过负载均衡和配置管理帮助
点赞 回复 分享
发布于 2017-12-13 19:36

相关推荐

今天 18:25
内蒙古财经大学 策略运营
mentor带实习生最烦的是什么？
实习生常见问题及应对建议作为一个过来人，我想和大家分享一下实习生在职场中常见的一些问题，以及如何避免这些问题，让你的实习经历更加顺利。1. 好问但不自学很多实习生喜欢问问题，这本身是好事，但有些人不看资料、不做功课就直接来问。比如，明明资料里有答案，却懒得看，直接跑来问：“太复杂了，你跟我说说吧。” 还有些基础概念，百度一下就能找到，却还是要问别人。更糟糕的是，问了也记不住，下次还问同样的问题。我的建议是，先自己查资料，实在不懂再问。这样不仅能减轻别人的负担，还能让你学到更多。毕竟，大家都有自己的工作，不可能全天候手把手教你。2. 觉得自己被欺负有些实习生觉得被安排整理数据、调研竞品、打印文件...
投递百度等公司10个岗位 >
点赞 评论 收藏
分享
不愿透露姓名的神秘牛友
昨天 19:05
点赞 评论 收藏
分享
11-12 10:25
武汉晴川学院 Java
这家公司咋样啊 哥姐们
我见java多妩媚：大外包
点赞 评论 收藏
分享
11-15 15:37
门头沟学院 软件测试
运营也这么难吗
牛客146600443号：92的能看上这3k，5k在搞笑呢
点赞 评论 收藏
分享
点赞 收藏 评论
分享

全站热榜

正在热议
# 25届秋招总结 #
242657次浏览 1979人参与
# 学历or实习经历，哪个更重要 #
40634次浏览 295人参与
# 北方华创开奖 #
22506次浏览 257人参与
# 地方国企笔面经互助 #
2474次浏览 6人参与
# 你最想要的公司福利是？ #
39229次浏览 110人参与
# 选完offer后，你后悔学本专业吗 #
9732次浏览 74人参与
# 面试题刺客退退退 #
136721次浏览 2087人参与
# 国企/银行/研究所公司爆料 #
89515次浏览 410人参与
# 应届生被毁约被毁意向了怎么办 #
26641次浏览 237人参与
# 机械应届生薪资要多少才合适？ #
12326次浏览 59人参与
# 查收我的offer竞争力报告 #
16287次浏览 222人参与
# 一觉醒来，我觉醒了超级打工人系统 #
2768次浏览 34人参与
# 校招入职后的感受 #
156682次浏览 1957人参与
# 没有实习经历，还有机会进大厂吗 #
804570次浏览 13807人参与
# 你觉得第一学历对求职有影响吗？ #
14814次浏览 121人参与
# 我的工作日记 #
21020次浏览 270人参与
# 不给转正的实习，你还去吗 #
1516088次浏览 16963人参与
# 寒假躺平还是提前实习 #
58091次浏览 431人参与
# 总结:哪家公司面试体验感最差 #
25479次浏览 128人参与
# 秋招OC许愿 #
226033次浏览 1864人参与
# 秋招被确诊为…… #
54171次浏览 302人参与
牛客网
牛客企业服务