Hadoop集群任务分派

Hadoop分布式开发中集群的任务的分派，怎样为相应的机器分配相应的任务进行分布式运算呢
全部评论
partition？
点赞 回复 分享
发布于 2017-12-13 15:42
兄弟 我虽然对hadoop只有理论了解，但是对MongoDB做过存储的分布复制集设计与测试。 你这个问题是“怎样为相应的机器分配相应的任务进行分布式运算呢” 你有几台机器（服务器）？进行什么运算（是一分多，还是分别做不同的）？
点赞 回复 分享
发布于 2017-12-13 16:55
我看了你的评论大概懂了，我是个渣渣，只能提点想法，zookeeper一般是负责集群之间的通信的吧，你的意思是不是这个？但是至于zookeeper怎么分的，应该有他自己内部的算法，你需要做的应该就是把你的算法替换吧。我说的是基于我zookeeper ➕HDFS ➕Hbase做存储的基础，我觉得应该相同吧
点赞 回复 分享
发布于 2017-12-13 17:05
yarn分配计算资源来分配任务，zookeeper通过负载均衡和配置管理帮助
点赞 回复 分享
发布于 2017-12-13 19:36

相关推荐

11-18 23:23
中国药科大学 外贸业务员
点赞 评论 收藏
分享
11-17 09:51
已编辑
腾讯_游戏客户端开发(准入职员工)
腾讯光子游戏客户端上岸，cpp秋招总结
引子文章是记录自己 2024.7~2024.11 秋招的情况，也是对自己大半年来努力的一个总结和收尾，也因为牛客上很多前辈和大佬的秋招感悟对我起到了很大的帮助，所以想记录一些内容供大伙参考（情况因人而异，可以辩证看待）。个人大致情况学历：本北邮软工硕华科计科专业成绩：排名10%到15%左右，保研比赛：略等于无论文：无项目：实验室工程项目（PCIE 驱动、动态库部分）、个人小项目实习：本科一段中厂 Java 后端、硕士一段华为武研所软开个人秋招投递/面试情况暑期在华为武研所实习，总体强度不大，因此从7月初开始参加秋招提前批，一边实习一边笔试面试。秋招主要投递的方向是 C++开发、嵌入式软件、操作...
点赞 评论 收藏
分享
09-29 17:44
已编辑
蔚来_测(准入职员工)
lastday
还能再见吗😭😭😭
//鲨鱼辣椒：见不了了我实习了四个月上周再投筛选了一天就给我挂了
点赞 评论 收藏
分享
11-20 00:00
门头沟学院 算法工程师
点赞 评论 收藏
分享
点赞 收藏 评论
分享

全站热榜

正在热议
# 晒一晒我的offer #
9720734次浏览 104913人参与
# 学历or实习经历，哪个更重要 #
39731次浏览 290人参与
# 北方华创开奖 #
21924次浏览 250人参与
# 地方国企笔面经互助 #
2320次浏览 6人参与
# 应届生被毁约被毁意向了怎么办 #
25450次浏览 234人参与
# 你最想要的公司福利是？ #
37553次浏览 70人参与
# 查收我的offer竞争力报告 #
14969次浏览 207人参与
# 机械应届生薪资要多少才合适？ #
12154次浏览 59人参与
# 一觉醒来，我觉醒了超级打工人系统 #
2547次浏览 32人参与
# 没有实习经历，还有机会进大厂吗 #
803790次浏览 13785人参与
# 我的工作日记 #
20773次浏览 269人参与
# 你觉得第一学历对求职有影响吗？ #
14693次浏览 121人参与
# 寒假躺平还是提前实习 #
57593次浏览 420人参与
# 总结:哪家公司面试体验感最差 #
24365次浏览 118人参与
# 公司情报交流地 #
31351次浏览 222人参与
# 选完offer后，你后悔学本专业吗 #
7868次浏览 47人参与
# 不给转正的实习，你还去吗 #
1514274次浏览 16948人参与
# 实习，投递多份简历没人回复怎么办 #
2385759次浏览 34238人参与
# 00后45度躺现状 #
37469次浏览 306人参与
# 机械人，签完三方你在忙什么？ #
23509次浏览 121人参与
# 秋招OC许愿 #
225176次浏览 1858人参与
牛客网
牛客企业服务