我有一个轻量级的 Hadoop 环境:
2个namenodes(job tracker/HBase Master)+ 3个datanodes(tasktracker/HBase Region)
都像是两个四核CPU+16-24G内存+总15T
我想知道如果我要找 3 个动物园管理员,动物园管理员会是什么样的服务器规格?有人可以分享一些经验吗?
我有一个轻量级的 Hadoop 环境:
2个namenodes(job tracker/HBase Master)+ 3个datanodes(tasktracker/HBase Region)
都像是两个四核CPU+16-24G内存+总15T
我想知道如果我要找 3 个动物园管理员,动物园管理员会是什么样的服务器规格?有人可以分享一些经验吗?
从HBase 的角度来看——
给每个 ZooKeeper 服务器大约 1GB 的 RAM,如果可能的话,给它自己的专用磁盘(专用磁盘是确保高性能 ZooKeeper 集成的最佳选择)。对于负载非常重的集群,在与 RegionServer(DataNode 和 TaskTracker)不同的机器上运行 ZooKeeper 服务器。
- 应配置专用磁盘以在事务日志增长时存储快照。
- 需要足够的 RAM,以便它不会交换。