上云无忧 > 文档中心 > 百度智能云MapReduce的节点类型说明
百度智能云MapReduce的节点类型说明

文档简介:
MapReduce集群提供四种类型的节点: Master节点:为集群管理节点,部署 NameNode、ResourceManager、HMaster 等进程,在创建集群时可以选择开启高可用模式,支持核心组件服务自动故障迁移。建议选择8核以上的节点配置。
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

MapReduce集群提供四种类型的节点:

  • Master节点:为集群管理节点,部署 NameNode、ResourceManager、HMaster 等进程,在创建集群时可以选择开启高可用模式,支持核心组件服务自动故障迁移。建议选择8核以上的节点配置。
  • Core节点:为计算及数据存储节点,部署 DataNode、NodeManager、RegionServer 等进程。并且HDFS 中的数据和计算过程中的中间结果日志数据全部存储于 Core 节点中;采用存算分离架构下的计算中间结果数据也会存放在core节点中;为了数据安全,暂不支持对core节点的缩容操作。
  • Task节点:为计算节点,用来补充core节点的算力,部署 NodeManger、PrestoWork 等进程。Task节点一般不用来存储数据,被计算的数据来自 Core 节点及 BOS 中,因此 Task 节点可按需进行扩容和缩容操作。
  • Client节点:为独立的集群管控节点及作业提交节点。是与集群在同一VPC内的一组云服务器BCC,为用户提供独立的计算资源以实现集群的负载均衡及安全隔离,提高了集群的稳定及安全性。
相似文档
  • 网站日志处理: 网站日志包含着网站最重要的信息,通过日志分析网站,可帮助您获取用户行为以优化网站的商业价值。日益增长的日志信息需大规模处理平台的支撑,MapReduce全托Hadoop服务为高效处理海量网站日志提供了可靠依托,而且开发者在友好的界面中分析海量日志,大大降低了使用门槛。如需快速熟悉具体实现,请至使用Hive分析网站日志。
  • 按需计费价格: 按需计费定价根据地区收费标准分为内地和香港,具体请参见:按需计费定价。 您可在BMR价格计算器中预设BMR配置并查看对应的价格。
  • 概述: 包年包月计费采用预付费方式,价格较按需计费更低。购买前需保证账户无欠款。 包年包月计费定价: 包年包月计费定价根据地区收费标准分为内地和香港,具体请参见:包年包月计费定价。 您可在BMR价格计算器中预设BMR配置并查看对应的价格。
  • 如图:前期准备->创建集群->开发作业->查看结果
  • 注册并登录百度智能云平台,具体操作请参考注册和登录。 选择“产品服务>MapReduce BMR”,进入BMR服务。 使用BMR需要通过实名认证,每个账户只需认证一次。点击“立即去认证”,进入“实名认证”页面。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部