上云无忧 > 文档中心 > 百度智能云MapReduce - 通过SSH-Tunnel访问集群的环境准备
百度智能云MapReduce - 通过SSH-Tunnel访问集群的环境准备

文档简介:
建立SSH Tunnel: 集群创建成功后,集群创建成功后,请至“站内信”中获取Master节点的公网IP和SSH端口号,并通过如下配置在Linux环境或Windows环境下建立SSH Tunnel连接集群:
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

建立SSH Tunnel

集群创建成功后,集群创建成功后,请至“站内信”中获取Master节点的公网IP和SSH端口号,并通过如下配置在Linux环境或Windows环境下建立SSH Tunnel连接集群:

  • Linux环境下:通过 ssh -ND [local_port][username]@[eip] -p [端口号]命令连接Master节点。执行命令后即与Master节点建立了SSH Tunnel,且Master节点不返回响应信息。

    • eip:Master节点的公网IP地址。
    • local_port:选择一个本机未被使用的端口。
    • 端口号:SSH端口。
  • Windows环境下:

    1. 下载并配置Putty,如下图所示:

    2. 选择SSH>Tunnels,输入一个本机没有被使用的端口,并选择“Dynamic”和“IPv4”,保持“Destination”为空,点击“Add”按钮添加。

    3. 点击“Open”,如果有弹窗,选择“Yes”,输入短信中的用户名密码,登录Master节点。

配置浏览器

  • 配置Firefox,选择“远程DNS”选项,以便正确解析主机。

  • 配置Chrome,将SOCKS代理设置为127.0.0.1。

相似文档
  • 使用hadoop镜像的集群可添加的作业类型是:java,streaming。使用spark镜像的集群可添加作业类型:spark,java,streaming。集群中添加了应用后便可添加该应用的作业,即创建集群时添加了hive应用,则可创建hive作业,添加了pig应用,则可创建pig作业。
  • 在“产品服务>MapReduce>MapReduce-作业列表”中,点击作业名称,可查看作业基本信息。 Hadoop将job分成若干个task进行处理,共有两种类型的task,分别为map task和reduce task。点击下拉尖括号,查看各task的任务处理情形。
  • 目的: 诊断运行失败的作业,在日志中定位失败的原因,精确定位到您的程序中错误的位置。 调优运行成功的作业,基于经验评价作业的配置和参数的合理性,给予您调优的建议。
  • 简介: 通过定时任务您可定时启动集群运行作业。需预先规划时间策略,并依据时间策略存储输入数据,再创建定时任务,并可对已创建的定时任务修改时间策略。
  • 概述: Hadoop Manger是BMR产品为用户提供的细粒度hadoop管理平台,提供集群监控、服务管理、hadoop多租户管理功能。 登录系统: 选择“产品服务>数据分析>百度MapReduce>集群”,进入集群列表页面。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部