上云无忧 > 文档中心 > 百度智能云MapReduce - 查看作业
百度智能云MapReduce - 查看作业

文档简介:
在“产品服务>MapReduce>MapReduce-作业列表”中,点击作业名称,可查看作业基本信息。 Hadoop将job分成若干个task进行处理,共有两种类型的task,分别为map task和reduce task。点击下拉尖括号,查看各task的任务处理情形。
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠
  1. 在“产品服务>MapReduce>MapReduce-作业列表”中,点击作业名称,可查看作业基本信息。

  2. Hadoop将job分成若干个task进行处理,共有两种类型的task,分别为map task和reduce task。点击下拉尖括号,查看各task的任务处理情形。

  3. 当task运行失败时,每个task有四次的重试机会,每次的重试信息记录在“查看Attempt”中。点击“MAP”和“REDUCE”对应的“查看Attempt”,查看attempt信息。

  4. 点击“作业日志”,可查看作业日志,其中Spark作业无作业日志。共有三种日志类型显示,分别是syslog、stderr和stdout。

    • Syslog是记录作业运行时的详细信息;

    • stderr是记录运行作业时的错误信息;

    • stdout记录作业运行完毕后的输出信息;

相似文档
  • 目的: 诊断运行失败的作业,在日志中定位失败的原因,精确定位到您的程序中错误的位置。 调优运行成功的作业,基于经验评价作业的配置和参数的合理性,给予您调优的建议。
  • 简介: 通过定时任务您可定时启动集群运行作业。需预先规划时间策略,并依据时间策略存储输入数据,再创建定时任务,并可对已创建的定时任务修改时间策略。
  • 概述: Hadoop Manger是BMR产品为用户提供的细粒度hadoop管理平台,提供集群监控、服务管理、hadoop多租户管理功能。 登录系统: 选择“产品服务>数据分析>百度MapReduce>集群”,进入集群列表页面。
  • Sqoop导入数据: 在使用BMR添加作业之前,用户需要将被分析的数据上传到BOS中,具体操作请参考BOS上传Object。 您可通过Sqoop把关系型数据库RDS中的数据导入到BOS、HDFS、HBase或Hive中。具体操作如下:
  • Sqoop导出数据: 在使用BMR对数据进行分析之后,分析的结果数据被保存在BOS的指定目录下,用户可以进入BOS中将结果数据导出,具体操作请参考BOS下载Object。 您可通过Sqoop把BOS或HDFS的数据导出至关系型数据库RDS中。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部