上云无忧 > 文档中心 > 百度智能云MapReduce故障类问题QA
百度智能云MapReduce故障类问题QA

文档简介:
Q:作业运行失败怎么办? A:可以在集群的作业列表中,找到运行失败作业的日志,分别为syslog、stderr、stdout三个日志。其中Syslog日志记录了作业运行的信息,stderr记录了作业运行失败的原因,stdout记录了作业运行的过程中输出的信息。通过查看stderr日志,找到作业运行失败的原因并进行修复,再次运行作业。
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

作业运行失败怎么办?

可以在集群的作业列表中,找到运行失败作业的日志,分别为syslog、stderr、stdout三个日志。其中Syslog日志记录了作业运行的信息,stderr记录了作业运行失败的原因,stdout记录了作业运行的过程中输出的信息。通过查看stderr日志,找到作业运行失败的原因并进行修复,再次运行作业。

作业为什么会运行失败?

1:作业在BOS中的输入目录不存在或者输出目录已存在,导致reduce task无法读取或写入数据,从而造成作业失败。

解决方案:请确保BOS中输入目录存在且输出目录不存在。

2:作业本身存在错误。

解决方案:若您提交的是Custom JAR、Spark、Pig类型作业,有可能是您自定义的参数不符合规范。可查阅task日志,找出对应错误,对作业进行修复。

3:输入参数有问题。

解决方案:可能是输入的参数关键字拼写有问题。通过查阅task日志,找出对应错误,对作业进行修复。

作业为什么会提交失败?

1:参数设置不符合标准的格式规范。

解决方案:根据页面返回的错误信息,参阅新手指南的新建各类型作业的参数配置,进行相应的修改,。

2:作业数目超过256个。

解决方案:按照提示,新建集群,在新建的集群中添加作业。

集群为什么会自动终止?

说明集群在处理作业时,遇到了一些意外,比如输入的bos地址不存在,或者用户对这个地址没有相应的处理权限等。且用户在对作业进行设置时,在【失败后的操作】选择了销毁集群,从而当作业运行失败后,集群会自动终止。这种情况大多数是由于用户对作业的设置不符合规定从而导致的,可检查errlog日志,重新对作业进行设置。

相似文档
  • Q:如何配置集群,使得作业运行完毕后,集群自动终止? A:在创建集群时进行设置,在【自动终止】选项中,选择开启,则在作业最后一步完成时,集群会自动终止。
  • Q:BMR如何进行收费? A:BMR的计费规则请参见产品定价。 Q:费用不足,用户该如何充值? A:用户可以到【财务中心】下,购买需要的服务。 Q:充值时,一次性充多少钱可以满足用户处理数据的需求? A:在增加各种类型的作业,到确认订单页面后,会显示预计所需要的花费。可以依此为参照,到【财务中心】菜单下,购买BMR服务。
  • Q:BMR是否可估算处理作业的运行时间? A:处理作业的运行时间依赖若干种因素,包括作业的规模和复杂度、设置实例的数目以及套餐类型等多种情况,因此BMR没有提供估算作业运行时间的服务。
  • Q:用户的数据安全性如何? A:BOS提供多种访问控制机制,如签名验证机制、访问控制列表等,确保用户存储数据的安全性以防止未被授权进行访问。其中签名验证机制是通过对URL进行签名来识别访问者的身份,从而实现用户身份验证。其中访问控制列表是对Bucket的管理和校验。
  • 百度流式计算(BSC)提供 Apache Spark & Flink 双引擎的 Serverless 流式数据实时处理能力,在完全兼容开源社区的基础上深度优化,产品交互简单易用,作业类型丰富,按需使用付费,提供全面、实时的监控指标。 【百度智能云】流式计算BSC
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部