上云无忧 > 文档中心 > 天翼云数据治理中心 DataArts Studio 节点参考 - MRS Flink Job
数据治理中心 DataArts Studio
天翼云数据治理中心 DataArts Studio 节点参考 - MRS Flink Job

文档简介:
本章节主要介绍节点参考的MRS Flink Job。 功能: 通过MRS Flink节点实现在MRS中执行预先定义的Flink作业。 参数: 用户可参考下表配置MRS Flink节点的参数。
*产品来源:中国电信天翼云。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

功能

通过MRS Flink节点实现在MRS中执行预先定义的Flink作业。

参数

用户可参考下表配置MRS Flink节点的参数。

属性参数

参数 是否必选 说明
节点名称 节点名称,可以包含中文、英文字母、数字、“_”、“-”、“/”、“<”、“>”等各类特殊字符,长度为1~128个字符。
MRS集群名 选择MRS集群。 如需新建集群,请参考以下方法:
单击,进入“集群列表”页面新建MRS集群。
前往MRS管理控制台进行新建。
Flink作业名称 MRS作业名称,只能包含英文字母、数字、“_”,且长度为1~64个字符。
说明
作业名称不得包含中文字符、超出长度限制等。如果作业名称不符合规则,将导致提交MRS作业失败。
Flink作业资源包 选择Jar包。在选择Jar包之前,您需要先将Jar包上传至OBS桶中,并在“资源管理”页面中新建资源将Jar包添加到资源管理列表中,具体操作请参考管理资源章节中的“新建资源”。
Flink作业执行参数 Flink作业执行的程序关键参数,该参数由用户程序内的函数指定。多个参数间使用空格隔开。
运行程序参数 为本次执行的作业配置相关优化参数(例如线程、内存、CPU核数等),用于优化资源使用效率,提升作业的执行性能。 说明 若集群为MRS 1.8.7版本或MRS 2.0.1之后版本,需要配置此参数。 MRS Flink作业的运行程序参数,请参见《MapReduce服务用户指南》的“管理集群>作业管理>运行Flink作业”章节。
输入数据路径 选择输入数据所在的路径。
输出数据路径 选择输出数据存储的路径。

高级参数

参数 是否必选 说明
节点执行的最长时间 设置节点执行的超时时间,如果节点配置了重试,在超时时间内未执行完成,该节点将不会再重试,直接置为失败状态。
失败重试 节点执行失败后,是否重新执行节点。
是:重新执行节点,请配置以下参数。
− 最大重试次数
− 重试间隔时间(秒)
否:默认值,不重新执行节点。
说明
如果作业节点配置了重试,并且配置了超时时间,该节点执行超时后将不会再重试,直接置为失败状态。
失败策略 节点执行失败后的操作:
终止当前作业执行计划:停止当前作业运行,当前作业实例状态显示为“失败”。
继续执行下一节点:忽略当前节点失败,当前作业实例状态显示为“忽略失败成功”。
挂起当前作业执行计划:暂停当前作业运行,当前作业实例状态显示为“等待运行”。
终止后续节点执行计划:停止后续节点的运行,当前作业实例状态显示为“失败”。
空跑 如果勾选了空跑,该节点不会实际执行,将直接返回成功。
相似文档
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部