上云无忧 > 文档中心 > 百度智能云容器引擎服务 CCE 新建PaddlePaddle任务
容器引擎服务CCE
百度智能云容器引擎服务 CCE 新建PaddlePaddle任务

文档简介:
您可以新建一个 PaddlePaddle 类型的任务。 前提条件: 您已成功安装 CCE AI Job Scheduler 和 CCE Deep Learning Frameworks Operator 组件,否则云原生 AI 功能将无法使用。 若您是子用户,队列关联的用户中有您才能使用该队列新建任务。
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

您可以新建一个 PaddlePaddle 类型的任务。

前提条件

  • 您已成功安装 CCE AI Job Scheduler 和 CCE Deep Learning Frameworks Operator 组件,否则云原生 AI 功能将无法使用。
  • 若您是子用户,队列关联的用户中有您才能使用该队列新建任务。
  • 安装组件 CCE Deep Learning Frameworks Operator 时,系统安装了 PaddlePaddle 深度学习框架。

限制说明

  • 目前 PaddlePaddle 类型的任务不支持 GPU 显存共享。

操作步骤

  1. 登录百度智能云官网,并进入管理控制台。
  2. 选择“产品服务 > 云原生 > 容器引擎 CCE”,单击进入容器引擎管理控制台。
  3. 单击左侧导航栏中的 集群管理 > 集群列表 。
  4. 在集群列表页面中,单击目标集群名称进入集群管理页面。
  5. 在集群管理页面单击 云原生AI > 任务管理 。
  6. 在任务管理页面单击 新建任务 。
  7. 在新建任务页面中,完成任务基本信息配置:

  • 任务名称:自定义任务名称,支持大小写字母、数字、以及-_ /.特殊字符,必须以中文或字母开头,长度 1-65。
  • 队列:选择新建任务关联的队列。
  • 框架:选择任务对应的深度学习框架“PaddlePaddle”。
  1. 参考 yaml 模板完成配置:
apiVersion: batch.paddlepaddle.org/v1
kind: PaddleJob
metadata:
  name: resnet
spec:
  cleanPodPolicy: Never
  worker:
    replicas: 2
    template:
      spec:
        schedulerName: volcano
        containers:
          - name: resnet
            image: registry.baidubce.com/paddle-operator/demo-resnet:v1
            command:
            - python
            args:
            - "-m"
            - "paddle.distributed.launch"
            - "train_fleet.py"
            volumeMounts:
            - mountPath: /dev/shm
              name: dshm
            resources:
              requests:
                cpu: 1
                memory: 2Gi
              limits:
                baidu.com/v100_16g_cgpu: "1"
        volumes:
        - name: dshm
          emptyDir:
            medium: Memory
  1. 点击“确定”按钮,完成任务的新建。
相似文档
  • 任务创建成功后,您可以在容器引擎控制台查看任务运行情况,包括基本信息、监控信息和日志信息。 前提条件: 您已成功安装 CCE AI Job Scheduler 和 CCE Deep Learning Frameworks Operator 组件,否则云原生 AI 功能将无法使用。 您成功创建任务。
  • 您可以通过容器引擎管理控制台删除不再需要的任务。 前提条件: 您已成功安装 CCE AI Job Scheduler 和 CCE Deep Learning Frameworks Operator 组件,否则云原生 AI 功能将无法使用。 您已成功创建任务。
  • 若集群支持 GPU 算力和显存的共享与隔离,您可以在新建任务的时候,根据提交的 YMAL 来决定独占还是共享 GPU 资源。 为保证正常使用GPU资源,请正确指定GPU卡型号对应的资源名称,本文以使用GPU卡数量为例,若想指定GPU卡算力资源或显存资源,则在资源名称后加上“_core”或“_memory”即可。
  • 在离线混部基于百度智能云容器引擎(CCE)支持在线作业和离线作业同时部署在集群中,利用在线作业等剩余可用资源运行离线作业,同时提供资源隔离、节点水位线等方式保障在线作业正常运行,提高集群资源利用率。
  • 离线作业只能调度到开启混部调度的Worker节点上,本文介绍如何为节点设置混部调度。 背景信息: 容器引擎(CCE)支持通过节点组为节点组中的节点配置混部调度,节点组中的节点默认使用节点组的混部配置,您也可以为节点单独配置,单独配置的节点将不再使用节点组的混部配置,请知晓。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部