上云无忧 > 文档中心 > 百度智能云GPU云服务器数据上传
GPU云服务器
百度智能云GPU云服务器数据上传

文档简介:
百度智能云提供对象存储BOS服务,这是一个类似于百度网盘的存储空间,提供简单的客户端和CLI工具来进行使用。 对于GPU使用过程中需要用到的数据集,您可以先将他们统一上传到您的对象存储中,在需要用GPU作训练时,再将数据拉取到GPU云服务器的本地进行处理。
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

数据上传

百度智能云提供对象存储BOS服务,这是一个类似于百度网盘的存储空间,提供简单的客户端和CLI工具来进行使用。

对于GPU使用过程中需要用到的数据集,您可以先将他们统一上传到您的对象存储中,在需要用GPU作训练时,再将数据拉取到GPU云服务器的本地进行处理。

BOS设置

  1. 访问BOS产品页,点击立即购买登录控制台;
  2. 在Bucket管理页面点击新建bucket,命名后选择所属地域(建议选择与GPU服务器相同的地域,目前GPU服务器实例的所属地域均在北京),并设置读写权限为私有;
  3. 创建完成后,在Bucket管理页面点击创建完成的Bucket名字进入Bucket,即可在web上查看和上传相关数据文件;
  4. 文件上传完成后,点文件名即可获取文件地址,在GPU服务器平台上直接通过wget方式获取。

BOS在GPU服务器上的使用功能方法

BOS CLI是BOS调用的命令行工具,以下介绍如何在GPU云服务器中使用BOS CLI工具。

  1. 从BOS CLI工具文档页获取linux下BOS CLI工具的压缩包。
  2. 解压CLI工具包:

    $ unzip bce-cli-0.8.3.zip
  3. 将bcecli的库安装到系统的python目录下:

    $ python setup.py install
  4. 使用BOS CLI工具之前,推荐先设置Access Key、Secure Key、Region;可以通过 -c/–configure 来设置AK、SK、Region,CLI会在配置后自动写入当前用户主目录;AK、SK可以从登录BOS控制台后,点击右上角按钮悬窗中Access Key链接获得。Region则应与BOS设置中,所属地域的选择一致,选择北京填bj,选择广州则填gz,后续选项均可以直接回车填默认值。

    $ bce -c
    $ BOS Access Key ID [None]: Enter Your AK
    $ BOS Secret Access Key [None]: Enter Your SK
    $ Default region name [bj]: Enter Your region
    $ Default domain [bj.bcebos.com]: Enter Your host
  5. 以将GPU云服务器上的 text.txt文件上传至mybucket为例,上传命令如下:

    $ bce bos cp text.txt bos:/mybucket/text.txt

BOS的其他功能及计费

参见BOS文档

相似文档
  • GPU物理服务器特点 通过BBC物理服务器形式提供GPU物理裸机服务,使整体性能达到最佳。 转为Training打造多GPU卡的高配物理机,可大幅提高Training效率。 可提供100G网络互联的GPU集群,支持动态扩展,用户独享高性能专有集群。
  • 手动安装GPU驱动及CUDA工具流程(LINUX) 背景 GPU的驱动和Cuda是使用GPU计算的必备组件。如果您在创建实例始时,没有选择自动安装驱动以及cuda版本,则需要在创建实例后,手动安装。本页面介绍如何手动安装驱动,以及如何使用工具测试GPU的重要性能。
  • 当您的GPU计算型实例需要支持OpenGL等图形显示时,需要安装NVIDIA官方发布的GRID驱动来使用OpenGL等更丰富的图形功能。另外,仅仅安装GRID驱动后实例配备的NVIDIA Tesla系列计算卡尚未激活NVIDIA GRID License,此时GPU图形功能受到限制。
  • 安装前准备工作 确认GPU型号和操作系统版本,本示例中GPU型号为V100,操作系统为Centos 7.5.1804 准备GPU驱动和CUDA 11.1软件包 在nvidia官网进行驱动包下载 GPU驱动下载链接:https://www.nvidia.cn/Download/index.aspx?lang=cn linux系统均选择 Linux 64-bit CUDA Toolkit选择最新版本
  • NVIDIA 深度学习开发卡应该使用哪种驱动? 请在Nvidia官网按照下图的选项进行驱动下载: GPU服务器显卡型号有哪些? 关于GPU的显卡型号,您可以参考此文档 GPU卡详情。 GPU服务器是否有GPU卡状态监控和报警机制,包括GPU使用率、内存使用率、温度、状态等?
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部