高性能的并行文件存储系统,满足高性能计算、AI 训练、数据治理等业务需求。
超高性能
基于分布式并行架构,独有的元数据管理技术,消除单一性能瓶颈点;充分利用高速网络技术,大幅度提高I/O和元数据性能;支持混合工作负载,一个文件系统同时支持大、小数据块的应用;支持最新的高性能硬件环境,如 NVMe、傲腾等。
超大规模
支持横向扩展,最大支持数千个节点的超大规模集群,存储容量和访问性能随节点数量线性增长,单一系统即可支持数十亿级个文件数量和YB级的容量,轻松应对任何业务的存储需求。
开放兼容
提供标准的文件和对象访问接口,支持透明的HDFS协议访问,业务无需改造即可直接使用。支持纳管异构存储,最大化的保护存储投资。支持与公有云集成,数据在云上云下无缝流动,实现数据本地加速、云容灾、云分层等混合云能力。
在高性能计算(HPC)集群中,并行文件一体机部署在本地数据中心,数据存储在本地或腾讯公有云 COS 对象存储。若不在本地,在HPC运算之前按需将数据预取到本地的⾼性能并行文件系统中,然后进⾏HPC运算,结果仍然保存回本地的高性能并行文件系统并自动异步推送回腾讯COS。
产品特性
超高性能
基于分布式并行架构,独有的元数据管理技术,消除单一性能瓶颈点;充分利用高速网络技术,大幅度提高I/O和元数据性能;支持混合工作负载,一个文件系统同时支持大、小数据块的应用;支持最新的高性能硬件环境,如 NVMe、傲腾等。
超大规模
支持横向扩展,最大支持数千个节点的超大规模集群,存储容量和访问性能随节点数量线性增长,单一系统即可支持数十亿级个文件数量和YB级的容量,轻松应对任何业务的存储需求。
开放兼容
提供标准的文件和对象访问接口,支持透明的HDFS协议访问,业务无需改造即可直接使用。支持纳管异构存储,最大化的保护存储投资。支持与公有云集成,数据在云上云下无缝流动,实现数据本地加速、云容灾、云分层等混合云能力。
应用场景
在高性能计算(HPC)集群中,并行文件一体机部署在本地数据中心,数据存储在本地或腾讯公有云 COS 对象存储。若不在本地,在HPC运算之前按需将数据预取到本地的⾼性能并行文件系统中,然后进⾏HPC运算,结果仍然保存回本地的高性能并行文件系统并自动异步推送回腾讯COS。
AI训练平台
人工智能(AI/GPU)集群和训练平台、并行文件一体机部署在本地数据中心,训练数据存储在腾讯公有云 COS 对象存储。在训练之前按需将所需数据按批次预先依次缓存到本地的⾼性能并行文件系统集群中,然后进⾏AI训练,训练结果保存到本地的高性能并行文件系统中。
数据湖整合
并行文件一体机与第三方的文件/对象存储系统,都部署在本地数据中心。通过并行文件系统的数据湖整合方案,建立统一命名空间,实现跨多个存储系统的非结构化数据统一管理,基于存储的性能和数据的使用情况实现数据的自动分层,提升数据使用效率。
常见问题
并行文件一体机与存储一体机的区别是什么?
并行文件一体机是基于高性能计算的场景设计的存储产品,主要提供文件存储的功能。而存储一体机面向比较通用的存储场景,提供对象、文件、块等存储功能。
并行文件一体机的售卖方式如何?
并行文件一体机面向线下存储市场销售,计费内容主要包括硬件、软件授权、维保服务、安装部署服务四个部分。
用户可以自行采购硬件吗?
可以,用户需要跟腾讯云销售人员确认用于部署并行文件系统的硬件的规格后,自行采购。
并行文件一体机支持的最小节点数是多少?
支持最小3节点起步,可以横向扩展,没有理论上限。