上云无忧 > 找云产品 > 【腾讯云】计算加速套件TACO Kit
【腾讯云】计算加速套件TACO Kit
计算加速套件TACO Kit(TencentCloud Accelerated Computing Optimization Kit)是基于腾讯云 Iaas 产品的 AI 计算加速套件。提供网络协议、通信策略、AI 框架、模型编译等多层级的优化,是一套全生态的计算加速方案。
*此产品及展示信息均由腾讯云官方提供。 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云!微信咨询
  免费试用、价格特惠

注册资本:14250万元人民币

成立时间:2010-10-21


腾讯云档案>>

计算加速套件TACO Kit(TencentCloud Accelerated Computing Optimization Kit)是基于腾讯云 Iaas 产品的 AI 计算加速套件。提供网络协议、通信策略、AI 框架、模型编译等多层级的优化,是一套全生态的计算加速方案。支持裸金属、云服务器、容器等算力形态,支持 CPU、GPU、NPU 等芯片算力组合。帮助客户降低 AI 优化门槛的同时,大幅提升 AI 训练和推理业务性能,节约算力成本。


产品特性

开箱即用
TACO Kit是一站式的计算加速套件,通过TACO Kit,您无需配置复杂的软件依赖环境,即可开箱即用地部署业务。

性能优越
TACO Kit 整合了腾讯自研和社区的加速组件,提供性能优越的计算加速服务,助力您云上业务效能提升。

可被集成
TACO Kit 提供对业务代码无侵入的加速组件,您可以保持原有的使用部署习惯,根据需要选择不同层级的加速组件,透明无感地适配您各种业务场景。

软硬件协同优化
TACO Kit 集成了合作硬件厂商的定向开源的深度优化方案,并融合自研和社区的前沿加速技术,与 TACO Kit 框架有机结合,带来软硬协同优化的极致性能。

屏蔽底层硬件差异
TACO Kit 兼容 CPU、GPU、NPU 等多种芯片,可运行在云服务器、物理机、容器等各种环境,提供异构计算的统一加速入口。

兼容多种上层软件框架
支持多种框架模型,TenSorflow、PyTorch 已开放支持,ONNX 等框架已在筹备中。


应用场景

训练加速
AI 模型规模的扩大及训练数据的增多,用户对模型的迭代效率要求也随之增长,单个 GPU 的算力已无法满足大部分业务场景,使用单机多卡或多机多卡训练已成为趋势。

TACO Train AI 训练加速
面向训练场景开箱即用的多层级优化加速组件
通过自研高性能网络协议 HRRP 优化网络传输,基于Horovod 深度优化分布式训练的通信策略,并集成自研 AI 框架 TTensorflow
有效解决 VPC 网络环境下分布式训练效率问题,提高加速比和模型迭代速度



推理加速
AI 算法用于生产环境大规模模型的推理部署,在不同模型、不同硬件,不同业务细分场景,需考虑如何标准化一套接口高效地优化和部署业务模型。

TACO Infer AI 推理加速
轻量易用、无缝集成已有深度学习框架的 AI 推理加速软件
集成硬件厂商的定向开源加速方案,整合先进的编译优化、图优化和算子优化技术,兼容 CPU、GPU、NPU 等多种芯片
一行优化接口,无感接入业务,轻松实现优化和部署模型



帮助与文档


TACO Train 概述
TACO Train 是面向训练场景开箱即用的多层级优化加速组件,提供自底向上的网络通信、分布式策略及训练框架等多层级的优化,是一套全生态的训练加速方案。



TACO Infer 概述
TACO Infer 是一款轻量易用、无缝集成已有深度学习框架的 AI 推理加速软件,帮助您简洁、无侵入业务代码地一键式提升推理性能,无缝适配多种服务框架。


使用 TACO Train 在 CVM 上部署分布式训练集群
介绍如何基于云服务器 CVM 搭建 Tensorflow+Taco Train 分布式训练集群。


使用 TACO Infer 在 CPU 上优化部署 TensorFlow 模型
以自然语言处理领域经典模型 Transformer Encoder 为例,展示 TACO Infer 优化部署 TensorFlow 模型的完整流程。


常见问题


计算加速套件TACO Kit 包含哪些产品?
包含 TACO Train AI 训练加速引擎和 TACO Infer AI 推理加速引擎。


计算加速套件TACO Kit 适用于哪些场景?
计算机视觉。例如,ResNet、MobileNet、Inception、ViT 等。
推荐系统。例如,Wide&Deep、DeepFM 等。
自然语言处理。例如,BERT、Transformer、ASR 等。


TACO Infer AI 推理加速引擎支持哪些硬件和 AI 框架?
硬件支持支持 Intel 和 AMD 系列的 CPU 优化,后续会支持更多优化目标硬件,请您关注产品动态。
AI 框架已对 TensorFlow 1.14和1.15两个主要版本进行了全面的测试。如使用其他版本遇到任何问题,欢迎 联系我们 获取支持。


TACO Train AI 训练加速引擎包含哪些组件?
TACO Train 目前提供了三个训练加速组件:
Tencent Tensorflow 1.15:基于 Tensorflow 1.15深度优化的训练框架(简称 TTF)。
LightCC:基于 Horovod 深度优化的分布式训练框架。
HARP:自研用户态网络协议栈。


如何获取 TACO Infer AI 推理加速引擎下载链接?
TACO Infer AI 推理加速引擎目前处于内测阶段,您可以通过 联系我们 填写问卷后获取下载链接。

相似产品
  • 想买: 283人 简介: 遨驰终端(Tencent Cloud OrcaTerm,OrcaTerm)是腾讯遨驰云原生操作系统中CVM、Lighthouse、裸金属等产品的统一网页终端,帮助用户随时随地通过浏览器远程登录服务器管理业务,相比本地远程终端更轻量便捷,无需掌握SSH和FTP也可轻松操作。
  • 想买: 252人 简介: 高性能应用服务(Hyper Application Inventor,HAI)是一款面向AI、科学计算的GPU应用服务产品,提供即插即用的澎湃算力与常见环境。助力中小企业及开发者快速部署LLM、AI作画、数据科学等高性能应用,原生集成配套的开发工具与组件,大幅提高应用层的开发生产效率。
  • 想买: 229人 简介: 专属可用区为部署在客户指定机房,由客户独享全部资源的可用区。 客户可购买计算、存储、数据库等高可用资源,操作体验与腾讯云常规可用区类似。专属可用区为客户提供软硬一体交付和运维服务,助力客户快速搭建安全可靠的专属云。
  • 想买: 263人 简介: 高性能计算集群(Tencent Hyper Computing Cluster)以高性能云服务器为节点,通过 RDMA 互联,大幅提升网络性能,提供高带宽和极低延迟的网络服务。
  • 想买: 1100人 简介: 天翼混合云一体机iStack是天翼云推出的软硬协同产品,采用通用服务器,内置云平台,提供计算、存储、网络、安全、运维监控等全栈云服务,规模灵活、弹性扩展、开箱即用,满足客户数据安全、本地处理、低延时等需求。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部