上云无忧 > 文档中心 > 天翼云数据湖探索与其他服务的关系
数据湖探索
天翼云数据湖探索与其他服务的关系

文档简介:
本章节主要介绍数据湖探索(DLI)其他服务的关系。 与对象存储服务(OBS)的关系: 对象存储服务(Object Storage Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下四种。
*产品来源:中国电信天翼云。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

与对象存储服务(OBS)的关系

对象存储服务(Object Storage Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下四种。

• 数据来源:数据湖探索服务提供API,支持将OBS对应路径的数据导入到数据湖探索。

• 存储数据:数据湖探索中支持创建OBS表,该类型表在数据湖探索服务中只有元数据,实际数据在该表对应的OBS路径中。

• 备份数据:数据湖探索提供导出API,支持将数据湖探索的数据导出到OBS中备份。

• 存储查询结果:数据湖探索提供API供用户将日常作业的查询结果数据保存到OBS。

与统一身份认证服务(IAM)的关系

统一身份认证服务(Identity and Access Management)为数据湖探索提供了天翼云统一入口鉴权功能。

与云审计服务(CTS)的关系

云审计服务(Cloud Trace Service)为数据湖探索提供对应用户的操作审计。

与云监控服务的关系

云监控(Cloud Eye)为数据湖探索提供监控数据,监控作业中的多项指标,从而集中高效地呈现状态信息。

与消息通知服务(SMN)的关系

消息通知服务(Simple Message Notification)可以在数据湖探索发生作业运行异常时给用户发送通知。

与云数据迁移服务(CDM)的关系

云数据迁移服务(Cloud Data Migration)可以将OBS的数据迁移到数据湖探索中。

与数据接入服务(DIS)的关系

数据接入服务(Data Ingestion Service)通过通道将数据导入到数据湖探索。

与表格存储服务的关系

表格存储服务(CloudTable Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从CloudTable中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到CloudTable表中。

与关系型数据库服务(RDS)的关系

关系型数据库(Relational Database Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从RDS中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到RDS表中。

与数据仓库服务的关系

数据仓库服务(Data Warehouse Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从数据仓库中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到数据仓库服务表中。

与云搜索服务的关系

云搜索服务(Cloud Search Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从云搜索服务中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到云搜索服务表中。

与分布式缓存服务(DCS)的关系

分布式缓存服务(Distributed Cache Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从DCS中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到DCS表中。

与文档数据库服务(DDS)的关系

文档数据库服务(Document Database Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从DDS中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到DDS表中。

与翼MapReduce服务(MRS)的关系

MapReduce服务(MapReduce Service)作为数据湖探索的数据来源及数据存储,与数据湖探索配合一起使用,关系有如下两种。

• 数据来源:数据湖探索服务提供DataFrame和SQL方式从MRS中导入数据到数据湖探索。

• 存储查询结果:数据湖探索使用标准SQL的Insert语法将日常作业的查询结果数据存放到MapReduce服务表中。

与数据治理中心的关系

在数据湖治理中心(Data Lake Governance Center)中,数据开发是一个一站式的大数据协同开发平台,提供全托管的大数据调度能力。它可管理多种大数据服务,极大降低用户使用大数据的门槛,帮助用户快速构建大数据处理中心。

相似文档
  • 本章节主要介绍数据湖探索(DLI)的术语解释。 租户: 数据湖探索支持多个组织、部门或应用共享使用资源。通过提供一个逻辑实体来统一使用不同资源和服务,这个逻辑实体就是租户。多个不同的租户统称多租户。租户对应公司。
  • 本章节主要介绍数据湖探索(DLI)的资源池部署情况。 目前已在:苏州、贵州、广州4、西安2、华北资源池开通,更多资源池规划部署中,因用户权限不同,实际可选资源池请以控制台实际可见区域为准。
  • 本章节主要介绍数据湖探索(DLI)的产品规格。 可选CPU架构: X86架构、鲲鹏架构。 可订购产品规格: 16CUs、64CUs、256CUs、512CUs。
  • 本章节主要介绍数据湖探索(DLI)的资费。
  • 本章节主要介绍数据湖探索(DLI)的计费模式。 数据湖探索的计费包括存储计费、计算计费。您可以通过数据湖探索提供的价格计算器,选择您需要的队列规格,快速计算出购买数据湖探索队列的参考价格。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部