上云无忧 > 文档中心 > 腾讯云消息队列 CKafka - 自建集群接入说明(CLB 方式)
消息队列 CKafka
腾讯云消息队列 CKafka - 自建集群接入说明(CLB 方式)

文档简介:
操作背景: 通过 CKafka 连接器连接 CVM 自建的服务时,根据腾讯云网络团队制定的标准跨 VPC 资源访问方案,需要先将自建服务挂载到 CLB(负载均衡)上,才能实现跨 VPC 的资源访问。
*此产品及展示信息均由腾讯云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

操作背景

通过 CKafka 连接器连接 CVM 自建的服务时,根据腾讯云网络团队制定的标准跨 VPC 资源访问方案,需要先将自建服务挂载到 CLB(负载均衡)上,才能实现跨 VPC 的资源访问。
即当在 CVM 上自建 MySQL、Mongo 服务作为数据源接入 CKafka 连接器时,需要通过挂载 CLB(负载均衡)的方式接入,本文描述相关的操作流程。

操作流程

步骤1:购买 CLB(负载均衡) 实例(可选)

如果客户账号下已有内网 CLB 实例,为了节省成本,可以直接复用该 CLB 实例。也可以新建单独的 CLB 实例提供服务。下面描述新建内网负载均衡(CLB)的操作过程。
注意
购买 CLB 实例时,需要与 CVM 集群在同一地域,同一 VPC,这样 CLB 才能够正常挂载 CVM 实例。同时选择购买内网的 CLB 实例。

步骤2:配置 CLB 实例

1. 创建 TCP 监听器:进入 CLB 控制台 > 实例管理页面。找到需要配置的实例,在该实例详情页面单击 监听器管理,单击新建 TCP 监听器

此处配置的端口为访问 CLB 的端口。健康检查和会话保持可根据实际需求进行配置。
2. 绑定自建服务:新建监听器成功后,单击相应的监听器,然后单击右侧的绑定,对 CVM 实例进行绑定。

选择需要绑定的 CVM 实例,并填写服务的端口号:

注意:
自建 MySQL 集群建议只挂载 1台 CVM 实例(1台主节点或1台从节点),因为 MySQL 主从库的 binlog 同步存在延迟,connector 的请求被转发到不同 MySQL 服务时可能会发生读取 binlog 错误。因此自建集群建议只挂载单个 MySQL 服务。
3. 查看服务健康状态:创建完成后可看到对应的服务及健康状态。

步骤3:创建连接

进入 CKafka 控制台,单击连接器 > 连接列表,单击新建连接
说明
其中 CLB 实例选择挂载了 CVM 服务的实例,端口为相应的 CLB 监听端口,用户名和密码为相应的服务对应的用户名和密码。

相似文档
  • 操作背景: 用户在使用 CKafka 连接器访问 CLS、COS 等服务时,需要授权连接器访问用户账号下 CLS、COS 等服务的权限。如果使用 CKafka 的子账号具备访问管理的策略权限(QcloudCamRoleFullAccess),在创建 CKafka 任务时勾选 角色授权,连接器将自动为您完成授权。否则,需要拥有管理员权限(AdministratorAccess)的用户进行相应的授权后,再使用子账号创建 连接器 任务。
  • 背景: debezium connector 最初仅在创建连接任务时会同步表的存量数据,后续新增的表无法触发存量数据的同步。为了支持新增表的存量数据同步功能,debezium 采用了“信号”的模式通知 connector 进行触发新增表的存量数据同步。
  • 如何选择实例的规格? 可以借助控制台的 "迁移上云 - 规格计算器" 来计算所需的产品规格:
  • 如何选取 CKafka 副本数? 建议您创建 Topic 时选择2副本或3副本存储数据,保障数据可靠性。默认创建的 Topic 是2副本,如果业务需要更高的可用性,则可以指定选择3副本运行。如果 Topic 需要更多的副本数,可以 提交工单 进行处理。新建 Topic 时副本选择方式如下图所示。
  • 怎样设置合理的消费者数量? 消费组和消费者的对应关系如下: 一个消费者可以同时订阅多个 Topic。 一个 Topic 里面包含了1到多个分区。 一个分区只能被一个消费者消费。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部