概述

最近更新时间:2024-06-18 14:47:41

我的收藏
本文将为您介绍如何通过 DataInLong 数据集成将 MySQL 中的数据实时导入 Doris 中,此处以腾讯云数据库 MySQL 为例,介绍实时同步任务的配置及操作实践。
注意:
建议提前合理分配及配置网络环境,确保 MySQL、Doris、数据集成资源之间网络互通。
若 MySQL、Doris、DataInLong 集成资源处于同一个 VPC 内:此时网络联通,可直接使用(推荐方式)
若与集成资源位于不同 VPC:需购买对等连接打通集成与数据源所在 VPC。
若数据源位于 IDC 或其他经典网络环境下:可购买 VPN 连接专线网关打通集成资源与 MySQL/Doris 集群所在 VPC。
若数据源可开通公网:可购买 NAT 网关,允许集成资源通过网关连通数据源所在 VPC。NAT 网关配置流程请参见 集成资源组配置公网

步骤1:登录注册

登录腾讯云官网。如果没有账号,请参考 账号注册教程

步骤2:提前准备好 MySQL 数据库实例

数据集成目前支持 MySQL 数据库版本为:5.6,5.7,8.0.x。具体操作请参见 源端 MySQL 准备

步骤3:提前开通好云数据仓库 TCHouse-D 集群

建议选择内核版本:1.1、1.2或以上。具体操作请参见 目标端 Doris 准备

步骤4:购买 DataInlong,并配置项目空间和集成资源

建议选择内核版本:1.1、1.2或以上。具体操作请参见 配置 Datalnlong 项目空间及集成资源

步骤5:在 WeData 或 DataInlong 配置数据实时同步任务

需要进行单表同步时,可配置单表实时同步任务,具体操作请参见 配置单表实时同步任务
需要进行整库迁移时,可配置整库实时迁移任务,具体操作请参见 配置整库实时迁移任务

步骤6:进入运维中心进行任务运维

具体操作请参见 任务运维