首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >数据同步平台集成开源项目Seatunnel-Web,完成Mysql到Doris同步流程

数据同步平台集成开源项目Seatunnel-Web,完成Mysql到Doris同步流程

原创
作者头像
奥零数据科技
修改于 2026-11-03 17:53:02
修改于 2026-11-03 17:53:02
290
举报

一. 环境准备

1. SeatunnelServer

2. 下载完成后解压到服务器

3. 配置环境变量

4. 添加以下信息

5. 使配置生效

6. 进入 SEATUNNEL_HOME 目录

7. 下载连接器,执行以下命令

8. 下载完成,查看连接器

9. 获取 mysql jdbc 连接驱动,并上传${SEATUNNEL_HOME}/plugins 目录下

  • 下载链接: (如需要网盘链接,联系市场总监获取)

二. 打开数据同步平台

三. 添加数据源

1.MySQL

  • 点击创建
  • 选择JDBC-Mysql传统数据库
  • 编辑连接信息,点击测试连接
  • 点击确认

2.Doris

  • 点击创建
  • 选择Doris 传统数据库
  • 编辑连接信息,点击测试连接
  • 点击确定

四. 创建同步任务

1.创建任务

  • 打开同步任务页面
  • 创建同步任务
  • 编辑任务名称,选择业务模型,点击确认

2.创建Source

  • 拖拽数据源 Source 到中心工作区,并双击
  • 编辑 Source 信息
  • 查看数据模型
  • 点击确定

3.创建Sink

  • 拖拽数据源 Sink 到中心工作区,并将 Source 连 接到 Sink,注意,要从 Source 开始,Sink 结束
  • 双击 Sink,编辑连接信息,点击确定

4.配置任务信息

  • 打开任务设置
  • 选择工作模式,下滑到下方位置,点击确定
  • 点击保存

五. 运行任务

  • 点击运行
  • 查看任务运行状态
  • 同步完成

六. 数据验证

  • 应同步数据
  • 同步数据前

优势总结

高性能:分布式架构支持海量数据同步,每日可稳定处理数百亿条记录;

灵活性:兼容离线、实时、全量、增量等多种场景,满足复杂业务需求;

易用性:提供Web界面和可视化配置,降低操作门槛,支持快速部署和运维。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

目录
  • 一. 环境准备
  • 二. 打开数据同步平台
  • 三. 添加数据源
  • 四. 创建同步任务
  • 五. 运行任务
  • 六. 数据验证
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档