文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

异构数据集成搬追对三步落地复盘：Oracle、MySQL迁国产库

ERP在Oracle，CRM用MySQL，报表库是SQLServer，后来分析平台又上了Hadoop。每套系统当年都是按需采购的，没人会提前设计"以后要互通"。...去读数据库自己的日志，Oracle读redolog，MySQL读binlog，PostgreSQL读WAL，把变更一条条解析出来，再应用到目标端。第三种为什么越来越主流？...MySQL里是binlog文件名加偏移量，Oracle里是SCN，PostgreSQL里是LSN。工具把"读到哪了"记下来，链路断了重启，就从上次的位点接着读，不重复也不漏。...五、案例复盘：Oracle、MySQL迁向国产库，异构数据集成怎么落地聊个我做国产化替代时很典型的场景。...客户核心交易在Oracle，周边业务在MySQL，还有SQLServer老系统，目标是把数据逐步集中到国产库金仓（KingbaseES）上，业务不能停。这种迁移本质就是一次大型异构数据集成。

28810
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    Oracle迁金仓实战：制造企业工业IoT国产化替换方案

    作为一位在国产数据库迁移领域拥有丰富实践经验的技术负责人，我深知从Oracle向金仓（以下简称“金仓”）进行系统迁移，是当前众多制造企业在数字化转型过程中面临的重要课题。...一、破解“不愿用”：降低应用改造成本，提升迁移意愿许多制造企业长期依赖Oracle数据库，已形成相对成熟的开发规范和运维流程，对更换底层数据库存在天然的抵触心理。...而金仓在架构设计之初即注重对主流商业数据库的兼容能力，能够支持多数常见的SQL语法结构和程序模块逻辑，使得原有基于Oracle的应用程序在适配过程中仅需少量调整即可运行。...尤其对于习惯了Oracle生态的工程师而言，面对一个全新的数据库平台，普遍存在“不会用”的焦虑感。...从Oracle向金仓的迁移并非简单的技术替代，而是一次面向自主可控、降本增效的战略升级。

    46310

    怎样将数据从Oracle迁移到TiDB

    **导读** > 作者：杨漆 > 16年关系型数据库管理，从oracle 9i 、10g、11g、12c到Mysql5.5、5.6、5.7、8.0 到TiDB获得3个OCP、2个OCM；运维路上不平坦...首先，高度兼容 MySQL 协议，大多数情况代码可以直接迁移到 TiDB 分布式数据库，已分库分表的实例可以在 TiDB 中进行聚合；同时，TiDB 分布式数据库支持水平弹性扩展，通过简单地增加新节点即可实现...=/oracle/install/rspfmt_ogginstall_response_schema_v12_1_2 ##默认无需修改 INSTALL_OPTION=ORA11g ##此处为 Oracle.../ggs_Linux_x64_MySQL_64bit.tar -C /home/tidb/ogg12.3 ogg初始化(创建目录)： $ ....Oracle 不做时间校验，但是查询的时候就会校验时间格式，正常 Oracle select * 都会报错，属于 Oracle 端数据问题。

    3K20

    从Oracle迁移到MySQL，我踩过的10个大坑（附解决方案）

    差不多快10年前，当时也刚学MySQL，我们团队接到一个“光荣而艰巨”的任务：想把公司用了十几年的Oracle核心系统，迁移到MySQL上。老板说：“开源、省钱、轻量，还能拥抱云原生。”...场景还原： 在Oracle里我们用的是序列（Sequence）+触发器生成主键。迁到MySQL后，改用 AUTO_INCREMENT。上线第一天，测试发现订单ID跳号了！...原因分析：Oracle中 ‘’ 和 NULL 是等价的（这是Oracle的“特色”）。但MySQL严格区分：‘’ 是空字符串，NULL 是“无值”。...坑6：没有真正的物化视图 场景还原： Oracle里有个复杂的物化视图，每天凌晨自动刷新汇总销售数据。MySQL没有原生物化视图，怎么办？...原因分析：Oracle默认用二进制或语言无关排序；MySQL默认 utf8mb4_general_ci 不支持重音符号折叠。

    1K10

    Oracle从文件系统迁移到ASM存储

    环境：RHEL 6.4 + Oracle 11.2.0.4 需求：数据库存储由文件系统迁移到ASM 数据库存储迁移到ASM磁盘组 1.1 编辑参数文件指定新的控制文件路径 1.2 启动数据库到nomount...Switch 数据文件 1.7 RMAN Switch 临时文件，并打开数据库 1.8 迁移重做日志文件 1.9 服务器参数文件，并重启数据库 1.10 验证各文件存储位置 Reference 数据库存储迁移到...ASM磁盘组 实验环境前期准备: 文件系统数据库模拟环境《Oracle 11g静默安装简明版》 ASM实例和磁盘组模拟环境《单机静默安装GI软件并创建ASM实例和ASM磁盘组》 迁移前原数据库各文件存储信息查询如下.../dbs/spfilejingyu.ora $ rm $ORACLE_HOME/dbs/spfilejingyu.ora -- 建立$ORACLE_HOME/dbs/initjingyu.ora，编辑内容指定...parameterfile/sp file.266.897474951 至此，数据库存储已经成功由文件系统全部迁移到

    1.6K20

    如何从 MongoDB 迁移到 MySQL

    最近的一个多月时间其实都在做数据库的迁移工作，我目前在开发的项目其实在上古时代是使用 MySQL 作为主要数据库的，后来由于一些业务上的原因从 MySQL 迁移到了 MongoDB，使用了几个月的时间后...从关系到文档 虽然这篇文章的重点是从 MongoDB 迁移到 MySQL，但是作者还是想简单提一下从 MySQL 到 MongoDB 的迁移，如果我们仅仅是将 MySQL 中的全部数据导入到 MongoDB...当我们准备将数据库彻底迁移到 MySQL 之前，需要做一些准备工作，将最后迁移所需要的工作尽可能地减少，保证停机的时间不会太长，准备工作的目标就是尽量消灭工程中复杂的数据结构。...中的全部文档迁移到 MySQL 中： ?...除此之外，MongoDB 和 MySQL 之间的选择也不一定是非此即彼，我们将项目中的大部分数据都迁移到了 MySQL 中，但是将一部分用于计算和分析的数据留在了 MongoDB，这样就可以保证 MongoDB

    8.7K52

    从MySQL到PostgreSQL：那些让我决定迁库的硬核功能

    从MySQL到PostgreSQL：那些让我决定"迁库"的硬核功能做了六年后端，MySQL用了五年，Redis、MongoDB、Elasticsearch也都在生产环境摸爬滚打过。...去年开始把一部分业务往PostgreSQL迁移，跑了半年之后，整理出3个让我觉得"迁对了"的核心功能。...一、JSONB：把"文档型"能力收归关系型数据库之前用MySQL存JSON，只能当字符串，查询靠JSON_EXTRACT，性能捉急且无法建索引。...写在最后从MySQL迁到PostgreSQL，最核心的感受是：以前需要在应用层解决的问题，现在可以推到数据库层解决，而且数据库层做得更好、更稳定。...如果业务只有简单的CRUD且数据量不大，MySQL依然够用且生态更成熟。但如果你的业务开始出现复杂查询、混合数据类型、高并发写入+一致性要求，PostgreSQL值得花时间深入了解。

    27310

    平安科技从 Oracle 迁移到 UbiSQL 的实践

    从 Oracle 迁移到 UbiSQL 的过程 接下来分享一个比较详细的 Oracle 迁移实践，这是我们在平安集团里面做了多年去 O 工作的总结，希望给到大家借鉴。...集团的核心支付系统迁移的数据量大概在 8 T 左右，因为都是 rac 节点，为了避免节点之间的相互影响，就把它迁移到两个 UbiSQL 的实例上面。...准备好以后我们开始做数据的迁移，将前面梳理出来的一些表结构、对象之类的迁移到新的 UbiSQL 上，需要涉及到表结构的比对和数据的比对，这部分后面会详细介绍。...数据比对大致的逻辑是，当开始做数据同步的时候，会在日志里面记录相应的日志点，开始全量同步，全量同步完成之后就可以启动增量同步，因为记录了相应的启动时间点，后续就可以通过这个时间点做增量同步，在做增量的同时，会在中间的 MySQL...图：迁移后性能对比 最后看下迁移后的性能对比，可以看到，因为都是资费系统，平均响应时间特别短，迁移到 UbiSQL 后进行了大致的统计，在执行 Count 语句的时候性能有提升，在其他的查询或插入性能方面有损耗

    1.4K20

    迁移到MySQL的架构演进（一）

    这是学习笔记的第 2010 篇文章 我们经过了一个相对漫长的周期把SQL Server业务迁移到了MySQL分布式架构，整个过程算是跌宕起伏。我来复现一下这个过程。...（2）对于大家的常规理解来说，希望达到的效果是一种透明平移的状态，即原来的存储过程我们都无缝的平移过来，显然在MySQL分布式的架构下，这种方案是不可行的，而且如果硬着头皮做完，那么效果也肯定不好。...（1）功能阶段：梳理需求，对存储过程进行转义，适配MySQL方向 （2）架构阶段： 对系统架构和业务架构进行改进设计，支持分布式扩展 （3）性能阶段： 对系统压力进行增量测试，全量测试，全面优化性能问题...（4）迁移阶段： 设计数据迁移方案，完成线上环境到MySQL分布式环境的迁移 我们主要讨论上面3个阶段，我总结为8个架构演进策略，我们逐个来说一下。...就如同大家开始预期的那样，既然里面有大量的存储过程逻辑，我们是不是把存储过程转义到MySQL里面就可以了呢。

    1.1K20

    mariadb 5.5迁移到mysql8.0

    flush privileges;源库开启binlog(需要重启)如果源库开启了binlog, 则跳过这一步如果源库未开启binlog, 则需要修改配置文件,并重启mariadb(源库)log-bin=mysql_binlogname...(几乎没有update,delete)如果数据文件有很多空页, 则导出的文件会比实际的小(增删改较频繁的情况 )拷贝数据到目标库scp t20230512.sql IP:/root目标端导入数据mysql...OFF_PERMISSIVEYYYY*Replica ON_PERMISSIVEYYYY*Replica ONNNYY*set @@GLOBAL.GTID_MODE = ON_PERMISSIVE;官网说明:https://dev.mysql.com...MASTER_USER='repl', -- 主从账号 MASTER_PASSWORD='repl', -- 主从密码 master_log_file='mysql_binlogname..., 停机时间最短, 但是也较为麻烦.8.0的数据字典和5.5的差别很大, 不建议导出数据字典, 建议只导出需要的数据. 8.0 有很多不一样的地方, 比如参数, 可以看官网: https://dev.mysql.com

    1.5K20

    数据库实时同步工具选型：六类方案 + Oracle 迁国产库复盘

    核心交易在Oracle，营销系统是MySQL，老系统还留着SQLServer，这两年又添了国产库。一份"客户"数据散在五六个库里，字段名都不一样。想打通，靠人写脚本根本撑不住。...Oracle读redolog，MySQL读binlog，PostgreSQL读WAL。按顺序把变更一条条解出来，再应用到目标端。第三种为什么成了主流？因为它不改源库，还能拿到完整的事务顺序。...MySQL里是binlog文件名加偏移量，Oracle里是SCN，PostgreSQL里是LSN。工具把"读到哪了"记下来。链路断了重启，就从上次的位置接着读。不重，也不漏。...信创项目往往要求国产芯片和操作系统，还要接上已有的Oracle、SQLServer、MySQL。前几类工具在这里都容易卡壳。...五、案例复盘：Oracle加SQLServer迁国产库，链路怎么搭聊个我做过的真实场景。客户核心交易在Oracle，还有一套SQLServerAlwaysOn集群跑运营系统。

    31310
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 粤公网安备44030502008569号

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号

      领券