数据迁移,又称分级存储管理,是一种将离线存储与在线存储融合的技术。
数据库迁移这件事,说起来不就是"把数据从 A 搬到 B",但真正干过的人都知道:从评估到割接,一步走错就是生产事故。
全量迁移时源库还在持续写入、增量同步时事务顺序可能错乱、异构数据库的日期精度可能丢失——这些问题,在POC阶段很难暴露,一上生产就变成事故。
凌晨两点,我盯着同步延迟的监控面板。源端数据库的变更日志不断堆积,目标端数据库的CPU只跑到了35%。当时用的是默认的串行同步模式,一条链路把增量同步拖成了龟速...
传统“服务器+存储+数据库软件”的分离架构中,任何一个环节的短板都可能成为整个系统的瓶颈。当存储I/O成为数据库的拦路虎时,单纯调优软件参数往往效果有限。
十五年数据库相关经验,做过 DBA、架构师、技术顾问。不求"颠覆",只求"靠谱"。
半夜两点,告警短信炸了。你打开监控,CPU 85%——报警了。但你看了半天也看不出来,为什么85%要报警?这个阈值是谁设的?设的时候有什么依据?你改到90%,安...
前阵子一个做架构的朋友找我吐槽:“公司要上线一个新业务,让我选数据库。关系型、NoSQL、NewSQL,每个厂家都说自己能打,看了两个星期越看越迷糊。”
普通系统出了问题,可以等一等、重启一下、回滚一下。银行核心系统不行——转账、清算、账户余额,每一笔交易背后都是真金白银。选型一旦失误,代价可能是整个项目组的职业...
把数据同步到 OceanBase Oracle 模式时,常会遇到一种诡异的慢:JDBC batch 开了、并发也拉满了,监控里增量 RPS 长期在 10 上下,...
前段时间帮一个物流园区做系统迁移,他们用的MySQL跑了四年,去年618订单量翻了五倍,数据库直接撑爆。集团那边下了指标,今年双十一之前必须替换到位。我到了现场...
十几款主流国产数据库,集中式、分布式、云原生、HTAP——每个赛道都有多个玩家,每家都说自己“兼容Oracle”“性能卓越”“信创认证”。企业一旦选错,不仅会增...
数据库同步工具,就是把一个数据库的数据按规则复制到另一个库,保持两边一致。这东西选对了省事,选错了半夜得爬起来救火。我就经历过。
这个问题,我几乎每周都会被问到。分布式数据库的热度确实很高,但很多人对“分布式”的理解还停留在“把数据拆开存到多台机器上”。实际上,在决定上不上分布式之前,先搞...
如果你正在做一个稍微复杂点的业务系统,大概率会遇到这种情况:核心交易用MySQL存关系数据,业务日志用MongoDB存JSON文档,IoT设备数据用Influx...
如果你是做后端开发的,大概率经历过这种事:公司要上一个新项目,选型时数据库的授权费用直接劝退。Oracle按CPU核数收费,SQL Server按节点收费,起步...
监控系统、传感器采集、IoT平台、金融行情——这些场景产生的数据有一个共同特征:按时间顺序疯狂写入、很少更新、查询时按时间窗口聚合。传统关系型数据库扛不住这种负...
Oracle数据库用了十几年,积累了大量的存储过程、触发器、复杂SQL。现在要迁移——不是因为Oracle不好用了,而是信创要求、授权费用、技术栈统一等各种现实...
RAG知识库、智能客服、语义搜索、以图搜图、推荐系统——这些场景的背后,都离不开向量检索。但走到选型这一步,很多架构师会卡住:到底选独立向量数据库,还是用关系型...