首页
学习
活动
专区
圈层
工具
发布
首页标签数据一致性

#数据一致性

改了 0 处却报成功:舞台工艺 Word 海量表格的 python-docx 安全改写实战

ZhuoAIStage

你手里有一份篇幅不短的技术 Word——机械参数表、电气回路表、灯具点位表、验收记录表、材料清单一层层摞下来,表格数量上百。现在要统一一处表述:把散落在各张表里...

8710

同城双活上线三个月用户投诉数据回退:异地多活写冲突的三种来源与四种解法

数据库小学妹

去年一个同城双活的项目上线三个月,客服开始集中收到一类投诉。用户说,我上午改过的收货地址,下午又变回旧的了。让他再改一次,过两天可能又回去。运维把链路查了个遍。...

11110

舞台工艺 140 张合订表"前后矛盾"怎么破?一个智能体编排 + python-docx 的审平闭环

ZhuoAIStage

你是业主方技术把关人。分包单位递来一份舞台工艺体系 docx,里面140 张表格——机械载荷、灯光回路、电气接地、扩声参数散落各章。你要在会签页落笔,但有个前提...

12710

异构数据集成衔接实战:位点锚定+分片校验,割接不再丢两小时数据

数据库小学妹

异构数据集成做落地,全量初始化跑完只算走了一半。真正定成败的是下一步:增量怎么接上,接上之后怎么证明两边真的一致。这篇就按"锚位点—并行追—判追平—分片校验—熔...

16510

数据库实时同步工具选型:六类方案 + Oracle 迁国产库复盘

数据库小学妹

上个月我被拉进一个选型会。客户要换掉跑了六年的 Oracle 同步链路。会议室里摆着三份方案,报价差了三倍。业务方只问一句:明天早上八点前,报表能不能拿到今天的...

24710

数据库迁移后如何校验数据一致性?大表分片、异构数据库与自动复核实践

石头1678

项目地址:https://github.com/elison2000/db-check | 开源项目:db-check

24210

主从延迟一小时?从binlog复制原理到延迟根因定位的完整排查

数据库小学妹

周三下午,运营跑来说报表数据不对。一看,从库上的报表比主库少了一个小时的数据。查主从状态,Seconds_Behind_Master显示0,从库却明明落后。当时...

19610

PostgreSQL迁移实战:200G库pg_dump翻车,四套方案选型与踩坑复盘

数据库小学妹

上周五晚上十点,电话把我从床上拽起来。朋友公司做PostgreSQL迁移,200G的库。pg_dump跑了一整夜没跑完,第二天业务直接卡死。他们问我第一句话,P...

30910

全量迁移时源库还在写,数据一致性怎么保证?

这个DBA有点耶

全量迁移时源库还在持续写入、增量同步时事务顺序可能错乱、异构数据库的日期精度可能丢失——这些问题,在POC阶段很难暴露,一上生产就变成事故。

18310

如何保证Mysql和Redis双写一致性

Rain的Java大神之路

这个问题本质上是分布式系统中的数据一致性问题。因为 MySQL 和 Redis 是两个独立的存储系统,无法做到原子性更新,所以我们只能通过合理的更新策略来尽可能...

26710

PostgreSQL迁移实战:跨服务器、上云、异构三种场景的工具选型与踩坑记录

数据库小学妹

上周有个朋友找我帮忙。他们公司要把跑了三年的PostgreSQL数据库从本地机房迁到云上,200G数据,业务不能停。他先用了pg_dump导出,跑了一晚上没跑完...

26010

财务对账差十几万排查实录:从脏数据溯源到数据质量体系搭建

数据库小学妹

我打开数据库查订单表,发现有一批金额字段是负数。正常情况下金额不可能是负的。追查下去,发现这批数据是三个月前一次批量导入进来的。导入的时候没报错,日志显示全部成...

23010

缓存一致性问题拆解思路

用户7046722

v1.0:第一版可满足一致性的架构,“一致性 = 多副本数据必须单线演化”。只需要一个状态:缓存行是否为最新值。

10900

OA审批完,ERP没数据?解析审批流与业务流脱节的痛点及集成策略

KPaaS集成扩展

月底财务对账,发现一笔采购订单在OA系统里显示“已审批通过”,但在ERP系统中却找不到任何记录。采购部门说流程早就走完了,财务部门说没有数据无法付款。供应商催款...

34820

读写分离延迟实战:从网络传输到应用路由,三层治理让延迟降到毫秒级

数据库小学妹

上个月大促那天,凌晨两点监控群突然弹了一条告警:"库存数据异常"。我连上系统看了一眼,客服后台查不到刚下的订单,仓库那边库存没扣减,前端页面还显示"有货"。就这...

26810

从2PC到Saga:分布式事务一致性保证的实战经验

数据库小学妹

上个月接手了一个跨库转账的需求。当时想,不就是保证多个数据库操作要么全成功要么全失败嘛,能有多难。

32610

MySQL节点压到10万TPS时,Raft日志复制的完整流程拆解与压测数据

底层玩家老张

上周做了一次压测。三个MySQL节点跑Group Replication。目标是10万TPS写入。

18110

数据库迁移后的“数据一致性”到底怎么验?

这个DBA有点耶

数据迁移完成后,业务方问的第一个问题往往是:“数据都过来了吗?跟原来一样吗?”你心里可能也没底。全量导出导入过程中,可能丢失几条;CDC同步过程中,可能漏掉几个...

58710

为什么选择HTAP:一套系统解决交易和分析的实战思考

数据库小学妹

📌 关键词:HTAP、混合负载、OLTP+OLAP、实时分析、ETL替代、行列混存储、分布式MPP、数据一致性、选型指南

27910

数据库扛不住高并发?Redis缓存+双写一致性:给你的系统装上“涡轮增压”

数据库小学妹

前面几期,我们讲了分库分表和读写分离,把数据库从“单打独斗”变成了“千军万马”。但在面对秒杀、抢购这种瞬时百万级的流量,光靠数据库集群依然扛不住。这时候,我们需...

38410
领券