提示：公众号展示代码会自动折行，建议横屏阅读 「第一部分 背景」 在mysql支持基于LOGICAL CLOCK的复制后，主从延迟得到了很大的改善，但是LOGICAL CLOCK一定程度上会受到master的并发度的影响。当master的并发度较低，每次组提交的事务数较少的时候，binlog在slave上的回放的并发度也会因此而降低，即使这些事务之间并没有任何冲突。示例： Trx1 -----L----C---------------------------------->Trx2 ----
一、缘起 mysql主从复制，读写分离是互联网用的非常多的mysql架构，主从复制最令人诟病的地方就是，在数据量较大并发量较大的场景下，主从延时会比较严重。 为什么mysql主从延时这么大？ 回答：
1.映射文件：User.hbm.xml <hibernate-mapping package="cn.vincent.pojo">
MySQL5.5及以前的复制 一般主从复制有三个线程且都是单线程： Binlog Dump（主） --> IO Thread（从） --> SQL Thread（从）。 1、master节点的Bin
MySQL主从复制，读写分离是互联网常见的数据库架构，该架构最令人诟病的地方就是，在数据量较大并发量较大的场景下，主从延时会比较严重。
Hibernate的核心就是对象关系映射： 加载映射文件的两种方式： 第一种：<mapping resource="com/bie/lesson02/crud/po/employee.hbm.
在以前的项目中，最常见的两种主键类型是自增Id和UUID，在比较这两种ID之前首先要搞明白一个问题，就是为什么主键有序比无序查询效率要快，因为自增Id和UUID之间最大的不同点就在于有序性。
InnoDB的一种垃圾收集机制，使用单独的后台线程周期性处理索引中标记删除的数据。
相信 slave 延迟是MySQL dba 遇到的一个老生长谈的问题了。我们先来分析一下slave延迟带来的风险
前段时间接触到腾讯云的一个新数据库产品 CynosDB 是基于 Amazon Aurora 数据库的Paper实现的。我比较感兴趣就来看看它和之前看过的 Spanner 之类有什么不同，也许部分设计也能用在我们游戏业务的服务器中。它的主要的创新点在于重新设计了binlog和存储的部分，所以我也主要就看了两篇Paper： 《Amazon Aurora - Design Considerations for High Throughput Cloud-Native Relational Databases》 是一个整体性质的介绍和概述； 《Amazon Aurora: On Avoiding Distributed Consensus for I/Os,Commits, and Membership Changes》 是对其重点部分的存储服务的。
tcpdump在我们平时运维中充当了很重要的角色，对复杂问题的排查、分析起到了至关重要的作用，确实为运维中的一大利器。
今天有个网友问我一个MySQL的恢复问题。提供的截图如下。 对于这个问题，在一些断电的场景下还是可能出现的。我首先是要确认是否为线上业务还是测试环境，线上业务来说这个影响还是很大的。如果数据库
数据切分后，原有的关系数据库中的主键约束在分布式条件下将无法使用，因此需要引入外部机制保证数据唯一性标识，这种保证全局性的数据唯一标识的机制就是全局序列号（sequence）。
InnoDB 存储引擎是以页为单位来管理存储空间的，我们的增删改查本质上都是对页面上进行操作。我们知道在访问磁盘的时候，MySQL是会把数据加载到Buffer Pool然后进行操作的。对于DML操作，表、索引等的增删改DDL操作，还有数据本身是在Buffer Pool缓冲池中可能还没来得及刷新到磁盘中，系统或者服务器突然崩溃，那这些数据该怎么恢复呢？
一般Mysql主从复制有三个线程参与，都是单线程：Binlog Dump(主) -> IO Thread (从) -> SQL Thread(从)。
专注于 Oracle、MySQL 数据库多年，Oracle 10G 和 12C OCM，MySQL 5.6，5.7，8.0 OCP。现在鼎甲科技任顾问，为同事和客户提供数据库培训和技术支持服务。
create table xxx alter table xxx drop table xxx
最近在看看MariaDB的官网上介绍MariaDB的功能和特性，大致罗列了本人觉得有必要了解下的几个地方：
Zabbix 和 MySQL 在大型的 Zabbix 环境中，遇到的挑战大部分是 MySQL 以及更具体的说是 MySQL 磁盘 IO。 考虑到这一点，我将提出一些优化，这将有助于你的 MySQL 最好的使用磁盘（必然的将帮助你的 Zabbix 最好的利用 MySQL）和可用的硬件资源。 SSD 是一个转折 “MySQL 在 SSD 上是否会运行的更好？”我已经一次次的在公共场合或私人场合听到这个问题。 我可以毫不怀疑的告诉你，如果 IO 是你当前的瓶颈 - 要么因为一些查询花费了太多时间和直到查询完成（
2、在schema.xml中，table中增加属性autoIncrement值为true，添加mycat_sequence表
1. 简介 MySQL 5.6引入了基于schema的并行复制，即如果binlog events操作的是不同schema的对象，不是DDL，且操作的对象没有对其他schema的foreign key关联，则这些binlog events在slave上做重放的时候可以并行。slave上依然还是有一条IO线程负责从master拉取binlog并写入relay log，之前负责重放relay log的SQL线程现在作为coordinator线程，根据读取到的relay log里的binlog event，决定是
在 MySQL 数据库中，支持上面四种隔离级别，默认的为 Repeatable read (可重复读)；而在 Oracle 数据库中，只支持 Serializable (串行化)级别和 Read committed (读已提交)这两种级别，其中默认的为 Read committed 级别。
功能：Dao层(持久层)框架，封装了JDBC。 思想：整合了ORM思想，以面向对象的思想操作数据库。
参考博客1（建议先通读该博客）介绍了MySQL通过Undo+Redo Log的机制实现了事务的原子性、一致性和持久性（关于事务的隔离性是通过锁机制来保障的，请参考我的另一篇博文MySQL常见的七种锁详细介绍）。文章中提到：
生产环境MySQL数据库，架构是一主一从，可以双机切换，MySQL版本是5.7.24-enterprise-commercial-advanced-log。当时是存储MySQL的机房突然断电。主从机器重启后，MySQL都无法启动。两台机器都是同样错误，错误日志显示:
MySQL5.7并行复制初理解 我们知道MySQL5.7并行复制引入了两个值last_committed和sequence_number。last_committed表示事务提交的时候，上次事务提交的编号，在主库上同时提交的事务设置成相同的last_committed。如果事务具有相同的last_committed，表示这些事务都在一组内，可以进行并行的回放。这个机制也是Commit-Parent-Based SchemeWL#6314中的实现方式。不过之后，官方对这种模式做了改进，所以最新的并行回放机制
1主配置文件Hibernate.cfg.xml主配置文件中主要配置：数据库连接信息、其他参数、映射信息！常用配置查看源码：hibernate-distribution-3.6.0.Final
流水号是每个系统永远都绕不开的一个话题，如订单系统中的订单号，物流系统的运单号、银行系统的业务单号等等，不难发现这些单号虽然叫法不一样，但都有着一些相同的共性，那就是全局唯一性。除此之外，一个设计良好的流水号生成规则还应该包含如下特性：
本文介绍了MySQL中的binlog组提交及其在MySQL Replication中的作用。binlog是MySQL中一种二进制日志，用于记录数据库的更改历史。在MySQL Replication中，通过binlog实现主从复制。当主库发生更改时，binlog会记录所有更改，并将更改发送到从库。从库根据binlog中的更改来更新自己的数据，从而保持与主库一致。在MySQL中，使用binlog可以实现多种功能，如灾难恢复、数据迁移、只读实例等。
今天晚上业务系统升级，提前跑到表结构中，表需要减字段，在执行drop colum时报如下错误：
正常情况下mybatis 使用last_insert_id()就可以了，但为了防止同时插入多条产生的不正确的情况，还是用独立的sequence表好 全局用一个还能隐藏，不会被人猜到。 注意： 字段一定要用无符号的：bigint，以免溢出。 mysql 数据大小 int 4294967295 ,bigint 18446744073709551615 附配置文件：
关于发号器的使用，其实有一个大背景，那就是关于主键的一些设计问题，在MySQL中如果一张表没有主键，实际的数据处理就有点麻烦了。
全量+增量数据校验后，数据库启动日志报如下错误： （此时MySQL可以启动成功，也存在mysql进程，进入mysql查询数据可查到。重启的时候错误日志中还是会报同样的错误）
知识点涵盖：代码自动生成、主键自增（雪花算法）、分页、自动填充字段、LocalDateTime 序列化配置、druid数据源配置、SQL监控页面、逻辑删除、事务管理、多环境配置等等。 1、 可以无缝内嵌进项目，也可以保存下来，方便下次使用。 2、代码中带有很多注解，为方便对MybatisPlus了解不深的同学，也能够快速看懂。👨💻or🛌 3、不行的话一步一步复制，也是可以运行起来的，慢慢看更好。 地点:湖南邵阳 作者:喜 SpringBoot集成MybatisPlus 涵盖了目前
如今随着互联网的发展，数据的量级也是成指数的增长，从 GB 到 TB 到 PB。对数据的各种操作也是愈加的困难，传统的关系性数据库已经无法满足快速查询与插入数据的需求。这个时候 NoSQL 的出现暂时解决了这一危机。它通过降低数据的安全性，减少对事务的支持，减少对复杂查询的支持，来获取性能上的提升。
可以在任意个主从库之间建立复杂的复制拓扑结构，如普通的一主一（多）从、双（多）主复制、级联复制，MySQL 5.7.2后新增的多源复制，特殊场景下使用的Blackhole引擎与日志服务器等等。复制中的MySQL服务器须要遵循以下基本原则：
数据切分后，原有的关系数据库中的主键约束在分布式条件下将无法使用，因此需要引入外部机制保证数据 唯一性标识，这种保证全局性的数据唯一标识的机制就是全局序列号（sequence），因此一般全局序列号用于分表情况
系列文章： 1.MySQL主从复制 2.OneProxy实现MySQL读写分离
爱可生 DBA 团队成员，一位会摄影、会铲屎、会打球、会骑车、生活可以自理的 DBA
XXL-JOB 适用范围还是比较广泛的，特别使用快速部署使用，以及简单的集群部署。本文主要记录了一次 XXL-JOB 适配 PostgreSQL 数据库的完整流程。
在之前的文章中，我对MySQL并行复制做过一个简单的介绍，有兴趣可以翻看5月19日的文章《MySQL并行复制解析》。今天针对这个问题，补充一些知识点。
InnoDB 日志文件的作用 Innodb 数据表崩溃后，再次启动时，MySQL会扫描日志文件，看哪些记录不在表空间中，对其进行 redo 操作，从而完成数据恢复 Innodb 日志文件的大小可以通过参数 innodb_log_file_size 来设置 这个值如果太小，会增加checkpoint，导致刷新磁盘的次数增加，影响数据库性能 如果太大，会让数据恢复过程变慢，便增加了数据库不可用的时间 所以，设置一个合适的日志大小是比较重要的 如何计算出合适的日志大小 思路 设为多大是合适，没有明确的定义，但有一
近期，发现一个 MySQL 从节点提示同步异常。执行 show replica status 都被挂起。
Jpa (Java Persistence API) 是 Sun 官方提出的 Java 持久化规范。它为 Java 开发人员提供了一种对象/关联映射工具来管理 Java 应用中的关系数据。它的出现主要是为了简化现有的持久化开发工作和整合 ORM 技术。值得注意的是，JPA只是一套规范，不是具体的实现。Java很喜欢自己去定义规范，然后让厂商自己去实现，比如JMS等。
从日志中可以看出是innodb引擎出了问题。日志里提示到 http://dev.mysql.com/doc/refman/5.6/en/forcing-innodb-recovery.html查看强制恢复的方法。
表命名的规则分为3个层级，层级之间通过_分割，例如b_r_identity、d_l_identity。规约为:
在实现分库分表的情况下，数据库自增主键已无法保证自增主键的全局唯一。为此，MyCat 提供了全局sequence，并且提供了包含本地配置和数据库配置等多种实现方式。
本文主要介绍了如何将DB2数据迁移到MySQL数据库以及在这个过程中可能会遇到的常见问题和解决方案。包括数据类型转换、数据类型不匹配、空值处理、数据量统计等方面的内容。
过去的项目开发中，我们常常选用的数据库是mysql，mysql以其体积小、速度快等优势，备受中小型项目的青睐。随着项目数据量的迅速增长，mysql已无法满足我们的项目需求，数据迁移迫在眉睫。经多方对比综合考虑，我们选择了tidb分布式数据库。但是数据迁移后我们遇到一个问题，之前mysql数据库中，我们采用的是自增id主键，可选用的tidb又对自增主键不是很友好，所以我们选用了另一种主键生成方式：Snowflake算法。
The mysql_upgrade client is now deprecated. The actions executed by the upgrade client are now done by the server.
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
