这是学习笔记的第 2140 篇文章 在MySQL中通过Master向Slave推送binlog数据变化，从而实现主从复制的过程，是一件看似再正常不过的事情了。整个过程可以使用如下的流程图来表示。...如果要实现这种特殊的复制，需要具备两点，第一是可以正常连接到MySQL,并且具有Slave应该拥有的权限，第二是按照MySQL协议发送相关的数据包，让MySQL服务能够识别你是一个“Slave”,这样如果发生了数据变化...在技术方向上已经有了很多的产品和组件，比如阿里的canal，Zendesk的Maxwell, Yelp的MySQLStreamer等，都可以模拟MySQL协议，在行业内也有一些实现场景，在特性完善方面各有差异...最后竟然还很贴心的给出了MySQL 5.6,5.7的安装部署脚本，在examples目录下提供了几个案例，我们今天要分析的主要是基于dump_events.py这个文件，它可以实现模拟Slave的整个过程...如下是一个调试过程中得到的MySQL线程情况，可以看到相应的Binlog Dump线程，其实这个数据库是没有Slave的。 ?
前言 XtraBackup 是 percona 出的一款mysql备份工具，可以使用它对mysql进行高效备份 下面分享一下使用 XtraBackup 创建mysql slave的基础操作，详细可以参阅...官方文档 Tip: 当前版本 Percona XtraBackup 2.2 ---- 概要 ---- 准备slave软件环境 下载安装percona repo [root@slave-test src...src]# ls percona-release-0.1-3.noarch.rpm [root@slave-test src]# rpm -ivh percona-release-0.1-3.noarch.rpm...####### [100%] 1:percona-release ########################################### [100%] [root@slave-test...src]# 可以在系统中进行一下检查 [root@slave-test src]# rpm -qlp percona-release-0.1-3.noarch.rpm warning: percona-release
状况描述： 今天登录一个MySQL数据库slave节点主机发现/var/lib/mysql下存放大量的mysql-relay-bin文件，最早的文件创建日期甚至是2018年，我记得在slave库同步完master...的日志操作记录后，会删除这些文件（默认设置不会删除，我记错了），于是便查看了slave库的状态，发现如下报错： mysql> show slave status\G; *****************...： 我在master节点上删除了名称为mysql-bin.00007格式的文件，其中包括mysql-bin.000075，因此，slave库找不到该文件，无法同步。...，导入该备份文件 mysql -u root -p < bak.master.sql 7）在slave节点上，重新指定读master日志的位置： slave stop; CHANGE MASTER...总结： 清理文件时，要注意mysql-bin文件在master、slave节点日志读取和写的位置啊！
=true read_only=ON 这个文件把Slave的server_id设置为2，如果你有多个Slave，那么得分别设置不同的server_id。...\ -v $(pwd)/mysql-slave-1.cnf:/etc/mysql/conf.d/mysql-slave-1.cnf \ mysql:8.0 \ --skip-log-bin...最后正式启动Slave： mysql> START SLAVE; 验证 到Slave上看看my_database是否存在： $ docker exec -it mysql-slave-1 mysql -..._1 mysql -u root -p # 连接Slave $ docker exec -it mysql-repl_mysql-slave_1 mysql -u root -p 并且CHANGE MASTER...不过我感觉这个不太好，查阅相关文档后发现可以在CHANGE MASTER TO添加GET_MASTER_PUBLIC_KEY=1参数来解决这个问题。
内部类是指在一个类的内部定义的类，它们可以访问外部类的成员，并且拥有更加灵活的访问权限控制。本文将深入探讨Java中内部类的特性，并重点解析一个类可以拥有多少个内部类。1....一个类可以拥有多少个内部类？现在让我们来解答题目所问：一个类可以拥有多少个内部类？答案是：一个类可以拥有多个内部类，数量没有明确的限制。...这种嵌套的层级关系可以提供更好的代码组织和逻辑结构。内部类可以实现多重继承，一个内部类可以继承一个类或者实现多个接口，从而实现更加灵活的代码设计。...3.2 使用场景当内部类需要访问外部类的私有成员时，可以使用成员内部类。当需要在一个方法内部定义一个只在该方法中使用的类时，可以使用局部内部类。...当需要在方法中使用一个只需要一次的类的实例时，可以使用匿名内部类。当需要创建一个与外部类的实例无关的类时，可以使用静态内部类。
最近在部署MySQL主从复制架构的时候，碰到了"Last_IO_Error: Fatal error: The slave I/O thread stops because master and...slave have equal MySQL server UUIDs; these UUIDs must be different for replication to work."...1、错误消息 mysql> show slave staus; Last_IO_Error: Fatal error: The slave I/O thread stops because master...and slave have equal MySQL server UUIDs; these UUIDs must be different for replication to work. 2...| Value | +---------------+-------+ | server_id | 33 | +---------------+-------+ slave_mysql
2）对于非负型的数据（如自增ID、整型IP）来说，要优先使用无符号整型来存储 因为：无符号相对于有符号可以多出一倍的存储空间 VARCHAR(N)中的N代表的是字符数，而不是字节数 使用UTF8存储255...因为mysql优化器在选择如何优化查询时，会根据统一信息，对每一个可以用到的索引来进行评估，以生成出一个最好的执行计划，如果同时有很多个索引都可以用于查询，就会增加mysql优化器生成执行计划的时间，同样会降低查询性能...每个表都可以有多个索引，但是表的存储顺序只能有一种 Innodb是按照主键索引的顺序来组织表的。...如a like '%123%'，（如果无前置%,只有后置%，是可以用到列上的索引的） · 一个SQL只能利用到复合索引中的一列进行范围查询 如：有 a,b,c列的联合索引，在查询条件中有a列的范围查询，...9、避免使用JOIN关联太多的表 对于Mysql来说，是存在关联缓存的，缓存的大小可以由join_buffer_size参数进行设置。
Relay_Master_Log_File: mysql-bin.000327 Slave_IO_Running: Yes Slave_SQL_Running: Yes *** Skip_Counter...来看下面几个状态： #设置 pager，只查看关注的几个 status 值 yejr@imysql.com [(none)]> pager cat | egrep -i 'system user|Exec_Master_Log_Pos...: mysql-bin.000009 Slave_IO_Running: Yes Slave_SQL_Running: Yes *** Exec_Master_Log_Pos: 654409041 *...个 binlog event 后记更新： 1、可以在 MASTER 上维护一个监控表，它只有一个字段，存储这最新最新时间戳（高版本可以采用 event_scheduler 来更新，低版本可以用 cron...不过，在高并发的系统下，这个时间戳可以细化到毫秒，否则哪怕时间一致，也是有可能会延迟数千个 binlog event 的。
-10-12_15-24-06]# cat xtrabackup_binlog_info mysql-bin.000009 1509223 [root@slave-test 2015-10-12_15...-06]# 在合适的位置创建一个空文件夹，用来存放数据文件 [root@slave-test lib]# mv mysql/ mysql.old [root@slave-test lib]# ln -...s /data/mysql/ /var/lib/mysql [root@slave-test lib]# cd /var/lib/mysql [root@slave-test mysql]# ls [...root@slave-test mysql]# [root@slave-test ~]# ll /var/lib/mysql lrwxrwxrwx 1 root root 12 Oct 12 15:00.../var/lib/mysql -> /data/mysql/ [root@slave-test ~]# ll /data/mysql/ total 0 [root@slave-test ~]# Note
在MySQL复制环境中，我们通常只根据 Seconds_Behind_Master 的值来判断SLAVE的延迟。这么做大部分情况下尚可接受，但并不够准确，而应该考虑更多因素。...Relay_Master_Log_File: mysql-bin.000327 Slave_IO_Running: Yes Slave_SQL_Running: Yes *** Skip_Counter...来看下面几个状态： #设置pager，只查看关注的几个status值 yejr@imysql.com [(none)]> pager cat | egrep -i 'system user|Exec_Master_Log_Pos...的延迟情况： 1、首先看 Relay_Master_Log_File 和 Master_Log_File 是否有差异； 2、如果Relay_Master_Log_File 和 Master_Log_File...: mysql-bin.000009 Slave_IO_Running: Yes Slave_SQL_Running: Yes *** Exec_Master_Log_Pos: 654409041 **
以MySQL5.7.19为例，部分重要的地方用红色标注了。...>show slave status\G *************************** 1. row *************************** Slave_IO_State... Master_UUID: e00b1731-a383-11e7-ada1-000c29c99d23 Master_Info_File: mysql.slave_master_info...补充,RESET命令的用法： 1 RESET MASTER： 删除全部的binlog文件，重置mysql.index文件为空，然后重新生成一个binlog文件。...4 RESET SLAVE ALL: 是在reset slave的基础上，进一步重置了chagne master to的参数。这样的话，show slave status\G就没有显示。
目前最完美的解决方案是半洗白，可以开启视频缩略图和转码。而后备方案是硬破。 1.半洗白方法 通过Docker和VMM两种虚拟化方式。建立虚拟的DSM系统，即DDSM，全程根据指引操作即可。...(这里有个注意事项，我自己是Firefox用户，但是各种选择文件后不运行，换成Chrome后就没有问题了，不知道什么原因) 最后启动系统，进入系统界面，记录SN，或者使用群晖助手、群晖管家扫描出他们的...$vim grub/grub.cfg 修改SN即可，这里说明一下我的经验，半洗白貌似不与MAC绑定，所以完全可以把其中的MAC改成真实网卡MAC，这样网络唤醒等操作的时候就方便很多了。...2.验证半洗白方法 这个有几种方法验证：第一种在VS中设置–高级中设定允许转码。之后在APP中选择播放质量切换一下。看一眼CPU的状态。上去了就说明它开始”奋斗”了。
稳定后的状态 mysql> show slave status\G *************************** 1. row ***************************...Master_Port: 3306 Connect_Retry: 60 Master_Log_File: mysql-bin...Relay_Log_Pos: 160542 Relay_Master_Log_File: mysql-bin.000009 Slave_IO_Running...Master_UUID: adf0b5b2-26fb-11e5-8bba-0024213a7622 Master_Info_File: /var/lib/mysql...: Slave has read all relay log; waiting for the slave I/O thread to update it Master_Retry_Count
执行同步 [root@slave-test mysql]# mysql -u root -p Enter password: Welcome to the MySQL monitor....mysql> show slave status\G Empty set (0.00 sec) mysql> CHANGE MASTER TO MASTER_HOST='192.168.1.66',...; Query OK, 0 rows affected, 2 warnings (0.46 sec) mysql> show slave status\G **********************...Relay_Log_Pos: 4 Relay_Master_Log_File: mysql-bin.000009 Slave_IO_Running...> start slave; Query OK, 0 rows affected (0.10 sec) mysql> show slave status\G *********************
到此salve的软件环境就已经准备好了 ---- 注意事项 1.slave上的数据存储位置有足够的空间，如果没有最好链接到一个有空间的位置 2.slave上使用master的配置文件，可以将有些大内存使用参数酌情改小...server with DSN 'dbi:mysql:;mysql_read_default_file=/etc/my.cnf;mysql_read_default_group=xtrabackup'...: Connecting to MySQL server with DSN 'dbi:mysql:;mysql_read_default_file=/etc/my.cnf;mysql_read_default_group...server as DBD::mysql module is not installed at /usr/bin/innobackupex line 3006....[root@master-qa ~]# rpm -qa | grep -i dbd perl-DBD-SQLite-1.27-3.el6.x86_64 perl-DBD-MySQL-4.013-3.el6
ORACLE MySQL 5.6版本开始支持多线程复制，配置选项 slave_parallel_workers 即可实现在slave上多线程并发复制。...另一个重要原因是，传统的MySQL复制是异步（asynchronous）的，也就是说在master提交完后，才在slave上再应用一遍，并不是真正意义上的同步。...因此，严格意义上讲，MySQL复制不能叫做MySQL同步（处女座的面试官有可能会在面试时把说成MySQL同步的一律刷掉哦）。...综合这两个主要原因，slave想要尽可能及时跟上master的进度，可以尝试采用以下几种方法： 采用MariaDB发行版，它实现了相对真正意义上的并行复制，其效果远比ORACLE MySQL好的很多。...在高IOPS压力下，相比ext4有更稳健的IOPS表现（有人认为 XFS 在特别的场景下会有很大的问题，但我们除了剩余磁盘空间少于10%时引发丢数据外，其他的尚未遇到）； 调整RAID级别为raid 1
恢复数据库 [root@slave-test fullbackup]# innobackupex --copy-back /data/fullbackup/2015-10-12_15-24-06/.../xtrabackup_binlog_pos_innodb' innobackupex: Creating directory '/var/lib/mysql/bhdw_qa' innobackupex...data/fullbackup/2015-10-12_15-24-06' innobackupex: back to original InnoDB data directory '/var/lib/mysql.../' innobackupex: Copying '/data/fullbackup/2015-10-12_15-24-06/ibdata1' to '/var/lib/mysql/ibdata1'...[root@slave-test fullbackup]# echo $? 0 [root@slave-test fullbackup]#
恢复完后， datadir 里也有一个位置文件 [root@slave-test mysql]# cat /data/mysql/xtrabackup_binlog_pos_innodb mysql-bin....000009 1509223 [root@slave-test mysql]# cat /data/mysql/xtrabackup_info uuid = 3cf59860-70b3-11e5-95db...76232242511 partial = N incremental = N format = file compact = N compressed = N encrypted = N[root@slave-test...mysql]# ---- 修改数据权限 [root@slave-test mysql]# chown -R mysql:mysql /var/lib/mysql [root@slave-test...mysql]# [root@slave-test data]# chown -R mysql:mysql /data/mysql/ [root@slave-test data]#
可知 perl-DBD-MySQL 已经安装了，和报错不符合 解决办法： 重装 perl-DBD-MySQL [root@master-qa ~]# yum list all | grep perl-DBD-MySQL...perl-DBD-MySQL.x86_64 4.013-3.el6 @base [root@master-qa ~]...# yum reinstall perl-DBD-MySQL.x86_64 Loaded plugins: fastestmirror, refresh-packagekit, security...-4.013-3.el6.x86_64 --> Processing Dependency: libmysqlclient.so.16()(64bit) for package: perl-DBD-MySQL...=========================================================================== Reinstalling: perl-DBD-MySQL
恢复数据库 备份目录里有几个文件,里面有一些重要信息 恢复之前，我习惯将它们进行备份 [root@slave-test 2015-10-12_15-24-06]# file xtrabackup_* xtrabackup_binlog_info...xtrabackup_checkpoints: ASCII text xtrabackup_info: ASCII text xtrabackup_logfile: data [root@slave-test...2015-10-12_15-24-06]# cat xtrabackup_binlog_info mysql-bin.000009 1509223 [root@slave-test 2015-10-12...data/fullbackup/ tool_version = 1.5.1-xtrabackup ibbackup_version = xtrabackup version 2.2.12 based on MySQL...start_time = 2015-10-12 15:24:06 end_time = 2015-10-12 15:31:22 lock_time = 12 binlog_pos = filename 'mysql-bin
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
