我将binlog mysql中的数据同步到kafka,有时binlog文件被删除,重新启动连接器时出现错误
org.apache.kafka.connect.errors.ConnectException: The connector is trying to read binlog starting at binlog file 'mysql-bin.000003', pos=154, skipping 0 events plus 0 rows
我将/tmp/connect.offsets更改为当前binlog文件。但是它会再次加载数据库推送主题中的所有数据。我想防止这种情况
在Percona XtraDB集群的所有三个节点中,我都看到了大量的二进制日志文件的突然增加:
-rw-rw---- 1 mysql mysql 1,1G 19 oct. 16:11 binlog-32.000001
-rw-rw---- 1 mysql mysql 1,1G 19 oct. 16:36 binlog-32.000002
-rw-rw---- 1 mysql mysql 1,1G 19 oct. 16:48 binlog-32.000003
-rw-rw---- 1 mysql mysql 1,1G 19 oct. 16:59 binlog-32.000004
我刚刚意识到我的服务器正在以每天2GB的速度增长,这是不正常的。
我查看了我的文件夹,文件夹/ var / lib / mysql达到了26 GB
正常情况下应该是4GB左右
一个月前,我将我的MySQL 5.7数据库迁移到MySQL 8.0
我想我的磁盘里满是二进制文件。
我想知道为什么这些文件突然变大了?
如何在不损坏数据库的情况下修复这个问题?
total 26511376
-rw-r----- 1 mysql mysql 56 Aug 19 2018 auto.cnf
-rw-r----- 1 mysql mysql 178 Mar 10 06:07
我有很多小二进制日志文件,每个文件只有126个字节。
-rw-rw----. 1 mysql mysql 126 Jan 6 16:13 mysql-bin.000001
-rw-rw----. 1 mysql mysql 126 Jan 6 16:16 mysql-bin.000002
-rw-rw----. 1 mysql mysql 150 Jan 7 10:34 mysql-bin.000003
-rw-rw----. 1 mysql mysql 126 Jan 8 09:57 mysql-bin.000004
-rw-rw----. 1 mysql mysql 12
我正在尝试用pt表同步到表。问题是RDS bilong_format被设置为MIXED,工具需要STATEMENT。而且我们没有超特权来改变它。
我怎样才能绕开这个问题,同步我的桌子呢?
错误描述如下:
This tool requires binlog_format=STATEMENT, but the current binlog_format is set to MIXED and an error occurred while attempting to change it. If running MySQL 5.1.29 or newer, setting binlog_forma
我的MySQL服务器有一个奇怪的问题。突然又重新开始了。这对我来说是个很少见但很大的问题。
此服务器在主从复制中以主服务器的身份运行.我使用的是MySQL 5.6.16-1+sury.org~精确+1-log
在syslog中,我看到了下面的信息:
Jun 4 10:53:32 localhost kernel: [18821099.786264] init: mysql main process (25937) terminated with status 1
Jun 4 10:53:32 localhost kernel: [18821099.786329] init: mysql m
我尝试为MySQL5.7配置MHA 0.56,一切都完成了。当我运行masterha_check_repl时,我得到以下消息:executing command: save_binary_logs --command=test --start_pos=4 --binlog_dir=/data/mysql --output_file=/data/mysql Failed to save binary log: Set --start_file=<starting_binlog_filename> or --binlog_prefix=<binlog_file_prefix&g
我创建了一个数据库、一个表并插入了一些数据,并在我的日志文件夹中找到了这个binlog.0000001,但是当我执行mysqlbinlog binlog.0000001时,它只显示下面的内容,看起来不完整:(日志dir:binlog.000001 binlog.index中只有两个文件)
/*!40019 SET @@session.max_insert_delayed_threads=0*/;
/*!50003 SET @OLD_COMPLETION_TYPE=@@COMPLETION_TYPE,COMPLETION_TYPE=0*/;
DELIMITER /*!*/;
# at 4
#1
我有个关于我的ndb集群的问题。因为有两个文件太大了我不知道为什么..。
ls -la
-rw-rw---- 1 mysql mysql 32827950588 May 25 12:35 ndb_binlog_index.MYD
-rw-rw---- 1 mysql mysql 6493449216 May 25 12:35 ndb_binlog_index.MYI
ls -lah
-rw-rw---- 1 mysql mysql 31G May 25 12:35 ndb_binlog_index.MYD
-rw-rw---- 1 mysql mysql 6.1G May 25 12:3
我正在使用MariaDB,下面是我的配置文件:
cat /etc/my.cnf.d/server.cnf
....
binlog_format=row
server_id=12
sync_binlog = 100
binlog-row-image = full
binlog_cache_size = 16M
binlog_stmt_cache_size = 16M
但是,tpm安装有如下错误消息:
ERROR >> 127_0_0_1 >> The MySQL datasource binlog_format must be set to 'ROW'
我正在尝试使用Docker在我的计算机上运行一个laravel项目。但是,我在docker-composer上遇到了很多问题,因为我无法启动MySQL5.7。
我尝试了几乎所有我能在互联网上找到的解决方案,但都没有成功。我的操作系统是OSX High Sierra,PHP on computer 7.2.9,MySQL on computer 8.0。
这是docker-composer up的输出:
mysql_1 | 2018-10-08T12:04:17.219821Z 0 [Note] InnoDB: Using CPU crc32 instructions
mysql_1