MySQL主从不一致检查与修复

2014-11-24 17:57:03 · 作者: · 浏览: 0

pt-table-checksum 安装:


下载地址:wget www.percona.com/downloads/percona-toolkit/2.2.2/percona-toolkit-2.2.2.tar.gz


tar xf percona-toolkit-{version}.tar.gz


cd percona-toolkit-{version} # 进入解压后的目录


vim README # 查看安装手册


必备条件:


安装 yum install perl mysql perl-DBD-MySQL -y


pt-table-checksum安装步骤:


perl


Makefile.PL


make


make install


一、在master上操作:


1.在Master库上授权:


GRANT update,insert,delete,SELECT, PROCESS, SUPER, REPLICATION SLAVE ON *.* TO checksum@'Master ip' IDENTIFIED BY '123' ;




2、手工建在制定的库下(例如pts) checksums 表,保存pt-table-checksum 检测数据:


CREATE TABLE checksums (


db char(64) NOT NULL,


tbl char(64) NOT NULL,


chunk int NOT NULL,


chunk_time float NULL,


chunk_index varchar(200) NULL,


lower_boundary text NULL,


upper_boundary text NULL,


this_crc char(40) NOT NULL,


this_cnt int NOT NULL,


master_crc char(40) NULL,


master_cnt int NULL,


ts timestamp NOT NULL,


PRIMARY KEY (db, tbl, chunk),


INDEX ts_db_tbl (ts, db, tbl)


) ENGINE=InnoDB;


a.执行pt-table-checksum 检查主从数据表:


/usr/bin/pt-table-checksum h='1.1.1.2',u='checksum',p='123',P=3306 --databases test --tables t --nocheck-replication-filters --create-replicate-table --replicate=pts.checksums --no-check-binlog-format --lock-wait-timeout=120


TS ERRORS DIFFS ROWS CHUNKS SKIPPED TIME TABLE


06-08T10:41:16 0 0 2 1 0 0.338 test.t


上面显示的参数说明:


TS :完成检查的时间。


ERRORS :检查时候发生错误和警告的数量。


DIFFS :0表示一致,1表示不一致。当指定--no-replicate-check时,会一直为0,当指定--replicate-check-only会显示不同的信息。


ROWS :表的行数。


CHUNKS :被划分到表中的块的数目。


SKIPPED :由于错误或警告或过大,则跳过块的数目。


TIME :执行的时间。


TABLE :被检查的表名。




b.执行pt-table-sync 打印主从数据不一致的表:


/usr/bin/pt-table-sync --replicate=pts.checksums h=1.1.1.2,u=checksum,p=123 h=1.1.1.4,u=checksum,p=123 --print




c.恢复主从不一致的数据(在Master执行且以Master的结果为准)


/usr/bin/pt-table-sync --replicate=pts.checksums h=1.1.1.2,u=checksum,p=123 h=1.1.1.4,u=checksum,p=123 --execute



pt-table-checksum是一个在线验证主从数据一致性的工具,主要用于以下场景:


1. 数据迁移前后,进行数据一致性检查


2. 当主从复制出现问题,待修复完成后,对主从数据进行一致性检查


3. 把从库当成主库,进行数据更新,产生了”脏数据”


4. 定期校验


工作原理:


pt-table-checksum在主上执行检查语句在线检查mysql复制的一致性,把表分块(hunk-size),生成replace语句,然后通过复制传递到从,再通过update更新master_src的值。通过检测从上this_src和master_src的值从而判断复制是否一致。