目录

比较两个数据库有何差异生成更新的SQL语句脚本

比较两个数据库有何差异生成更新的SQL语句脚本

MySQL Utilities 提供了一系列MySQL服务器和数据库的管理工具。

完全支持MySQL5.1及以上版本,也兼容MySQL5.0版本,不过有些特性不支持。

不支持MySQL4.0版本。

下面这些工具工作在数据库级别,可以用来管理一个或多个服务器的数据库。

1 mysqldbcompare

  • 比较两个服务器或同个服务器上的数据库
  • 比较定义文件和数据
  • 产生差异报告
  • 生成差异性的转换SQL语句

2 mysqldiff

  • 比较数据表
  • 比较表对象的定义
  • 产生差异的报告
  • 生成差异性的转换SQL语句

3 mysqldbcopy

  • 服务器之间复制数据库
  • 在同一台服务器上克隆数据库
  • 支持重命名

4 mysqldbexport

  • 从一个或多个数据库导出元数据和或数据
  • 支持的格式: SQL, CSV, TAB, Grid, Vertical

5 mysqldbimport

  • 从一个或多个文件导入元数据和数据
  • 支持mysqldbexport各种格式

mysqldbcompare MySQL数据库比较工具

mysqldbcompare 用于比较两个服务器或同个服务器上的 数据库 ,有文件和数据,并生成差异性SQL语句。

要比较 数据表 ,请用另外一个工具: mysqldiff ( )。

以下是 mysqldbcompare 的用法。

1 安装

mysqldbcompareMySQL Utilities 中的一个脚本,默认的MySQL不包含工具集,所以需要独立安装。

  • MySQL Utilities下载地址: 。
  • Windows系统中需提前安装“ Visual C++ Redistributable Packages for Visual Studio 2013 ”,下载地址: 。

Linux系统在下载页面选择对应发行版。

2 语法

mysqldbcompare 的语法如下:

$ mysqldbcompare --server1=user:pass@host:port:socket --server2=user:pass@host:port:socket db1:db2

以上参数中:

  • --server1 :MySQL服务器1配置。
  • --server2 :MySQL服务器2配置。如果是同一服务器, --server2 可以省略。
  • db1:db2 :要比较的两个数据库。如果比较不同服务器上的同名数据库,可以省略 :db2
  • --all :比较所有两服务器上所有的同名数据库。 --exclude 排除无需比较的数据库。
  • --run-all-tests :运行完整比较,遇到第一次差异时不停止。
  • --changes-for= :修改对象。例如 --changes-for=server2 ,那么对比以 sever1 为主,生成的差异的修改也是针对 server2 的对象的修改。
  • -d DIFFTYPE , --difftype=DIFFTYPE :差异的信息显示的方式,有 [unified|context|differ|sql] ,默认是 unified 。如果使用sql,那么就直接生成差异的SQL,这样非常方便。
  • --show-reverse :在生成的差异修改里面,同时会包含 server2server1 的修改。
  • --skip-table-options :保持表的选项不变,即对比的差异里面不包括 表名AUTO_INCREMENTENGINECHARSET 等差异。
  • --skip-diff :跳过对象定义比较检查。所谓对象定义,就是 CREATE 语句 () 里面的部分, --skip-table-options 是()外面的部分。
  • --skip-object-compare :默认情况下,先检查两个数据库中相互缺失的对象,再对都存在对象间的差异。这个参数的作用就是,跳过第一步,不检查相互缺失的对象。
  • --skip-checksum-table :数据一致性验证时跳过 CHECKSUM TABLE
  • --skip-data-check :跳过数据一致性验证。
  • --skip-row-count :跳过字段数量检查。

3 示例

比较两个数据库,并生成差异SQL:

$ mysqldbcompare --server1=root:root@localhost --server2=root:root@localhost db1:db2 --changes-for=server1 -a --difftype=sql


# WARNING: Objects in server1.db1 but not in server1.db2:
# TABLE: table2
#
# WARNING: Objects in server1.db2 but not in server1.tb1:
# TABLE: table3
#
#                                                   Defn    Row     Data
# Type      Object Name                             Diff    Count   Check
#-------------------------------------------------------------------------
# TABLE     t1                                      pass    pass    -
#           - Compare table checksum                                FAIL
#           - Find row differences                                  FAIL
#
# Transformation for --changes-for=server1:
#

# Data differences found among rows:
UPDATE db1.t1 SET b = 'Test 123' WHERE a = '1';
UPDATE db1.t1 SET b = 'Test 789' WHERE a = '3';
DELETE FROM db1.t1 WHERE a = '4';
INSERT INTO db1.t1 (a, b) VALUES('5', 'New row - db2');


# Database consistency check failed.
#
# ...done

WARNING 之后提示两个数据库表之间的差异,也就是一个数据库中有,另一个数据库没有的数据表。

之后就是差异的SQL语句了,把有 # 号注释的行删掉,就能直接在数据库中执行了。

说明:执行MySQL语句时可能会遇到这样错误:Error 1054 - Unknown column ’name’ in ‘aspect’

这是因为 mysqldbcompare 生成的 ALTER 语句中,用逗号 , 拼装了多条 ADDCHANGE 等语句,如果这些语句还包含 AFTER 关键字,就会提示这个错误并中断执行MySQL语句。解决的办法就是:去除 AFTER 及其后面的条件。

这可能是MySQL的一个Bug,详情参考: 和 。

参考链接:

cd /download

wget

tar xvf mysql-utilities-1.6.5.tar.gz

cd mysql-utilities-1.6.5

python setup.py build

python setup.py insta

-h192.168.11.2 -uroot -p’zq!aHHHDmgH4DIq!si'

-h192.168.8.73 -umoHsh -p’NAH43aHHHHjog9bGYQk'

mysqldbcompare –server1=root:root@localhost –server2=root:root@localhost db1:db2 –changes-for=server1 -a –difftype=sql

mysqldbcompare –server1=root:‘ –server2=moHsh:‘ system232:system –run-all-tests –changes-for=server1  –difftype=sql

一、简介

在使用mysql replication时,有时候会担心,如果主库和备库的数据不一致,怎么办?之前,自己用过一个非常笨的办法,就是,根据生产库的中的主键,从information_schema中,把生产库中的表和字段全部查出来,然后查询每个字段的数据,一一对比。这样的话,在数据量特别大的情况下,耗时简直恐怖。

最近找到了一个mysql的工具,mysqldbcompare,可以实现对多库数据的对比。

官方文档:http://dev.mysql.com/doc/mysql-utilities/1.3/en/mysqldbcompare.html

工具下载地址:http://downloads.mysql.com/snapshots/pb/mysql-connector-utilities-fabric/mysql-utilities-1.4.0-labs-fabric.tar.gz

二、安装

解压安装后,需要使用python命令进行安装

cd mysql-utilities-1.4.0-labs-fabric

python setup.py install

安装完成后,mysqldbcompare命令在/usr/local/bin下面。

三、mysqldb用法

详细的参数解释,可以参照官方文档。这里只解释几个常用的参数

–server1=user:passwprd@host    要对比的第一个库,指定用户、密码和主机。如果没有密码,密码可以忽略

–server2=user:password@host    要对比的第二个库,指定用户、密码和主机。如果没有密码,密码可以忽略

–difftype=[ unified | context | differ | sql ] unified和context、differ:会显示相差的具体的数据。sql:会生成的具体的SQL。具体信息,如下:

–changes-for=[server1|server2] 以difftype=sql为例,如果设置changes-for=server1,那么,生成的sql是update server1.tables set * * * *

–run-all-test 检查所有,即使检测到第一个不一致的数据,仍然继续。

绝大部分情况下,我们需要检查特定的几个库,这是可以指定命令,比如:

mysqldbcompare –server1=root:root@127.0.0.1:3306 –server2=root:root@127.0.0.1:3307 –run-all-test –changes-for=server1 –difftype=sql test1:test2

其中,test1库是server1上的库,test2是server2上的库。这样,我们就只检查test1和test2这两个库。