mysql数据对比工具
导读:笔者最近在采用 trino 代替旧有方案进行媒体接口数据拉取。需通过将 trino 拉取的数据入到测试库,并与旧方案拉取到生产库中的数据进行对比从而验证逻辑准确性。在进行数据对比时为提高效率因此...
2024.11.15一、确保mysql开启了binlog日志功能
在/etc/my.cnf文件里的[mysqld]区块添加:
#这个是存储的位置为mysql配置文件的位置
log-bin=mysql-bin
然后重启mysql服务生效
二、创建数据库
先创建一个ops数据库
create database ops;
use ops;
创建一个customers表并写上表结构
create table customers(
id int not null auto_increment,
name char(20) not null,
age int not null,
primary key(id)
)engine=InnoDB;
查看创建好的表
desc customers;
表中插入数据:
insert into customers values(1,"wangbo","24");
insert into customers values(2,"guohui","22");
insert into customers values(3,"zhangheng","27");
检查插入数据:
select * from customers;
三、进行数据库全量备份
mysqldump -uroot -p -B -F -R -x --master-data=2 ops|gzip >/alidata/mysql_bakcup/ops_$(date +%F).sql.gz
ls /alidata/mysql_bakup
参数说明:
-B: 指定数据库
-F:刷新日志
-R:备份存储过程等
-x:锁表
--master-data:在备份语句里添加CHANGE MASTER语句以及binlog文件及位置信息
四、再次插入数据
insert into customers values(4,"liupeng","21");
insert into customers values(5,"xiaoda","31");
insert into customers values(6,"fuaiai","26");
查看最新插入的数据
select * from customers;
五、模拟误操作、删除ops数据库
drop database ops;
此时,全备之后到误操作时刻之间,用户写入的数据在binlog中,需要恢复出来!
查看全备之后新增的binlog文件
cd /alidata/mysql_bakcup
#解压出已经备份好的数据库
gzip -d ops_2019-04-23.sql.gz
ls
查看数据库变化的时刻
grep CHANGE ops_2019-04-23.sql
这是全备时候的binlog文件位置 mysql-bin.000006的第106行
因此在该文件之前的binlog文件中的数据都已经包含在这个全备的sql文件中了
移动到binlog文件,并导出sql文件,提出其中的drop语句
查看mysql数据存放目录,由如下信息可知在/var/lib/mysql目录下
ps -ef |grep mysql
cd /var/lib/mysql
cp mysql-bin.000006 /alidata/mysql_bakcup/
cd /alidata/mysql_bakcup/
mysqlbinlog mysql-bin.000006 >006bin.sql #即将binlog日志转化为可正常导入的sql文件
vim 006bin.sql 删除里面drop语句
注意:在恢复全备数据之前必须将binlog文件移出,否则恢复过程中,会继续写入语句到binlog,最终导致增量恢复数据部分变的比较混乱
六、恢复数据
mysql -uroot -p
导读:笔者最近在采用 trino 代替旧有方案进行媒体接口数据拉取。需通过将 trino 拉取的数据入到测试库,并与旧方案拉取到生产库中的数据进行对比从而验证逻辑准确性。在进行数据对比时为提高效率因此...
2024.11.15前一篇文章《windows服务器应用系统自动备份策略》讲到了mysql数据库本地备份策略,如果觉得备份到服务器上不够安全,防止服务器意外硬件损坏致使备份也丢失。那么可以采取异地备份,网上很多windo...
2024.11.15一、测试数据库的创建 1:官方百万级别的测试数据库:官方测试数据库github网址:https://github.com/datacharmer/test_db下载到目录,解压即可,运行命令:mys...
2024.11.13MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。在 互联网WEB 应用方面,MySQL是最好的数据库之一。以下是小编整理的MySQL运维的基础知识...
2024.11.15本章节主要来讲解的是MySQL中的视图、存储过程、存储函数和触发器,这些都是MySQL数据库中的存储对象,学好能助你涨薪[偷笑]。一、视图视图(View)是一种虚拟存在的表,视图中的数据并不在数据库中...
2024.11.15