MySQL分割数据
引言一般来说讲,提到数据拆分,可以归结为两个层面:一是垂直拆分,二是水平拆分。这里我们来讨论下垂直拆分。垂直拆分是以数据库、表、列等为单位进行拆分的方法。正文MySQL里垂直拆分可以细分为:垂直拆库(...
2024.11.15binlog(二进制日志)主要记录 MySQL 数据库的变化. 它会记录所有更改表数据和表结构的事件。
使用binlog日志主要有两种用途
主从备份. 主库上的二进制日志记录主库的所有变更, 主库会把日志包含的事件发给从库, 从库执行这些事件, 从而与主库的数据保持一致从二进制日志恢复数据库.9de7bb31d0644e7393039222babfed10 欢迎收藏。
清理前的准备查看主库和从库正在使用的binlog是哪个文件
show master statusshow slave status\G方法1 手动清理binlog删除指定日期以前的日志
purge master logs before ‘2023-04-18 17:20:00‘;删除指定日志文件的日志索引中binlog日志文件(不含指定的序号,000419)
purge master logs to ‘binlog.000419‘;方法2 通过设置binlog过期时间,使系统自动删除binlog文件1. 在mysql中修改
查看binlog过期时间,这个值默认是0天,也就是说不自动清理,本例修改为7天
mysql> show variables like ‘expire_logs_days‘;+------------------+-------+| Variable_name| Value |+------------------+-------+| expire_logs_days | 0 |+------------------+-------+1 row in set (0.01 sec)mysql> set global expire_logs_days = 7;-- 如果binlog_expire_logs_seconds 已经设置会报错如下3683 - The option expire_logs_days and binlog_expire_logs_seconds cannot be used together. Please use binlog_expire_logs_seconds to set the expire time (expire_logs_days is deprecated)设置之后不会立即清除,触发条件是以下之一:
● binlog 大小超过 max_binlog_size,max_binlog_size 默认为 1G
● 手动执行flush logs
2. 在配置文件my.cnf中修改
mysqld在每个二进制日志名后面添加一个数字扩展名. 每次启动服务器或刷新日志时该数字则增加. 如果当前日志大小达到 max_binlog_size 还会自动创建新的二进制日志. 如果你正在使用大的事务,二进制日志还会超过 max_binlog_size 事务全写入一个二进制日志中,绝对不要写入不同的二进制日志中.
expire_logs_days: 定义了mysql清除过期日志的时间. 默认值为0,表示 "没有自动删除"
max_binlog_size: 二进制日志最大大小,如果二进制日志写入的内容超出给定值,日志就会发生滚动. 变量可设置范围是 4096 字节 和 1GB 之间
在my.cnf中添加配置,设置过期时间为30天
expire_logs_days = 30max_binlog_size使用默认值即可方法3 通过设置binlog过期时间,使系统自动删除binlog文件
MySQL8.0 版本中新增参数 binlog_expire_logs_seconds 可以精确到秒,而此前版本中 expire_logs_days 的单位为天,最小值为1,MySQL8.0 GA中此参数标记为 deprecated. 在 MySQL8.0 GA版本默认使用 binlog_expire_logs_seconds 时间为2592000秒(30天)
若在启动时 inlog_expire_logs_seconds 和 expire_logs_days 都没设置值,则使用默认值的 binlog_expire_logs_seconds 值,即30天
若在启动时 binlog_expire_logs_seconds 或 expire_logs_days 其中一个设置为非0值则非0值的参数作为 binlog 日志失效期
若在启动时 binlog_expire_logs_seconds 和 expire_logs_days 参数都设置为非0值则使用 binlog_expire_logs_seconds 值,expire_logs_days 值则失效并发出告警信息
若要关闭自动清除binlog文件的功能则需要显示指定 binlog_expire_logs_seconds=0 并且不设置 expire_logs_days 的值
为了兼容早期版本若显式指定了 expire_logs_days =0 而没有指定 binlog_expire_logs_seconds 的值,此时自动清理 binlog 日志则是禁用 的,并且此时 binlog_expire_logs_seconds 的默认值不适用
该参数支持动态修改,并且支持持久话到配置文件:
mysql> set global binlog_expire_logs_seconds=60*60*24;mysql> set persist binlog_expire_logs_seconds=60*60*24;补充reset master: 将删除日志索引文件中记录的所有binlog文件,创建一个新的日志文件,起始值从000001开始. 不要轻易使用该命令,这个命令通常仅仅用于第一次用于搭建主从关系的时的主库
reset slave: 清除master.info文件, relay-log.info文件,以及所有的relay log文件,并重新启用一个新的relaylog文件
使用reset slave之前必须使用stop slave 命令将复制进程停止
引言一般来说讲,提到数据拆分,可以归结为两个层面:一是垂直拆分,二是水平拆分。这里我们来讨论下垂直拆分。垂直拆分是以数据库、表、列等为单位进行拆分的方法。正文MySQL里垂直拆分可以细分为:垂直拆库(...
2024.11.15作者 | 李冬梅采访嘉宾 | Monty,MySQL 之父审校 | 王一鹏,刘燕InfoQ 深度专访 “MySQL 之父” — Michael “Monty” Widenius ,全文包括视频访谈实录...
2024.11.15》接下来,咱们来第二篇 :《老架构带你手写数据库之2: 从0开始,手写MySQL数据管理器DM》(本文)《尼恩 架构笔记》《尼恩高并发三部曲》《尼恩Java面试宝典》的PDF文件,请到公号【技术自由圈...
2024.11.12年底项目验收很多,也就碰到了各种问题,以前只在埋头撸代码,根本不知道原因。今天第一次听到一个词“审计”,真的第一次听到,在我心中,感觉程序员也要涉及审计了?兜兜转转,百度Google看到了一些讲审计的...
2024.11.07概述mysql慢查询日志是mysql提供的一种日志记录,它是用来记录在mysql中相应时间超过阈值的语句,就是指运行时间超过long_query_time值的sql,会被记录在慢查询日志中。long_...
2024.11.12