MySQL专题和技巧——正确清理binlog日志
nanshan 2024-11-27 18:14 10 浏览 0 评论
binlog(二进制日志)主要记录 MySQL 数据库的变化. 它会记录所有更改表数据和表结构的事件。
使用binlog日志主要有两种用途
- 主从备份. 主库上的二进制日志记录主库的所有变更, 主库会把日志包含的事件发给从库, 从库执行这些事件, 从而与主库的数据保持一致
- 从二进制日志恢复数据库.
9de7bb31d0644e7393039222babfed10 欢迎收藏。
清理前的准备
查看主库和从库正在使用的binlog是哪个文件
show master status
show slave status\G
方法1 手动清理binlog
删除指定日期以前的日志
purge master logs before '2023-04-18 17:20:00';
删除指定日志文件的日志索引中binlog日志文件(不含指定的序号,000419)
purge master logs to 'binlog.000419';
方法2 通过设置binlog过期时间,使系统自动删除binlog文件
1. 在mysql中修改
查看binlog过期时间,这个值默认是0天,也就是说不自动清理,本例修改为7天
mysql> show variables like 'expire_logs_days';
+------------------+-------+
| Variable_name | Value |
+------------------+-------+
| expire_logs_days | 0 |
+------------------+-------+
1 row in set (0.01 sec)
mysql> set global expire_logs_days = 7;
-- 如果 binlog_expire_logs_seconds 已经设置会报错如下
3683 - The option expire_logs_days and binlog_expire_logs_seconds cannot be used together. Please use binlog_expire_logs_seconds to set the expire time (expire_logs_days is deprecated)
设置之后不会立即清除,触发条件是以下之一:
● binlog 大小超过 max_binlog_size,max_binlog_size 默认为 1G
● 手动执行flush logs
2. 在配置文件my.cnf中修改
mysqld在每个二进制日志名后面添加一个数字扩展名. 每次启动服务器或刷新日志时该数字则增加. 如果当前日志大小达到 max_binlog_size 还会自动创建新的二进制日志. 如果你正在使用大的事务,二进制日志还会超过 max_binlog_size 事务全写入一个二进制日志中,绝对不要写入不同的二进制日志中.
expire_logs_days: 定义了mysql清除过期日志的时间. 默认值为0,表示 "没有自动删除"
max_binlog_size: 二进制日志最大大小,如果二进制日志写入的内容超出给定值,日志就会发生滚动. 变量可设置范围是 4096 字节 和 1GB 之间
在my.cnf中添加配置,设置过期时间为30天
expire_logs_days = 30
max_binlog_size使用默认值即可
方法3 通过设置binlog过期时间,使系统自动删除binlog文件
MySQL8.0 版本中新增参数 binlog_expire_logs_seconds 可以精确到秒,而此前版本中 expire_logs_days 的单位为天,最小值为1,MySQL8.0 GA中此参数标记为 deprecated. 在 MySQL8.0 GA版本默认使用 binlog_expire_logs_seconds 时间为2592000秒(30天)
若在启动时 inlog_expire_logs_seconds 和 expire_logs_days 都没设置值,则使用默认值的 binlog_expire_logs_seconds 值,即30天
若在启动时 binlog_expire_logs_seconds 或 expire_logs_days 其中一个设置为非0值则非0值的参数作为 binlog 日志失效期
若在启动时 binlog_expire_logs_seconds 和 expire_logs_days 参数都设置为非0值则使用 binlog_expire_logs_seconds 值,expire_logs_days 值则失效并发出告警信息
若要关闭自动清除binlog文件的功能则需要显示指定 binlog_expire_logs_seconds=0 并且不设置 expire_logs_days 的值
为了兼容早期版本若显式指定了 expire_logs_days =0 而没有指定 binlog_expire_logs_seconds 的值,此时自动清理 binlog 日志则是禁用 的,并且此时 binlog_expire_logs_seconds 的默认值不适用
该参数支持动态修改,并且支持持久话到配置文件:
mysql> set global binlog_expire_logs_seconds=60*60*24;
mysql> set persist binlog_expire_logs_seconds=60*60*24;
补充
reset master: 将删除日志索引文件中记录的所有binlog文件,创建一个新的日志文件,起始值从000001开始. 不要轻易使用该命令,这个命令通常仅仅用于第一次用于搭建主从关系的时的主库
reset slave: 清除master.info文件, relay-log.info文件,以及所有的relay log文件,并重新启用一个新的relaylog文件
使用reset slave之前必须使用stop slave 命令将复制进程停止
- 上一篇:自动清理MySQL binlog日志
- 下一篇:MYSQL千万级大表如何做数据清理?
相关推荐
- 在 Ubuntu 上安装 Zabbix(以 Zabbix 6.4 LTS 版本为例)
-
Zabbix是一个流行的开源监控解决方案,能够监控各种网络参数和服务器健康状态。一、环境准备系统要求Ubuntu20.04/22.04LTS至少2GBRAM(生产环境建议4GB+)至少1...
- 如何在 Ubuntu 24.04 服务器上安装 Apache Solr
-
ApacheSolr是一个免费、开源的搜索平台,广泛应用于实时索引。其强大的可扩展性和容错能力使其在高流量互联网场景下表现优异。Solr基于Java开发,提供了分布式索引、复制、负载均衡及自...
- 如何在 Ubuntu 24.04 LTS 或 22.04/20.04 上安装 Apache Maven
-
Maven是由Apache托管的开源工具,用于管理Java项目。它包含一个项目对象模型(POM):一个配置文件(XML),其中包含项目的基本信息,包括配置、项目依赖项等。Maven可以处理...
- Cursor的终极对手——Trae Pro最新系统提示词
-
前段时间,字节的AI编程神器Trae国际版,终于甩出了Pro订阅计划!很多对它又爱又恨的小伙伴,直呼:终于等到你。爱它,是因为Trae长期免费+体验真香;恨它?还不是那该死的排队等待,...
- AI系统提示词:V0(ai代码提示)
-
以下是对V0系统提示词(SystemPrompt)的分部分讲解与解读,帮助你理解其核心内容和设计意图。V0系统提示词##CoreIdentity-Youarev0,Vercel&...
- 8岁男童失踪第13天,搜救人员发现可疑水库,更恶心的事情发生了
-
Lookingatyourrequest,Ineedtorewritethearticleaboutthe8-year-oldmissingboywhilemaking...
- docker常用指令及安装rabbitMQ(docker安装zabbix)
-
一、docker常用指令启动docker:systemctlstartdocker停止docker:systemctlstopdocker重启docker:systemctlrestart...
- 三步教你用Elasticsearch+PyMuPDF实现PDF大文件秒搜!
-
面对100页以上的大型PDF文件时,阅读和搜索往往效率低下。传统关系型数据库在处理此类数据时容易遇到性能瓶颈,而Elasticsearch凭借其强大的全文检索和分布式架构,成为理想解决方案。通过...
- ElasticSearch中文分词插件(IK)安装
-
坚持原创,共同进步!请关注我,后续分享更精彩!!!前言ElasticSearch默认的分词插件对中文支持很不友好。一段话按规则会以每个中文字符来拆解,再分别建立倒排索引。如"中华人民共和国国歌...
- SpringBoot使用ElasticSearch做文档对象的持久化存储?
-
ElasticSearch是一个基于Lucene的开源搜索引擎,广泛应用于日志分析、全文搜索、复杂查询等领域,在有些场景中使用ElasticSearch进行文档对象的持久化存储是一个很不错的选择...
- Elasticsearch数据迁移方案(elasticsearch copyto)
-
前言最近小编要去给客户部署一套系统涉及到了Mysql和ES数据的迁移,下面就给大家分享一下ES数据迁移的几套方案,根据具体的使用场景来选择不同的迁移方案能使你事倍功半,话多说下面就一一介绍。Elast...
- Rancher部署单体ElasticSearch(rancher2.5部署)
-
Rancher是k8s图形管理界面,之前曾有写文章介绍如何安装。ElasticSearch是热门搜索引擎,很多地方都有用到,常规安装部署略显繁琐,本文介绍在k8s下用rancher简易部署ES。1.在...
- Elasticsearch在Java项目的搜索实践:从零开始构建高效搜索系统
-
Elasticsearch在Java项目中的搜索实践:从零开始构建高效搜索系统在现代的Java项目中,数据量激增,传统的数据库查询方式已经无法满足快速检索的需求。这时,Elasticsearch(E...
- 小白入门-Kibana安装(kibana安装配置)
-
一Kibana基础1.1介绍Kibana是一款免费且开放的前端应用程序,其基础是ElasticStack,可以为Elasticsearch中索引的数据提供搜索和数据可视化功能。Kiban...
- Docker上使用Elasticsearch,Logstash,Kibana
-
在对一个项目做性能测试时我需要处理我们web服务器的访问日志来分析当前用户的访问情况。因此,我想这是试用ELK的一个好机会。ELK栈首先要注意的是使用它是非常简单的。从决定使用ELK到在本机上搭一个...
你 发表评论:
欢迎- 一周热门
-
-
极空间如何无损移机,新Z4 Pro又有哪些升级?极空间Z4 Pro深度体验
-
UOS服务器操作系统防火墙设置(uos20关闭防火墙)
-
如何修复用户配置文件服务在 WINDOWS 上登录失败的问题
-
手机如何设置与显示准确时间的详细指南
-
如何在安装前及安装后修改黑群晖的Mac地址和Sn系列号
-
日本海上自卫队的军衔制度(日本海上自卫队的军衔制度是什么)
-
爱折腾的特斯拉车主必看!手把手教你TESLAMATE的备份和恢复
-
10个免费文件中转服务站,分享文件简单方便,你知道几个?
-
FANUC 0i-TF数据备份方法(fanuc系统备份教程)
-
NAS:DS video/DS file/DS photo等群晖移动端APP远程访问的教程
-
- 最近发表
-
- 在 Ubuntu 上安装 Zabbix(以 Zabbix 6.4 LTS 版本为例)
- 如何在 Ubuntu 24.04 服务器上安装 Apache Solr
- 如何在 Ubuntu 24.04 LTS 或 22.04/20.04 上安装 Apache Maven
- Cursor的终极对手——Trae Pro最新系统提示词
- AI系统提示词:V0(ai代码提示)
- 8岁男童失踪第13天,搜救人员发现可疑水库,更恶心的事情发生了
- docker常用指令及安装rabbitMQ(docker安装zabbix)
- 三步教你用Elasticsearch+PyMuPDF实现PDF大文件秒搜!
- ElasticSearch中文分词插件(IK)安装
- SpringBoot使用ElasticSearch做文档对象的持久化存储?
- 标签列表
-
- linux 查询端口号 (58)
- docker映射容器目录到宿主机 (66)
- 杀端口 (60)
- yum更换阿里源 (62)
- internet explorer 增强的安全配置已启用 (65)
- linux自动挂载 (56)
- 禁用selinux (55)
- sysv-rc-conf (69)
- ubuntu防火墙状态查看 (64)
- windows server 2022激活密钥 (56)
- 无法与服务器建立安全连接是什么意思 (74)
- 443/80端口被占用怎么解决 (56)
- ping无法访问目标主机怎么解决 (58)
- fdatasync (59)
- 405 not allowed (56)
- 免备案虚拟主机zxhost (55)
- linux根据pid查看进程 (60)
- dhcp工具 (62)
- mysql 1045 (57)
- 宝塔远程工具 (56)
- ssh服务器拒绝了密码 请再试一次 (56)
- ubuntu卸载docker (56)
- linux查看nginx状态 (63)
- tomcat 乱码 (76)
- 2008r2激活序列号 (65)