百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

MySQL专题和技巧——正确清理binlog日志

nanshan 2024-11-27 18:14 10 浏览 0 评论

binlog(二进制日志)主要记录 MySQL 数据库的变化. 它会记录所有更改表数据和表结构的事件。

使用binlog日志主要有两种用途

  • 主从备份. 主库上的二进制日志记录主库的所有变更, 主库会把日志包含的事件发给从库, 从库执行这些事件, 从而与主库的数据保持一致
  • 从二进制日志恢复数据库.

9de7bb31d0644e7393039222babfed10 欢迎收藏。

清理前的准备

查看主库和从库正在使用的binlog是哪个文件

show master status
show slave status\G

方法1 手动清理binlog

删除指定日期以前的日志

purge master logs before '2023-04-18 17:20:00';

删除指定日志文件的日志索引中binlog日志文件(不含指定的序号,000419)

purge master logs to 'binlog.000419';

方法2 通过设置binlog过期时间,使系统自动删除binlog文件

1. 在mysql中修改

查看binlog过期时间,这个值默认是0天,也就是说不自动清理,本例修改为7天

mysql> show variables like 'expire_logs_days';
+------------------+-------+
| Variable_name    | Value |
+------------------+-------+
| expire_logs_days | 0     |
+------------------+-------+
1 row in set (0.01 sec)
mysql> set global expire_logs_days = 7;

-- 如果  binlog_expire_logs_seconds 已经设置会报错如下
3683 - The option expire_logs_days and binlog_expire_logs_seconds cannot be used together. Please use binlog_expire_logs_seconds to set the expire time (expire_logs_days is deprecated)

设置之后不会立即清除,触发条件是以下之一:

● binlog 大小超过 max_binlog_size,max_binlog_size 默认为 1G

● 手动执行flush logs

2. 在配置文件my.cnf中修改

mysqld在每个二进制日志名后面添加一个数字扩展名. 每次启动服务器或刷新日志时该数字则增加. 如果当前日志大小达到 max_binlog_size 还会自动创建新的二进制日志. 如果你正在使用大的事务,二进制日志还会超过 max_binlog_size 事务全写入一个二进制日志中,绝对不要写入不同的二进制日志中.

expire_logs_days: 定义了mysql清除过期日志的时间. 默认值为0,表示 "没有自动删除"

max_binlog_size: 二进制日志最大大小,如果二进制日志写入的内容超出给定值,日志就会发生滚动. 变量可设置范围是 4096 字节 和 1GB 之间

在my.cnf中添加配置,设置过期时间为30天

expire_logs_days = 30
max_binlog_size使用默认值即可

方法3 通过设置binlog过期时间,使系统自动删除binlog文件

MySQL8.0 版本中新增参数 binlog_expire_logs_seconds 可以精确到秒,而此前版本中 expire_logs_days 的单位为天,最小值为1,MySQL8.0 GA中此参数标记为 deprecated. 在 MySQL8.0 GA版本默认使用 binlog_expire_logs_seconds 时间为2592000秒(30天)

若在启动时 inlog_expire_logs_seconds 和 expire_logs_days 都没设置值,则使用默认值的 binlog_expire_logs_seconds 值,即30天

若在启动时 binlog_expire_logs_seconds 或 expire_logs_days 其中一个设置为非0值则非0值的参数作为 binlog 日志失效期

若在启动时 binlog_expire_logs_seconds 和 expire_logs_days 参数都设置为非0值则使用 binlog_expire_logs_seconds 值,expire_logs_days 值则失效并发出告警信息

若要关闭自动清除binlog文件的功能则需要显示指定 binlog_expire_logs_seconds=0 并且不设置 expire_logs_days 的值

为了兼容早期版本若显式指定了 expire_logs_days =0 而没有指定 binlog_expire_logs_seconds 的值,此时自动清理 binlog 日志则是禁用 的,并且此时 binlog_expire_logs_seconds 的默认值不适用

该参数支持动态修改,并且支持持久话到配置文件:

mysql> set global binlog_expire_logs_seconds=60*60*24;
mysql> set persist binlog_expire_logs_seconds=60*60*24;

补充

reset master: 将删除日志索引文件中记录的所有binlog文件,创建一个新的日志文件,起始值从000001开始. 不要轻易使用该命令,这个命令通常仅仅用于第一次用于搭建主从关系的时的主库

reset slave: 清除master.info文件, relay-log.info文件,以及所有的relay log文件,并重新启用一个新的relaylog文件

使用reset slave之前必须使用stop slave 命令将复制进程停止

相关推荐

在 Ubuntu 上安装 Zabbix(以 Zabbix 6.4 LTS 版本为例)

Zabbix是一个流行的开源监控解决方案,能够监控各种网络参数和服务器健康状态。一、环境准备系统要求Ubuntu20.04/22.04LTS至少2GBRAM(生产环境建议4GB+)至少1...

如何在 Ubuntu 24.04 服务器上安装 Apache Solr

ApacheSolr是一个免费、开源的搜索平台,广泛应用于实时索引。其强大的可扩展性和容错能力使其在高流量互联网场景下表现优异。Solr基于Java开发,提供了分布式索引、复制、负载均衡及自...

如何在 Ubuntu 24.04 LTS 或 22.04/20.04 上安装 Apache Maven

Maven是由Apache托管的开源工具,用于管理Java项目。它包含一个项目对象模型(POM):一个配置文件(XML),其中包含项目的基本信息,包括配置、项目依赖项等。Maven可以处理...

Cursor的终极对手——Trae Pro最新系统提示词

前段时间,字节的AI编程神器Trae国际版,终于甩出了Pro订阅计划!很多对它又爱又恨的小伙伴,直呼:终于等到你。爱它,是因为Trae长期免费+体验真香;恨它?还不是那该死的排队等待,...

AI系统提示词:V0(ai代码提示)

以下是对V0系统提示词(SystemPrompt)的分部分讲解与解读,帮助你理解其核心内容和设计意图。V0系统提示词##CoreIdentity-Youarev0,Vercel&...

8岁男童失踪第13天,搜救人员发现可疑水库,更恶心的事情发生了

Lookingatyourrequest,Ineedtorewritethearticleaboutthe8-year-oldmissingboywhilemaking...

docker常用指令及安装rabbitMQ(docker安装zabbix)

一、docker常用指令启动docker:systemctlstartdocker停止docker:systemctlstopdocker重启docker:systemctlrestart...

三步教你用Elasticsearch+PyMuPDF实现PDF大文件秒搜!

面对100页以上的大型PDF文件时,阅读和搜索往往效率低下。传统关系型数据库在处理此类数据时容易遇到性能瓶颈,而Elasticsearch凭借其强大的全文检索和分布式架构,成为理想解决方案。通过...

ElasticSearch中文分词插件(IK)安装

坚持原创,共同进步!请关注我,后续分享更精彩!!!前言ElasticSearch默认的分词插件对中文支持很不友好。一段话按规则会以每个中文字符来拆解,再分别建立倒排索引。如"中华人民共和国国歌...

SpringBoot使用ElasticSearch做文档对象的持久化存储?

ElasticSearch是一个基于Lucene的开源搜索引擎,广泛应用于日志分析、全文搜索、复杂查询等领域,在有些场景中使用ElasticSearch进行文档对象的持久化存储是一个很不错的选择...

Elasticsearch数据迁移方案(elasticsearch copyto)

前言最近小编要去给客户部署一套系统涉及到了Mysql和ES数据的迁移,下面就给大家分享一下ES数据迁移的几套方案,根据具体的使用场景来选择不同的迁移方案能使你事倍功半,话多说下面就一一介绍。Elast...

Rancher部署单体ElasticSearch(rancher2.5部署)

Rancher是k8s图形管理界面,之前曾有写文章介绍如何安装。ElasticSearch是热门搜索引擎,很多地方都有用到,常规安装部署略显繁琐,本文介绍在k8s下用rancher简易部署ES。1.在...

Elasticsearch在Java项目的搜索实践:从零开始构建高效搜索系统

Elasticsearch在Java项目中的搜索实践:从零开始构建高效搜索系统在现代的Java项目中,数据量激增,传统的数据库查询方式已经无法满足快速检索的需求。这时,Elasticsearch(E...

小白入门-Kibana安装(kibana安装配置)

一Kibana基础1.1介绍Kibana是一款免费且开放的前端应用程序,其基础是ElasticStack,可以为Elasticsearch中索引的数据提供搜索和数据可视化功能。Kiban...

Docker上使用Elasticsearch,Logstash,Kibana

在对一个项目做性能测试时我需要处理我们web服务器的访问日志来分析当前用户的访问情况。因此,我想这是试用ELK的一个好机会。ELK栈首先要注意的是使用它是非常简单的。从决定使用ELK到在本机上搭一个...

取消回复欢迎 发表评论: