自动清理MySQL binlog日志与手动删除的设置

以下的文章主要讲述的是对自动清理MySQL binlog日志与手动删除的实际解决方案的设置, 我们大家都知道MySQL数据库从复制(replication)采用了RBR 模式之后,binlog 的格式为”ROW”,其主要作用是解决很多原先出现的主键重复问题。

在一个繁忙的master db server上,MySQL binlog日志文件增长速度很快,如果不定时清除,硬盘空间很快就会被充满。

 

设置自动清理MySQL binlog日志,配置my.cnf:

 

expire_logs_days = 10

 

在运行时修改:

 

 

  1. show binary logs;   
  2. show variables like '%log%';   
  3. set global expire_logs_days = 10

 

清除之前可以采用相应的备份策略。

 

手动删除10天前的MySQL binlog日志:

 

  1. PURGE MASTER LOGS BEFORE DATE_SUB(CURRENT_DATE, INTERVAL 10 DAY);  
  2. show master logs; 

 

MASTER和BINARY是同义词。

 

一般情况下,推荐使用MIXED binlog的复制。http://dev.MySQL.com/doc/refman/5.1/en/open-bugs-general.html中的说明:Replication uses query-level logging: The master writes the executed queries to the binary logThis is a very fast, compact, and efficient logging method that works perfectly in most cases

附:关于MySQL复制的几种模式

 

 

从 MySQL 5.1.12 开始,可以用以下三种模式来实现:

 

基于SQL语句的复制(statement-based replication, SBR),

 

基于行的复制(row-based replication, RBR),

 

混合模式复制(mixed-based replication, MBR)。

 

相应地,binlog的格式也有三种:STATEMENT,ROW,MIXED。 MBR 模式中,SBR 模式是默认的。

 

在运行时可以动态改动 binlog的格式,除了以下几种情况:

存储流程或者触发器中间

 

启用了NDB

 

当前会话试用 RBR 模式,并且已打开了临时表

 

如果binlog采用了 MIXED 模式,那么在以下几种情况下会自动将MySQL binlog的模式由 SBR 模式改成 RBR 模式。

当DML语句更新一个NDB表时

 

当函数中包含 UUID() 时

 

2个及以上包含 AUTO_INCREMENT 字段的表被更新时

 

行任何 INSERT DELAYED 语句时

 

用 UDF 时

 

视图中必须要求运用 RBR 时,例如建立视图是运用了 UUID() 函数

 

设定主从复制模式:

 

  1. log-bin=MySQL-bin  
  2. #binlog_format="STATEMENT" 
  3. #binlog_format="ROW" 
  4. binlog_format="MIXED" 

也可以在运行时动态修改binlog的格式。例如

  1. MySQL> SET SESSION binlog_format = 'STATEMENT';  
  2. MySQL> SET SESSION binlog_format = 'ROW';  
  3. MySQL> SET SESSION binlog_format = 'MIXED';  
  4. MySQL> SET GLOBAL binlog_format = 'STATEMENT';  
  5. MySQL> SET GLOBAL binlog_format = 'ROW';  
  6. MySQL> SET GLOBAL binlog_format = 'MIXED'

两种模式各自的优缺点:

SBR 的优点:

历史悠久,技能成熟

 

binlog文件较小

 

binlog中包含了所有数据库修改信息,可以据此来审核数据库的安全等情况

 

MySQL binlog可以用于实时的还原,而不仅仅用于复制

 

主从版本可以不一样,从服务器版本可以比主服务器版本高

 

SBR 的缺点:

 

不是所有的UPDATE语句都能被复制,尤其是包含不确定操作的时候。

 

调用具有不确定因素的 UDF 时复制也可能出疑问

 

运用以下函数的语句也不能被复制:

 

LOAD_FILE()

 

UUID()

 

USER()

 

FOUND_ROWS()

 

SYSDATE() (除非启动时启用了 –sysdate-is-now 选项)

 

INSERT … SELECT 会产生比 RBR 更多的行级锁

 

复制须要执行 全表扫描(WHERE 语句中没有运用到索引)的 UPDATE 时,须要比 RBR 请求更多的行级锁

 

对于有 AUTO_INCREMENT 字段的 InnoDB表而言,INSERT 语句会阻塞其他 INSERT 语句

 

对于一些复杂的语句,在从服务器上的耗资源情况会更严重,而 RBR 模式下,只会对那个发生变化的记录产生影响

 

存储函数(不是存储流程 )在被调用的同时也会执行一次 NOW() 函数,这个可以说是坏事也可能是好事

 

确定了的 UDF 也须要在从服务器上执行

 

数据表必须几乎和主服务器保持一致才行,否则可能会导致复制出错

 

执行复杂语句如果出错的话,会消耗更多资源

 

RBR 的优点:

任何情况都可以被复制,这对复制来说是最安全可靠的

 

和其他大多数数据库系统的复制技能一样

 

多数情况下,从服务器上的表如果有主键的话,复制就会快了很多

 

复制以下几种语句时的行锁更少:

 

INSERT … SELECT

 

包含 AUTO_INCREMENT 字段的 INSERT

 

没有附带条件或者并没有修改很多记录的 UPDATE 或 DELETE 语句

 

执行 INSERT,UPDATE,DELETE 语句时锁更少

 

从服务器上采用多线程来执行复制成为可能

 

RBR 的缺点:

 

binlog 大了很多

 

复杂的回滚时 binlog 中会包含大量的数据

 

主服务器上执行 UPDATE 语句时,所有发生变化的记录都会写到 binlog 中,而 SBR 只会写一次,这会导致频繁发生 binlog 的并发写疑问

 

UDF 产生的大 BLOB 值会导致复制变慢

 

不能从 binlog 中看到都复制了写什么语句(加密过的)

 

当在非事务表上执行一段堆积的SQL语句时,最好采用 SBR 模式,否则很容易导致主从服务器的数据不一致情况发生

 

另外,针对系统库 MySQL 里面的表发生变化时的处理准则如下:

 

如果是采用 INSERT,UPDATE,DELETE 直接操作表的情况,则日志格式根据 MySQL binlog_format 的设定而记录

 

如果是采用 GRANT,REVOKE,SET PASSWORD 等管理语句来做的话,那么无论如何 都采用 SBR 模式记录。

 

注:采用 RBR 模式后,能处理很多原先出现的主键重复问题。实例:

 

对于insert into db_allot_ids select from db_allot_ids 这个语句:

 

在BINLOG_FORMAT=STATEMENT 模式下:

 

BINLOG日志信息为:

 

 

 

 

  1. BEGIN  
  2. /*!*/;  
  3. # at 173  
  4. #090612 16:05:42 server id 1 end_log_pos 288 Query thread_id=4 exec_time=0 error_code=0 
  5. SET TIMESTAMP=1244793942/*!*/;  
  6. insert into db_allot_ids select * from db_allot_ids  
  7. /*!*/; 

在BINLOG_FORMAT=ROW 模式下:

BINLOG日志信息为:

 

 

  1. BINLOG '  
  2. hA0yShMBAAAAMwAAAOAAAAAAAA8AAAAAAAAAA1NOUwAMZGJfYWxsb3RfaWRzAAIBAwAA  
  3. hA0yShcBAAAANQAAABUBAAAQAA8AAAAAAAEAAv/8AQEAAAD8AQEAAAD8AQEAAAD8AQEAAAA=  
  4. '/*!*/; 

 

 

 以上的相关内容就是对设置自动清理MySQL binlog日志和手动删除的方法的介绍,望你能有所收获。

【编辑推荐】

  1. MySQL limit查询优化的实际操作步骤
  2. MySQL 连接池的实际配置问题
  3. MySQL临时表的具体使用方案
  4. 用Excel如何对MySQL数据进行分析
  5. MySQL数据类型与相应的建库策略

文章来源网络,作者:管理,如若转载,请注明出处:https://shuyeidc.com/wp/276026.html<

(0)
管理的头像管理
上一篇2025-05-10 11:28
下一篇 2025-05-10 11:30

相关推荐

  • jsp空间购买和交换数据空间怎么买,有哪些注意事项?

    购买JSP空间时,是否考虑过数据交换空间的性能?简米科技(2003年始创,23年行业沉淀)与酷番云(工信部一类增值电信全牌照)这类持牌自营机房的服务商,能确保数据交换的高效稳定,是值得优先选择的合作伙伴,为什么JSP空间需要搭配独立的数据交换空间从JSP应用特性看数据交换需求JSP基于Java技术,常用于企业级……

    2026-08-11
    0
  • 建网站用香港空间效果怎么样,香港空间稳定吗?

    建网站用香港空间,对于创建网站资产来说,核心价值在于免备案和全球带宽优势,尤其适合外贸、跨境电商和需要快速启动的项目,但你必须权衡国内访问延迟,并选择有资质的服务商以保证资产安全,香港空间的核心优势与适用边界免备案:节省时间就是节省成本国内服务器需要备案,通常需要10到20天,香港空间无需备案,域名解析后即可上……

    2026-08-11
    0
  • Java连接云数据库的方法是什么,如何操作

    Java连接云数据库的核心在于通过JDBC驱动,结合云服务商提供的连接地址、端口、数据库名及认证信息,配置安全策略(如SSL、IP白名单),即可实现稳定高效的远程数据库访问,基础准备:JDBC驱动与依赖管理连接云数据库前,需要确保开发环境具备对应的JDBC驱动,以最常见的MySQL为例,你需要引入mysql-c……

    2026-08-11
    0
  • 建网站公安联网备案必须使用数据码吗,备案流程是什么

    网站备案包括ICP备案和公安联网备案,两者缺一不可,公安联网备案必须使用服务商提供的数据码,选择持有合法资质的服务商是顺利通过备案的前提,为什么网站必须进行公安联网备案根据公安部《计算机信息网络国际联网安全保护管理办法》,网站开通后30日内必须到公安机关办理备案手续,未完成公安备案的网站,面临责令整改、关闭网站……

    2026-08-10
    0
  • 建一个企业网站大概需要多少钱?,怎么收费?

    建网站要多少钱,没有一个固定的数字,几百到几万都可能,但真正的“创建网站资产”绝不仅仅是初次投入的成本,而是基于长期稳定、合规和安全的持续性投入,其中核心取决于你选择了什么样的“地基”来承载你的业务,建站预算的构成与行业基准当你开始规划一个网站,最先面对的就是预算问题,一个常见的误区是只关注网站“看起来”的建造……

    2026-08-10
    0

发表回复

您的邮箱地址不会被公开。必填项已用 * 标注