实战:mysql检查物理磁盘中的二进制日志文件是否有丢失

场景:有时候因为磁盘损坏或人为原因错误删除了磁盘中的二进制文件,导致mysql中的show binary logs记录和实际的物理磁盘中的二进制文件不匹配

#binlogdiff.sh

#!/bin/sh

#[email protected]

#作用:mysql中show binary logs记录的二进制日志文件和实际的物理文件比较,检查

#磁盘中对应的二进制日志文件是否有丢失

source /usr/local/mysql/scripts/mysql_env.ini

binlog_init=tmpinit.`date +%Y%m%d%H%M%S`.txt

binlog_midd=tmpmidd.`date +%Y%m%d%H%M%S`.txt #mysql中show binary logs记录的日志文件

binlog_res=tmpres.`date +%Y%m%d%H%M%S`.txt  #binlog物理磁盘路径中的日志文件

my_cnf=/usr/local/mysql/my.cnf #mysql的配置文件

log_bin_path=`grep -i "^log-bin" $my_cnf |cut -d = -f 2`

log_bin=`dirname $log_bin_path`

#lookup binlog records in mysql

mysql -h${MYSQL_HOST} -u${MYSQL_USER} -p${MYSQL_PASS} -e"show binary logs;" >${binlog_init}

cat ${binlog_init}  | cut -f 1 |cut -d . -f 2 |grep -i ‘^[0-9]‘ |sort -n >${binlog_midd}

#lookup binlog records in disk

ls -t ${log_bin}| grep ‘^mysql-bin‘ |cut -d . -f 2 |grep -i ‘^[0-9]‘ |sort -n >${binlog_res}

diff -c ${binlog_midd} $binlog_res

#clean temp file

rm -rf ${binlog_init}

rm -rf ${binlog_midd}

rm -rf ${binlog_res}

实战:mysql检查物理磁盘中的二进制日志文件是否有丢失,布布扣,bubuko.com

时间: 06-20

实战:mysql检查物理磁盘中的二进制日志文件是否有丢失的相关文章

云服务器 ECS Linux 系统中常见的日志文件介绍

云服务器 ECS Linux 系统中,日志文件是非常重要的文件,它们记录了很多系统中重要的事.Linux 系统中常见日志文件概述如下: /var/log/cron可以在 cron 文件中检查 crontab 任务调度是否实际执行,执行过程是否发生错误,以及 /etc/crontab 文件是否有语法错误或编写错误. /var/log/dmesg 可以在 dmesg 文件中检查系统在开机时候内核检测过程所产生的各项信息,包括系统的设备信息,以及在启动和操作过程中系统记录的任何错误和问题的信息.通过

辛星浅析linux中常用的日志文件

日志对于系统的安全来说非常重要,它记录了系统每天发生的各种各样的事情,用户可以通过它来检查错误发生的原因,或者寻找受攻击时攻击者留下的痕迹.日志的主要功能就是审计和检测.它还可以实时地检测系统的状态.检测和追踪侵入者. 通常日志根据类型可以分为连接时间日志.进程统计日志和错误日志.连接时间日志由多个程序执行,它把记录写到/var/log/wtmp和/var/run/utmp当中,而login程序负责更新wtmp和utmp文件,使得系统管理员能够够跟踪谁在何时登录了系统.对于进程统计日志由内核执行

mysql二进制日志

mysql二进制日志称为binlog,记录了数据库修改数据的操作,可以用作数据恢复. binlog有三种记录方式 1.statement 记录修改数据的原始sql,IO量较小.sql中存在使用user()等依赖运行环境的函数时,可能导致数据恢复不正确. 2.row 记录每行数据的修改动作,IO较大,准确性最高,生产环境推荐使用这种模式. 3.mixed 上述两种模式混合使用. binlog参数设置 1.log_bin 只读参数,只能在my.ini(my.cnf)中设置,log_bin的值为二进制

MySQL之日志文件

MySQL主要有以下几种日志类型: 错误日志--MySQL服务启动和关闭过程中的信息以及其它错误和警告信息.默认在数据目录下. 一般查询日志--用于记录select查询语句的日志.general_log.general_log_file 默认关闭,建议关闭. 慢查询日志--log-slow-queries记录所有超过long_query_time时间的SQL语句, 二进制日志--记录任何引起数据变化的操作,用于备份和还原.默认存放在数据目录中,在刷新和服务重启时会滚动二进制日志. 中继日志--从

MySQl Study学习之--MySQl二进制日志管理

MySQl Study学习之--MySQl二进制日志管理 MySQL二进制日志(Binary Log):   a.它包含的内容及作用如下:    包含了所有更新了数据或者已经潜在更新了数据(比如没有匹配任何行的一个DELETE)    包含关于每个更新数据库(DML)的语句的执行时间信息    不包含没有修改任何数据的语句,如果需要启用该选项,需要开启通用日志功能    主要目的是尽可能的将数据库恢复到数据库故障点,因为二进制日志包含备份后进行的所有更新    用于在主复制服务器上记录所有将发送

MySQL二进制日志(binary log)总结

本文出处:http://www.cnblogs.com/wy123/p/7182356.html (保留出处并非什么原创作品权利,本人拙作还远远达不到,仅仅是为了链接到原文,因为后续对可能存在的一些错误进行修正或补充,无他) 今天无意中发现了一个云栖社区举行的MySQL“第一季:挑战玄惭之 慢SQL性能优化赛”,在测试服务器上执行其测试脚本写入数据的时候报错提示如下,Multi-statement transaction required more than 'max_binlog_cache_

Mysql的二进制日志---binlog

二进制日志(BINLOG)记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但是不包括数据查询语句.语句以"事件"的形式保存,它描述了数据的更改过程.此日志对于灾难时的数据恢复起着极其重要的作用. 1.日志的位置和格式 当用--log-bin[=file_name]选项启动时,mysqld将包含所有更新数据的SQL命令写入日志文件.如果没有给出file_name值,默认名为主机名后面跟"-bin".如果给出了文件名,但没有包含路径,则文件默认被写入

MySQL二进制日志操作

二进制日志 概念 记录对数据发生或潜在发生更改的SQL语句,并且是以二进制格式保存的日志 使用用途 查看数据库变更历史 数据库增量备份 数据库灾难恢复 MySQL复制(主从.主主复制) 二进制日志性能影响 日志即影响MySQL性能又占用大量磁盘空间.因此,往往需要做采样分析时才会打开 即使做采样分析,也最好仅在一台测试机上开启 二进制日志由于用途广泛,大多数情况下会开启.需要制定合理的备份计划和管理策略 开启二进制日志 方法一:不重启修改二进制日志配置 SET @@global.log_bin=

MySQL二进制日志优化

具体参数如下: 1.server-id=ID 服务的唯一ID 2.log_bin=/mydata/binlog/mysql-bin 二进制日志的位置和命名方式 3.binlog_format={ROW|STATEMENT|MIXD} ROW格式:记录数据更新的每一行数据的变更.当遇到alter,update整个字段的是值这样的语句,会使得二进制日志的文件庞大无比.影响了系统的IO性能.但是会保证数据的一致性. STATEMENT格式:记录的只是导致数据变更的更新语句.但是有可能导致数据不一致.