当前位置: 首页 > news >正文

mysql binlog 日志分析查找

文章目录

  • 前言
  • 一、分析 binlog 内容
  • 二、编写脚本
  • 结果
  • 总结


前言

高效快捷分析 mysql binlog 日志文件。
mysql binlog 文件很大
怎么快速通过关键字查找内容


一、分析 binlog 内容

通过 mysqlbinlog 命令可以看到 binlog 解析之后的大概样子
在这里插入图片描述

二、编写脚本

编写脚本 search_txt.sh,作用是搜索 binlog 内容
使用 awk

#!/bin/bash# 设置变量if [ "$1" = "" ]; then echo "param can not null "exit 1
fi	
BINLOG_FILE="/pddyjc/mysql/logbin/log_bin.$1"  # 替换为你的 binlog 文件路径
SEARCH_STRING="pddyjc_pb_year_sxbph_report_info"          # 替换为你要搜索的字符串
OUTPUT_FILE="search_pddyjc_pb_year_sxbph_report_info_$1.txt"  # 替换为你想要保存输出结果的文件路径if [ -e "$BINLOG_FILE" ]; thenecho "$BINLOG_FILE"	
else echo "$BINLOG_FILE file not exists"exit 1  
fi	
# 使用 awk 筛选 binlog 中包含特定字符串的完整事件
/pddyjc/mysql/bin/mysqlbinlog "$BINLOG_FILE" | awk -v search_string="$SEARCH_STRING" 'BEGIN { capturing = 0; prev_date_str = "";  # 附加, 记录上一次时间行}# /[#]/ { next; }  # 跳过注释行/$/ {  # 空行表示新事件的开始if (capturing) {capturing = 0;  # 结束当前事件的捕获}}{# 自定义判断条件	  if ($0 ~ search_string && $0 !~ "insert") {capturing = 1;  # 开始捕获事件if (prev_date_str != "") {print prev_date_str;      # 这里输出有时间那行,以方便判断执行时间}}if (capturing) {print;  # 如果正在捕获事件,则输出当前行}# 更新 prev_date_strif ($0 ~ "end_log_pos") {  prev_date_str = $0     # 把时间行缓存}        }
'  > "$OUTPUT_FILE"# 输出结果提示
echo "筛选完成,结果已保存到 $OUTPUT_FILE"

执行方式, 1234 是binlog 文件名序号(根据实际情况替换)
sh search_txt.sh 1234

结果

查看输出文件内容,得到的结果内容如下
在这里插入图片描述


总结

熟悉掌握 awk,快速通过指定关键字、表名等查找二进制日志内容。


—————— 但行好事莫问前程,你若盛开蝴蝶自来

http://www.lryc.cn/news/519501.html

相关文章:

  • ubuntu 配置OpenOCD与RT-RT-thread环境的记录
  • 双系统解决开机提示security Policy Violation的方法
  • 附加共享数据库( ATTACH DATABASE)的使用场景
  • matlab的绘图的标题中(title)添加标量以及格式化输出
  • 2、第一个GO 程序
  • 【Linux-多线程】-线程安全单例模式+可重入vs线程安全+死锁等
  • 00000007_C语言设计模式
  • 探索数据存储的奥秘:深入理解B树与B+树
  • Web渗透测试之XSS跨站脚本之JS输出 以及 什么是闭合标签 一篇文章给你说明白
  • EasyExcel的应用
  • VS Code的设置功能以及多层级的设置方式与解密
  • UI自动化测试框架playwright--初级入门
  • SQL多表联查、自定义函数(字符串分割split)、xml格式输出
  • Fast API使用
  • LLM - Llama 3 的 Pre/Post Training 阶段 Loss 以及 logits 和 logps 概念
  • MySQL 中删除重复数据 SQL 写法
  • docker minio镜像arm64架构
  • VUE3 监听器(watch)
  • CAPL如何设置TCP/IP传输层动态端口范围
  • 随记:有关Springboot项目中的时间格式实现的几种方式
  • IntelliJ IDEA 优化设置
  • jsp企业财务管理系统设计与实现
  • EscherNet运行笔记
  • Java中的反射机制及其应用场景
  • 信息科技伦理与道德3:智能决策
  • 青少年编程与数学 02-006 前端开发框架VUE 16课题、组件基础
  • 25/1/11 算法笔记 Yolov8物体识别
  • 水水水水水水
  • XS5037C一款应用于专业安防摄像机的图像信号处理芯片,支持MIPI和 DVP 接口,内置高性能ISP处理器,支持3D降噪和数字宽动态
  • 机器学习无处不在,AI顺势而为,创新未来