前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >[pymysqlbinlog] 使用pymysqlbinlog来分析BINLOG

[pymysqlbinlog] 使用pymysqlbinlog来分析BINLOG

原创
作者头像
大大刺猬
发布2024-05-05 17:14:32
1280
发布2024-05-05 17:14:32
举报
文章被收录于专栏:大大刺猬大大刺猬

导读

日常运维中, 难免遇到要分析BINLOG的时候, 通常我们只看下哪个时间点比较集中, 然后使用mysqlbinlog去解析. 但这还是比较粗糙. 不是那么的方便, 之前也写过解析binlog的工具的. 但都是零零星星的. 这次来一个汇总的.

分析BINLOG

首先下载 pymysqlbinlog

代码语言:shell
复制
wget https://github.com/ddcw/pymysqlbinlog/archive/refs/heads/main.zip
unzip main.zip
cd pymysqlbinlog-main

然后使用脚本分析某N个BINGLOG

代码语言:shell
复制
python3 main.py /data/mysql_3314/mysqllog/binlog/m3314.00004* --analyze

我们就可以得到 TOP20的大事务, 还有各个表的执行情况. 直接看可能不太好看, 我们可以放到excel里面画图

于是我们发现db1.sbtest1表占比最大, 然后就可以进一步分析了.

还支持输出md格式的文件.

代码语言:shell
复制
python3 main.py /data/mysql_3314/mysqllog/binlog/m3314.00004* --analyze -o /tmp/t20240505.md

跟昨天的差不多, 只是美化了一下.

其它

由于目标环境可能很复杂, 可能存在多个server_id, 多个gtid之类的情况, 还想排除某些库表, 然后做统计, 这时候这个工具的数据过滤功能就体现出来了. 我这里就不演示了. 感兴趣的自己去试试. 其它功能也自己去试.

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 导读
  • 分析BINLOG
  • 其它
相关产品与服务
云数据库 MySQL
腾讯云数据库 MySQL(TencentDB for MySQL)为用户提供安全可靠,性能卓越、易于维护的企业级云数据库服务。其具备6大企业级特性,包括企业级定制内核、企业级高可用、企业级高可靠、企业级安全、企业级扩展以及企业级智能运维。通过使用腾讯云数据库 MySQL,可实现分钟级别的数据库部署、弹性扩展以及全自动化的运维管理,不仅经济实惠,而且稳定可靠,易于运维。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档


http://www.vxiaotou.com