不灭的焱

革命尚未成功,同志仍须努力下载JDK17

作者:Albert.Wen  添加时间:2022-04-22 16:15:19  修改时间:2024-04-19 11:27:27  分类:MySQL/Redis  编辑

简介

MySQL Sniffer 是一个基于 MySQL 协议的抓包工具,实时抓取 MySQLServer 端的请求,并格式化输出。输出内容包访问括时间、访问用户、来源 IP、访问 Database、命令耗时、返回数据行数、执行语句等。有批量抓取多个端口,后台运行,日志分割等多种使用方式,操作便捷,输出友好。同时也适用抓取 Atlas 端的请求,Atlas 是奇虎开源的一款基于MySQL协议的数据中间层项目,项目地址:https://github.com/Qihoo360/Atlas同类型工具还有vc-mysql-sniffer,以及 tshark 的 -e mysql.query 参数来解析 MySQL 协议。

使用

下载:github 地址:https://github.com/Qihoo360/mysql-sniffer

安装:

1)安装依赖包:

CentOS

yum install cmake
yum install  libpcap-devel
yum install  glib2-devel
yum install  libnet-devel

Ubuntu:

apt-get install cmake
apt-get install libpcap-dev
apt-get install glib2.0-dev
apt-get install libnet-dev
apt-get install build-essential

2)下载安装

git clone https://github.com/Qihoo360/mysql-sniffer.git
cd mysql-sniffer
mkdir proj
cd proj
cmake ../
make

在bin目录下面生成了:

mysql-sniffer

若在ubuntu安装的时候报错:

/usr/include/glib-2.0/glib/gtypes.h:32:24: fatal error: glibconfig.h: No such file or directory

则需要:

cp /usr/lib/x86_64-linux-gnu/glib-2.0/include/glibconfig.h /usr/include/glib-2.0/

如果在make的时候报错:

/bin/ld: /root/mysql-sniffer/lib/libgthread-2.0.a(gthread-impl.o): undefined reference to symbol 'pthread_setspecific@@GLIBC_2.2.5'
/usr/lib64/libpthread.so.0: error adding symbols: DSO missing from command line
collect2: error: ld returned 1 exit status

原因是pthread 库不是 Linux 系统默认的库,连接时需要使用静态库 libpthread.a,所以在使用pthread_create()创建线程,以及调用 pthread_atfork()函数建立fork处理程序时,需要链接该库。所以在编译中要加 -lpthread参数。

通过查找rdynamic关键字找到文件proj/bin/CMakeFiles/mysql-sniffer.dir/link.txt,并在最后添加了-lpthread,重新make后成功。

/bin/c++  -DENABLE_TCPREASM -O3 -Wall  -DENABLE_TCPREASM -O2  -rdynamic CMakeFiles/mysql-sniffer.dir/main.c.o CMakeFiles/mysql-sniffer.dir/mysql-dissector.c.o CMakeFiles/mysql-sniffer.dir/util.c.o CMa    keFiles/mysql-sniffer.dir/session.cpp.o CMakeFiles/mysql-sniffer.dir/sniff-config.cpp.o CMakeFiles/mysql-sniffer.dir/sniff-log.cpp.o  -o mysql-sniffer  -L/root/mysql-sniffer/lib -Wl,-rpath,/root/mysql    -sniffer/lib -Wl,-Bstatic -lnidstcpreasm -lnet -lpcap -lglib-2.0 -lgthread-2.0 -Wl,-Bdynamic -lrt -Wl,-Bstatic -lnet -lpcap -lglib-2.0 -lgthread-2.0 -Wl,-Bdynamic -lrt -lpthread

参数说明:

root@db-test2:~# mysql-sniffer -h
Usage mysql-sniffer [-d] -i eth0 -p 3306,3307,3308 -l /var/log/mysql-sniffer/ -e stderr
         [-d] -i eth0 -r 3000-4000
         -d daemon mode. #
         -s how often to split the log file(minute, eg. 1440). if less than 0, split log everyday
         -i interface. Default to eth0 #网卡名
         -p port, default to 3306. Multiple ports should be splited by ','. eg. 3306,3307
            this option has no effect when -f is set. #端口,多个端口,分割,不能和-f一起使用
         -r port range, Don't use -r and -p at the same time  #端口范围,不能和-p一起使用
         -l query log DIRECTORY. Make sure that the directory is accessible. Default to stdout. #输出打印到文件
         -e error log FILENAME or 'stderr'. if set to /dev/null, runtime error will not be recorded
         -f filename. use pcap file instead capturing the network interface
         -w white list. dont capture the port. Multiple ports should be splited by ','.#排除的端口
         -t truncation length. truncate long query if it's longer than specified length. Less than 0 means no truncation #截取制定长度的SQL
         -n keeping tcp stream count, if not set, default is 65536. if active tcp count is larger than the specified count, mysql-sniffer will remove the oldest one #指定数据包个数

示例

输出格式:时间,访问用户,来源 IP,访问 Database,命令耗时,返回数据行数,执行语句。

1、实时抓取某端口信息并打印到屏幕:-i 指定网卡名,-p 指定抓取的端口

[root@localhost ~]# mysql-sniffer -i enp3s0 -p 3306
2017-03-03 16:27:56     zhoujy     192.168.200.64     NULL            0ms              1     select @@version_comment limit 1
2017-03-03 16:27:56     zhoujy     192.168.200.64     NULL            0ms              1     select USER()
2017-03-03 16:28:00     zhoujy     192.168.200.64     NULL            0ms              1     SELECT DATABASE()
2017-03-03 16:28:00     zhoujy     192.168.200.64     xx              0ms              0     use xx
2017-03-03 16:28:03     zhoujy     192.168.200.64     xx              0ms              8     select * from xx
2017-03-03 16:28:13     zhoujy     192.168.200.64     xx              0ms              3     select user,host from mysql.user
2017-03-03 16:28:24     zhoujy     192.168.200.64     xx              0ms              2     show grants for root@localhost
2017-03-03 16:28:33     zhoujy     192.168.200.64     xx             18ms              1     select now()
2017-03-03 16:28:41     zhoujy     192.168.200.64     xx             32ms              1     select 1+1

2、实时抓取某端口信息并打印到文件:-l 指定日志输出路径,日志文件将以 port.log 命名。

[root@localhost ~]# mysql-sniffer -i enp3s0 -p 3306 -l /tmp/

3、实时抓取多个端口信息并打印到文件:-l 指定日志输出路径,-p指定需要抓取的端口列表逗号分割,日志文件将以各自 port.log 命名。

[root@localhost ~]# mysql-sniffer -i enp3s0 -p 3306,3307,3307 -l /tmp/

4、实时抓取多个连续递增的端口并打印到文件:-l 指定日志输出路径,-r 指定端口范围,日志文件将以各自 port.log 命名。

[root@localhost ~]# mysql-sniffer -i enp3s0 -r 3306-3309 -l /tmp/

5、实时抓取多个连续递增的端口同时过滤某几个端口,并打印到文件:-l 指定日志输出路径,-r 指定端口范围, -w 指定过滤端口列表逗号分割,日志文件将以各自 port.log 命名。

[root@localhost ~]# mysql-sniffer -i enp3s0 -r 3306-3311 -w 3307,3309 -l /tmp/  

6、抓取某个端口以 daemon 模式运行(-d),并打印到文件:-l 指定日志输出路径,-p 指定端口, -n 指定数据包个数,日志文件将以各自 port.log 命名。

[root@localhost tmp]# mysql-sniffer -i enp3s0 -p 3306 -l /tmp/ -d

7、抓取某个端口并截取指定长度的 SQL:-p 指定端口, -t 指定SQL长度,将输出 SQL的前n个字符(适用于 SQL 过长的场景)。

[root@localhost ~]# mysql-sniffer -i enp3s0 -p 3306 -t 10
2017-03-03 17:05:49     zhoujy     192.168.200.64     NULL              0ms              1     select @@v...
2017-03-03 17:05:49     zhoujy     192.168.200.64     NULL              0ms              1     select USE...
2017-03-03 17:05:50     zhoujy     192.168.200.64     NULL              0ms              1     select 111...

总结

通过上面的示例,看到mysql-sniffer工具通过指定的端口监控mysql,把所有的命里打印出来。看着和MySQL自己的general_log看似差不多,不过该工具已经按照需要的输出格式更好方便的查看,重要的还可以查看SQL范围的行数,可能在排查故障的时候用得到,先mark一下。

 

 

参考文档

[官网介绍]https://github.com/Qihoo360/mysql-sniffer

MySQL抓包工具:MySQL Sniffer

【推荐】CentOS 7 下MySQL Sniffer安装总结