zengyuxing007 / tcpcollect

Watch sql base libpcap

#mysqlpcap

watch sql base libpcap

我们经常的在 MySQL 里不停的执行show processlist想了解最近执行的 sql 语句状况，可常常拿不到我们想要的结果。

mysqlpcap 是一个基于 pcap 用于观察 sql 语句执行情况的工具。它能够了解到经过某个 MySQL 实例的 sql 语句以及 sql 影响的行数，还有 sql 的响应时间。

新增功能，目前已经支持 prepare statement。

##compile

make

##use

sudo ./mysqlpcap

只抓取某个用户的sql，逗号分割

sudo ./mysqlpcap -u root,user1

过滤某些用户的sql，逗号分割

sudo ./mysqlpcap -n user1,user2

针对某个ip的sql的抓取

sudo ./mysqlpcap -l 1.1.1.1

针对某个port的sql抓取

sudo ./mysqlpcap -p 3001

##output format

timestamp           sql                                     latency(us)     rows            
---------           ---                                     -----------     ---             
9:22:33:815114      select 1                                291             1               
9:22:39:167115      select * from d limit 20000             229             -2              
9:22:39:167115      select * from d limit 20000             571             -2              
9:22:39:167115      select * from d limit 20000             707             -2              
9:22:39:167115      select * from d limit 20000             3508            -2              
9:22:39:167115      select * from d limit 20000             3628            -2              
9:22:39:167115      select * from d limit 20000             3675            20000           
9:22:45:227112      desc d                                  47891           3               
9:22:54:678621      insert into d values(1,2,3), (3,4,5)    33719           2    

1. timestamp MySQL服务器接收到 sql 的时间。

2. sql

3. latency(us) 响应时间，MySQL服务器返回结果集的时间与timestamp的差值。由于结果集可能分多个tcp packet发送过来。 所以存在多条记录。

4. 对于select语句则是结果集的行数，对于其它则是影响的行数。结果集超过一个tcp packet的大小，则行数显示在最后一个tcp packet对应的记录上。 上面的例子，select * from d limit 20000 返回的结果集由 6 个tcp packet组成，所以有 6 行记录，前5行的 rows 为 -2 ，最后一行的 20000 才是真是的返回行数。 latency显示的每个tcp packet 的响应时间。

5. 第五列是用户

6. 如果是 prepare statement 则值会显示在 sql 的后面，用方括号包围住。

prepare statement 的支持

sql 在前面，方括号里为具体的值。

TODO

• keyword filter
• output threading
• pf_ring
• multi stmt
• support shrink hash entry(free session->sql && session->size)

##changelog

• user
• latency
• rows
• sql
• log
• prepare
• multi session big resultset
• support bond netcard, fix libpcap bug
• support show src ip (-z)
• support drop packet and chao order packet
• ignore remote MySQL port connect me random port, data, for example: replication,
• ignore me connect rmeote MySQL data
• support specify detail ip (-l)
• support bond card repeat packet(same seq)
• support user level sql capture, now can use parameter -u -n
• support use signal SIGUSR1 inquire drop percentage
• support reload machine address
• support delete idle connection

##version 0.01