zoukankan html css js c++ java

004：MySQL数据库体系结构

一、 MySQL数据库体系结构
- 1.MySQL数据库体系结构介绍
  - 1 数据库定义
  - 2 数据库实例
- 2. MySQL体系结构
二、 MySQL主要文件
- 1.慢查询日志
  - 1.1 慢查询日志相关参数：
  - 1.2 慢查询日志测试
- 2. 通用日志(generic_log)与审计

一、 MySQL数据库体系结构

1.MySQL数据库体系结构介绍

1 数据库定义

数据库（数据库文件）是指物理操作系统文件或者其他文件形式类型的集合。
可以是frm、myd、myi、ibd结尾的文件。

2 数据库实例

由数据库后台进程/线程以及一个共享内存区组成，共享内存可以被运行的后台进程/线程所共享
数据库实例才是真正用来操作数据库文件的

注意：
MySQL中，数据库实例和数据库是一一对应的。没有Oracle的一对多(RAC)的机制。

2. MySQL体系结构

1 单进程多线程结构

不会影响MySQL的性能，看程序如何写。（多进程程序，进程间通信开销大于多线程）

2 存储引擎的概念

可以理解成文件系统，例如FAT32, NTFS, EXT4。
一个表是一个分区，引擎就是分区的文件系统 存储引擎的对象就是表
show tables; 可以看到每个表对应的是上面引擎(Engine)
除了特殊情况，我们现在就只考虑INNODB

3 体系结构图

体系结构

体系分层结构说明
- 第一层：主要功能是连接处理、授权认证、安全等。
- 第二层：包含了MySQL服务端的核心功能，包含查询缓存、查询解析、分析、优化等功能。
- 第三层：主要是存储引擎，存储引擎主要负责数据的存储和提取。
各模块组成
- 1 Connectors
  - 指的是不同语言中与SQL的交互
- 2 Management Serveices & Utilities：
  - 系统管理和控制工具
- 3 Connection Pool: 连接池
  - 管理缓冲用户连接，线程处理等需要缓存的需求。
  负责监听对 MySQL Server 的各种请求，接收连接请求，转发所有连接请求到线程管理模块。
  每一个连接上 MySQL Server 的客户端请求都会被分配（或创建）一个连接线程为其单独服务。
  而连接线程的主要工作就是负责 MySQL Server 与客户端的通信，接受客户端的命令请求，传递 Server 端的结果信息等。线程管理模块则负责管理维护这些连接线程。包括线程的创建，线程的 cache 等。
- 4 SQL Interface: SQL接口。
  - 接受用户的SQL命令，并且返回用户需要查询的结果。比如select from就是调用SQL Interface
- 5 Parser: 解析器。
  - SQL命令传递到解析器的时候会被解析器验证和解析。解析器是由Lex和YACC实现的，是一个很长的脚本。
  - 主要功能：
    - a . 将SQL语句进行语义和语法的分析，分解成数据结构，然后按照不同的操作类型进行分类，然后做出针对性的转发到后续步骤，以后SQL语句的传递和处理就是基于这个结构的。
    - b. 如果在分解构成中遇到错误，那么就说明这个sql语句是不合理的
- 6 Optimizer: 查询优化器。
  - SQL语句在查询之前会使用查询优化器对查询进行优化。就是优化客户端请求的 query（sql语句），根据客户端请求的 query 语句，和数据库中的一些统计信息，在一系列算法的基础上进行分析，得出一个最优的策略，告诉后面的程序如何取得这个 query 语句的结果
  - 他使用的是“选取-投影-联接”策略进行查询。
    - 用一个例子就可以理解： select uid,name from user where gender = 1;
    - 这个select 查询先根据where 语句进行选取，而不是先将表全部查询出来以后再进行gender过滤
    - 这个select查询先根据uid和name进行属性投影，而不是将属性全部取出以后再进行过滤
    - 将这两个查询条件联接起来生成最终查询结果
- 7 Cache和Buffer：查询缓存。
  
  他的主要功能是将客户端提交给MySQL 的 Select 类 query 请求的返回结果集 cache 到内存中，与该 query 的一个 hash 值做一个对应。该 Query 所取数据的基表发生任何数据的变化之后， MySQL 会自动使该 query 的Cache 失效。
  在读写比例非常高的应用系统中， Query Cache 对性能的提高是非常显著的。当然它对内存的消耗也是非常大的。
  如果查询缓存有命中的查询结果，查询语句就可以直接去查询缓存中取数据。这个缓存机制是由一系列小缓存组成的。比如表缓存，记录缓存，key缓存，权限缓存等
- 8 存储引擎接口
  - 存储引擎接口模块可以说是 MySQL 数据库中最有特色的一点了。目前各种数据库产品中，基本上只有 MySQL 可以实现其底层数据存储引擎的插件式管理。这个模块实际上只是一个抽象类，但正是因为它成功地将各种数据处理高度抽象化，才成就了今天 MySQL 可插拔存储引擎的特色。
  MySQL区别于其他数据库的最重要的特点就是其插件式的表存储引擎。MySQL插件式的存储引擎架构提供了一系列标准的管理和服务支持，这些标准与存储引擎本身无关，可能是每个数据库系统本身都必需的，如SQL分析器和优化器等，而存储引擎是底层物理结构的实现，每个存储引擎开发者都可以按照自己的意愿来进行开发。
  注意:存储引擎是基于表的，而不是数据库。
sql在各个模块的执行过程

4 逻辑存储结构

MySQL逻辑存储结构
- instance
- database
- schema
- table
- view
- 一个DB对应一个schema
- 一个DB对应一个文件夹
- 一个表对应一组文件

                                                 |--> table1 --- | view1 |
MySQL Instance -----> Database ----> Schema ---> |--> table2 --- | view2 | 
                                                 |--> table3 --- | View3 |
注意： MySQL中一个Database对应一个Schema

5 物理存储结构

MySQL配置文件
- datadir
  - 存储数据二进制文件的路径
表结构的组成
- frm：表结构定义文件
- MYI：索引文件
- MYD：数据文件可以用hexdump -c XXX.frm查看二进制文件(意义不大)
- show create table tablename;
- mysqlfrm (utilities工具包)

shell> mysqlfrm --diagnostic /data/mysql_data/aaa/.a.frm #可将frm文件转成create table的语句

错误日志文件
- log_err 建议配置成统一的名字,方便定位错误
慢查询日志文件
- 将运行超过某一个时间阈值的SQL语句记录到文件
  - MySQL < 5.1 ：以秒为单位
  - MySQL >= 5.1 : 以毫秒为单位
  - MySQL >= 5.5 : 可以将慢查询日志记录到表
  - MySQL >= 5.6 : 以更细的粒度记录慢查询
  - MySQL >= 5.7 : 增加timestamps支持
- slow_query_log_file
  - 建议配置成统一的名字,用于优化查询
通用日志作用
- 可以记录数据库所有相关操作
- 参数:general_log
- 默认文件名：机器名.log
- 同样可以将日志保存到表
- mysql.general_log
- 开启性能下降明显

二、 MySQL主要文件

1.慢查询日志

1.1 慢查询日志相关参数：

slow_query_log
- 是否开启慢查询日志
slow_query_log_file
- 慢查询日志文件名, 在my.cnf我们已经定义为slow.log，默认是 机器名-slow.log
long_query_time
- 制定慢查询阈值, 单位是秒，且当版本 >=5.5.X，支持毫秒。例如0.5即为500ms
- 大于该值，不包括值本身。例如该值为2，则执行时间正好等于2的SQL语句不会记录
log_queries_not_using_indexes
- 将没有使用索引的SQL记录到慢查询日志
  - 如果一开始因为数据少，查表快，耗时的SQL语句没被记录，当数据量大时，该SQL可能会执行很长时间
  - 需要测试阶段就要发现问题，减小上线后出现问题的概率
log_throttle_queries_not_using_indexes
- 限制每分钟内，在慢查询日志中，去记录没有使用索引的SQL语句的次数；版本需要>=5.6.X
  - 因为没有使用索引的SQL可能会短时间重复执行，为了避免日志快速增大，限制每分钟的记录次数
min_examined_row_limit
- 扫描记录少于该值的SQL不记录到慢查询日志
  - 结合去记录没有使用索引的SQL语句的例子，有可能存在某一个表，数据量维持在百行左右，且没有建立索引。这种表即使不建立索引，查询也很快，扫描记录很小，如果确定有这种表，则可以通过此参数设置，将这个SQL不记录到慢查询日志。
log_slow_admin_statements
- 记录超时的管理操作SQL到慢查询日志，比如ALTER/ANALYZE TABLE
log_output
- 慢查询日志的格式，[FILE | TABLE | NONE]，默认是FILE；版本>=5.5
- 如果设置为TABLE，则记录的到mysql.slow_log
log_slow_slave_statements
- 在从服务器上开启慢查询日志
log_timestamps
- 写入时区信息。可根据需求记录UTC时间或者服务器本地系统时间

1.2 慢查询日志测试

查看慢查询记录的相关参数
- 终端A

root@gczheng 00:01:  [(none)]> select version();
+------------+
| version()  |
+------------+
| 5.7.18-log |
+------------+
1 row in set (0.00 sec)

root@gczheng 00:02:  [(none)]> show variables like "slow%";
+---------------------+------------------------+
| Variable_name       | Value                  |
+---------------------+------------------------+
| slow_launch_time    | 2                      |  
| slow_query_log      | ON                     |  --slow_query_log已打开
| slow_query_log_file | /r2/mysqldata/slow.log |  --slow日志位置
+---------------------+------------------------+
3 rows in set (0.01 sec)

root@gczheng 00:03:  [(none)]> show variables like "long_query%";
+-----------------+----------+
| Variable_name   | Value    |
+-----------------+----------+
| long_query_time | 1.000000 |                      -- my.cnf 中该值设置为2秒
+-----------------+----------+
1 row in set (0.01 sec)

root@gczheng 00:03:  [(none)]> show variables like "min_ex%";
+------------------------+-------+
| Variable_name          | Value |
+------------------------+-------+
| min_examined_row_limit | 0     |                  -- my.cnf中未配置，默认值为0
+------------------------+-------+
1 row in set (0.00 sec)

查看慢查询日志
- 终端B

[root@rhel7 mysqldata]# tail -f /r2/mysqldata/slow.log 
bin/mysqld, Version: 5.7.18-log (MySQL Community Server (GPL)). started with:
Tcp port: 3306  Unix socket: /r2/mysqldata/mysql.sock
Time                 Id Command    Argument

进行模拟耗时操作
- 终端A

root@gczheng 00:11:  [(none)]> select sleep(8);
+----------+
| sleep(8) |
+----------+
|        0 |
+----------+
1 row in set (8.00 sec)

最终产生慢查询日志
- 终端B

[root@rhel7 mysqldata]# tail -f /r2/mysqldata/slow.log 
bin/mysqld, Version: 5.7.18-log (MySQL Community Server (GPL)). started with:
/usr/local/mysql/bin/mysqld, Version: 5.7.18-log (MySQL Community Server (GPL)). started with:
Tcp port: 3306  Unix socket: /r2/mysqldata/mysql.sock
Time                 Id Command    Argument
# Time: 2017-11-23T00:11:20.876205+08:00
# User@Host: root[root] @ localhost []  Id:     3
# Query_time: 8.000251  Lock_time: 0.000000 Rows_sent: 1  Rows_examined: 0
                                                          #这个就是min_examined_row_limit
                                                          #设置的意义。如my.cnf中设置该值为100
                                                          #则这条语句因为Rows_examined < 100,而不会被记录
SET timestamp=1511367080;
select sleep(8);

注意
如果在终端A中set global min_examined_row_limit = 100;, 然后执行select sleep(8)，会发现该记录仍然被记录到慢查询日志中。原因是因为set global min_examined_row_limit设置的是全局变量，此次会话不生效。

但是我们上面set global slow_query_log = 1；却是在线生效的，这点有所不通

mysqldumpslow

[root@rhel7 mysqldata]# mysqldumpslow slow.log 

Reading mysql slow query log from slow.log
Count: 2  Time=15.88s (31s)  Lock=0.00s (0s)  Rows=1.0 (2), root[root]@localhost
  select sleep(N)

Count: 1  Time=0.00s (0s)  Lock=0.00s (0s)  Rows=0.0 (0), 0users@0hosts
  bin/mysqld, Version: N.N.N-log (MySQL Community Server (GPL)). started with:

[root@rhel7 mysqldata]# mysqldumpslow --help
Usage: mysqldumpslow [ OPTS... ] [ LOGS... ]

Parse and summarize the MySQL slow query log. Options are

  --verbose    verbose
  --debug      debug
  --help       write this text to standard output
  -v           verbose
  -d           debug
  -s ORDER     what to sort by (al, at, ar, c, l, r, t), 'at' is default
                al: average lock time
                ar: average rows sent
                at: average query time
                 c: count
                 l: lock time
                 r: rows sent
                 t: query time  
  -r           reverse the sort order (largest last instead of first)
  -t NUM       just show the top n queries
  -a           don't abstract all numbers to N and strings to 'S'
  -n NUM       abstract numbers with at least n digits within names
  -g PATTERN   grep: only consider stmts that include this string
  -h HOSTNAME  hostname of db server for *-slow.log filename (can be wildcard),
               default is '*', i.e. match all
  -i NAME      name of server instance (if using mysql.server startup script)
  -l           don't subtract lock time from total time

如果在线上操作，不需要mysqldumpslow去扫整个slow.log，可以去 tail -n 10000 slow.log > last_10000_slow.log(10000这个数字根据实际情况进行调整),然后进行mysqldumpslow last_10000_slow.log

慢查询日志存入表

mysql> show variables like "log_output%";
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_output    | FILE  |
+---------------+-------+
1 row in set (0.00 sec)
mysql> set global log_output="table";     --设置为输出为表
Query OK, 0 rows affected (0.00 sec)
mysql> show variables like "log_output";
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_output    | TABLE |
+---------------+-------+
1 row in set (0.00 sec)


mysql> show variables like "slow_query_log";
+----------------+-------+
| Variable_name  | Value |
+----------------+-------+
| slow_query_log | ON    |
+----------------+-------+
1 row in set (0.00 sec)

mysql> select sleep (11);       --执行语句
+------------+
| sleep (11) |
+------------+
|          0 |
+------------+
1 row in set (11.00 sec)


mysql> select * from mysql.slow_log;
+----------------------------+---------------------------+-----------------+-----------------+-----------+---------------+----+----------------+-----------+-----------+-------------------+-----------+
| start_time                 | user_host                 | query_time      | lock_time       | rows_sent | rows_examined | db | last_insert_id | insert_id | server_id | sql_text          |thread_id |
+----------------------------+---------------------------+-----------------+-----------------+-----------+---------------+----+----------------+-----------+-----------+-------------------+-----------+
| 2017-11-23 16:58:23.873261 | root[root] @ localhost [] | 00:00:11.000196 | 00:00:00.000000 |         1 |             0 |    |              0 |         0 |       168 | select sleep (11) |   314459 |
+----------------------------+---------------------------+-----------------+-----------------+-----------+---------------+----+----------------+-----------+-----------+-------------------+-----------+
1 row in set (0.00 sec)

--显示表结构
mysql> show create table mysql.slow_log G;
*************************** 1. row ***************************
       Table: slow_log
Create Table: CREATE TABLE `slow_log` (
  `start_time` timestamp(6) NOT NULL DEFAULT CURRENT_TIMESTAMP(6) ON UPDATE CURRENT_TIMESTAMP(6),
  `user_host` mediumtext NOT NULL,
  `query_time` time(6) NOT NULL,
  `lock_time` time(6) NOT NULL,
  `rows_sent` int(11) NOT NULL,
  `rows_examined` int(11) NOT NULL,
  `db` varchar(512) NOT NULL,
  `last_insert_id` int(11) NOT NULL,
  `insert_id` int(11) NOT NULL,
  `server_id` int(10) unsigned NOT NULL,
  `sql_text` mediumblob NOT NULL,
  `thread_id` bigint(21) unsigned NOT NULL
) ENGINE=CSV DEFAULT CHARSET=utf8 COMMENT='Slow log'   --ENGINE=CSV 这里使用的是CSV的引擎,性能较差
1 row in set (0.00 sec)
ERROR:
No query specified


-- 建议将slow_log表的存储引擎改成MyISAM
mysql>  alter table mysql.slow_log engine = innodb;
ERROR 1580 (HY000): You cannot 'ALTER' a log table if logging is enabled   --无法转化为innodb引擎

mysql> alter table mysql.slow_log engine = myisam;
ERROR 1580 (HY000): You cannot 'ALTER' a log table if logging is enabled  '-- 提示我正在记录日志中，不能转换myisam引擎

mysql> set global slow_query_log = 0;    -- 先停止记录日志
Query OK, 0 rows affected (0.01 sec)

mysql>  alter table mysql.slow_log engine = innodb;
ERROR 1579 (HY000): This storage engine cannot be used for log tables"  --显示不支持innodb引擎

mysql> alter table mysql.slow_log engine = myisam;   -- 转换表的myisam引擎
Query OK, 2 rows affected (5.05 sec)
Records: 2  Duplicates: 0  Warnings: 0

mysql> set global slow_query_log = 1;     -- 再开启记录日志
Query OK, 0 rows affected (0.00 sec)

mysql> show create table mysql.slow_log;
--表结构
ENGINE=MyISAM DEFAULT CHARSET=utf8 COMMENT='Slow log'  -- ENGINE转换成myisam引擎

使用TABLE的优势在于方便查询，但是记住当在备份的时候，不要备份慢查询日志的表，避免备份过大。
使用FILE也可以，需要定时清除该文件，避免单文件过大。

2. 通用日志(generic_log)与审计

1.1 通用日志作用

当需要查找某条特定SQL语句，且该SQL语句执行较快，无法记录到slow_log中时，可以开启通用日志generic_log,进行全面记录，可用于审计Audit
A终端设置开启关闭通用日志

mysql> set global general_log=on;  --开启通用日志
Query OK, 0 rows affected (0.00 sec)

mysql>  show create table mysql.general_logG             --显示通用日志表结构
*************************** 1. row ***************************
       Table: general_log
Create Table: CREATE TABLE `general_log` (
  `event_time` timestamp(6) NOT NULL DEFAULT CURRENT_TIMESTAMP(6) ON UPDATE CURRENT_TIMESTAMP(6),
  `user_host` mediumtext NOT NULL,
  `thread_id` bigint(21) unsigned NOT NULL,
  `server_id` int(10) unsigned NOT NULL,
  `command_type` varchar(64) NOT NULL,
  `argument` mediumblob NOT NULL
) ENGINE=CSV DEFAULT CHARSET=utf8 COMMENT='General log'
1 row in set (0.00 sec)

mysql> show variables like '%general_log%';
+------------------+------------------------------------------------------+
| Variable_name    | Value                                                |
+------------------+------------------------------------------------------+
| general_log      | ON                                                   |
| general_log_file | /r2/soft/dbtest/mysql-5.7.18/mysqldata/localhost.log | --日志位置
+------------------+------------------------------------------------------+
2 rows in set (0.00 sec)

mysql> set global general_log=off;  --关闭日志

B终端显示日志

[root@localhost-m(252) /r2/soft/dbtest/mysql-5.7.18/mysqldata]# tail -f localhost.log
	    SUM_TIMER_WRITE_LOW_PRIORITY,
	    SUM_TIMER_WRITE_NORMAL,
	    SUM_TIMER_WRITE_EXTERNAL
	  FROM performance_schema.table_lock_waits_summary_by_table
	  WHERE OBJECT_SCHEMA NOT IN ('mysql', 'performance_schema', 'information_schema')
2017-11-23T17:17:28.819250+08:00	315487 Quit
2017-11-23T17:17:29.304861+08:00	315489 Connect	gcdb@192.168.48.168 on  using TCP/IP
2017-11-23T17:17:29.305015+08:00	315489 Query	select @@version_comment limit 1
2017-11-23T17:17:29.305307+08:00	315489 Query	show global status where Variable_name in ("Com_select","Com_insert","Com_update","Com_delete","Innodb_buffer_pool_read_requests","Innodb_buffer_pool_reads","Innodb_rows_inserted","Innodb_rows_updated","Innodb_rows_deleted","Innodb_rows_read","Threads_running","Threads_connected","Threads_cached","Threads_created","Bytes_received","Bytes_sent","Innodb_buffer_pool_pages_data","Innodb_buffer_pool_pages_free","Innodb_buffer_pool_pages_dirty","Innodb_buffer_pool_pages_flushed","Innodb_data_reads","Innodb_data_writes","Innodb_data_read","Innodb_data_written","Innodb_os_log_fsyncs","Innodb_os_log_written")

通用日志会记录所有操作，性能下降明显。所以如果需要审计，需要Audit Plugin

1.2 审计插件

- MariaDB Audit 插件
    - MySQL社区版本目前没有提供Audit的功能，企业版本提供了该功能。MariaDB 提供了开源的Audit插件，且MySQL也能使用。
    - [官方注册下载插件](https://mariadb.com/my_portal/download/audit_plugin)
- Mcaffer插件下载
    -  https://bintray.com/mcafee/mysql-audit-plugin/release#files  点击Files文件
    -  [audit-plugin-mysql-5.7-1.1.4-725-linux-x86_64.zip](https://bintray.com/mcafee/mysql-audit-plugin/download_file?file_path=audit-plugin-mysql-5.7-1.1.4-725-linux-x86_64.zip)

1.3 mcafee Audit Plugin安装

MySQL5.7.18 安装mcaffer audit-plugin-mysql-5.7-1.1.4-725 版本审计插件步骤如下:

--显示插件目录
root@gczheng 23:16:  [(none)]> show global variables like 'plugin%';
+---------------+------------------------------+
| Variable_name | Value                        |
+---------------+------------------------------+
| plugin_dir    | /usr/local/mysql/lib/plugin/ |
+---------------+------------------------------+
1 row in set (0.01 sec)

安装审计插件

--解压plugin
[root@rhel7 software]# unzip audit-plugin-mysql-5.7-1.1.4-725-linux-x86_64.zip 
Archive:  audit-plugin-mysql-5.7-1.1.4-725-linux-x86_64.zip
   creating: audit-plugin-mysql-5.7-1.1.4-725/
   creating: audit-plugin-mysql-5.7-1.1.4-725/lib/
  inflating: audit-plugin-mysql-5.7-1.1.4-725/lib/libaudit_plugin.so  
  inflating: audit-plugin-mysql-5.7-1.1.4-725/COPYING  
  inflating: audit-plugin-mysql-5.7-1.1.4-725/THIRDPARTY.txt  
  inflating: audit-plugin-mysql-5.7-1.1.4-725/README.txt  
  inflating: audit-plugin-mysql-5.7-1.1.4-725/plugin-name.txt  
   creating: audit-plugin-mysql-5.7-1.1.4-725/utils/
  inflating: audit-plugin-mysql-5.7-1.1.4-725/utils/offset-extract.sh  
--拷贝到插件目录 
[root@rhel7 software]# cp audit-plugin-mysql-5.7-1.1.4-725/lib/libaudit_plugin.so /usr/local/mysql/lib/plugin/   

[root@rhel7 software]# cd /usr/local/mysql/lib/plugin/
[root@rhel7 plugin]# ll libaudit_plugin.so 
-rw-r--r-- 1 root root 1542249 Nov 23 23:16 libaudit_plugin.so

--mycnf添加plugin-load=AUDIT=libaudit_plugin.so
[root@rhel7 plugin]# vim /etc/my.cnf
[mysqld]
......
plugin-load=AUDIT=libaudit_plugin.so   --添加配置文件load模式，另外还有install模式：INSTALL PLUGIN AUDIT SONAME 'libaudit_plugin.so';
......

--重启MySQL
[root@rhel7 plugin]# service mysqld restart
Shutting down MySQL......... SUCCESS! 
Starting MySQL........ SUCCESS!

测试插件

--显示插件
root@gczheng 23:25:  [(none)]> show plugins;
+----------------------------+----------+--------------------+--------------------+---------+
| Name                       | Status   | Type               | Library            | License |
+----------------------------+----------+--------------------+--------------------+---------+
| binlog                     | ACTIVE   | STORAGE ENGINE     | NULL               | GPL     |
.......

| ngram                      | ACTIVE   | FTPARSER           | NULL               | GPL     |
| AUDIT                      | ACTIVE   | AUDIT              | libaudit_plugin.so | GPL     |
+----------------------------+----------+--------------------+--------------------+---------+
45 rows in set (0.00 sec)

root@gczheng 23:25:  [(none)]> show global status like 'AUDIT_version'; --显示审计日志版本
+---------------+-----------+
| Variable_name | Value     |
+---------------+-----------+
| Audit_version | 1.1.4-725 |
+---------------+-----------+
1 row in set (0.00 sec)


root@gczheng 00:00:  [(none)]> show variables like "audit%"G;   -- 查看和audit相关的参数
*************************** 1. row ***************************
Variable_name: audit_before_after
        Value: after
*************************** 2. row ***************************
Variable_name: audit_checksum
        Value: 
*************************** 3. row ***************************
Variable_name: audit_client_capabilities
        Value: OFF
*************************** 4. row ***************************
Variable_name: audit_delay_cmds
        Value: 
*************************** 5. row ***************************
Variable_name: audit_delay_ms
        Value: 0
*************************** 6. row ***************************
Variable_name: audit_force_record_logins
        Value: OFF
*************************** 7. row ***************************
Variable_name: audit_header_msg
        Value: ON
*************************** 8. row ***************************
Variable_name: audit_json_file
        Value: OFF
*************************** 9. row ***************************
Variable_name: audit_json_file_bufsize
        Value: 1
*************************** 10. row ***************************
Variable_name: audit_json_file_flush
        Value: OFF
*************************** 11. row ***************************
Variable_name: audit_json_file_retry
        Value: 60
*************************** 12. row ***************************
Variable_name: audit_json_file_sync
        Value: 0
*************************** 13. row ***************************
Variable_name: audit_json_log_file
        Value: mysql-audit.json
*************************** 14. row ***************************
Variable_name: audit_json_socket
        Value: OFF
*************************** 15. row ***************************
Variable_name: audit_json_socket_name
        Value: /var/run/db-audit/mysql.audit__r2_mysqldata_3306
*************************** 16. row ***************************
Variable_name: audit_json_socket_retry
        Value: 10
*************************** 17. row ***************************
Variable_name: audit_json_socket_write_timeout
        Value: 1000
*************************** 18. row ***************************
Variable_name: audit_offsets
        Value: 
*************************** 19. row ***************************
Variable_name: audit_offsets_by_version
        Value: ON
*************************** 20. row ***************************
Variable_name: audit_password_masking_cmds
        Value: CREATE_USER,GRANT,SET_OPTION,SLAVE_START,CREATE_SERVER,ALTER_SERVER,CHANGE_MASTER,UPDATE
*************************** 21. row ***************************
Variable_name: audit_password_masking_regex
        Value: identified(?:/*.*?*/|s)*?by(?:/*.*?*/|s)*?(?:password)?(?:/*.*?*/|s)*?['|"](?<psw>.*?)(?<!\)['|"]|password(?:/*.*?*/|s)*?((?:/*.*?*/|s)*?['|"](?<psw>.*?)(?<!\)['|"](?:/*.*?*/|s)*?)|password(?:/*.*?*/|s)*?(?:for(?:/*.*?*/|s)*?S+?)?(?:/*.*?*/|s)*?=(?:/*.*?*/|s)*?['|"](?<psw>.*?)(?<!\)['|"]|password(?:/*.*?*/|s)*?['|"](?<psw>.*?)(?<!\)['|"]
*************************** 22. row ***************************
Variable_name: audit_record_cmds
        Value: 
*************************** 23. row ***************************
Variable_name: audit_record_objs
        Value: 
*************************** 24. row ***************************
Variable_name: audit_sess_connect_attrs
        Value: ON
*************************** 25. row ***************************
Variable_name: audit_socket_creds
        Value: ON
*************************** 26. row ***************************
Variable_name: audit_uninstall_plugin
        Value: OFF
*************************** 27. row ***************************
Variable_name: audit_validate_checksum
        Value: ON
*************************** 28. row ***************************
Variable_name: audit_validate_offsets_extended
        Value: ON
*************************** 29. row ***************************
Variable_name: audit_whitelist_cmds
        Value: BEGIN,COMMIT,PING
*************************** 30. row ***************************
Variable_name: audit_whitelist_users
        Value: 
30 rows in set (0.00 sec)

root@gczheng 00:05:  [(none)]> set global audit_json_log_file='/r2/mysqldata/audit.log'; --配置审计日志路径
Query OK, 0 rows affected (0.00 sec)

root@gczheng 00:04:  [(none)]> set global audit_json_file=ON;    -- 打开审计功能
Query OK, 0 rows affected (0.00 sec)

root@gczheng 00:11:  [(none)]> show variables like "audit_json%";
+---------------------------------+--------------------------------------------------+
| Variable_name                   | Value                                            |
+---------------------------------+--------------------------------------------------+
| audit_json_file                 | ON                                               |
| audit_json_file_bufsize         | 1                                                |
| audit_json_file_flush           | OFF                                              |
| audit_json_file_retry           | 60                                               |
| audit_json_file_sync            | 0                                                |
| audit_json_log_file             | /r2/mysqldata/audit.log                          |
| audit_json_socket               | OFF                                              |
| audit_json_socket_name          | /var/run/db-audit/mysql.audit__r2_mysqldata_3306 |
| audit_json_socket_retry         | 10                                               |
| audit_json_socket_write_timeout | 1000                                             |
+---------------------------------+--------------------------------------------------+

查看审计日志

[root@rhel7 ~]# tailf /r2/mysqldata/audit.log 
{"msg-type":"activity","date":"1511453256465","thread-id":"26","query-id":"1562","user":"gcdb","priv_user":"gcdb","ip":"192.168.1.10","host":"192.168.1.10","connect_attrs":{"_os":"Win64","_client_name":"libmysql","_pid":"12056","_thread":"5756","_platform":"x86_64","program_name":"MySQLWorkbench","_client_version":"5.6.23"},"client_port":"14462","cmd":"show_keys","objects":[{"db":"information_schema","name":"/r2/mysqldata/#sql_10da1_0","obj_type":"TABLE"}],"query":"SHOW INDEX FROM `information_schema`.`TABLES`"}

以上仅为基本功能操作，详细的细粒度控制请参考Mcafee文档

查看全文

相关阅读:
最全的ASP.NET开源CMS汇总
 excel学习range
多线程写文件异常(正由另一进程使用，因此该进程无法访问该文件)的解决方法
 EXCEL之Range,cells,offset,end用法
 天佑中华
 敏捷测试感悟（之二）
4月份到上海出差
 《Google API大全：编程·开发·实例》一书将在本周末的GDD（Google开发者大会）上首发
 敏捷测试感悟（之一）
拿到了TD的3G测试手机

原文地址：https://www.cnblogs.com/gczheng/p/7887745.html