澳门威斯尼斯人手机版mysql服务器io等待高定位与

原标题:事件统计 | performance_schema全方位介绍(四)

原标题:数据库对象事件与属性统计 | performance_schema全方位介绍(五)

原标题:初相识|performance_schema全方位介绍(一)

这两天发现公司好几台阿里云ECS上的mysql生产服务器繁忙期间io等待高达百分之二三十(估计九成是没有write back),而且确定是mysql进程产生,由于跑的应用过多,开发和维护无法直接确定哪些表繁忙,哪些表不繁忙。。。

原标题:事件记录 | performance_schema全方位介绍(三)

澳门威斯尼斯人手机版 1

澳门威斯尼斯人手机版 2

澳门威斯尼斯人手机版 3

为了找到根源,我们需要知道哪些文件、表的io读写量最高,然后进行针对性的优化。

澳门威斯尼斯人手机版 4

罗小波·沃趣科技高级数据库技术专家

上一篇 《事件统计 | performance_schema全方位介绍》详细介绍了performance_schema的事件统计表,但这些统计数据粒度太粗,仅仅按照事件的5大类别 用户、线程等维度进行分类统计,但有时候我们需要从更细粒度的维度进行分类统计,例如:某个表的IO开销多少、锁开销多少、以及用户连接的一些属性统计信息等。此时就需要查看数据库对象事件统计表与属性统计表了。今天将带领大家一起踏上系列第五篇的征程(全系共7个篇章),本期将为大家全面讲解performance_schema中对象事件统计表与属性统计表。下面,请跟随我们一起开始performance_schema系统的学习之旅吧~

罗小波·沃趣科技高级数据库技术专家

percona server原本提供了一工具pt-ioprofile,可是这工具是采用strace实现的,有可能在系统繁忙时导致进程被kill或者hang。。。所以还是通过performance_schema入手。

导语

出品:沃趣科技

友情提示:下文中的统计表中大部分字段含义与上一篇 《事件统计 | performance_schema全方位介绍》 中提到的统计表字段含义相同,下文中不再赘述。此外,由于部分统计表中的记录内容过长,限于篇幅会省略部分文本,如有需要请自行安装MySQL 5.7.11以上版本跟随本文进行同步操作查看。

出品:沃趣科技

file_summary_by_instance表中记录了针对每个文件的Io读写情况,如下所示:**

在上一篇 《配置详解 | performance_schema全方位介绍》中,我们详细介绍了performance_schema的配置表,坚持读完的是真爱,也恭喜大家翻过了一座火焰山。相信有不少人读完之后,已经迫不及待的想要跃跃欲试了,今天将带领大家一起踏上系列第三篇的征程(全系共6个篇章),在这一期里,我们将为大家全面讲解performance_schema中事件原始记录表。下面,请跟随我们一起开始performance_schema系统的学习之旅吧。

IT从业多年,历任运维工程师、高级运维工程师、运维经理、数据库工程师,曾参与版本发布系统、轻量级监控系统、运维管理平台、数据库管理平台的设计与编写,熟悉MySQL体系结构,Innodb存储引擎,喜好专研开源技术,追求完美。

01

IT从业多年,历任运维工程师、高级运维工程师、运维经理、数据库工程师,曾参与版本发布系统、轻量级监控系统、运维管理平台、数据库管理平台的设计与编写,熟悉MySQL体系结构,Innodb存储引擎,喜好专研开源技术,追求完美。

mysql> select * from file_summary_by_instance order by SUM_TIMER_WAIT desc limit 5G;
*************************** 1. row ***************************
                FILE_NAME: /usr/local/mysql-5.6.19-linux-glibc2.5-x86_64/data/ioana/t1.ibd
               EVENT_NAME: wait/io/file/innodb/innodb_data_file
    OBJECT_INSTANCE_BEGIN: 139999261742528
               COUNT_STAR: 11739
           SUM_TIMER_WAIT: 1617275634994
           MIN_TIMER_WAIT: 5797000
           AVG_TIMER_WAIT: 137769394
           MAX_TIMER_WAIT: 100739635708
               COUNT_READ: 1
           SUM_TIMER_READ: 34699788
           MIN_TIMER_READ: 34699788
           AVG_TIMER_READ: 34699788
           MAX_TIMER_READ: 34699788
 SUM_NUMBER_OF_BYTES_READ: 16384
              COUNT_WRITE: 11472
          SUM_TIMER_WRITE: 1184834714832
          MIN_TIMER_WRITE: 5797000
          AVG_TIMER_WRITE: 103280406
          MAX_TIMER_WRITE: 7278810168
SUM_NUMBER_OF_BYTES_WRITE: 377339904
               COUNT_MISC: 266
           SUM_TIMER_MISC: 432406220374
           MIN_TIMER_MISC: 8252820
           AVG_TIMER_MISC: 1625586835
           MAX_TIMER_MISC: 100739635708
*************************** 2. row ***************************
                FILE_NAME: /usr/local/mysql-5.6.19-linux-glibc2.5-x86_64/data/ibdata1
               EVENT_NAME: wait/io/file/innodb/innodb_data_file
    OBJECT_INSTANCE_BEGIN: 139999261496128
               COUNT_STAR: 1709
           SUM_TIMER_WAIT: 814764332152
           MIN_TIMER_WAIT: 3623652
           AVG_TIMER_WAIT: 476748969
           MAX_TIMER_WAIT: 33581165152
               COUNT_READ: 166
           SUM_TIMER_READ: 22098794292
           MIN_TIMER_READ: 3623652
           AVG_TIMER_READ: 133124943
           MAX_TIMER_READ: 10389786028
 SUM_NUMBER_OF_BYTES_READ: 4784128
              COUNT_WRITE: 1215
          SUM_TIMER_WRITE: 488756864260
          MIN_TIMER_WRITE: 5788568
          AVG_TIMER_WRITE: 402268586
          MAX_TIMER_WRITE: 6710965560
SUM_NUMBER_OF_BYTES_WRITE: 364969984
               COUNT_MISC: 328
           SUM_TIMER_MISC: 303908673600
           MIN_TIMER_MISC: 7460212
           AVG_TIMER_MISC: 926550320
           MAX_TIMER_MISC: 33581165152
*************************** 3. row ***************************
                FILE_NAME: /usr/local/mysql-5.6.19-linux-glibc2.5-x86_64/data/ioana/t2.ibd
               EVENT_NAME: wait/io/file/innodb/innodb_data_file
    OBJECT_INSTANCE_BEGIN: 139999261741120
               COUNT_STAR: 12011
           SUM_TIMER_WAIT: 678760914098
           MIN_TIMER_WAIT: 5073956
           AVG_TIMER_WAIT: 56511264
           MAX_TIMER_WAIT: 7126760128
               COUNT_READ: 6309
           SUM_TIMER_READ: 65882736360
           MIN_TIMER_READ: 5073956
           AVG_TIMER_READ: 10442505
           MAX_TIMER_READ: 68216988
 SUM_NUMBER_OF_BYTES_READ: 103366656
              COUNT_WRITE: 5510
          SUM_TIMER_WRITE: 434740598494
          MIN_TIMER_WRITE: 5778028
          AVG_TIMER_WRITE: 78899805
          MAX_TIMER_WRITE: 7126760128
SUM_NUMBER_OF_BYTES_WRITE: 184696832
               COUNT_MISC: 192
           SUM_TIMER_MISC: 178137579244
           MIN_TIMER_MISC: 8811440
           AVG_TIMER_MISC: 927799837
           MAX_TIMER_MISC: 2063390504
*************************** 4. row ***************************
                FILE_NAME: /usr/local/mysql-5.6.19-linux-glibc2.5-x86_64/data/ib_logfile0
               EVENT_NAME: wait/io/file/innodb/innodb_log_file
    OBJECT_INSTANCE_BEGIN: 139999261496832
               COUNT_STAR: 258
           SUM_TIMER_WAIT: 213773061014
           MIN_TIMER_WAIT: 594456
           AVG_TIMER_WAIT: 828577331
           MAX_TIMER_WAIT: 14386901848
               COUNT_READ: 6
           SUM_TIMER_READ: 54982964
           MIN_TIMER_READ: 594456
           AVG_TIMER_READ: 9163476
           MAX_TIMER_READ: 46464536
 SUM_NUMBER_OF_BYTES_READ: 69632
              COUNT_WRITE: 141
          SUM_TIMER_WRITE: 64075588012
          MIN_TIMER_WRITE: 10415628
          AVG_TIMER_WRITE: 454436316
          MAX_TIMER_WRITE: 2400912924
SUM_NUMBER_OF_BYTES_WRITE: 149283328
               COUNT_MISC: 111
           SUM_TIMER_MISC: 149642490038
           MIN_TIMER_MISC: 1692724
           AVG_TIMER_MISC: 1348130294
           MAX_TIMER_MISC: 14386901848
*************************** 5. row ***************************
                FILE_NAME: /usr/local/mysql-5.6.19-linux-glibc2.5-x86_64/data/ib_logfile1
               EVENT_NAME: wait/io/file/innodb/innodb_log_file
    OBJECT_INSTANCE_BEGIN: 139999261497536
               COUNT_STAR: 71
           SUM_TIMER_WAIT: 128004164104
           MIN_TIMER_WAIT: 1294312
           AVG_TIMER_WAIT: 1802875432
           MAX_TIMER_WAIT: 11708167172
               COUNT_READ: 0
           SUM_TIMER_READ: 0
           MIN_TIMER_READ: 0
           AVG_TIMER_READ: 0
           MAX_TIMER_READ: 0
 SUM_NUMBER_OF_BYTES_READ: 0
              COUNT_WRITE: 48
          SUM_TIMER_WRITE: 60748006720
          MIN_TIMER_WRITE: 9237256
          AVG_TIMER_WRITE: 1265583122
          MAX_TIMER_WRITE: 2272031912
SUM_NUMBER_OF_BYTES_WRITE: 135080448
               COUNT_MISC: 23
           SUM_TIMER_MISC: 67256157384
           MIN_TIMER_MISC: 1294312
           AVG_TIMER_MISC: 2924180710
           MAX_TIMER_MISC: 11708167172
5 rows in set (0.00 sec)

等待事件表

| 导语

数据库对象统计表

|目 录1、什么是performance_schema

**在上面的查询中,我们可以看到,data/ioana/t1.ibd文件的写入是最多的。在我们的系统中,大部分情况下确实是写入的IO是瓶颈的情形比较多,主要是计算风险值实时写入所致。**

通常,我们在碰到性能瓶颈时,如果其他的方法难以找出性能瓶颈的时候(例如:硬件负载不高、SQL优化和库表结构优化都难以奏效的时候),我们常常需要借助于等待事件来进行分析,找出在MySQL Server内部,到底数据库响应慢是慢在哪里。

在上一篇《事件记录 | performance_schema全方位介绍"》中,我们详细介绍了performance_schema的事件记录表,恭喜大家在学习performance_schema的路上度过了两个最困难的时期。现在,相信大家已经比较清楚什么是事件了,但有时候我们不需要知道每时每刻产生的每一条事件记录信息, 例如:我们希望了解数据库运行以来一段时间的事件统计数据,这个时候就需要查看事件统计表了。今天将带领大家一起踏上系列第四篇的征程(全系共7个篇章),在这一期里,我们将为大家全面讲解performance_schema中事件统计表。统计事件表分为5个类别,分别为等待事件、阶段事件、语句事件、事务事件、内存事件。下面,请跟随我们一起开始performance_schema系统的学习之旅吧。

1.数据库表级别对象等待事件统计

2、performance_schema使用快速入门

**找到具体的文件后,就可以根据业务模式和架构进行针对性的优化。**

等待事件记录表包含三张表,这些表记录了当前与最近在MySQL实例中发生了哪些等待事件,时间消耗是多少。

| 等待事件统计表

按照数据库对象名称(库级别对象和表级别对象,如:库名和表名)进行统计的等待事件。按照OBJECT_TYPE、OBJECT_SCHEMA、OBJECT_NAME列进行分组,按照COUNT_STAR、xxx_TIMER_WAIT字段进行统计。包含一张objects_summary_global_by_type表。

2.1. 检查当前数据库版本是否支持

  • events_waits_current表:记录当前正在执行的等待事件的,每个线程只记录1行记录
  • events_waits_history表:记录已经执行完的最近的等待事件历史,默认每个线程只记录10行记录
  • events_waits_history_long表:记录已经执行完的最近的等待事件历史,默认所有线程的总记录行数为10000行

performance_schema把等待事件统计表按照不同的分组列(不同纬度)对等待事件相关的数据进行聚合(聚合统计数据列包括:事件发生次数,总等待时间,最小、最大、平均等待时间),注意:等待事件的采集功能有一部分默认是禁用的,需要的时候可以通过setup_instruments和setup_objects表动态开启,等待事件统计表包含如下几张表:

我们先来看看表中记录的统计信息是什么样子的。

2.2. 启用performance_schema

要注意:等待事件相关配置中,setup_instruments表中绝大部分的等待事件instruments都没有开启(IO相关的等待事件instruments默认大部分已开启),setup_consumers表中waits相关的consumers配置默认没有开启

admin@localhost : performance_schema 06:17:11> show tables like '%events_waits_summary%';

admin@localhost : performance _schema 11:10:42> select * from objects_summary _global_by _type where SUM_TIMER_WAIT!=0G;

2.3. performance_schema表的分类

events_waits_current 表

-------------------------------------------------------

*************************** 1. row ***************************

2.4. performance_schema简单配置与使用

events_waits_current表包含当前的等待事件信息,每个线程只显示一行最近监视的等待事件的当前状态

| Tables_in_performance_schema (%events_waits_summary%) |

OBJECT_TYPE: TABLE

|导 语很久之前,当我还在尝试着系统地学习performance_schema的时候,通过在网上各种搜索资料进行学习,但很遗憾,学习的效果并不是很明显,很多标称类似 "深入浅出performance_schema" 的文章,基本上都是那种动不动就贴源码的风格,然后深入了之后却出不来了。对系统学习performance_schema的作用甚微。

在所有包含等待事件行的表中,events_waits_current表是最基础的数据来源。其他包含等待事件数据表在逻辑上是来源于events_waits_current表中的当前事件信息(汇总表除外)。例如,events_waits_history和events_waits_history_long表中的数据是events_waits_current表数据的一个小集合汇总(具体存放多少行数据集合有各自的变量控制)

-------------------------------------------------------

OBJECT_SCHEMA: xiaoboluo

现在,很高兴的告诉大家,我们基于 MySQL 官方文档加上我们的验证,整理了一份可以系统学习 performance_schema 的资料分享给大家,为了方便大家阅读,我们整理为了一个系列,一共7篇文章。下面,请跟随我们一起开始performance_schema系统的学习之旅吧。

表记录内容示例(这是一个执行select sleep(100);语句的线程等待事件信息)

| events_waits_summary_by_account_by_event_name |

OBJECT_NAME: test

本文首先,大致介绍了什么是performance_schema?它能做什么?

root@localhost : performance _schema 12:15:03> select * from events_waits _current where EVENT_NAME='wait/synch/cond/sql/Item _func_sleep::cond'G;

| events_waits_summary_by_host_by_event_name |

COUNT_STAR: 56

然后,简单介绍了如何快速上手使用performance_schema的方法;

*************************** 1. row ***************************

| events_waits_summary_by_instance |

SUM _TIMER_WAIT: 195829830101250

最后,简单介绍了performance_schema中由哪些表组成,这些表大致的作用是什么。

THREAD_ID: 46

| events_waits_summary_by_thread_by_event_name |

MIN _TIMER_WAIT: 2971125

PS:本系列文章所使用的数据库版本为 MySQL 官方 5.7.17版本

EVENT_ID: 140

| events_waits_summary_by_user_by_event_name |

AVG _TIMER_WAIT: 3496961251500

|1、**什么是performance_schema**

END_EVENT_ID: NULL

| events_waits_summary_global_by_event_name |

MAX _TIMER_WAIT: 121025235946125

MySQL的performance schema 用于监控MySQL server在一个较低级别的运行过程中的资源消耗、资源等待等情况,它具有以下特点:

EVENT_NAME: wait/synch/cond/sql/Item_func_sleep::cond

-------------------------------------------------------

1 row in set (0.00 sec)

  1. 提供了一种在数据库运行时实时检查server的内部执行情况的方法。performance_schema 数据库中的表使用performance_schema存储引擎。该数据库主要关注数据库运行过程中的性能相关的数据,与information_schema不同,information_schema主要关注server运行过程中的元数据信息
  2. performance_schema通过监视server的事件来实现监视server内部运行情况, “事件”就是server内部活动中所做的任何事情以及对应的时间消耗,利用这些信息来判断server中的相关资源消耗在了哪里?一般来说,事件可以是函数调用、操作系统的等待、SQL语句执行的阶段(如sql语句执行过程中的parsing 或 sorting阶段)或者整个SQL语句与SQL语句集合。事件的采集可以方便的提供server中的相关存储引擎对磁盘文件、表I/O、表锁等资源的同步调用信息。
  3. performance_schema中的事件与写入二进制日志中的事件(描述数据修改的events)、事件计划调度程序(这是一种存储程序)的事件不同。performance_schema中的事件记录的是server执行某些活动对某些资源的消耗、耗时、这些活动执行的次数等情况。
  4. performance_schema中的事件只记录在本地server的performance_schema中,其下的这些表中数据发生变化时不会被写入binlog中,也不会通过复制机制被复制到其他server中。
  5. 当前活跃事件、历史事件和事件摘要相关的表中记录的信息。能提供某个事件的执行次数、使用时长。进而可用于分析某个特定线程、特定对象(如mutex或file)相关联的活动。
  6. PERFORMANCE_SCHEMA存储引擎使用server源代码中的“检测点”来实现事件数据的收集。对于performance_schema实现机制本身的代码没有相关的单独线程来检测,这与其他功能(如复制或事件计划程序)不同
  7. 收集的事件数据存储在performance_schema数据库的表中。这些表可以使用SELECT语句查询,也可以使用SQL语句更新performance_schema数据库中的表记录(如动态修改performance_schema的setup_*开头的几个配置表,但要注意:配置表的更改会立即生效,这会影响数据收集)
  8. performance_schema的表中的数据不会持久化存储在磁盘中,而是保存在内存中,一旦服务器重启,这些数据会丢失(包括配置表在内的整个performance_schema下的所有数据)
  9. MySQL支持的所有平台中事件监控功能都可用,但不同平台中用于统计事件时间开销的计时器类型可能会有所差异。

SOURCE: item_func.cc:5261

6rows inset ( 0. 00sec)

从表中的记录内容可以看到,按照库xiaoboluo下的表test进行分组,统计了表相关的等待事件调用次数,总计、最小、平均、最大延迟时间信息,利用这些信息,我们可以大致了解InnoDB中表的访问效率排行统计情况,一定程度上反应了对存储引擎接口调用的效率。

performance_schema实现机制遵循以下设计目标:

TIMER_START: 14128809267002592

我们先来看看这些表中记录的统计信息是什么样子的。

2.表I/O等待和锁等待事件统计

  1. 启用performance_schema不会导致server的行为发生变化。例如,它不会改变线程调度机制,不会导致查询执行计划(如EXPLAIN)发生变化
  2. 启用performance_schema之后,server会持续不间断地监测,开销很小。不会导致server不可用
  3. 在该实现机制中没有增加新的关键字或语句,解析器不会变化
  4. 即使performance_schema的监测机制在内部对某事件执行监测失败,也不会影响server正常运行
  5. 如果在开始收集事件数据时碰到有其他线程正在针对这些事件信息进行查询,那么查询会优先执行事件数据的收集,因为事件数据的收集是一个持续不断的过程,而检索(查询)这些事件数据仅仅只是在需要查看的时候才进行检索。也可能某些事件数据永远都不会去检索
  6. 需要很容易地添加新的instruments监测点
  7. instruments(事件采集项)代码版本化:如果instruments的代码发生了变更,旧的instruments代码还可以继续工作。
  8. 注意:MySQL sys schema是一组对象(包括相关的视图、存储过程和函数),可以方便地访问performance_schema收集的数据。同时检索的数据可读性也更高(例如:performance_schema中的时间单位是皮秒,经过sys schema查询时会转换为可读的us,ms,s,min,hour,day等单位),sys schem在5.7.x版本默认安装

TIMER_END: 14132636159944419

# events_waits_summary_by_account_by_event_name表

与objects_summary_global_by_type 表统计信息类似,表I/O等待和锁等待事件统计信息更为精细,细分了每个表的增删改查的执行次数,总等待时间,最小、最大、平均等待时间,甚至精细到某个索引的增删改查的等待时间,表IO等待和锁等待事件instruments(wait/io/table/sql/handler和wait/lock/table/sql/handler )默认开启,在setup_consumers表中无具体的对应配置,默认表IO等待和锁等待事件统计表中就会统计相关事件信息。包含如下几张表:

|2、performance_schema使用快速入门

TIMER_WAIT: 3826892941827

root@localhost : performance _schema 11:07:09> select * from events_waits _summary_by _account_by _event_name limit 1G

admin@localhost : performance_schema 06:50:03> show tables like '%table%summary%';

现在,是否觉得上面的介绍内容太过枯燥呢?如果你这么想,那就对了,我当初学习的时候也是这么想的。但现在,对于什么是performance_schema这个问题上,比起更早之前更清晰了呢?如果你还没有打算要放弃阅读本文的话,那么,请跟随我们开始进入到"边走边唱"环节吧!

SPINS: NULL

*************************** 1. row ***************************

------------------------------------------------

2.1检查当前数据库版本是否支持

OBJECT_SCHEMA: NULL

USER: NULL

| Tables_in_performance_schema (%table%summary%) |

performance_schema被视为存储引擎。如果该引擎可用,则应该在INFORMATION_SCHEMA.ENGINES表或SHOW ENGINES语句的输出中都可以看到它的SUPPORT值为YES,如下:

OBJECT_NAME: NULL

HOST: NULL

------------------------------------------------

使用 INFORMATION_SCHEMA.ENGINES表来查询你的数据库实例是否支持INFORMATION_SCHEMA引擎

INDEX_NAME: NULL

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

| table_io_waits_summary_by_index_usage |# 按照每个索引进行统计的表I/O等待事件

qogir_env@localhost : performance_schema 02:41:41> SELECT * FROM INFORMATION_SCHEMA.ENGINES WHERE ENGINE ='PERFORMANCE_SCHEMA';

OBJECT_TYPE: NULL

COUNT_STAR: 0

| table_io_waits_summary_by_table |# 按照每个表进行统计的表I/O等待事件

-------------------- --------- -------------------- -------------- ------ ------------

OBJECT _INSTANCE_BEGIN: 140568905519072

SUM _TIMER_WAIT: 0

| table_lock_waits_summary_by_table |# 按照每个表进行统计的表锁等待事件

| ENGINE |SUPPORT | COMMENT |TRANSACTIONS | XA |SAVEPOINTS |

NESTING _EVENT_ID: 116

MIN _TIMER_WAIT: 0

------------------------------------------------

-------------------- --------- -------------------- -------------- ------ ------------

NESTING _EVENT_TYPE: STATEMENT

AVG _TIMER_WAIT: 0

3rows inset ( 0. 00sec)

|PERFORMANCE_SCHEMA | YES |Performance Schema | NO |NO | NO |

OPERATION: timed_wait

MAX _TIMER_WAIT: 0

我们先来看看表中记录的统计信息是什么样子的。

-------------------- --------- -------------------- -------------- ------ ------------

NUMBER _OF_BYTES: NULL

1 row in set (0.00 sec)

# table_io_waits_summary_by_index_usage表

1row inset (0.00sec)

FLAGS: NULL

# events_waits_summary_by_host_by_event_name表

admin@localhost : performance _schema 01:55:49> select * from table_io _waits_summary _by_index _usage where SUM_TIMER_WAIT!=0G;

使用show命令来查询你的数据库实例是否支持INFORMATION_SCHEMA引擎

1 row in set (0.00 sec)

root@localhost : performance _schema 11:07:14> select * from events_waits _summary_by _host_by _event_name limit 1G

*************************** 1. row ***************************

qogir_env@localhost : performance_schema 02:41:54> show engines;

上面的输出结果中,TIMER_WAIT字段即表示该事件的时间开销,单位是皮秒,在实际的应用场景中,我们可以利用该字段信息进行倒序排序,以便找出时间开销最大的等待事件。

*************************** 1. row ***************************

OBJECT_TYPE: TABLE

-------------------- --------- ---------------------------------------------------------------- -------------- ------ ------------

events_waits_current表完整的字段含义如下:

HOST: NULL

OBJECT_SCHEMA: xiaoboluo

| Engine |Support | Comment

THREAD_ID,EVENT_ID:与事件关联的线程ID和当前事件ID。THREAD_ID和EVENT_ID值构成了该事件信息行的唯一标识(不会有重复的THREAD_ID EVENT_ID值)

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

OBJECT_NAME: test

|Transactions | XA |Savepoints |

END_EVENT_ID:当一个事件正在执行时该列值为NULL,当一个事件执行结束时把该事件的ID更新到该列

COUNT_STAR: 0

INDEX_NAME: PRIMARY

-------------------- --------- ---------------------------------------------------------------- -------------- ------ ------------

EVENT_NAME:产生事件的instruments名称。该名称来自setup_instruments表的NAME字段值

SUM _TIMER_WAIT: 0

COUNT_STAR: 1

......

SOURCE:产生该事件的instruments所在的源文件名称以及检测到该事件发生点的代码行号。您可以查看源代码来确定涉及的代码。例如,如果互斥锁、锁被阻塞,您可以检查发生这种情况的上下文环境

MIN _TIMER_WAIT: 0

SUM _TIMER_WAIT: 56688392

|PERFORMANCE_SCHEMA | YES |Performance Schema

TIMER_START,TIMER_END,TIMER_WAIT:事件的时间信息。单位皮秒(万亿分之一秒)。 TIMER_START和TIMER_END值表示事件开始和结束时间。 TIMER_WAIT是事件经过时间(即事件执行了多长时间)

AVG _TIMER_WAIT: 0

MIN _TIMER_WAIT: 56688392

| NO |NO | NO |

  • 如果事件未执行完成,则TIMER_END为当前计时器时间值(当前时间),TIMER_WAIT为目前为止所经过的时间(TIMER_END - TIMER_START)
  • 如果采集该事件的instruments配置项TIMED = NO,则不会收集事件的时间信息,TIMER_START,TIMER_END和TIMER_WAIT在这种情况下均记录为NULL

MAX _TIMER_WAIT: 0

AVG _TIMER_WAIT: 56688392

......

SPINS:对于互斥量和自旋次数。如果该列值为NULL,则表示代码中没有使用自旋或者说自旋没有被监控起来

1 row in set (0.00 sec)

MAX _TIMER_WAIT: 56688392

9rows inset (0.00sec)

OBJECT_SCHEMA,OBJECT_NAME,OBJECT_TYPE,OBJECT_INSTANCE_BEGIN:这些列标识了一个正在被执行的对象,所以这些列记录的信息含义需要看对象是什么类型,下面按照不同对象类型分别对这些列的含义进行说明:

# events_waits_summary_by_instance表

COUNT_READ: 1

当我们看到PERFORMANCE_SCHEMA 对应的Support 字段输出为YES时就表示我们当前的数据库版本是支持performance_schema的。但知道我们的实例支持performance_schema引擎就可以使用了吗?NO,很遗憾,performance_schema在5.6及其之前的版本中,默认没有启用,从5.7及其之后的版本才修改为默认启用。现在,我们来看看如何设置performance_schema默认启用吧!

* 对于同步对象(cond,mutex,rwlock):

root@localhost : performance _schema 11:08:05> select * from events_waits _summary_by_instance limit 1G

SUM _TIMER_READ: 56688392

2.2. 启用performance_schema

* 1)、OBJECT_SCHEMA,OBJECT_NAME和OBJECT_TYPE列值都为NULL

*************************** 1. row ***************************

MIN _TIMER_READ: 56688392

从上文中我们已经知道,performance_schema在5.7.x及其以上版本中默认启用(5.6.x及其以下版本默认关闭),如果要显式启用或关闭时,我们需要使用参数performance_schema=ON|OFF设置,并在my.cnf中进行配置:

* 2)、OBJECT_INSTANCE_BEGIN列是内存中同步对象的地址。OBJECT_INSTANCE_BEGIN除了不同的值标记不同的对象之外,其值本身没有意义。但OBJECT_INSTANCE_BEGIN值可用于调试。例如,它可以与GROUP BY OBJECT_INSTANCE_BEGIN子句一起使用来查看1,000个互斥体(例如:保护1,000个页或数据块)上的负载是否是均匀分布还是发生了一些瓶颈。如果在日志文件或其他调试、性能工具中看到与该语句查看的结果中有相同的对象地址,那么,在你分析性能问题时,可以把这个语句查看到的信息与其他工具查看到的信息关联起来。

EVENT_NAME: wait/synch/mutex/mysys/THR_LOCK_heap

AVG _TIMER_READ: 56688392

[mysqld]

* 对于文件I/O对象:

OBJECT _INSTANCE_BEGIN: 32492032

MAX _TIMER_READ: 56688392

performance_schema= ON# 注意:该参数为只读参数,需要在实例启动之前设置才生效

* 1)、OBJECT_SCHEMA列值为NULL

COUNT_STAR: 0

......

mysqld启动之后,通过如下语句查看performance_schema是否启用生效(值为ON表示performance_schema已初始化成功且可以使用了。如果值为OFF表示在启用performance_schema时发生某些错误。可以查看错误日志进行排查):

* 2)、OBJECT_NAME列是文件名

SUM _TIMER_WAIT: 0

1 row in set (0.00 sec)

qogir_env@localhost : performance_schema 03:13:10> SHOW VARIABLES LIKE 'performance_schema';

* 3)、OBJECT_TYPE列为FILE

MIN _TIMER_WAIT: 0

# table_io_waits_summary_by_table表

-------------------- -------

* 4)、OBJECT_INSTANCE_BEGIN列是内存中的地址,解释同上

AVG _TIMER_WAIT: 0

admin@localhost : performance _schema 01:56:16> select * from table_io _waits_summary _by_table where SUM _TIMER_WAIT!=0G;

| Variable_name |Value |

* 对于套接字对象:

MAX _TIMER_WAIT: 0

*************************** 1. row ***************************

-------------------- -------

* 1)、OBJECT_NAME列是套接字的IP:PORT值

1 row in set (0.00 sec)

OBJECT_TYPE: TABLE

|performance_schema | ON |

* 2)、OBJECT_INSTANCE_BEGIN列是内存中的地址,解释同上

# events_waits_summary_by_thread_by_event_name表

OBJECT_SCHEMA: xiaoboluo

-------------------- -------

* 对于表I/O对象:

root@localhost : performance _schema 11:08:23> select * from events_waits _summary_by _thread_by _event_name limit 1G

OBJECT_NAME: test

1row inset (0.00sec)

* 1)、OBJECT_SCHEMA列是包含该表的库名称

*************************** 1. row ***************************

COUNT_STAR: 1

现在,你可以在performance_schema下使用show tables语句或者通过查询 INFORMATION_SCHEMA.TABLES表中performance_schema引擎相关的元数据来了解在performance_schema下存在着哪些表:

* 2)、OBJECT_NAME列是表名

THREAD_ID: 1

............

通过从INFORMATION_SCHEMA.tables表查询有哪些performance_schema引擎的表:

* 3)、OBJECT_TYPE列值对于基表或者TEMPORARY TABLE临时表,该值是table,注意:对于在join查询中select_type为DERIVED,subquery等的表可能不记录事件信息也不进行统计

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

1 row in set (0.00 sec)

qogir_env@localhost : performance_schema 03:13:22> SELECT TABLE_NAME FROM INFORMATION_SCHEMA.TABLES

* 4)、OBJECT_INSTANCE_BEGIN列是内存中的地址,解释同上

COUNT_STAR: 0

# table_lock_waits_summary_by_table表

WHERE TABLE_SCHEMA ='performance_schema'andengine='performance_schema';

INDEX_NAME:表示使用的索引的名称。PRIMARY表示使用到了主键。 NULL表示没有使用索引

SUM _TIMER_WAIT: 0

admin@localhost : performance _schema 01:57:20> select * from table_lock _waits_summary _by_table where SUM _TIMER_WAIT!=0G;

------------------------------------------------------

NESTING_EVENT_ID:表示该行信息中的EVENT_ID事件是嵌套在哪个事件中,即父事件的EVENT_ID

MIN _TIMER_WAIT: 0

*************************** 1. row ***************************

| TABLE_NAME |

NESTING_EVENT_TYPE:表示该行信息中的EVENT_ID事件嵌套的事件类型。有效值有:TRANSACTION,STATEMENT,STAGE或WAIT,即父事件的事件类型,如果为TRANSACTION则需要到事务事件表中找对应NESTING_EVENT_ID值的事件,其他类型同理

AVG _TIMER_WAIT: 0

OBJECT_TYPE: TABLE

------------------------------------------------------

OPERATION:执行的操作类型,如:lock、read、write、timed_wait

MAX _TIMER_WAIT: 0

OBJECT_SCHEMA: xiaoboluo

| accounts |

NUMBER_OF_BYTES:操作读取或写入的字节数或行数。对于文件IO等待,该列值表示字节数;对于表I/O等待(wait/io/table/sql/handler instruments的事件),该列值表示行数。如果值大于1,则表示该事件对应一个批量I/O操作。以下分别对单个表IO和批量表IO的区别进行描述:

1 row in set (0.00 sec)

OBJECT_NAME: test

| cond_instances |

  • MySQL的join查询使用嵌套循环实现。performance_schema instruments的作用是在join查询中提供对每个表的扫描行数和执行时间进行统计。示例:join查询语句:SELECT … FROM t1 JOIN t2 ON … JOIN t3 ON …,假设join顺序是t1,t2,t3
  • 在join查询中,一个表在查询时与其他表展开联结查询之后,该表的扫描行数可能增加也可能减少,例如:如果t3表扇出大于1,则大多数row fetch操作都是针对t3表,假如join查询从t1表访问10行记录,然后使用t1表驱动查询t2表,t1表的每一行都会扫描t2表的20行记录,然后使用t2表驱动查询t3表,t2表的每一行都会扫描t3表的30行记录,那么,在使用单行输出时,instruments统计操作的事件信息总行数为:10 (10 * 20) (10 * 20 * 30)= 6210
  • 通过对表中行扫描时的instruments统计操作进行聚合(即,每个t1和t2的扫描行数在instruments统计中可以算作一个批量组合),这样就可以减少instruments统计操作的数量。通过批量I/O输出方式,performance_schema每次对最内层表t3的扫描减少为一个事件统计信息而不是每一行扫描都生成一个事件信息,此时对于instruments统计操作的事件行数量减少到:10 (10 * 20) (10 * 20)= 410,这样在该join查询中对于performance_schema中的行统计操作就减少了93%,批量输出策略通过减少输出行数量来显着降低表I/O的performance_schema统计开销。但是相对于每行数据都单独执行统计操作,会损失对时间统计的准确度。在join查询中,批量I/O统计的时间包括用于连接缓冲、聚合和返回行到客户端的操作所花费的时间(即就是整个join语句的执行时间)

# events_waits_summary_by_user_by_event_name表

............

......

FLAGS:留作将来使用

root@localhost : performance _schema 11:08:36> select * from events_waits _summary_by _user_by _event_name limit 1G

COUNT_READ_NORMAL: 0

| users |

PS:events_waits_current表允许使用TRUNCATE TABLE语句

*************************** 1. row ***************************

SUM_TIMER_READ_NORMAL: 0

| variables_by_thread |

events_waits_history 表

USER: NULL

MIN_TIMER_READ_NORMAL: 0

------------------------------------------------------

events_waits_history表包含每个线程最近的N个等待事件。 在server启动时,N的值会自动调整。 如果要显式设置这个N大小,可以在server启动之前调整系统参数performance_schema_events_waits_history_size的值。 等待事件需要执行结束时才被添加到events_waits_history表中(没有结束时保存在events_waits_current表)。当添加新事件到events_waits_history表时,如果该表已满,则会丢弃每个线程较旧的事件

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

AVG_TIMER_READ_NORMAL: 0

87rows inset (0.00sec)

events_waits_history与events_waits_current表定义相同

COUNT_STAR: 0

MAX_TIMER_READ_NORMAL: 0

直接在performance_schema库下使用show tables语句来查看有哪些performance_schema引擎表:

PS:允许执行TRUNCATE TABLE语句

SUM _TIMER_WAIT: 0

COUNT _READ_WITH _SHARED_LOCKS: 0

qogir_env@localhost : performance_schema 03:20:43> use performance_schema

events_waits_history_long 表

MIN _TIMER_WAIT: 0

SUM _TIMER_READ _WITH_SHARED_LOCKS: 0

Database changed

events_waits_history_long表包含最近的N个等待事件(所有线程的事件)。在server启动时,N的值会自动调整。 如果要显式设置这个N大小,可以在server启动之前调整系统参数

AVG _TIMER_WAIT: 0

MIN _TIMER_READ _WITH_SHARED_LOCKS: 0

qogir_env@localhost : performance_schema 03:21:06> show tables from performance_schema;

performance_schema_events_waits_history_long_size的值。等待事件需要执行结束时才会被添加到events_waits_history_long表中(没有结束时保存在events_waits_current表),当添加新事件到events_waits_history_long表时,如果该表已满,则会丢弃该表中较旧的事件。

MAX _TIMER_WAIT: 0

AVG _TIMER_READ _WITH_SHARED_LOCKS: 0

------------------------------------------------------

events_waits_history_long与events_waits_current表结构相同

1 row in set (0.00 sec)

MAX _TIMER_READ _WITH_SHARED_LOCKS: 0

| Tables_in_performance_schema |

PS:允许使用TRUNCATE TABLE语句

# events_waits_summary_global_by_event_name表

......

------------------------------------------------------

阶段事件表

root@localhost : performance _schema 11:08:53> select * from events_waits _summary_global _by_event_name limit 1G

1 row in set (0.00 sec)

| accounts |

阶段事件记录表与等待事件记录表一样,也有三张表,这些表记录了当前与最近在MySQL实例中发生了哪些阶段事件,时间消耗是多少。阶段指的是语句执行过程中的步骤,例如:parsing 、opening tables、filesort操作等。

*************************** 1. row ***************************

从上面表中的记录信息我们可以看到,table_io_waits_summary_by_index_usage表和table_io_waits_summary_by_table有着类似的统计列,但table_io_waits_summary_by_table表是包含整个表的增删改查等待事件分类统计,table_io_waits_summary_by_index_usage区分了每个表的索引的增删改查等待事件分类统计,而table_lock_waits_summary_by_table表统计纬度类似,但它是用于统计增删改查对应的锁等待时间,而不是IO等待时间,这些表的分组和统计列含义请大家自行举一反三,这里不再赘述,下面针对这三张表做一些必要的说明:

| cond_instances |

在以往我们查看语句执行的阶段状态,常常使用SHOW PROCESSLIST语句或查询INFORMATION_SCHEMA.PROCESSLIST表来获得,但processlist方式能够查询到的信息比较有限且转瞬即逝,我们常常需要结合profiling功能来进一步统计分析语句执行的各个阶段的开销等,现在,我们不需要这么麻烦,直接使用performance_schema的阶段事件就既可以查询到所有的语句执行阶段,也可以查询到各个阶段对应的开销,因为是记录在表中,所以更可以使用SQL语句对这些数据进行排序、统计等操作

EVENT _NAME: wait/synch/mutex/sql/TC_LOG _MMAP::LOCK_tc

table_io_waits_summary_by_table表:

......

要注意:阶段事件相关配置中,setup_instruments表中stage/开头的绝大多数instruments配置默认没有开启(少数stage/开头的instruments除外,如DDL语句执行过程的stage/innodb/alter*开头的instruments默认开启的),setup_consumers表中stages相关的consumers配置默认没有开启

COUNT_STAR: 0

该表允许使用TRUNCATE TABLE语句。只将统计列重置为零,而不是删除行。对该表执行truncate还会隐式truncate table_io_waits_summary_by_index_usage表

| users |

events_stages_current 表

SUM _TIMER_WAIT: 0

table_io_waits_summary_by_index_usage表:

| variables_by_thread |

events_stages_current表包含当前阶段事件的监控信息,每个线程一行记录显示线程正在执行的stage事件的状态

MIN _TIMER_WAIT: 0

按照与table_io_waits_summary_by_table的分组列 INDEX_NAME列进行分组,INDEX_NAME有如下几种 :

------------------------------------------------------

在包含stage事件记录的表中,events_stages_current是基准表,包含stage事件记录的其他表(如:events_stages_history和events_stages_history_long表)的数据在逻辑上都来自events_stages_current表(汇总表除外)

AVG _TIMER_WAIT: 0

·如果使用到了索引,则这里显示索引的名字,如果为PRIMARY,则表示表I/O使用到了主键索引

87rows inset (0.00sec)

表记录内容示例(以下仍然是一个执行select sleep(100);语句的线程,但这里是阶段事件信息)

MAX _TIMER_WAIT: 0

·如果值为NULL,则表示表I/O没有使用到索引

现在,我们知道了在 MySQL 5.7.17 版本中,performance_schema 下一共有87张表,那么,这87帐表都是存放什么数据的呢?我们如何使用他们来查询我们想要查看的数据呢?先别着急,我们先来看看这些表是如何分类的。

root@localhost : performance _schema 12:24:40> select * from events_stages _current where EVENT_NAME='stage/sql/User sleep'G;

1 row in set (0.00 sec)

·如果是插入操作,则无法使用到索引,此时的统计值是按照INDEX_NAME = NULL计算的

2.3. performance_schema表的分类

*************************** 1. row ***************************

从上面表中的示例记录信息中,我们可以看到:

该表允许使用TRUNCATE TABLE语句。只将统计列重置为零,而不是删除行。该表执行truncate时也会隐式触发table_io_waits_summary_by_table表的truncate操作。另外使用DDL语句更改索引结构时,会导致该表的所有索引统计信息被重置

performance_schema库下的表可以按照监视不同的纬度进行了分组,例如:或按照不同数据库对象进行分组,或按照不同的事件类型进行分组,或在按照事件类型分组之后,再进一步按照帐号、主机、程序、线程、用户等,如下:

THREAD_ID: 46

每个表都有各自的一个或多个分组列,以确定如何聚合事件信息(所有表都有EVENT_NAME列,列值与setup_instruments表中NAME列值对应),如下:

table_lock_waits_summary_by_table表:

按照事件类型分组记录性能事件数据的表

EVENT_ID: 280

events_waits_summary_by_account_by_event_name表:按照列EVENT_NAME、USER、HOST进行分组事件信息

该表的分组列与table_io_waits_summary_by_table表相同

语句事件记录表,这些表记录了语句事件信息,当前语句事件表events_statements_current、历史语句事件表events_statements_history和长语句历史事件表events_statements_history_long、以及聚合后的摘要表summary,其中,summary表还可以根据帐号(account),主机(host),程序(program),线程(thread),用户(user)和全局(global)再进行细分)

END _EVENT_ID: NULL

events_waits_summary_by_host_by_event_name表:按照列EVENT_NAME、HOST进行分组事件信息

该表包含有关内部和外部锁的信息:

qogir_env@localhost : performance_schema 03:51:36> show tables like 'events_statement%';

EVENT_NAME: stage/sql/User sleep

events_waits_summary_by_instance表:按照列EVENT_NAME、OBJECT_INSTANCE_BEGIN进行分组事件信息。如果一个instruments(event_name)创建有多个实例,则每个实例都具有唯一的OBJECT_INSTANCE_BEGIN值,因此每个实例会进行单独分组

·内部锁对应SQL层中的锁。是通过调用thr_lock()函数来实现的。(官方手册上说有一个OPERATION列来区分锁类型,该列有效值为:read normal、read with shared locks、read high priority、read no insert、write allow write、write concurrent insert、write delayed、write low priority、write normal。但在该表的定义上并没有看到该字段)

----------------------------------------------------

SOURCE: item_func.cc:6056

events_waits_summary_by_thread_by_event_name表:按照列THREAD_ID、EVENT_NAME进行分组事件信息

·外部锁对应存储引擎层中的锁。通过调用handler::external_lock()函数来实现。(官方手册上说有一个OPERATION列来区分锁类型,该列有效值为:read external、write external。但在该表的定义上并没有看到该字段)

| Tables_in_performance_schema (%statement%) |

TIMER_START: 14645080545642000

events_waits_summary_by_user_by_event_name表:按照列EVENT_NAME、USER进行分组事件信息

该表允许使用TRUNCATE TABLE语句。只将统计列重置为零,而不是删除行。

----------------------------------------------------

TIMER_END: 14698320697396000

events_waits_summary_global_by_event_name表:按照EVENT_NAME列进行分组事件信息

3.文件I/O事件统计

| events_statements_current |

TIMER_WAIT: 53240151754000

所有表的统计列(数值型)都为如下几个:

文件I/O事件统计表只记录等待事件中的IO事件(不包含table和socket子类别),文件I/O事件instruments默认开启,在setup_consumers表中无具体的对应配置。它包含如下两张表:

| events_statements_history |

WORK_COMPLETED: NULL

COUNT_STAR:事件被执行的数量。此值包括所有事件的执行次数,需要启用等待事件的instruments

admin@localhost : performance_schema 06:48:12> show tables like '%file_summary%';

| events_statements_history_long |

WORK_ESTIMATED: NULL

SUM_TIMER_WAIT:统计给定计时事件的总等待时间。此值仅针对有计时功能的事件instruments或开启了计时功能事件的instruments,如果某事件的instruments不支持计时或者没有开启计时功能,则该字段为NULL。其他xxx_TIMER_WAIT字段值类似

-----------------------------------------------

| events_statements_summary_by_account_by_event_name |

NESTING _EVENT_ID: 266

MIN_TIMER_WAIT:给定计时事件的最小等待时间

| Tables_in_performance_schema (%file_summary%) |

| events_statements_summary_by_digest |

NESTING _EVENT_TYPE: STATEMENT

AVG_TIMER_WAIT:给定计时事件的平均等待时间

-----------------------------------------------

| events_statements_summary_by_host_by_event_name |

1 row in set (0.00 sec)

MAX_TIMER_WAIT:给定计时事件的最大等待时间

| file_summary_by_event_name |

| events_statements_summary_by_program |

以上的输出结果与语句的等待事件形式类似,这里不再赘述,events_stages_current表完整的字段含义如下

PS:等待事件统计表允许使用TRUNCATE TABLE语句。

| file_summary_by_instance |

| events_statements_summary_by_thread_by_event_name |

THREAD_ID,EVENT_ID:与事件关联的线程ID和当前事件ID,可以使用THREAD_ID和EVENT_ID列值来唯一标识该行,这两行的值作为组合条件时不会出现相同的数据行

执行该语句时有如下行为:

-----------------------------------------------

| events_statements_summary_by_user_by_event_name |

END_EVENT_ID:当一个事件开始执行时,对应行记录的该列值被设置为NULL,当一个事件执行结束时,对应的行记录的该列值被更新为该事件的ID

对于未按照帐户、主机、用户聚合的统计表,truncate语句会将统计列值重置为零,而不是删除行。

2rows inset ( 0. 00sec)

| events_statements_summary_global_by_event_name |

EVENT_NAME:产生事件的instruments的名称。该列值来自setup_instruments表的NAME值。instruments名称可能具有多个部分并形成层次结构,如:"stage/sql/Slave has read all relay log; waiting for more updates",其中stage是顶级名称,sql是二级名称,Slave has read all relay log; waiting for more updates是第三级名称。详见链接:

对于按照帐户、主机、用户聚合的统计表,truncate语句会删除已开端连接的帐户,主机或用户对应的行,并将其他有连接的行的统计列值重置为零(实测跟未按照帐号、主机、用户聚合的统计表一样,只会被重置不会被删除)。

两张表中记录的内容很相近:

----------------------------------------------------

此外,按照帐户、主机、用户、线程聚合的每个等待事件统计表或者events_waits_summary_global_by_event_name表,如果依赖的连接表(accounts、hosts、users表)执行truncate时,那么依赖的这些表中的统计数据也会同时被隐式truncate 。

·file_summary_by_event_name:按照每个事件名称进行统计的文件IO等待事件

11rows inset (0.00sec)

SOURCE:源文件的名称及其用于检测该事件的代码位于源文件中的行号

注意:这些表只针对等待事件信息进行统计,即包含setup_instruments表中的wait/%开头的采集器 idle空闲采集器,每个等待事件在每个表中的统计记录行数需要看如何分组(例如:按照用户分组统计的表中,有多少个活跃用户,表中就会有多少条相同采集器的记录),另外,统计计数器是否生效还需要看setup_instruments表中相应的等待事件采集器是否启用。

·file_summary_by_instance:按照每个文件实例(对应具体的每个磁盘文件,例如:表sbtest1的表空间文件sbtest1.ibd)进行统计的文件IO等待事件

等待事件记录表,与语句事件类型的相关记录表类似:

TIMER_START,TIMER_END,TIMER_WAIT:事件的时间信息。这些值的单位是皮秒(万亿分之一秒)。TIMER_START和TIMER_END值表示事件的开始时间和结束时间。TIMER_WAIT是事件执行消耗的时间(持续时间)

| 阶段事件统计表

我们先来看看表中记录的统计信息是什么样子的。

qogir_env@localhost : performance_schema 03:53:51> show tables like 'events_wait%';

  • 如果事件未执行完成,则TIMER_END为当前时间,TIMER_WAIT为当前为止所经过的时间(TIMER_END - TIMER_START)
  • 如果instruments配置表setup_instruments中对应的instruments 的TIMED字段被设置为 NO,则该instruments禁用时间收集功能,那么事件采集的信息记录中,TIMER_START,TIMER_END和TIMER_WAIT字段值均为NULL

performance_schema把阶段事件统计表也按照与等待事件统计表类似的规则进行分类聚合,阶段事件也有一部分是默认禁用的,一部分是开启的,阶段事件统计表包含如下几张表:

# file_summary_by_event_name表

-----------------------------------------------

WORK_COMPLETED,WORK_ESTIMATED:这些列提供了阶段事件进度信息

admin@localhost : performance_schema 06:23:02> show tables like '%events_stages_summary%';

admin@localhost : performance _schema 11:00:44> select * from file_summary _by_event _name where SUM_TIMER _WAIT !=0 and EVENT_NAME like '%innodb%' limit 1G;

| Tables_in_performance_schema (%wait%) |

  • 表中的WORK_COMPLETED和WORK_ESTIMATED两列,它们共同协作显示每一行的进度显示:

--------------------------------------------------------

*************************** 1. row ***************************

-----------------------------------------------

* 1)、WORK_COMPLETED:显示阶段事件已完成的工作单元数

| Tables_in_performance_schema (%events_stages_summary%) |

EVENT_NAME: wait/io/file/innodb/innodb_data_file

| events_waits_current |

* 2)、WORK_ESTIMATED:显示预计阶段事件将要完成的工作单元数

--------------------------------------------------------

COUNT_STAR: 802

| events_waits_history |

  • 如果instruments没有提供进度相关的功能,则该instruments执行事件采集时就不会有进度信息显示,WORK_COMPLETED和WORK_ESTIMATED列都会显示为NULL。如果进度信息可用,则进度信息如何显示取决于instruments的执行情况。performance_schema表提供了一个存储进度数据的容器,但不会假设你会定义何种度量单位来使用这些进度数据:

| events_stages_summary_by_account_by_event_name |

SUM_TIMER_WAIT: 412754363625

| events_waits_history_long |

* 1)、“工作单元”是在执行过程中随时间增加而增加的整数度量,例如执行过程中的字节数、行数、文件数或表数。对于特定instruments的“工作单元”的定义留给提供数据的instruments代码

| events_stages_summary_by_host_by_event_name |

MIN_TIMER_WAIT: 0

| events_waits_summary_by_account_by_event_name |

* 2)、WORK_COMPLETED值根据检测的代码不同,可以一次增加一个或多个单元

| events_stages_summary_by_thread_by_event_name |

AVG_TIMER_WAIT: 514656000

| events_waits_summary_by_host_by_event_name |

* 3)、WORK_ESTIMATED值根据检测代码,可能在阶段事件执行过程中发生变化

| events_stages_summary_by_user_by_event_name |

MAX_TIMER_WAIT: 9498247500

| events_waits_summary_by_instance |

  • 阶段事件进度指示器的表现行为有以下几种情况:

| events_stages_summary_global_by_event_name |

COUNT_READ: 577

| events_waits_summary_by_thread_by_event_name |

* 1)、instruments不支持进度:没有可用进度数据, WORK_COMPLETED和WORK_ESTIMATED列都显示为NULL

--------------------------------------------------------

SUM_TIMER_READ: 305970952875

| events_waits_summary_by_user_by_event_name |

* 2) 、instruments支持进度但对应的工作负载总工作量不可预估(无限进度):只有WORK_COMPLETED列有意义(因为他显示正在执行的进度显示),WORK_ESTIMATED列此时无效,显示为0,因为没有可预估的总进度数据。通过查询events_stages_current表来监视会话,监控应用程序到目前为止执行了多少工作,但无法报告对应的工作是否接近完成

5rows inset ( 0. 00sec)

MIN_TIMER_READ: 15213375

| events_waits_summary_global_by_event_name |

* 3)、instruments支持进度,总工作量可预估(有限进度):WORK_COMPLETED和WORK_ESTIMATED列值有效。这种类型的进度显示可用于online DDL期间的copy表阶段监视。通过查询events_stages_current表,可监控应用程序当前已经完成了多少工作,并且可以通过WORK_COMPLETED / WORK_ESTIMATED计算的比率来预估某个阶段总体完成百分比

我们先来看看这些表中记录的统计信息是什么样子的。

AVG_TIMER_READ: 530278875

-----------------------------------------------

NESTING_EVENT_ID:事件的嵌套事件EVENT_ID值(父事件ID)

# events_stages_summary_by_account_by_event_name表

MAX_TIMER_READ: 9498247500

12rows inset (0.01sec)

NESTING_EVENT_TYPE:嵌套事件类型。有效值为:TRANSACTION,STATEMENT,STAGE,WAIT。阶段事件的嵌套事件通常是statement

root@localhost : performance _schema 11:21:04> select * from events_stages _summary_by _account_by _event_name where USER is not null limit 1G

SUM _NUMBER_OF _BYTES_READ: 11567104

阶段事件记录表,记录语句执行的阶段事件的表,与语句事件类型的相关记录表类似:

对于events_stages_current表允许使用TRUNCATE TABLE语句来进行清理

*************************** 1. row ***************************

......

qogir_env@localhost : performance_schema 03:55:07> show tables like 'events_stage%';

PS:stage事件拥有一个进度展示功能,我们可以利用该进度展示功能来了解一些长时间执行的SQL的进度百分比,例如:对于需要使用COPY方式执行的online ddl,那么需要copy的数据量是一定的,可以明确的,so..这就可以为"stage/sql/copy to tmp table stage" instruments提供一个有结束边界参照的进度数据信息,这个instruments所使用的工作单元就是需要复制的数据行数,此时WORK_COMPLETED和WORK_ESTIMATED列值都是有效的可用的,两者的计算比例就表示当前copy表完成copy的行数据百分比。

USER: root

1 row in set (0.00 sec)

------------------------------------------------

  • 要查看copy表阶段事件的正在执行的进度监视功能,需要打开相关的instruments和consumers,然后查看events_stages_current表,如下:

HOST: localhost

# file_summary_by_instance表

| Tables_in_performance_schema (%stage%) |

# 配置相关instruments和consumers

EVENT_NAME: stage/sql/After create

admin@localhost : performance _schema 11:01:23> select * from file_summary _by_instance where SUM _TIMER_WAIT!=0 and EVENT_NAME like '%innodb%' limit 1G;

------------------------------------------------

UPDATEsetup_instruments SETENABLED= 'YES'WHERENAME= 'stage/sql/copy to tmp table';

COUNT_STAR: 0

*************************** 1. row ***************************

| events_stages_current |

UPDATEsetup_consumers SETENABLED= 'YES'WHERENAMELIKE'events_stages_%';

SUM _TIMER_WAIT: 0

FILE_NAME: /data/mysqldata1/innodb_ts/ibdata1

| events_stages_history |

# 然后在执行ALTER TABLE语句期间,查看events_stages_current表

MIN _TIMER_WAIT: 0

EVENT_NAME: wait/io/file/innodb/innodb_data_file

| events_stages_history_long |

events_stages_history 表

AVG _TIMER_WAIT: 0

OBJECT _INSTANCE_BEGIN: 139882156936704

| events_stages_summary_by_account_by_event_name |

events_stages_history表包含每个线程最新的N个阶段事件。 在server启动时,N的值会自动调整。 如果要显式设置N值大小,可以在server启动之前设置系统变量performance_schema_events_stages_history_size的值。stages事件在执行结束时才添加到events_stages_history表中。 当添加新事件到events_stages_history表时,如果events_stages_history表已满,则会丢弃对应线程较旧的事件events_stages_history与events_stages_current表结构相同

MAX _TIMER_WAIT: 0

COUNT_STAR: 33

| events_stages_summary_by_host_by_event_name |

PS:允许使用TRUNCATE TABLE语句

1 row in set (0.01 sec)

............

| events_stages_summary_by_thread_by_event_name |

events_stages_history_long 表

# events_stages_summary_by_host_by_event_name表

1 row in set (0.00 sec)

| events_stages_summary_by_user_by_event_name |

events_stages_history_long表包含最近的N个阶段事件。 在server启动时,N的值会自动调整。 如果要显式设置N值大小,可以在server启动之前设置系统变量performance_schema_events_stages_history_long_size的值。stages事件执行结束时才会添加到events_stages_history_long表中,当添加新事件到events_stages_history_long表时,如果events_stages_history_long表已满,则会丢弃该表中较旧的事件events_stages_history_long与events_stages_current表结构相同

root@localhost : performance _schema 11:29:27> select * from events_stages _summary_by _host_by _event_name where HOST is not null limit 1G

从上面表中的记录信息我们可以看到:

| events_stages_summary_global_by_event_name |

PS:允许使用TRUNCATE TABLE语句

*************************** 1. row ***************************

·每个文件I/O统计表都有一个或多个分组列,以表明如何统计这些事件信息。这些表中的事件名称来自setup_instruments表中的name字段:

------------------------------------------------

语句事件表

HOST: localhost

* file_summary_by_event_name表:按照EVENT_NAME列进行分组 ;

8rows inset (0.00sec)

语句事件记录表与等待事件记录表一样,也有三张表,这些表记录了当前与最近在MySQL实例中发生了哪些语句事件,时间消耗是多少。记录了各种各样的语句执行产生的语句事件信息。

EVENT_NAME: stage/sql/After create

* file_summary_by_instance表:有额外的FILE_NAME、OBJECT_INSTANCE_BEGIN列,按照FILE_NAME、EVENT_NAME列进行分组,与file_summary_by_event_name 表相比,file_summary_by_instance表多了FILE_NAME和OBJECT_INSTANCE_BEGIN字段,用于记录具体的磁盘文件相关信息。

事务事件记录表,记录事务相关的事件的表,与语句事件类型的相关记录表类似:

要注意:语句事件相关配置中,setup_instruments表中statement/*开头的所有instruments配置默认开启,setup_consumers表中statements相关的consumers配置默认开启了events_statements_current、events_statements_history、statements_digest(对应events_statements_summary_by_digest表,详见后续章节)但没有开启events_statements_history_long。

COUNT_STAR: 0

·每个文件I/O事件统计表有如下统计字段:

qogir_env@localhost : performance_schema 03:55:30> show tables like 'events_transaction%';

events_statements_current 表

SUM _TIMER_WAIT: 0

* COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT:这些列统计所有I/O操作数量和操作时间 ;

------------------------------------------------------

events_statements_current表包含当前语句事件,每个线程只显示一行最近被监视语句事件的当前状态。

MIN _TIMER_WAIT: 0

* COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,SUM_NUMBER_OF_BYTES_READ:这些列统计了所有文件读取操作,包括FGETS,FGETC,FREAD和READ系统调用,还包含了这些I/O操作的数据字节数 ;

| Tables_in_performance_schema (%transaction%) |

在包含语句事件行的表中,events_statements_current当前事件表是基础表。其他包含语句事件表中的数据在逻辑上来源于当前事件表(汇总表除外)。例如:events_statements_history和events_statements_history_long表是最近的语句事件历史的集合,events_statements_history表中每个线程默认保留10行事件历史信息,events_statements_history_long表中默认所有线程保留10000行事件历史信息

AVG _TIMER_WAIT: 0

* COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE,SUM_NUMBER_OF_BYTES_WRITE:这些列统计了所有文件写操作,包括FPUTS,FPUTC,FPRINTF,VFPRINTF,FWRITE和PWRITE系统调用,还包含了这些I/O操作的数据字节数 ;

------------------------------------------------------

表记录内容示例(以下信息仍然来自select sleep(100);语句的语句事件信息)

MAX _TIMER_WAIT: 0

* COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC:这些列统计了所有其他文件I/O操作,包括CREATE,DELETE,OPEN,CLOSE,STREAM_OPEN,STREAM_CLOSE,SEEK,TELL,FLUSH,STAT,FSTAT,CHSIZE,RENAME和SYNC系统调用。注意:这些文件I/O操作没有字节计数信息。

| events_transactions_current |

root@localhost : performance_schema 12: 36: 35> select * from events_statements_current where SQL_TEXT= 'select sleep(100)'G;

1 row in set (0.00 sec)

文件I/O事件统计表允许使用TRUNCATE TABLE语句。但只将统计列重置为零,而不是删除行。

| events_transactions_history |

*************************** 1.row ***************************

# events_stages_summary_by_thread_by_event_name表

PS:MySQL server使用几种缓存技术通过缓存从文件中读取的信息来避免文件I/O操作。当然,如果内存不够时或者内存竞争比较大时可能导致查询效率低下,这个时候您可能需要通过刷新缓存或者重启server来让其数据通过文件I/O返回而不是通过缓存返回。

| events_transactions_history_long |

THREAD_ID: 46

root@localhost : performance _schema 11:37:03> select * from events_stages _summary_by _thread_by _event_name where thread_id is not null limit 1G

4.套接字事件统计

| events_transactions_summary_by_account_by_event_name |

EVENT_ID: 334

*************************** 1. row ***************************

套接字事件统计了套接字的读写调用次数和发送接收字节计数信息,socket事件instruments默认关闭,在setup_consumers表中无具体的对应配置,包含如下两张表:

| events_transactions_summary_by_host_by_event_name |

END_EVENT_ID: NULL

THREAD_ID: 1

·socket_summary_by_instance:针对每个socket实例的所有 socket I/O操作,这些socket操作相关的操作次数、时间和发送接收字节信息由wait/io/socket/* instruments产生。但当连接中断时,在该表中对应socket连接的信息行将被删除(这里的socket是指的当前活跃的连接创建的socket实例)

| events_transactions_summary_by_thread_by_event_name |

EVENT_NAME: statement/sql/select

EVENT_NAME: stage/sql/After create

·socket_summary_by_event_name:针对每个socket I/O instruments,这些socket操作相关的操作次数、时间和发送接收字节信息由wait/io/socket/* instruments产生(这里的socket是指的当前活跃的连接创建的socket实例)

| events_transactions_summary_by_user_by_澳门威斯尼斯人手机版,event_name |

SOURCE: socket_connection.cc: 101

COUNT_STAR: 0

可通过如下语句查看:

| events_transactions_summary_global_by_event_name |

TIMER_START: 15354770719802000

SUM _TIMER_WAIT: 0

admin@localhost : performance_schema 06:53:42> show tables like '%socket%summary%';

------------------------------------------------------

TIMER_END: 15396587017809000

MIN _TIMER_WAIT: 0

-------------------------------------------------

8rows inset (0.00sec)

TIMER_WAIT: 41816298007000

AVG _TIMER_澳门威斯尼斯人手机版mysql服务器io等待高定位与分析,performance_schema全方位介绍。WAIT: 0

| Tables_in_performance_schema (%socket%summary%) |

监视文件系统层调用的表:

LOCK_TIME: 0

MAX _TIMER_WAIT: 0

-------------------------------------------------

qogir_env@localhost : performance_schema 03:58:27> show tables like '%file%';

SQL_TEXT: select sleep( 100)

1 row in set (0.01 sec)

| socket_summary_by_event_name |

---------------------------------------

DIGEST: NULL

# events_stages_summary_by_user_by_event_name表

| socket_summary_by_instance |

| Tables_in_performance_schema (%file%) |

DIGEST_TEXT: NULL

root@localhost : performance _schema 11:42:37> select * from events_stages _summary_by _user_by _event_name where user is not null limit 1G

-------------------------------------------------

---------------------------------------

CURRENT_SCHEMA: NULL

*************************** 1. row ***************************

2rows inset ( 0. 00sec)

| file_instances |

OBJECT_TYPE: NULL

USER: root

我们先来看看表中记录的统计信息是什么样子的。

| file_summary_by_event_name |

OBJECT_SCHEMA: NULL

EVENT_NAME: stage/sql/After create

# socket_summary_by_event_name表

| file_summary_by_instance |

OBJECT_NAME: NULL

COUNT_STAR: 0

root@localhost : performance _schema 04:44:00> select * from socket_summary _by_event_nameG;

---------------------------------------

OBJECT_INSTANCE_BEGIN: NULL

SUM _TIMER_WAIT: 0

*************************** 1. row ***************************

3rows inset (0.01sec)

MYSQL_ERRNO: 0

MIN _TIMER_WAIT: 0

EVENT_NAME: wait/io/socket/sql/server_tcpip_socket

监视内存使用的表:

RETURNED_SQLSTATE: NULL

AVG _TIMER_WAIT: 0

COUNT_STAR: 2560

qogir_env@localhost : performance_schema 03:58:38> show tables like '%memory%';

MESSAGE_TEXT: NULL

MAX _TIMER_WAIT: 0

SUM_TIMER_WAIT: 62379854922

-----------------------------------------

ERRORS: 0

1 row in set (0.00 sec)

MIN_TIMER_WAIT: 1905016

| Tables_in_performance_schema (%memory%) |

WARNINGS: 0

# events_stages_summary_global_by_event_name表

AVG_TIMER_WAIT: 24366870

-----------------------------------------

ROWS_AFFECTED: 0

root@localhost : performance _schema 11:43:03> select * from events_stages _summary_global _by_event_name limit 1G

MAX_TIMER_WAIT: 18446696808701862260

| memory_summary_by_account_by_event_name |

ROWS_SENT: 0

*************************** 1. row ***************************

COUNT_READ: 0

| memory_summary_by_host_by_event_name |

ROWS_EXAMINED: 0

EVENT_NAME: stage/sql/After create

SUM_TIMER_READ: 0

| memory_summary_by_thread_by_event_name |

CREATED_TMP_DISK_TABLES: 0

COUNT_STAR: 0

MIN_TIMER_READ: 0

| memory_summary_by_user_by_event_name |

CREATED_TMP_TABLES: 0

SUM _TIMER_WAIT: 0

AVG_TIMER_READ: 0

| memory_summary_global_by_event_name |

SELECT_FULL_JOIN: 0

MIN _TIMER_WAIT: 0

MAX_TIMER_READ: 0

-----------------------------------------

SELECT_FULL_RANGE_JOIN: 0

AVG _TIMER_WAIT: 0

SUM _NUMBER_OF _BYTES_READ: 0

5rows inset (0.01sec)

SELECT_RANGE: 0

MAX _TIMER_WAIT: 0

......

动态对performance_schema进行配置的配置表:

SELECT_RANGE_CHECK: 0

1 row in set (0.00 sec)

*************************** 2. row ***************************

root@localhost : performance_schema 12:18:46> show tables like '%setup%';

SELECT_SCAN: 0

从上面表中的示例记录信息中,我们可以看到,同样与等待事件类似,按照用户、主机、用户 主机、线程等纬度进行分组与统计的列,这些列的含义与等待事件类似,这里不再赘述。

EVENT_NAME: wait/io/socket/sql/server_unix_socket

----------------------------------------

SORT_MERGE_PASSES: 0

注意:这些表只针对阶段事件信息进行统计,即包含setup_instruments表中的stage/%开头的采集器,每个阶段事件在每个表中的统计记录行数需要看如何分组(例如:按照用户分组统计的表中,有多少个活跃用户,表中就会有多少条相同采集器的记录),另外,统计计数器是否生效还需要看setup_instruments表中相应的阶段事件采集器是否启用。

COUNT_STAR: 24

| Tables_in_performance_schema (%setup%) |

SORT_RANGE: 0

PS:对这些表使用truncate语句,影响与等待事件类似。

......

----------------------------------------

SORT_ROWS: 0

| 事务事件统计表

*************************** 3. row ***************************

| setup_actors |

SORT_SCAN: 0

performance_schema把事务事件统计表也按照与等待事件统计表类似的规则进行分类统计,事务事件instruments只有一个transaction,默认禁用,事务事件统计表有如下几张表:

EVENT_NAME: wait/io/socket/sql/client_connection

| setup_consumers |

NO_INDEX_USED: 0

admin@localhost : performance_schema 06:37:45> show tables like '%events_transactions_summary%';

COUNT_STAR: 213055844

| setup_instruments |

NO_GOOD_INDEX_USED: 0

--------------------------------------------------------------

......

| setup_objects |

NESTING_EVENT_ID: NULL

| Tables_in_performance_schema (%events_transactions_summary%) |

3 rows in set (0.00 sec)

| setup_timers |

NESTING_EVENT_TYPE: NULL

--------------------------------------------------------------

# socket_summary_by_instance表

----------------------------------------

NESTING_EVENT_LEVEL: 0

| events_transactions_summary_by_account_by_event_name |

root@localhost : performance _schema 05:11:45> select * from socket_summary _by_instance where COUNT_STAR!=0G;

5rows inset (0.00sec)

1row in set ( 0.00sec)

| events_transactions_summary_by_host_by_event_name |

*************************** 1. row ***************************

现在,我们已经大概知道了performance_schema中的主要表的分类,但,如何使用他们来为我们提供需要的性能事件数据呢?下面,我们介绍如何通过performance_schema下的配置表来配置与使用performance_schema。

以上的输出结果与语句的等待事件形式类似,这里不再赘述,events_statements_current表完整的字段含义如下:

| events_transactions_summary_by_thread_by_event_name |

EVENT_NAME: wait/io/socket/sql/server_tcpip_socket

2.4. performance_schema简单配置与使用

THREAD_ID,EVENT_ID:与事件关联的线程号和事件启动时的事件编号,可以使用THREAD_ID和EVENT_ID列值来唯一标识该行,这两行的值作为组合条件时不会出现相同的数据行

| events_transactions_summary_by_user_by_event_name |

OBJECT _INSTANCE_BEGIN: 2655350784

数据库刚刚初始化并启动时,并非所有instruments(事件采集项,在采集项的配置表中每一项都有一个开关字段,或为YES,或为NO)和consumers(与采集项类似,也有一个对应的事件类型保存表配置项,为YES就表示对应的表保存性能数据,为NO就表示对应的表不保存性能数据)都启用了,所以默认不会收集所有的事件,可能你需要检测的事件并没有打开,需要进行设置,可以使用如下两个语句打开对应的instruments和consumers(行计数可能会因MySQL版本而异),例如,我们以配置监测等待事件数据为例进行说明:

END_EVENT_ID:当一个事件开始执行时,对应行记录的该列值被设置为NULL,当一个事件执行结束时,对应的行记录的该列值被更新为该事件的ID

| events_transactions_summary_global_by_event_name |

......

打开等待事件的采集器配置项开关,需要修改setup_instruments 配置表中对应的采集器配置项

EVENT_NAME:产生事件的监视仪器的名称。该列值来自setup_instruments表的NAME值。对于SQL语句,EVENT_NAME值最初的instruments是statement/com/Query,直到语句被解析之后,会更改为更合适的具体instruments名称,如:statement/sql/insert

--------------------------------------------------------------

*************************** 2. row ***************************

qogir_env@localhost: performance_schema 03:34:40> UPDATE setup_instruments SET ENABLED = 'YES', TIMED = 'YES'where name like 'wait%';;

SOURCE:源文件的名称及其用于检测该事件的代码位于源文件中的行号,您可以检查源代码来确定涉及的代码

5rows inset ( 0. 00sec)

EVENT_NAME: wait/io/socket/sql/server_unix_socket

QueryOK, 0 rowsaffected(0.00sec)

TIMER_START,TIMER_END,TIMER_WAIT:事件的时间信息。这些值的单位是皮秒(万亿分之一秒)。 TIMER_START和TIMER_END值表示事件的开始时间和结束时间。TIMER_WAIT是事件执行消耗的时间(持续时间)

我们先来看看这些表中记录的统计信息是什么样子的(由于单行记录较长,这里只列出events_transactions_summary_by_account_by_event_name表中的示例数据,其余表的示例数据省略掉部分相同字段)。

OBJECT _INSTANCE_BEGIN: 2655351104

Rowsmatched: 323 Changed: 0 Warnings: 0

  • 如果事件未执行完成,则TIMER_END为当前时间,TIMER_WAIT为当前为止所经过的时间(TIMER_END - TIMER_START)。
  • 如果监视仪器配置表setup_instruments中对应的监视器TIMED字段被设置为 NO,则不会收集该监视器的时间信息,那么对于该事件采集的信息记录中,TIMER_START,TIMER_END和TIMER_WAIT字段值均为NULL

# events_transactions_summary_by_account_by_event_name表

......

打开等待事件的保存表配置开关,修改修改setup_consumers 配置表中对应的配置i向

LOCK_TIME:等待表锁的时间。该值以微秒进行计算,但最终转换为皮秒显示,以便更容易与其他performance_schema中的计时器进行比较

root@localhost : performance _schema 01:19:07> select * from events_transactions _summary_by _account_by _event_name where COUNT_STAR!=0 limit 1G

*************************** 3. row ***************************

qogir_env@localhost: performance_schema 04:23:40> UPDATE setup_consumers SET ENABLED = 'YES'where name like '%wait%';

SQL_TEXT:SQL语句的文本。如果该行事件是与SQL语句无关的command事件,则该列值为NULL。默认情况下,语句最大显示长度为1024字节。如果要修改,则在server启动之前设置系统变量performance_schema_max_sql_text_length的值

*************************** 1. row ***************************

EVENT_NAME: wait/io/socket/sql/client_connection

QueryOK, 3 rowsaffected(0.04sec)

DIGEST:语句摘要的MD5 hash值,为32位十六进制字符串,如果在setup_consumers表中statement_digest配置行没有开启,则语句事件中该列值为NULL

USER: root

OBJECT _INSTANCE_BEGIN: 2658003840

Rowsmatched: 3 Changed: 3 Warnings: 0

DIGEST_TEXT:标准化转换过的语句摘要文本,如果setup_consumers表中statements_digest配置行没有开启,则语句事件中该列值为NULL。performance_schema_max_digest_length系统变量决定着在存入该表时的最大摘要语句文本的字节长度(默认为1024字节),要注意:用于计算摘要语句文本的原始语句文本字节长度由系统变量max_digest_length控制,而存入表中的字节长度由系统变量performance_schema_max_digest_length控制,所以,如果performance_schema_max_digest_length小于max_澳门威斯尼斯人手机版mysql服务器io等待高定位与分析,performance_schema全方位介绍。digest_length时,计算出的摘要语句文本如果大于了performance_schema_max_digest_length定义的长度会被截断

HOST: localhost

......

配置好之后,我们就可以查看server当前正在做什么,可以通过查询events_waits_current表来得知,该表中每个线程只包含一行数据,用于显示每个线程的最新监视事件(正在做的事情):

CURRENT_SCHEMA:语句使用的默认数据库(使用use db_name语句即可指定默认数据库),如果没有则为NULL

EVENT_NAME: transaction

*************************** 4. row ***************************

qogir_env@localhost : performance_schema 04:23:52> SELECT * FROM events_waits_current limit 1G

OBJECT_SCHEMA,OBJECT_NAME,OBJECT_TYPE:对于嵌套语句(存储程序最终是通过语句调用的,所以如果一个语句是由存储程序调用的,虽然说这个语句事件是嵌套在存储程序中的,但是实际上对于事件类型来讲,仍然是嵌套在语句事件中),这些列包含有关父语句的信息。如果不是嵌套语句或者是父语句本身产生的事件,则这些列值为NULL

COUNT_STAR: 7

EVENT_NAME: wait/io/socket/sql/client_connection

***************************

OBJECT_INSTANCE_BEGIN:语句的唯一标识,该列值是内存中对象的地址

SUM _TIMER_WAIT: 8649707000

OBJECT _INSTANCE_BEGIN: 2658004160

  1. row ***************************

MYSQL_ERRNO:语句执行的错误号,此值来自代码区域的语句诊断区域

MIN _TIMER_WAIT: 57571000

......

THREAD_ID: 4

RETURNED_SQLSTATE:语句执行的SQLSTATE值,此值来自代码区域的语句诊断区域

AVG _TIMER_WAIT: 1235672000

4 rows in set (0.00 sec)

EVENT_ID: 60

MESSAGE_TEXT:语句执行的具体错误信息,此值来自代码区域的语句诊断区域

MAX _TIMER_WAIT: 2427645000

从上面表中的记录信息我们可以看到(与文件I/O事件统计类似,两张表也分别按照socket事件类型统计与按照socket instance进行统计)

END_EVENT_ID: 60

ERRORS:语句执行是否发生错误。如果SQLSTATE值以00(完成)或01(警告)开始,则该列值为0。其他任何SQLSTATE值时,该列值为1

COUNT _READ_WRITE: 6

·socket_summary_by_event_name表:按照EVENT_NAME列进行分组

EVENT_NAME: wait/synch/mutex/innodb/log_sys_mutex

WARNINGS:语句警告数,此值来自代码区域的语句诊断区域

SUM _TIMER_READ_WRITE: 8592136000

·socket_summary_by_instance表:按照EVENT_NAME(该列有效值为wait/io/socket/sql/client_connection、wait/io/socket/sql/server_tcpip_socket、wait/io/socket/sql/server_unix_socket:)、OBJECT_INSTANCE_BEGIN列进行分组

SOURCE: log0log.cc:1572

ROWS_AFFECTED:受该语句影响的行数。有关“受影响”的含义的描述,参见连接:

MIN _TIMER_READ_WRITE: 87193000

每个套接字统计表都包含如下统计列:

TIMER_START: 1582395491787124480

  • 使用mysql_query()或mysql_real_query()函数执行语句后,可能会立即调用mysql_affected_rows()函数。如果是UPDATE,DELETE或INSERT,则返回最后一条语句更改、删除、插入的行数。对于SELECT语句,mysql_affected_rows()的工作方式与mysql_num_rows()一样(在执行结果最后返回的信息中看不到effected统计信息)
  • 对于UPDATE语句,受影响的行值默认为实际更改的行数。如果在连接到mysqld时指定了CLIENT_FOUND_ROWS标志给mysql_real_connect()函数,那么affected-rows的值是“found”的行数。即WHERE子句匹配到的行数
  • 对于REPLACE语句,如果发生新旧行替换操作,则受影响的行值为2,因为在这种情况下,实际上是先删除旧值,后插入新值两个行操作
  • 对于INSERT … ON DUPLICATE KEY UPDATE语句,如果行作为新行插入,则每行的affected计数为1,如果发生旧行更新为新行则每行affected计数为2,如果没有发生任何插入和更新,则每行的affected计数为0 (但如果指定了CLIENT_FOUND_ROWS标志,则没有发生任何的插入和更新时,即set值就为当前的值时,每行的受影响行值计数为1而不是0)
  • 在存储过程的CALL语句调用之后,mysql_affected_rows()返回的影响行数是存储程序中的最后一个语句执行的影响行数值,如果该语句返回-1,则存储程序最终返回0受影响。所以在存储程序执行时返回的影响行数并不可靠,但是你可以自行在存储程序中实现一个计数器变量在SQL级别使用ROW_COUNT()来获取各个语句的受影响的行值并相加,最终通过存储程序返回这个变量值。
  • 在MySQL 5.7中,mysql_affected_rows()为更多的语句返回一个有意义的值。

AVG _TIMER_READ_WRITE: 1432022000

·COUNT_STAR,SUM_TIMER_WAIT,MIN_TIMER_WAIT,AVG_TIMER_WAIT,MAX_TIMER_WAIT:这些列统计所有socket读写操作的次数和时间信息

TIMER_END: 1582395491787190144

* 1)、对于DDL语句,row_count()函数返回0,例如:CREATE TABLE、ALTER TABLE、DROP TABLE之类的语句

MAX _TIMER_READ_WRITE: 2427645000

·COUNT_READ,SUM_TIMER_READ,MIN_TIMER_READ,AVG_TIMER_READ,MAX_TIMER_READ,SUM_NUMBER_OF_BYTES_READ:这些列统计所有接收操作(socket的RECV、RECVFROM、RECVMS类型操作,即以server为参照的socket读取数据的操作)相关的次数、时间、接收字节数等信息

TIMER_WAIT: 65664

* 2)、对于除SELECT之外的DML语句:row_count()函数返回实际数据变更的行数。例如:UPDATE、INSERT、DELETE语句,现在也适用于LOAD DATA INFILE之类的语句,大于0的返回值表示DML语句做了数据变更,如果返回为0,则表示DML语句没有做任何数据变更,或者没有与where子句匹配的记录,如果返回-1则表示语句返回了错误

COUNT _READ_ONLY: 1

·COUNT_WRITE,SUM_TIMER_WRITE,MIN_TIMER_WRITE,AVG_TIMER_WRITE,MAX_TIMER_WRITE,SUM_NUMBER_OF_BYTES_WRITE:这些列统计了所有发送操作(socket的SEND、SENDTO、SENDMSG类型操作,即以server为参照的socket写入数据的操作)相关的次数、时间、接收字节数等信息

SPINS: NULL

* 3)、对于SELECT语句:row_count()函数返回-1,例如:SELECT * FROM t1语句,ROW_COUNT()返回-1(对于select语句,在调用mysql_store_result()之前调用了mysql_affected_rows()返回了)。但是对于SELECT * FROM t1 INTO OUTFILE'file_name'这样的语句,ROW_COUNT()函数将返回实际写入文件中的数据行数

SUM _TIMER_READ_ONLY: 57571000

·COUNT_MISC,SUM_TIMER_MISC,MIN_TIMER_MISC,AVG_TIMER_MISC,MAX_TIMER_MISC:这些列统计了所有其他套接字操作,如socket的CONNECT、LISTEN,ACCEPT、CLOSE、SHUTDOWN类型操作。注意:这些操作没有字节计数

OBJECT_SCHEMA: NULL

* 4)、对于SIGNAL语句:row_count()函数返回0

MIN _TIMER_READ_ONLY: 57571000

套接字统计表允许使用TRUNCATE TABLE语句(除events_statements_summary_by_digest之外),只将统计列重置为零,而不是删除行。

OBJECT_NAME: NULL

* 5)、因为mysql_affected_rows()返回的是一个无符号值,所以row_count()函数返回值小于等于0时都转换为0值返回或者不返回给effected值,row_count()函数返回值大于0时则返回给effected值

AVG _TIMER_READ_ONLY: 57571000

PS:socket统计表不会统计空闲事件生成的等待事件信息,空闲事件的等待信息是记录在等待事件统计表中进行统计的。

INDEX_NAME: NULL

ROWS_SENT:语句返回给客户端的数据行数

MAX _TIMER_READ_ONLY: 57571000

5.prepare语句实例统计表

OBJECT_TYPE: NULL

ROWS_EXAMINED:在执行语句期间从存储引擎读取的数据行数

1 row in set (0.00 sec)

performance_schema提供了针对prepare语句的监控记录,并按照如下方法对表中的内容进行管理。

OBJECT_INSTANCE_BEGIN: 955681576

CREATED_TMP_DISK_TABLES:像Created_tmp_disk_tables状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

# events_transactions_summary_by_host_by_event_name表

·prepare语句预编译:COM_STMT_PREPARE或SQLCOM_PREPARE命令在server中创建一个prepare语句。如果语句检测成功,则会在prepared_statements_instances表中新添加一行。如果prepare语句无法检测,则会增加Performance_schema_prepared_statements_lost状态变量的值。

NESTING_EVENT_ID: NULL

CREATED_TMP_TABLES:像Created_tmp_tables状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

root@localhost : performance _schema 01:25:13> select * from events_transactions _summary_by _host_by _event_name where COUNT_STAR!=0 limit 1G

·prepare语句执行:为已检测的prepare语句实例执行COM_STMT_EXECUTE或SQLCOM_PREPARE命令,同时会更新prepare_statements_instances表中对应的行信息。

NESTING_EVENT_TYPE: NULL

SELECT_FULL_JOIN:像Select_full_join状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

*************************** 1. row ***************************

·prepare语句解除资源分配:对已检测的prepare语句实例执行COM_STMT_CLOSE或SQLCOM_DEALLOCATE_PREPARE命令,同时将删除prepare_statements_instances表中对应的行信息。为了避免资源泄漏,请务必在prepare语句不需要使用的时候执行此步骤释放资源。

OPERATION: lock

SELECT_FULL_RANGE_JOIN:像Select_full_range_join状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

HOST: localhost

我们先来看看表中记录的统计信息是什么样子的。

NUMBER_OF_BYTES: NULL

SELECT_RANGE:就像Select_range状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

EVENT_NAME: transaction

admin@localhost : performance _schema 10:50:38> select * from prepared_statements_instancesG;

FLAGS: NULL

SELECT_RANGE_CHECK:像Select_range_check状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

COUNT_STAR: 7

*************************** 1. row ***************************

1 row in set (0.02 sec)

SELECT_SCAN:像Select_scan状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

......

OBJECT _INSTANCE_BEGIN: 139968890586816

# 该事件信息表示线程ID为4的线程正在等待innodb存储引擎的log_sys_mutex锁,这是innodb存储引擎的一个互斥锁,等待时间为65664皮秒(*_ID列表示事件来自哪个线程、事件编号是多少;EVENT_NAME表示检测到的具体的内容;SOURCE表示这个检测代码在哪个源文件中以及行号;计时器字段TIMER_START、TIMER_END、TIMER_WAIT分别表示该事件的开始时间、结束时间、以及总的花费时间,如果该事件正在运行而没有结束,那么TIMER_END和TIMER_WAIT的值显示为NULL。注:计时器统计的值是近似值,并不是完全精确)

SORT_MERGE_PASSES:像Sort_merge_passes状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

1 row in set (0.00 sec)

STATEMENT_ID: 1

_current表中每个线程只保留一条记录,且一旦线程完成工作,该表中不会再记录该线程的事件信息,_history表中记录每个线程已经执行完成的事件信息,但每个线程的只事件信息只记录10条,再多就会被覆盖掉,*_history_long表中记录所有线程的事件信息,但总记录数量是10000行,超过会被覆盖掉,现在咱们查看一下历史表events_waits_history 中记录了什么:

SORT_RANGE:像Sort_range状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

# events_transactions_summary_by_thread_by_event_name表

STATEMENT_NAME: stmt

qogir_env@localhost : performance_schema 06:14:08> SELECT THREAD_ID,EVENT_ID,EVENT_NAME,TIMER_WAIT FROM events_waits_history ORDER BY THREAD_ID limit 21;

SORT_ROWS:像Sort_rows状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

root@localhost : performance _schema 01:25:27> select * from events_transactions _summary_by _thread_by _event_name where SUM _TIMER_WAIT!=0G

SQL_TEXT: SELECT 1

----------- ---------- ------------------------------------------ ------------

SORT_SCAN:像Sort_scan状态变量一样的计数值,但是这里只用于这个事件中的语句统计而不针对全局、会话级别

*************************** 1. row ***************************

OWNER_THREAD_ID: 48

| THREAD_ID |EVENT_ID | EVENT_NAME |TIMER_WAIT |

NO_INDEX_USED:如果语句执行表扫描而不使用索引,则该列值为1,否则为0

THREAD_ID: 46

OWNER_EVENT_ID: 54

----------- ---------- ------------------------------------------ ------------

NO_GOOD_INDEX_USED:如果服务器找不到用于该语句的合适索引,则该列值为1,否则为0

EVENT_NAME: transaction

OWNER_OBJECT_TYPE: NULL

|4| 341 |wait/synch/mutex/innodb/fil_system_mutex | 84816 |

NESTING_EVENT_ID,NESTING_EVENT_TYPE,NESTING_EVENT_LEVEL:这三列与其他列结合一起使用,为顶级(未知抽象的语句或者说是父语句)语句和嵌套语句(在存储的程序中执行的语句)提供以下事件信息

COUNT_STAR: 7

OWNER_OBJECT_SCHEMA: NULL

| 4 |342| wait/synch/mutex/innodb/fil_system_mutex |32832|

  • 对于顶级语句:

......

OWNER_OBJECT_NAME: NULL

|4| 343 |wait/io/file/innodb/innodb_log_file | 544126864 |

OBJECT_TYPE = NULL,OBJECT_SCHEMA = NULL,OBJECT_NAME = NULL,NESTING_EVENT_ID = NULL,NESTING_EVENT_TYPE = NULL,NESTING_LEVEL = 0

1 row in set (0.00 sec)

TIMER_PREPARE: 896167000

......

  • 对于嵌套语句:OBJECT_TYPE =父语句对象类型,OBJECT_SCHEMA =父语句数据库级名称,OBJECT_NAME =父语句表级对象名称,NESTING_EVENT_ID =父语句EVENT_ID,NESTING_EVENT_TYPE ='STATEMENT',NESTING_LEVEL =父语句NESTING_LEVEL加一,例如:1,表示父语句的下一层嵌套语句

# events_transactions_summary_by_user_by_event_name表

COUNT_REPREPARE: 0

| 4 |348| wait/io/file/innodb/innodb_log_file |693076224|

允许使用TRUNCATE TABLE语句

root@localhost : performance _schema 01:27:27> select * from events_transactions _summary_by _user_by _event_name where SUM _TIMER_WAIT!=0G

COUNT_EXECUTE: 0

|4| 349 |wait/synch/mutex/innodb/fil_system_mutex | 65664 |

events_statements_history 表

*************************** 1. row ***************************

SUM_TIMER_EXECUTE: 0

| 4 |350| wait/synch/mutex/innodb/log_sys_mutex |25536|

events_statements_history表包含每个线程最新的N个语句事件。 在server启动时,N的值会自动调整。 要显式设置N的大小,可以在server启动之前设置系统变量performance_schema_events_statements_history_size的值。 statement事件执行完成时才会添加到该表中。 当添加新事件到该表时,如果对应线程的事件在该表中的配额已满,则会丢弃对应线程的较旧的事件

USER: root

MIN_TIMER_EXECUTE: 0

|13| 2260 |wait/synch/mutex/innodb/buf_pool_mutex | 111264 |

events_statements_history与events_statements_current表结构相同

EVENT_NAME: transaction

AVG_TIMER_EXECUTE: 0

| 13 |2259| wait/synch/mutex/innodb/fil_system_mutex |8708688|

PS:允许使用TRUNCATE TABLE语句

COUNT_STAR: 7

MAX_TIMER_EXECUTE: 0

......

events_statements_history_long 表

......

SUM_LOCK_TIME: 0

|13| 2261 |wait/synch/mutex/innodb/flush_list_mutex | 122208 |

events_statements_history_long表包含最近的N个语句事件。在server启动时,N的值会自动调整。 要显式设置N的大小,可以在server启动之前设置系统变量performance_schema_events_statements_history_long_size的值。 statement事件需要执行结束时才会添加到该表中。 当添加新事件到该表时,如果该表的全局配额已满,则会丢弃该表中较旧的事件

1 row in set (0.00 sec)

SUM_ERRORS: 0

| 15 |291| wait/synch/mutex/innodb/buf_dblwr_mutex |37392|

events_statements_history_long与events_statements_current表结构相同

# events_transactions_summary_global_by_event_name表

SUM_WARNINGS: 0

----------- ---------- ------------------------------------------ ------------

PS:允许使用TRUNCATE TABLE语句

root@localhost : performance _schema 01:27:32> select * from events_transactions _summary_global _by_event _name where SUM_TIMER_WAIT!=0G

SUM_ROWS_AFFECTED: 0

21 rows inset (0.00 sec)

事务事件表

*************************** 1. row ***************************

SUM_ROWS_SENT: 0

summary表提供所有事件的汇总信息。该组中的表以不同的方式汇总事件数据(如:按用户,按主机,按线程等等)。例如:要查看哪些instruments占用最多的时间,可以通过对events_waits_summary_global_by_event_name表的COUNT_STAR或SUM_TIMER_WAIT列进行查询(这两列是对事件的记录数执行COUNT(*)、事件记录的TIMER_WAIT列执行SUM(TIMER_WAIT)统计而来),如下:

事务事件记录表与等待事件记录表一样,也有三张表,这些表记录了当前与最近在MySQL实例中发生了哪些事务事件,时间消耗是多少

EVENT_NAME: transaction

......

qogir_env@localhost : performance_schema 06:17:23> SELECT EVENT_NAME,COUNT_STAR FROM events_waits_summary_global_by_event_name

要注意:事务事件相关配置中,setup_instruments表中只有一个名为transaction的instrument,默认关闭,setup_consumers表中transactions相关的consumers配置默认关闭了

COUNT_STAR: 7

1 row in set (0.00 sec)

ORDER BY COUNT_STAR DESC LIMIT 10;

events_transactions_current 表

......

prepared_statements_instances表字段含义如下:

| EVENT_NAME |COUNT_STAR |

events_transactions_current表包含当前事务事件信息,每个线程只保留一行最近事务的事务事件

1 row in set (0.00 sec)

·OBJECT_INSTANCE_BEGIN:prepare语句事件的instruments 实例内存地址。

--------------------------------------------------- ------------

在包含事务事件信息的表中,events_transactions_current是基础表。其他包含事务事件信息的表中的数据逻辑上来源于当前事件表。例如:events_transactions_history和events_transactions_history_long表分别包含每个线程最近10行事务事件信息和全局最近10000行事务事件信息

从上面表中的示例记录信息中,我们可以看到,同样与等待事件类似,按照用户、主机、用户 主机、线程等纬度进行分组与统计的列,这些列的含义与等待事件类似,这里不再赘述,但对于事务统计事件,针对读写事务和只读事务还单独做了统计(xx_READ_WRITE和xx_READ_ONLY列,只读事务需要设置只读事务变量transaction_read_only=on才会进行统计)。

·STATEMENT_ID:由server分配的语句内部ID。文本和二进制协议都使用该语句ID。

|wait/synch/mutex/mysys/THR_LOCK_malloc | 6419 |

表记录内容示例(以下信息来自对某表执行了一次select等值查询的事务事件信息)

注意:这些表只针对事务事件信息进行统计,即包含且仅包含setup_instruments表中的transaction采集器,每个事务事件在每个表中的统计记录行数需要看如何分组(例如:按照用户分组统计的表中,有多少个活跃用户,表中就会有多少条相同采集器的记录),另外,统计计数器是否生效还需要看transaction采集器是否启用。

·STATEMENT_NAME:对于二进制协议的语句事件,此列值为NULL。对于文本协议的语句事件,此列值是用户分配的外部语句名称。例如:PREPARE stmt FROM'SELECT 1';,语句名称为stmt。

| wait/io/file/sql/FRM |452|

root@localhost : performance _schema 12:50:10> select * from events_transactions_currentG;

事务聚合统计规则

·SQL_TEXT:prepare的语句文本,带“?”的表示是占位符标记,后续execute语句可以对该标记进行传参。

|wait/synch/mutex/sql/LOCK_plugin | 337 |

*************************** 1. row ***************************

* 事务事件的收集不考虑隔离级别,访问模式或自动提交模式

·OWNER_THREAD_ID,OWNER_EVENT_ID:这些列表示创建prepare语句的线程ID和事件ID。

| wait/synch/mutex/mysys/THR_LOCK_open |187|

THREAD_ID: 46

* 读写事务通常比只读事务占用更多资源,因此事务统计表包含了用于读写和只读事务的单独统计列

·OWNER_OBJECT_TYPE,OWNER_OBJECT_SCHEMA,OWNER_OBJECT_NAME:对于由客户端会话使用SQL语句直接创建的prepare语句,这些列值为NULL。对于由存储程序创建的prepare语句,这些列值显示相关存储程序的信息。如果用户在存储程序中忘记释放prepare语句,那么这些列可用于查找这些未释放的prepare对应的存储程序,使用语句查询:SELECT OWNER_OBJECT_TYPE,OWNER_OBJECT_SCHEMA,OWNER_OBJECT_NAME,STATEMENT_NAME,SQL_TEXT FROM performance_schema.prepared_statemments_instances WHERE OWNER_OBJECT_TYPE IS NOT NULL;

|wait/synch/mutex/mysys/LOCK_alarm | 147 |

EVENT_ID: 38685

* 事务所占用的资源需求多少也可能会因事务隔离级别有所差异(例如:锁资源)。但是:每个server可能是使用相同的隔离级别,所以不单独提供隔离级别相关的统计列

·TIMER_PREPARE:执行prepare语句本身消耗的时间。

| wait/synch/mutex/sql/THD::LOCK_thd_data |115|

END_EVENT_ID: 38707

PS:对这些表使用truncate语句,影响与等待事件类似。

· COUNT_REPREPARE:该行信息对应的prepare语句在内部被重新编译的次数,重新编译prepare语句之后,之前的相关统计信息就不可用了,因为这些统计信息是作为语句执行的一部分被聚合到表中的,而不是单独维护的。

|wait/io/file/myisam/kfile | 102 |

EVENT_NAME: transaction

| 语句事件统计表

·COUNT_EXECUTE,SUM_TIMER_EXECUTE,MIN_TIMER_EXECUTE,AVG_TIMER_EXECUTE,MAX_TIMER_EXECUTE:执行prepare语句时的相关统计数据。

| wait/synch/mutex/sql/LOCK_global_system_variables |89|

STATE: COMMITTED

performance_schema把语句事件统计表也按照与等待事件统计表类似的规则进行分类统计,语句事件instruments默认全部开启,所以,语句事件统计表中默认会记录所有的语句事件统计信息,语句事件统计表包含如下几张表:

·SUM_xxx:其余的SUM_xxx开头的列与语句统计表中的信息相同,语句统计表后续章节会详细介绍。

|wait/synch/mutex/mysys/THR_LOCK::mutex | 89 |

TRX_ID: 422045139261264

events_statements_summary_by_account_by_event_name:按照每个帐户和语句事件名称进行统计

允许执行TRUNCATE TABLE语句,但是TRUNCATE TABLE只是重置prepared_statements_instances表的统计信息列,但是不会删除该表中的记录,该表中的记录会在prepare对象被销毁释放的时候自动删除。

| wait/synch/mutex/sql/LOCK_open |88|

GTID: AUTOMATIC

events_statements_summary_by_digest:按照每个库级别对象和语句事件的原始语句文本统计值(md5 hash字符串)进行统计,该统计值是基于事件的原始语句文本进行精炼(原始语句转换为标准化语句),每行数据中的相关数值字段是具有相同统计值的统计结果。

PS:什么是prepare语句?prepare语句实际上就是一个预编译语句,先把SQL语句进行编译,且可以设定参数占位符(例如:?符号),然后调用时通过用户变量传入具体的参数值(叫做变量绑定),如果一个语句需要多次执行而仅仅只是where条件不同,那么使用prepare语句可以大大减少硬解析的开销,prepare语句有三个步骤,预编译prepare语句,执行prepare语句,释放销毁prepare语句,prepare语句支持两种协议,前面已经提到过了,binary协议一般是提供给应用程序的mysql c api接口方式访问,而文本协议提供给通过客户端连接到mysql server的方式访问,下面以文本协议的方式访问进行演示说明:

--------------------------------------------------- ------------

XID_FORMAT_ID: NULL

events_statements_summary_by_host_by_event_name:按照每个主机名和事件名称进行统计的Statement事件

·prepare步骤:语法PREPARE stmt_name FROM preparable_stmt,示例:PREPARE stmt FROM'SELECT 1'; 执行了该语句之后,在prepared_statements_instances表中就可以查询到一个prepare示例对象了;

qogir_env@localhost : performance_schema 06:19:20> SELECT EVENT_NAME,SUM_TIMER_WAIT FROM events_waits_summary_global_by_event_name

XID_GTRID: NULL

events_statements_summary_by_program:按照每个存储程序(存储过程和函数,触发器和事件)的事件名称进行统计的Statement事件

·execute步骤:语法EXECUTE stmt_name[USING @var_name [, @var_name] …],示例:execute stmt; 返回执行结果为1,此时在prepared_statements_instances表中的统计信息会进行更新;

ORDER BY SUM_TIMER_WAIT DESC LIMIT 10;

XID_BQUAL: NULL

events_statements_summary_by_thread_by_event_name:按照每个线程和事件名称进行统计的Statement事件

·DEALLOCATE PREPARE步骤:语法 {DEALLOCATE | DROP} PREPARE stmt_name,示例:drop prepare stmt; ,此时在prepared_statements_instances表中对应的prepare示例记录自动删除。

---------------------------------------- ----------------

XA_STATE: NULL

events_statements_summary_by_user_by_event_name:按照每个用户名和事件名称进行统计的Statement事件

6.instance 统计表

|EVENT_NAME | SUM_TIMER_WAIT |

SOURCE: handler.cc:1421

events_statements_summary_global_by_event_name:按照每个事件名称进行统计的Statement事件

instance表记录了哪些类型的对象被检测。这些表中记录了事件名称(提供收集功能的instruments名称)及其一些解释性的状态信息(例如:file_instances表中的FILE_NAME文件名称和OPEN_COUNT文件打开次数),instance表主要有如下几个:

---------------------------------------- ----------------

TIMER_START: 16184509764409000

prepared_statements_instances:按照每个prepare语句实例聚合的统计信息

·cond_instances:wait sync相关的condition对象实例;

| wait/io/file/sql/MYSQL_LOG |1599816582|

TIMER_END: 16184509824175000

可通过如下语句查看语句事件统计表:

·file_instances:文件对象实例;

|wait/synch/mutex/mysys/THR_LOCK_malloc | 1530083250 |

TIMER_WAIT: 59766000

admin@localhost : performance_schema 06:27:58> show tables like '%events_statements_summary%';

·mutex_instances:wait sync相关的Mutex对象实例;

| wait/io/file/sql/binlog_index |1385291934|

ACCESS_MODE: READ WRITE

------------------------------------------------------------

·rwlock_instances:wait sync相关的lock对象实例;

|wait/io/file/sql/FRM | 1292823243 |

ISOLATION_LEVEL: READ COMMITTED

| Tables_in_performance_schema (%events_statements_summary%) |

·socket_instances:活跃连接实例。

| wait/io/file/myisam/kfile |411193611|

AUTOCOMMIT: YES

------------------------------------------------------------

这些表列出了等待事件中的sync子类事件相关的对象、文件、连接。其中wait sync相关的对象类型有三种:cond、mutex、rwlock。每个实例表都有一个EVENT_NAME或NAME列,用于显示与每行记录相关联的instruments名称。instruments名称可能具有多个部分并形成层次结构,详见"配置详解 | performance_schema全方位介绍"。

|wait/io/file/myisam/dfile | 322401645 |

NUMBER_OF_SAVEPOINTS: 0

| events_statements_summary_by_account_by_event_name |

mutex_instances.LOCKED_BY_THREAD_ID和rwlock_instances.WRITE_LOCKED_BY_THREAD_ID列对于排查性能瓶颈或死锁问题至关重要。

| wait/synch/mutex/mysys/LOCK_alarm |145126935|

NUMBER _OF_ROLLBACK _TO_SAVEPOINT: 0

| events_statements_summary_by_digest |

PS:对于mutexes、conditions和rwlocks,在运行时虽然允许修改配置,且配置能够修改成功,但是有一部分instruments不生效,需要在启动时配置才会生效,如果你尝试着使用一些应用场景来追踪锁信息,你可能在这些instance表中无法查询到相应的信息。

|wait/io/file/sql/casetest | 104324715 |

NUMBER _OF_RELEASE_SAVEPOINT: 0

| events_statements_summary_by_host_by_event_name |

下面对这些表分别进行说明。

| wait/synch/mutex/sql/LOCK_plugin |86027823|

OBJECT_INSTANCE_BEGIN: NULL

| events_statements_summary_by_program |

(1)cond_instances表

|wait/io/file/sql/pid | 72591750 |

NESTING_EVENT_ID: 38667

| events_statements_summary_by_thread_by_event_name |

cond_instances表列出了server执行condition instruments 时performance_schema所见的所有condition,condition表示在代码中特定事件发生时的同步信号机制,使得等待该条件的线程在该condition满足条件时可以恢复工作。

---------------------------------------- ----------------

NESTING_EVENT_TYPE: STATEMENT

| events_statements_summary_by_user_by_event_name |

·当一个线程正在等待某事发生时,condition NAME列显示了线程正在等待什么condition(但该表中并没有其他列来显示对应哪个线程等信息),但是目前还没有直接的方法来判断某个线程或某些线程会导致condition发生改变。

# 这些结果表明,THR_LOCK_malloc互斥事件是最热的。注:THR_LOCK_malloc互斥事件仅在DEBUG版本中存在,GA版本不存在

1 row in set (0.00 sec)

| events_statements_summary_global_by_event_name |

我们先来看看表中记录的统计信息是什么样子的。

instance表记录了哪些类型的对象会被检测。这些对象在被server使用时,在该表中将会产生一条事件记录,例如,file_instances表列出了文件I/O操作及其关联文件名:

以上的输出结果与语句的等待事件形式类似,这里不再赘述,events_transactions_current表完整字段含义如下:

------------------------------------------------------------

admin@localhost : performance_schema 02:50:02> select * from cond_instances limit 1;

qogir_env@localhost : performance_schema 06:27:26> SELECT * FROM file_instances limit 20;

THREAD_ID,EVENT_ID:与事件关联的线程号和事件启动时的事件编号,可以使用THREAD_ID和EVENT_ID列值来唯一标识该行,这两行的值作为组合条件时不会出现相同的数据行

7rows inset ( 0. 00sec)

---------------------------------- -----------------------

------------------------------------------------------ -------------------------------------- ------------

END_EVENT_ID:当一个事件开始执行时,对应行记录的该列值被设置为NULL,当一个事件执行结束时,对应的行记录的该列值被更新为该事件的ID

admin@localhost : performance_schema 06:28:48> show tables like '%prepare%';

| NAME |OBJECT_INSTANCE_BEGIN |

| FILE_NAME |EVENT_NAME | OPEN_COUNT |

EVENT_NAME:收集该事务事件的instruments的名称。来自setup_instruments表的NAME列值

------------------------------------------

---------------------------------- -----------------------

------------------------------------------------------ -------------------------------------- ------------

STATE:当前事务状态。有效值为:ACTIVE(执行了START TRANSACTION或BEGIN语句之后,事务未提交或未回滚之前)、COMMITTED(执行了COMMIT之后)、ROLLED BACK(执行了ROLLBACK语句之后)

| Tables_in_performance_schema (%prepare%) |

|wait/synch/cond/sql/COND_manager | 31903008 |

| /home/mysql/program/share/english/errmsg.sys |wait/io/file/sql/ERRMSG

TRX_ID:未使用,字段值总是为NULL

------------------------------------------

---------------------------------- -----------------------

| 0 |

GTID:包含gtid_next系统变量的值,其值可能是格式为:UUID:NUMBER的GTID,也可能是:ANONYMOUS、AUTOMATIC。对于AUTOMATIC列值的事务事件,GTID列在事务提交和对应事务的GTID实际分配时都会进行更改(如果gtid_mode系统变量为ON或ON_PERMISSIVE,则GTID列将更改为事务的GTID,如果gtid_mode为OFF或OFF_PERMISSIVE,则GTID列将更改为ANONYMOUS)

| prepared_statements_instances |

1row inset ( 0. 00sec)

| /home/mysql/program/share/charsets/Index.xml |wait/io/file/mysys/charset

XID_FORMAT_ID,XID_GTRID和XID_BQUAL:XA事务标识符的组件。关于XA事务语法详见链接:

------------------------------------------

cond_instances表字段含义如下:

| 0 |

XA_STATE:XA事务的状态。有效值为:ACTIVE(执行了XA START之后,未执行其他后续XA语句之前)、IDLE(执行了XA END语句之后,未执行其他后续XA语句之前)、PREPARED(执行了XA PREPARE语句之后,未执行其他后续XA语句之前)、ROLLED BACK(执行了XA ROLLBACK语句之后,未执行其他后续XA语句之前)、COMMITTED(执行了XA COMMIT语句之后)

1row inset ( 0. 00sec)

· NAME:与condition相关联的instruments名称;

| /data/mysqldata1/innodb_ts/ibdata1 |wait/io/file/innodb/innodb_data_file | 3 |

SOURCE:源文件的名称及其用于检测该事件的代码位于源文件中的行号,您可以检查源代码来确定涉及的代码

我们先来看看这些表中记录的统计信息是什么样子的(由于单行记录较长,这里只列出events_statements_summary_by_account_by_event_name 表中的示例数据,其余表的示例数据省略掉部分相同字段)。

· OBJECT_INSTANCE_BEGIN:instruments condition的内存地址;

| /data/mysqldata1/innodb_log/ib_logfile0 |wait/io/file/innodb/innodb_log_file | 2 |

TIMER_START,TIMER_END,TIMER_WAIT:事件的时间信息。这些值的单位是皮秒(万亿分之一秒)。TIMER_START和TIMER_END值表示事件的开始时间和结束时间。TIMER_WAIT是事件执行消耗的时间(持续时间)

# events_statements_summary_by_account_by_event_name表

·PS:cond_instances表不允许使用TRUNCATE TABLE语句。

| /data/mysqldata1/innodb_log/ib_logfile1 |wait/io/file/innodb/innodb_log_file | 2 |

  • 如果事件未执行完成,则TIMER_END为当前时间,TIMER_WAIT为当前为止所经过的时间(TIMER_END - TIMER_START)
  • 如果监视仪器配置表setup_instruments中对应的监视器TIMED字段被设置为 NO,则不会收集该监视器的时间信息,那么对于该事件采集的信息记录中,TIMER_START,TIMER_END和TIMER_WAIT字段值均为NULL

root@localhost : performance _schema 10:37:27> select * from events_statements _summary_by _account_by _event_name where COUNT_STAR!=0 limit 1G

(2)file_instances表

| /data/mysqldata1/undo/undo001 |wait/io/file/innodb/innodb_data_file | 3 |

ACCESS_MODE:事务访问模式。有效值为:READ ONLY或READ WRITE

*************************** 1. row ***************************

file_instances表列出执行文件I/O instruments时performance_schema所见的所有文件。 如果磁盘上的文件从未打开,则不会在file_instances中记录。当文件从磁盘中删除时,它也会从file_instances表中删除对应的记录。

| /data/mysqldata1/undo/undo002 |wait/io/file/innodb/innodb_data_file | 3 |

ISOLATION_LEVEL:事务隔离级别。有效值为:REPEATABLE READ、READ COMMITTED、READ UNCOMMITTED、SERIALIZABLE

USER: root

我们先来看看表中记录的统计信息是什么样子的。

| /data/mysqldata1/undo/undo003 |wait/io/file/innodb/innodb_data_file | 3 |

AUTOCOMMIT:在事务开始时是否启用了自动提交模式,如果启用则为YES,没有启用则为NO

HOST: localhost

admin@localhost : performance_schema 02:53:40> select * from file_instances where OPEN_COUNT> 0limit 1;

| /data/mysqldata1/undo/undo004 |wait/io/file/innodb/innodb_data_file | 3 |

NUMBER_OF_SAVEPOINTS,NUMBER_OF_ROLLBACK_TO_SAVEPOINT,NUMBER_OF_RELEASE_SAVEPOINT:在事务内执行的SAVEPOINT,ROLLBACK TO SAVEPOINT和RELEASE SAVEPOINT语句的数量

EVENT_NAME: statement/sql/select

------------------------------------ -------------------------------------- ------------

| /data/mysqldata1/mydata/multi_master/test.ibd |wait/io/file/innodb/innodb_data_file | 1 |

OBJECT_INSTANCE_BEGIN:未使用,字段值总是为NULL

COUNT_STAR: 53

| FILE_NAME |EVENT_NAME | OPEN_COUNT |

| /data/mysqldata1/mydata/mysql/engine_cost.ibd |wait/io/file/innodb/innodb_data_file | 3 |

NESTING_EVENT_ID:嵌套事务事件的父事件EVENT_ID值

SUM_TIMER_WAIT: 234614735000

------------------------------------ -------------------------------------- ------------

| /data/mysqldata1/mydata/mysql/gtid_executed.ibd |wait/io/file/innodb/innodb_data_file | 3 |

NESTING_EVENT_TYPE:嵌套事件类型。有效值为:TRANSACTION、STATEMENT、STAGE、WAIT (由于事务无法嵌套,因此该列值不会出现TRANSACTION)

MIN_TIMER_WAIT: 72775000

| /data/mysqldata1/innodb_ts/ibdata1 |wait/io/file/innodb/innodb_data_file | 3 |

| /data/mysqldata1/mydata/mysql/help_category.ibd |wait/io/file/innodb/innodb_data_file | 3 |

允许使用TRUNCATE TABLE语句

AVG_TIMER_WAIT: 4426693000

------------------------------------ -------------------------------------- ------------

| /data/mysqldata1/mydata/mysql/help_keyword.ibd |wait/io/file/innodb/innodb_data_file | 3 |

events_transactions_history 表

MAX_TIMER_WAIT: 80968744000

1row inset ( 0. 00sec)

| /data/mysqldata1/mydata/mysql/help_relation.ibd |wait/io/file/innodb/innodb_data_file | 3 |

events_transactions_history表包含每个线程最近的N个事务事件。 在server启动时,N的值会自动调整。 要显式设置N的大小,可以在server启动之前设置系统变量

SUM_LOCK_TIME: 26026000000

file_instances表字段含义如下:

| /data/mysqldata1/mydata/mysql/help_topic.ibd |wait/io/file/innodb/innodb_data_file | 3 |

performance_schema_events_transactions_history_size的值。事务事件未执行完成之前不会添加到该表中。当有新的事务事件添加到该表时,如果该表已满,则会丢弃对应线程较旧的事务事件

SUM_ERRORS: 2

·FILE_NAME:磁盘文件名称;

| /data/mysqldata1/mydata/mysql/innodb_index_stats.ibd |wait/io/file/innodb/innodb_data_file | 3 |

events_transactions_history与events_transactions_current表结构相同

SUM_WARNINGS: 0

·EVENT_NAME:与文件相关联的instruments名称;

| /data/mysqldata1/mydata/mysql/innodb_table_stats.ibd |wait/io/file/innodb/innodb_data_file | 3 |

PS:允许使用TRUNCATE TABLE语句

SUM_ROWS_AFFECTED: 0

OPEN_COUNT:文件当前已打开句柄的计数。如果文件打开然后关闭,则打开1次,但OPEN_COUNT列将加一然后减一,因为OPEN_COUNT列只统计当前已打开的文件句柄数,已关闭的文件句柄会从中减去。要列出server中当前打开的所有文件信息,可以使用where WHERE OPEN_COUNT> 0子句进行查看。

| /data/mysqldata1/mydata/mysql/plugin.ibd |wait/io/file/innodb/innodb_data_file | 3 |

events_transactions_history_long 表

SUM_ROWS_SENT: 1635

file_instances表不允许使用TRUNCATE TABLE语句。

| /data/mysqldata1/mydata/mysql/server_cost.ibd |wait/io/file/innodb/innodb_data_file | 3 |

events_transactions_history_long表包含全局最近的N个事务事件。在server启动时,N的值会自动调整。 要显式设置N的大小,可以在server启动之前设置系统变量

SUM_ROWS_EXAMINED: 39718

(3)mutex_instances表

------------------------------------------------------ -------------------------------------- ------------

performance_schema_events_transactions_history_long_size的值。事务事件在执行完之前不会添加到该表中。当添加新事务事件时,如果该表已满,则会丢弃较旧的事件

SUM _CREATED_TMP _DISK_TABLES: 3

mutex_instances表列出了server执行mutex instruments时performance_schema所见的所有互斥量。互斥是在代码中使用的一种同步机制,以强制在给定时间内只有一个线程可以访问某些公共资源。可以认为mutex保护着这些公共资源不被随意抢占。

20rows inset (0.00sec)

events_transactions_history_long与events_transactions_current表结构相同

SUM _CREATED_TMP_TABLES: 10

当在server中同时执行的两个线程(例如,同时执行查询的两个用户会话)需要访问相同的资源(例如:文件、缓冲区或某些数据)时,这两个线程相互竞争,因此第一个成功获取到互斥体的查询将会阻塞其他会话的查询,直到成功获取到互斥体的会话执行完成并释放掉这个互斥体,其他会话的查询才能够被执行。

本文小结

PS:允许使用TRUNCATE TABLE语句

SUM _SELECT_FULL_JOIN: 21

需要持有互斥体的工作负载可以被认为是处于一个关键位置的工作,多个查询可能需要以序列化的方式(一次一个串行)执行这个关键部分,但这可能是一个潜在的性能瓶颈。

本篇内容到这里就接近尾声了,相信很多人都认为,我们大多数时候并不会直接使用performance_schema来查询性能数据,而是使用sys schema下的视图代替,为什么不直接学习sys schema呢?那你知道sys schema中的数据是从哪里吐出来的吗?performance_schema 中的数据实际上主要是从performance_schema、information_schema中获取,所以要想玩转sys schema,全面了解performance_schema必不可少。另外,对于sys schema、informatiion_schema甚至是mysql schema,我们后续也会推出不同的系列文章分享给大家。

下一篇将为大家分享 《事件统计 | performance_schema 全方位介绍》 ,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

SUM _SELECT_FULL _RANGE_JOIN: 0

我们先来看看表中记录的统计信息是什么样子的。

“翻过这座山,你就可以看到一片海”

责任编辑:

SUM_SELECT_RANGE: 0

admin@localhost : performance_schema 03:23:47> select * from mutex_instances limit 1;

下篇将为大家分享 "performance_schema之二(配置表详解)" ,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

SUM _SELECT_RANGE_CHECK: 0

-------------------------------------- ----------------------- ---------------------

责任编辑:

SUM_SELECT_SCAN: 45

| NAME |OBJECT_INSTANCE_BEGIN | LOCKED_BY_THREAD_ID |

SUM _SORT_MERGE_PASSES: 0

-------------------------------------- ----------------------- ---------------------

SUM_SORT_RANGE: 0

| wait/synch/mutex/mysys/THR_LOCK_heap |32576832| NULL |

SUM_SORT_ROWS: 170

-------------------------------------- ----------------------- ---------------------

SUM_SORT_SCAN: 6

1row inset ( 0. 00sec)

SUM_NO_INDEX_USED: 42

mutex_instances表字段含义如下:

SUM _NO_GOOD _INDEX_USED: 0

·NAME:与互斥体关联的instruments名称;

1 row in set (0.00 sec)

·OBJECT_INSTANCE_BEGIN:mutex instruments实例的内存地址;

# events_statements_summary_by_digest表

·LOCKED_BY_THREAD_ID:当一个线程当前持有一个互斥锁定时,LOCKED_BY_THREAD_ID列显示持有线程的THREAD_ID,如果没有被任何线程持有,则该列值为NULL。

root@localhost : performance _schema 11:01:51> select * from events_statements _summary_by_digest limit 1G

mutex_instances表不允许使用TRUNCATE TABLE语句。

*************************** 1. row ***************************

对于代码中的每个互斥体,performance_schema提供了以下信息:

SCHEMA_NAME: NULL

·setup_instruments表列出了instruments名称,这些互斥体都带有wait/synch/mutex/前缀;

DIGEST: 4fb483fe710f27d1d06f83573c5ce11c

·当server中一些代码创建了一个互斥量时,在mutex_instances表中会添加一行对应的互斥体信息(除非无法再创建mutex instruments instance就不会添加行)。OBJECT_INSTANCE_BEGIN列值是互斥体的唯一标识属性;

DIGEST_TEXT: SELECT @@`version_comment` LIMIT ?

·当一个线程尝试获取已经被某个线程持有的互斥体时,在events_waits_current表中会显示尝试获取这个互斥体的线程相关等待事件信息,显示它正在等待的mutex 类别(在EVENT_NAME列中可以看到),并显示正在等待的mutex instance(在OBJECT_INSTANCE_BEGIN列中可以看到);

COUNT_STAR: 3

·当线程成功锁定(持有)互斥体时:

......

* events_waits_current表中可以查看到当前正在等待互斥体的线程时间信息(例如:TIMER_WAIT列表示已经等待的时间) ;

FIRST_SEEN: 2018-05-19 22:33:50

* 已完成的等待事件将添加到events_waits_history和events_waits_history_long表中 ;

LAST_SEEN: 2018-05-20 10:24:42

* mutex_instances表中的THREAD_ID列显示该互斥体现在被哪个线程持有。

1 row in set (0.00 sec)

·当持有互斥体的线程释放互斥体时,mutex_instances表中对应互斥体行的THREAD_ID列被修改为NULL;

# events_statements_summary_by_host_by_event_name表

·当互斥体被销毁时,从mutex_instances表中删除相应的互斥体行。

root@localhost : performance _schema 11:02:15> select * from events_statements _summary_by _host_by _event_name where COUNT_STAR!=0 limit 1G

通过对以下两个表执行查询,可以实现对应用程序的监控或DBA可以检测到涉及互斥体的线程之间的瓶颈或死锁信息(events_waits_current可以查看到当前正在等待互斥体的线程信息,mutex_instances可以查看到当前某个互斥体被哪个线程持有)。

*************************** 1. row ***************************

(4)rwlock_instances表

HOST: localhost

rwlock_instances表列出了server执行rwlock instruments时performance_schema所见的所有rwlock(读写锁)实例。rwlock是在代码中使用的同步机制,用于强制在给定时间内线程可以按照某些规则访问某些公共资源。可以认为rwlock保护着这些资源不被其他线程随意抢占。访问模式可以是共享的(多个线程可以同时持有共享读锁)、排他的(同时只有一个线程在给定时间可以持有排他写锁)或共享独占的(某个线程持有排他锁定时,同时允许其他线程执行不一致性读)。共享独占访问被称为sxlock,该访问模式在读写场景下可以提高并发性和可扩展性。

EVENT_NAME: statement/sql/select

根据请求锁的线程数以及所请求的锁的性质,访问模式有:独占模式、共享独占模式、共享模式、或者所请求的锁不能被全部授予,需要先等待其他线程完成并释放。

COUNT_STAR: 55

我们先来看看表中记录的统计信息是什么样子的。

......

admin@localhost : performance_schema 10:28:45> select * from rwlock_instances limit 1;

1 row in set (0.00 sec)

------------------------------------------------------- ----------------------- --------------------------- ----------------------

# events_statements_summary_by_program表(需要调用了存储过程或函数之后才会有数据)

| NAME |OBJECT_INSTANCE_BEGIN | WRITE_LOCKED_BY_THREAD_ID |READ_LOCKED_BY_COUNT |

root@localhost : performance _schema 12:34:43> select * from events_statements _summary_by_programG;

------------------------------------------------------- ----------------------- --------------------------- ----------------------

*************************** 1. row ***************************

|wait/synch/rwlock/session/LOCK_srv_session_collection | 31856216 |NULL | 0 |

OBJECT_TYPE: PROCEDURE

------------------------------------------------------- ----------------------- --------------------------- ----------------------

OBJECT_SCHEMA: sys

1row inset ( 0. 00sec)

OBJECT_NAME: ps_setup_enable_consumer

rwlock_instances表字段含义如下:

COUNT_STAR: 1

·NAME:与rwlock关联的instruments名称;

............

·OBJECT_INSTANCE_BEGIN:读写锁实例的内存地址;

1 row in set (0.00 sec)

·WRITE_LOCKED_BY_THREAD_ID:当一个线程当前在独占(写入)模式下持有一个rwlock时,WRITE_LOCKED_BY_THREAD_ID列可以查看到持有该锁的线程THREAD_ID,如果没有被任何线程持有则该列为NULL;

# events_statements_summary_by_thread_by_event_name表

·READ_LOCKED_BY_COUNT:当一个线程在共享(读)模式下持有一个rwlock时,READ_LOCKED_BY_COUNT列值增加1,所以该列只是一个计数器,不能直接用于查找是哪个线程持有该rwlock,但它可以用来查看是否存在一个关于rwlock的读争用以及查看当前有多少个读模式线程处于活跃状态。

root@localhost : performance _schema 11:03:19> select * from events_statements _summary_by _thread_by _event_name where COUNT_STAR!=0 limit 1G

rwlock_instances表不允许使用TRUNCATE TABLE语句。

*************************** 1. row ***************************

通过对以下两个表执行查询,可以实现对应用程序的监控或DBA可以检测到涉及锁的线程之间的一些瓶颈或死锁信息:

THREAD_ID: 47

·events_waits_current:查看线程正在等待什么rwlock;

EVENT_NAME: statement/sql/select

·rwlock_instances:查看当前rwlock行的一些锁信息(独占锁被哪个线程持有,共享锁被多少个线程持有等)。

COUNT_STAR: 11

注意:rwlock_instances表中的信息只能查看到持有写锁的线程ID,但是不能查看到持有读锁的线程ID,因为写锁WRITE_LOCKED_BY_THREAD_ID字段记录的是线程ID,读锁只有一个READ_LOCKED_BY_COUNT字段来记录读锁被多少个线程持有。

......

(5) socket_instances表

1 row in set (0.01 sec)

socket_instances表列出了连接到MySQL server的活跃连接的实时快照信息。对于每个连接到mysql server中的TCP/IP或Unix套接字文件连接都会在此表中记录一行信息。(套接字统计表socket_summary_by_event_name和socket_summary_by_instance中提供了一些附加信息,例如像socket操作以及网络传输和接收的字节数)。

# events_statements_summary_by_user_by_event_name表

套接字instruments具有wait/io/socket/sql/socket_type形式的名称,如下:

root@localhost : performance _schema 11:04:10> select * from events_statements _summary_by _user_by _event_name where COUNT_STAR!=0 limit 1G

·server 监听一个socket以便为网络连接协议提供支持。对于监听TCP/IP或Unix套接字文件连接来说,分别有一个名为server_tcpip_socket和server_unix_socket的socket_type值,组成对应的instruments名称;

*************************** 1. row ***************************

·当监听套接字检测到连接时,srever将连接转移给一个由单独线程管理的新套接字。新连接线程的instruments具有client_connection的socket_type值,组成对应的instruments名称;

USER: root

·当连接终止时,在socket_instances表中对应的连接信息行被删除。

EVENT_NAME: statement/sql/select

我们先来看看表中记录的统计信息是什么样子的。

COUNT_STAR: 58

admin@localhost : performance_schema 10:49:34> select * from socket_instances;

......

---------------------------------------- ----------------------- ----------- ----------- -------------------- ------- --------

1 row in set (0.00 sec)

| EVENT_NAME |OBJECT_INSTANCE_BEGIN | THREAD_ID |SOCKET_ID | IP |PORT | STATE |

# events_statements_summary_global_by_event_name表

---------------------------------------- ----------------------- ----------- ----------- -------------------- ------- --------

root@localhost : performance _schema 11:04:31> select * from events_statements _summary_global _by_event_name limit 1G

| wait/io/socket/sql/server_tcpip_socket |110667200| 1 |32| :: |3306| ACTIVE |

*************************** 1. row ***************************

| wait/io/socket/sql/server_unix_socket |110667520| 1 |34| |0| ACTIVE |

EVENT_NAME: statement/sql/select

| wait/io/socket/sql/client_connection |110667840 | 45 |51| ::ffff:10.10.20.15 |56842| ACTIVE |

COUNT_STAR: 59

| wait/io/socket/sql/client_connection |110668160 | 46 |53| |0| ACTIVE |

......

---------------------------------------- ----------------------- ----------- ----------- -------------------- ------- --------

1 row in set (0.00 sec)

4rows inset ( 0. 00sec)

从上面表中的示例记录信息中,我们可以看到,同样与等待事件类似,按照用户、主机、用户 主机、线程等纬度进行分组与统计的列,分组和部分时间统计列与等待事件类似,这里不再赘述,但对于语句统计事件,有针对语句对象的额外的统计列,如下:

socket_instances表字段含义如下:

SUM_xxx:针对events_statements_*事件记录表中相应的xxx列进行统计。例如:语句统计表中的SUM_LOCK_TIME和SUM_ERRORS列对events_statements_current事件记录表中LOCK_TIME和ERRORS列进行统计

·EVENT_NAME:生成事件信息的instruments 名称。与setup_instruments表中的NAME值对应;

events_statements_summary_by_digest表有自己额外的统计列:

·OBJECT_INSTANCE_BEGIN:此列是套接字实例对象的唯一标识。该值是内存中对象的地址;

* FIRST_SEEN,LAST_SEEN:显示某给定语句第一次插入 events_statements_summary_by_digest表和最后一次更新该表的时间戳

·THREAD_ID:由server分配的内部线程标识符,每个套接字都由单个线程进行管理,因此每个套接字都可以映射到一个server线程(如果可以映射的话);

events_statements_summary_by_program表有自己额外的统计列:

·SOCKET_ID:分配给套接字的内部文件句柄;

* COUNT_STATEMENTS,SUM_STATEMENTS_WAIT,MIN_STATEMENTS_WAIT,AVG_STATEMENTS_WAIT,MAX_STATEMENTS_WAIT:关于存储程序执行期间调用的嵌套语句的统计信息

·IP:客户端IP地址。该值可以是IPv4或IPv6地址,也可以是空串,表示这是一个Unix套接字文件连接;

prepared_statements_instances表有自己额外的统计列:

·PORT:TCP/IP端口号,取值范围为0〜65535;

* COUNT_EXECUTE,SUM_TIMER_EXECUTE,MIN_TIMER_EXECUTE,AVG_TIMER_EXECUTE,MAX_TIMER_EXECUTE:执行prepare语句对象的统计信息

·STATE:套接字状态,有效值为:IDLE或ACTIVE。跟踪活跃socket连接的等待时间使用相应的socket instruments。跟着空闲socket连接的等待时间使用一个叫做idle的socket instruments。如果一个socket正在等待来自客户端的请求,则该套接字此时处于空闲状态。当套接字处于空闲时,在socket_instances表中对应socket线程的信息中的STATE列值从ACTIVE状态切换到IDLE。EVENT_NAME值保持不变,但是instruments的时间收集功能被暂停。同时在events_waits_current表中记录EVENT_NAME列值为idle的一行事件信息。当这个socket接收到下一个请求时,idle事件被终止,socket instance从空闲状态切换到活动状态,并恢复套接字连接的时间收集功能。

PS1:

socket_instances表不允许使用TRUNCATE TABLE语句。

关于events_statements_summary_by_digest表

IP:PORT列组合值可用于标识一个连接。该组合值在events_waits_xxx表的“OBJECT_NAME”列中使用,以标识这些事件信息是来自哪个套接字连接的:

如果setup_consumers配置表中statements_digest consumers启用,则在语句执行完成时,将会把语句文本进行md5 hash计算之后 再发送到events_statements_summary_by_digest表中。分组列基于该语句的DIGEST列值(md5 hash值)

·对于Unix domain套接字(server_unix_socket)的server端监听器,端口为0,IP为空串;

* 如果给定语句的统计信息行在events_statements_summary_by_digest表中已经存在,则将该语句的统计信息进行更新,并更新LAST_SEEN列值为当前时间

· 对于通过Unix domain套接字(client_connection)的客户端连接,端口为0,IP为空串;

* 如果给定语句的统计信息行在events_statements_summary_by_digest表中没有已存在行,并且events_statements_summary_by_digest表空间限制未满的情况下,会在events_statements_summary_by_digest表中新插入一行统计信息,FIRST_SEEN和LAST_SEEN列都使用当前时间

·对于TCP/IP server套接字(server_tcpip_socket)的server端监听器,端口始终为主端口(例如3306),IP始终为0.0.0.0;

* 如果给定语句的统计信息行在events_statements_summary_by_digest表中没有已存在行,且events_statements_summary_by_digest表空间限制已满的情况下,则该语句的统计信息将添加到DIGEST 列值为 NULL的特殊“catch-all”行,如果该特殊行不存在则新插入一行,FIRST_SEEN和LAST_SEEN列为当前时间。如果该特殊行已存在则更新该行的信息,LAST_SEEN为当前时间

·对于通过TCP/IP 套接字(client_connection)的客户端连接,端口是server随机分配的,但不会为0值. IP是源主机的IP(127.0.0.1或本地主机的:: 1)。

由于performance_schema表内存限制,所以维护了DIGEST = NULL的特殊行。 当events_statements_summary_by_digest表限制容量已满的情况下,且新的语句统计信息在需要插入到该表时又没有在该表中找到匹配的DIGEST列值时,就会把这些语句统计信息都统计到 DIGEST = NULL的行中。此行可帮助您估算events_statements_summary_by_digest表的限制是否需要调整

7.锁对象记录表

* 如果DIGEST = NULL行的COUNT_STAR列值占据整个表中所有统计信息的COUNT_STAR列值的比例大于0%,则表示存在由于该表限制已满导致部分语句统计信息无法分类保存,如果你需要保存所有语句的统计信息,可以在server启动之前调整系统变量performance_schema_digests_size的值,默认大小为200

performance_schema通过如下表来记录相关的锁信息:

PS2:关于存储程序监控行为:对于在setup_objects表中启用了instruments的存储程序类型,events_statements_summary_by_program将维护存储程序的统计信息,如下所示:

·metadata_locks:元数据锁的持有和请求记录;

当某给定对象在server中首次被使用时(即使用call语句调用了存储过程或自定义存储函数时),将在events_statements_summary_by_program表中添加一行统计信息;

·table_handles:表锁的持有和请求记录。

当某给定对象被删除时,该对象在events_statements_summary_by_program表中的统计信息行将被删除;

(1)metadata_locks表

当某给定对象被执行时,其对应的统计信息将记录在events_statements_summary_by_program表中并进行统计。

Performance Schema通过metadata_locks表记录元数据锁信息:

PS3:对这些表使用truncate语句,影响与等待事件类似。

·已授予的锁(显示哪些会话拥有当前元数据锁);

| 内存事件统计表

·已请求但未授予的锁(显示哪些会话正在等待哪些元数据锁);

performance_schema把内存事件统计表也按照与等待事件统计表类似的规则进行分类统计。

·已被死锁检测器检测到并被杀死的锁,或者锁请求超时正在等待锁请求会话被丢弃。

performance_schema会记录内存使用情况并聚合内存使用统计信息,如:使用的内存类型(各种缓存,内部缓冲区等)和线程、帐号、用户、主机的相关操作间接执行的内存操作。performance_schema从使用的内存大小、相关操作数量、高低水位(内存一次操作的最大和最小的相关统计值)。

这些信息使您能够了解会话之间的元数据锁依赖关系。不仅可以看到会话正在等待哪个锁,还可以看到当前持有该锁的会话ID。

内存大小统计信息有助于了解当前server的内存消耗,以便及时进行内存调整。内存相关操作计数有助于了解当前server的内存分配器的整体压力,及时掌握server性能数据。例如:分配单个字节一百万次与单次分配一百万个字节的性能开销是不同的,通过跟踪内存分配器分配的内存大小和分配次数就可以知道两者的差异。

metadata_locks表是只读的,无法更新。默认保留行数会自动调整,如果要配置该表大小,可以在server启动之前设置系统变量performance_schema_max_metadata_locks的值。

检测内存工作负载峰值、内存总体的工作负载稳定性、可能的内存泄漏等是至关重要的。

元数据锁instruments使用wait/lock/metadata/sql/mdl,默认未开启。

内存事件instruments中除了performance_schema自身内存分配相关的事件instruments配置默认开启之外,其他的内存事件instruments配置都默认关闭的,且在setup_consumers表中没有像等待事件、阶段事件、语句事件与事务事件那样的单独配置项。

我们先来看看表中记录的统计信息是什么样子的。

PS:内存统计表不包含计时信息,因为内存事件不支持时间信息收集。

admin@localhost : performance _schema 04:55:42> select * from metadata_locksG;

内存事件统计表有如下几张表:

*************************** 1. row ***************************

admin@localhost : performance_schema 06:56:56> show tables like '%memory%summary%';

OBJECT_TYPE: TABLE

-------------------------------------------------

OBJECT_SCHEMA: xiaoboluo

| Tables_in_performance_schema (%memory%summary%) |

OBJECT_NAME: test

-------------------------------------------------

OBJECT _INSTANCE_BEGIN: 140568048055488

| memory_summary_by_account_by_event_name |

LOCK_TYPE: SHARED_READ

| memory_summary_by_host_by_event_name |

LOCK_DURATION: TRANSACTION

| memory_summary_by_thread_by_event_name |

LOCK_STATUS: GRANTED

| memory_summary_by_user_by_event_name |

SOURCE: sql_parse.cc:6031

| memory_summary_global_by_event_name |

OWNER _THREAD_ID: 46

-------------------------------------------------

OWNER _EVENT_ID: 49

5rows inset ( 0. 00sec)

1 rows in set (0.00 sec)

我们先来看看这些表中记录的统计信息是什么样子的(由于单行记录较长,这里只列出memory_summary_by_account_by_event_name 表中的示例数据,其余表的示例数据省略掉部分相同字段)。

metadata_locks表字段含义如下:

# 如果需要统计内存事件信息,需要开启内存事件采集器

·OBJECT_TYPE:元数据锁子系统中使用的锁类型(类似setup_objects表中的OBJECT_TYPE列值):有效值为:GLOBAL、SCHEMA、TABLE、FUNCTION、PROCEDURE、TRIGGER(当前未使用)、EVENT、COMMIT、USER LEVEL LOCK、TABLESPACE、LOCKING SERVICE,USER LEVEL LOCK值表示该锁是使用GET_LOCK()函数获取的锁。LOCKING SERVICE值表示使用锁服务获取的锁;

root@localhost : performance _schema 11:50:46> update setup_instruments set enabled='yes',timed='yes' where name like 'memory/%';

·OBJECT_SCHEMA:该锁来自于哪个库级别的对象;

Query OK, 377 rows affected (0.00 sec)

·OBJECT_NAME:instruments对象的名称,表级别对象;

Rows matched: 377 Changed: 377 Warnings: 0

·OBJECT_INSTANCE_BEGIN:instruments对象的内存地址;

# memory_summary_by_account_by_event_name表

·LOCK_TYPE:元数据锁子系统中的锁类型。有效值为:INTENTION_EXCLUSIVE、SHARED、SHARED_HIGH_PRIO、SHARED_READ、SHARED_WRITE、SHARED_UPGRADABLE、SHARED_NO_WRITE、SHARED_NO_READ_WRITE、EXCLUSIVE;

root@localhost : performance _schema 11:53:24> select * from memory_summary _by_account _by_event _name where COUNT_ALLOC!=0 limit 1G

·LOCK_DURATION:来自元数据锁子系统中的锁定时间。有效值为:STATEMENT、TRANSACTION、EXPLICIT,STATEMENT和TRANSACTION值分别表示在语句或事务结束时会释放的锁。 EXPLICIT值表示可以在语句或事务结束时被会保留,需要显式释放的锁,例如:使用FLUSH TABLES WITH READ LOCK获取的全局锁;

*************************** 1. row ***************************

·LOCK_STATUS:元数据锁子系统的锁状态。有效值为:PENDING、GRANTED、VICTIM、TIMEOUT、KILLED、PRE_ACQUIRE_NOTIFY、POST_RELEASE_NOTIFY。performance_schema根据不同的阶段更改锁状态为这些值;

USER: NULL

·SOURCE:源文件的名称,其中包含生成事件信息的检测代码行号;

HOST: NULL

·OWNER_THREAD_ID:请求元数据锁的线程ID;

EVENT_NAME: memory/innodb/fil0fil

·OWNER_EVENT_ID:请求元数据锁的事件ID。

COUNT_ALLOC: 103

performance_schema如何管理metadata_locks表中记录的内容(使用LOCK_STATUS列来表示每个锁的状态):

COUNT_FREE: 103

·当请求立即获取元数据锁时,将插入状态为GRANTED的锁信息行;

SUM _NUMBER_OF _BYTES_ALLOC: 3296

·当请求元数据锁不能立即获得时,将插入状态为PENDING的锁信息行;

SUM _NUMBER_OF _BYTES_FREE: 3296

·当之前请求不能立即获得的锁在这之后被授予时,其锁信息行状态更新为GRANTED;

LOW_COUNT_USED: 0

·释放元数据锁时,对应的锁信息行被删除;

CURRENT_COUNT_USED: 0

·当一个pending状态的锁被死锁检测器检测并选定为用于打破死锁时,这个锁会被撤销,并返回错误信息(ER_LOCK_DEADLOCK)给请求锁的会话,锁状态从PENDING更新为VICTIM;

HIGH_COUNT_USED: 1

·当待处理的锁请求超时,会返回错误信息(ER_LOCK_WAIT_TIMEOUT)给请求锁的会话,锁状态从PENDING更新为TIMEOUT;

LOW _NUMBER_OF _BYTES_USED: 0

·当已授予的锁或挂起的锁请求被杀死时,其锁状态从GRANTED或PENDING更新为KILLED;

CURRENT _NUMBER_OF _BYTES_USED: 0

·VICTIM,TIMEOUT和KILLED状态值停留时间很简短,当一个锁处于这个状态时,那么表示该锁行信息即将被删除(手动执行SQL可能因为时间原因查看不到,可以使用程序抓取);

HIGH _NUMBER_OF _BYTES_USED: 32

·PRE_ACQUIRE_NOTIFY和POST_RELEASE_NOTIFY状态值停留事件都很简短,当一个锁处于这个状态时,那么表示元数据锁子系统正在通知相关的存储引擎该锁正在执行分配或释。这些状态值在5.7.11版本中新增。

1 row in set (0.00 sec)

metadata_locks表不允许使用TRUNCATE TABLE语句。

# memory_summary_by_host_by_event_name表

(2)table_handles表

root@localhost : performance _schema 11:54:36> select * from memory_summary _by_host _by_event _name where COUNT_ALLOC!=0 limit 1G

performance_schema通过table_handles表记录表锁信息,以对当前每个打开的表所持有的表锁进行追踪记录。table_handles输出表锁instruments采集的内容。这些信息显示server中已打开了哪些表,锁定方式是什么以及被哪个会话持有。

*************************** 1. row ***************************

table_handles表是只读的,不能更新。默认自动调整表数据行大小,如果要显式指定个,可以在server启动之前设置系统变量performance_schema_max_table_handles的值。

HOST: NULL

对应的instruments为wait/io/table/sql/handler和wait/lock/table/sql/handler,默认开启。

EVENT_NAME: memory/innodb/fil0fil

我们先来看看表中记录的统计信息是什么样子的。

COUNT_ALLOC: 158

admin@localhost : performance_schema 05:47:55> select * from table_handles;

......

------------- --------------- ------------- ----------------------- ----------------- ---------------- --------------- ---------------

1 row in set (0.00 sec)

| OBJECT_TYPE |OBJECT_SCHEMA | OBJECT_NAME |OBJECT_INSTANCE_BEGIN | OWNER_THREAD_ID |OWNER_EVENT_ID | INTERNAL_LOCK |EXTERNAL_LOCK |

# memory_summary_by_thread_by_event_name表

------------- --------------- ------------- ----------------------- ----------------- ---------------- --------------- ---------------

root@localhost : performance _schema 11:55:11> select * from memory_summary _by_thread _by_event _name where COUNT_ALLOC!=0 limit 1G

|TABLE | xiaoboluo |test | 140568038528544 |0| 0 |NULL | NULL |

*************************** 1. row ***************************

------------- --------------- ------------- ----------------------- ----------------- ---------------- --------------- ---------------

THREAD_ID: 37

1row inset ( 0. 00sec)

EVENT_NAME: memory/innodb/fil0fil

table_handles表字段含义如下:

COUNT_ALLOC: 193

·OBJECT_TYPE:显示handles锁的类型,表示该表是被哪个table handles打开的;

......

·OBJECT_SCHEMA:该锁来自于哪个库级别的对象;

1 row in set (0.00 sec)

·OBJECT_NAME:instruments对象的名称,表级别对象;

# memory_summary_by_user_by_event_name表

·OBJECT_INSTANCE_BEGIN:instruments对象的内存地址;

root@localhost : performance _schema 11:55:36> select * from memory_summary _by_user _by_event _name where COUNT_ALLOC!=0 limit 1G

· OWNER_THREAD_ID:持有该handles锁的线程ID;

*************************** 1. row ***************************

·OWNER_EVENT_ID:触发table handles被打开的事件ID,即持有该handles锁的事件ID;

USER: NULL

·INTERNAL_LOCK:在SQL级别使用的表锁。有效值为:READ、READ WITH SHARED LOCKS、READ HIGH PRIORITY、READ NO INSERT、WRITE ALLOW WRITE、WRITE CONCURRENT INSERT、WRITE LOW PRIORITY、WRITE。有关这些锁类型的详细信息,请参阅include/thr_lock.h源文件;

EVENT_NAME: memory/innodb/fil0fil

·EXTERNAL_LOCK:在存储引擎级别使用的表锁。有效值为:READ EXTERNAL、WRITE EXTERNAL。

COUNT_ALLOC: 216

table_handles表不允许使用TRUNCATE TABLE语句。

......

02

1 row in set (0.00 sec)

属性统计表

# memory_summary_global_by_event_name表

1. 连接信息统计表

root@localhost : performance _schema 11:56:02> select * from memory_summary _global_by _event_name where COUNT_ALLOC!=0 limit 1G

当客户端连接到MySQL server时,它的用户名和主机名都是特定的。performance_schema按照帐号、主机、用户名对这些连接的统计信息进行分类并保存到各个分类的连接信息表中,如下:

*************************** 1. row ***************************

·accounts:按照user@host的形式来对每个客户端的连接进行统计;

EVENT_NAME: memory/performance_schema/mutex_instances

·hosts:按照host名称对每个客户端连接进行统计;

COUNT_ALLOC: 1

·users:按照用户名对每个客户端连接进行统计。

......

连接信息表accounts中的user和host字段含义与mysql系统数据库中的MySQL grant表(user表)中的字段含义类似。

1 row in set (0.00 sec)

每个连接信息表都有CURRENT_CONNECTIONS和TOTAL_CONNECTIONS列,用于跟踪连接的当前连接数和总连接数。对于accounts表,每个连接在表中每行信息的唯一标识为USER HOST,但是对于users表,只有一个user字段进行标识,而hosts表只有一个host字段用于标识。

从上面表中的示例记录信息中,我们可以看到,同样与等待事件类似,按照用户、主机、用户 主机、线程等纬度进行分组与统计的列,分组列与等待事件类似,这里不再赘述,但对于内存统计事件,统计列与其他几种事件统计列不同(因为内存事件不统计时间开销,所以与其他几种事件类型相比无相同统计列),如下:

performance_schema还统计后台线程和无法验证用户的连接,对于这些连接统计行信息,USER和HOST列值为NULL。

每个内存统计表都有如下统计列:

当客户端与server端建立连接时,performance_schema使用适合每个表的唯一标识值来确定每个连接表中如何进行记录。如果缺少对应标识值的行,则新添加一行。然后,performance_schema会增加该行中的CURRENT_CONNECTIONS和TOTAL_CONNECTIONS列值。

* COUNT_ALLOC,COUNT_FREE:对内存分配和释放内存函数的调用总次数

当客户端断开连接时,performance_schema将减少对应连接的行中的CURRENT_CONNECTIONS列,保留TOTAL_CONNECTIONS列值。

* SUM_NUMBER_OF_BYTES_ALLOC,SUM_NUMBER_OF_BYTES_FREE:已分配和已释放的内存块的总字节大小

这些连接表都允许使用TRUNCATE TABLE语句:

* CURRENT_COUNT_USED:这是一个便捷列,等于COUNT_ALLOC - COUNT_FREE

· 当行信息中CURRENT_CONNECTIONS 字段值为0时,执行truncate语句会删除这些行;

* CURRENT_NUMBER_OF_BYTES_USED:当前已分配的内存块但未释放的统计大小。这是一个便捷列,等于SUM_NUMBER_OF_BYTES_ALLOC

·当行信息中CURRENT_CONNECTIONS 字段值大于0时,执行truncate语句不会删除这些行,TOTAL_CONNECTIONS字段值被重置为CURRENT_CONNECTIONS字段值;

  • SUM_NUMBER_OF_BYTES_FREE

·依赖于连接表中信息的summary表在对这些连接表执行truncate时会同时被隐式地执行truncate,performance_schema维护着按照accounts,hosts或users统计各种事件统计表。这些表在名称包括:_summary_by_account,_summary_by_host,*_summary_by_user

* LOW_COUNT_USED,HIGH_COUNT_USED:对应CURRENT_COUNT_USED列的低和高水位标记

连接统计信息表允许使用TRUNCATE TABLE。它会同时删除统计表中没有连接的帐户,主机或用户对应的行,重置有连接的帐户,主机或用户对应的行的并将其他行的CURRENT_CONNECTIONS和TOTAL_CONNECTIONS列值。

* LOW_NUMBER_OF_BYTES_USED,HIGH_NUMBER_OF_BYTES_USED:对应CURRENT_NUMBER_OF_BYTES_USED列的低和高水位标记

澳门威斯尼斯人手机版 5

内存统计表允许使用TRUNCATE TABLE语句。使用truncate语句时有如下行为:

truncate *_summary_global统计表也会隐式地truncate其对应的连接和线程统计表中的信息。例如:truncate events_waits_summary_global_by_event_name会隐式地truncate按照帐户,主机,用户或线程统计的等待事件统计表。

* 通常,truncate操作会重置统计信息的基准数据(即清空之前的数据),但不会修改当前server的内存分配等状态。也就是说,truncate内存统计表不会释放已分配内存

下面对这些表分别进行介绍。

* 将COUNT_ALLOC和COUNT_FREE列重置,并重新开始计数(等于内存统计信息以重置后的数值作为基准数据)

(1)accounts表

* SUM_NUMBER_OF_BYTES_ALLOC和SUM_NUMBER_OF_BYTES_FREE列重置与COUNT_ALLOC和COUNT_FREE列重置类似

accounts表包含连接到MySQL server的每个account的记录。对于每个帐户,没个user host唯一标识一行,每行单独计算该帐号的当前连接数和总连接数。server启动时,表的大小会自动调整。要显式设置表大小,可以在server启动之前设置系统变量performance_schema_accounts_size的值。该系统变量设置为0时,表示禁用accounts表的统计信息功能。

* LOW_COUNT_USED和HIGH_COUNT_USED将重置为CURRENT_COUNT_USED列值

我们先来看看表中记录的统计信息是什么样子的。

* LOW_NUMBER_OF_BYTES_USED和HIGH_NUMBER_OF_BYTES_USED将重置为CURRENT_NUMBER_OF_BYTES_USED列值

admin@localhost : performance_schema 09 :34:49> select * from accounts;

* 此外,按照帐户,主机,用户或线程分类统计的内存统计表或memory_summary_global_by_event_name表,如果在对其依赖的accounts、hosts、users表执行truncate时,会隐式对这些内存统计表执行truncate语句

------- ------------- --------------------- -------------------

关于内存事件的行为监控设置与注意事项

| USER |HOST | CURRENT_CONNECTIONS |TOTAL_CONNECTIONS |

内存行为监控设置:

------- ------------- --------------------- -------------------

* 内存instruments在setup_instruments表中具有memory/code_area/instrument_name格式的名称。但默认情况下大多数instruments都被禁用了,默认只开启了memory/performance_schema/*开头的instruments

|NULL | NULL |41| 45 |

* 以前缀memory/performance_schema命名的instruments可以收集performance_schema自身消耗的内部缓存区大小等信息。memory/performance_schema/* instruments默认启用,无法在启动时或运行时关闭。performance_schema自身相关的内存统计信息只保存在memory_summary_global_by_event_name表中,不会保存在按照帐户,主机,用户或线程分类聚合的内存统计表中

| qfsys |10.10. 20.15| 1 |1|

* 对于memory instruments,setup_instruments表中的TIMED列无效,因为内存操作不支持时间统计

|admin | localhost |1| 1 |

* 注意:如果在server启动之后再修改memory instruments,可能会导致由于丢失之前的分配操作数据而导致在释放之后内存统计信息出现负值,所以不建议在运行时反复开关memory instruments,如果有内存事件统计需要,建议在server启动之前就在my.cnf中配置好需要统计的事件采集

------- ------------- --------------------- -------------------

当server中的某线程执行了内存分配操作时,按照如下规则进行检测与聚合:

3rows inset ( 0. 00sec)

* 如果该线程在threads表中没有开启采集功能或者说在setup_instruments中对应的instruments没有开启,则该线程分配的内存块不会被监控

accounts表字段含义如下:

* 如果threads表中该线程的采集功能和setup_instruments表中相应的memory instruments都启用了,则该线程分配的内存块会被监控

·USER:某连接的客户端用户名。如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

对于内存块的释放,按照如下规则进行检测与聚合:

·HOST:某连接的客户端主机名。如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

* 如果一个线程开启了采集功能,但是内存相关的instruments没有启用,则该内存释放操作不会被监控到,统计数据也不会发生改变

·CURRENT_CONNECTIONS:某帐号的当前连接数;

* 如果一个线程没有开启采集功能,但是内存相关的instruments启用了,则该内存释放的操作会被监控到,统计数据会发生改变,这也是前面提到的为啥反复在运行时修改memory instruments可能导致统计数据为负数的原因

·TOTAL_CONNECTIONS:某帐号的总连接数(新增加一个连接累计一个,不会像当前连接数那样连接断开会减少)。

对于每个线程的统计信息,适用以下规则。

(2)users表

当一个可被监控的内存块N被分配时,performance_schema会对内存统计表中的如下列进行更新:

users表包含连接到MySQL server的每个用户的连接信息,每个用户一行。该表将针对用户名作为唯一标识进行统计当前连接数和总连接数,server启动时,表的大小会自动调整。 要显式设置该表大小,可以在server启动之前设置系统变量performance_schema_users_size的值。该变量设置为0时表示禁用users统计信息。

* COUNT_ALLOC:增加1

我们先来看看表中记录的统计信息是什么样子的。

* CURRENT_COUNT_USED:增加1

admin@localhost : performance_schema 09 :50:01> select * from users;

* HIGH_COUNT_USED:如果CURRENT_COUNT_USED增加1是一个新的最高值,则该字段值相应增加

------- --------------------- -------------------

* SUM_NUMBER_OF_BYTES_ALLOC:增加N

| USER |CURRENT_CONNECTIONS | TOTAL_CONNECTIONS |

* CURRENT_NUMBER_OF_BYTES_USED:增加N

------- --------------------- -------------------

* HIGH_NUMBER_OF_BYTES_USED:如果CURRENT_NUMBER_OF_BYTES_USED增加N之后是一个新的最高值,则该字段值相应增加

| NULL |41| 45 |

当一个可被监控的内存块N被释放时,performance_schema会对统计表中的如下列进行更新:

| qfsys |1| 1 |

* COUNT_FREE:增加1

| admin |1| 1 |

* CURRENT_COUNT_USED:减少1

------- --------------------- -------------------

* LOW_COUNT_USED:如果CURRENT_COUNT_USED减少1之后是一个新的最低值,则该字段相应减少

3rows inset ( 0. 00sec)

* SUM_NUMBER_OF_BYTES_FREE:增加N

users表字段含义如下:

* CURRENT_NUMBER_OF_BYTES_USED:减少N

·USER:某个连接的用户名,如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

* LOW_NUMBER_OF_BYTES_USED:如果CURRENT_NUMBER_OF_BYTES_USED减少N之后是一个新的最低值,则该字段相应减少

·CURRENT_CONNECTIONS:某用户的当前连接数;

对于较高级别的聚合(全局,按帐户,按用户,按主机)统计表中,低水位和高水位适用于如下规则 :

·TOTAL_CONNECTIONS:某用户的总连接数。

* LOW_COUNT_USED和LOW_NUMBER_OF_BYTES_USED是较低的低水位估算值。performance_schema输出的低水位值可以保证统计表中的内存分配次数和内存小于或等于当前server中真实的内存分配值

(3)hosts表

* HIGH_COUNT_USED和HIGH_NUMBER_OF_BYTES_USED是较高的高水位估算值。performance_schema输出的低水位值可以保证统计表中的内存分配次数和内存大于或等于当前server中真实的内存分配值

hosts表包含客户端连接到MySQL server的主机信息,一个主机名对应一行记录,该表针对主机作为唯一标识进行统计当前连接数和总连接数。server启动时,表的大小会自动调整。 要显式设置该表大小,可以在server启动之前设置系统变量performance_schema_hosts_size的值。如果该变量设置为0,则表示禁用hosts表统计信息。

对于内存统计表中的低水位估算值,在memory_summary_global_by_event_name表中如果内存所有权在线程之间传输,则该估算值可能为负数

我们先来看看表中记录的统计信息是什么样子的。

| 温馨提示

admin@localhost : performance_schema 09 :49:41> select * from hosts;

性能事件统计表中的数据条目是不能删除的,只能把相应统计字段清零;

------------- --------------------- -------------------

性能事件统计表中的某个instruments是否执行统计,依赖于在setup_instruments表中的配置项是否开启;

| HOST |CURRENT_CONNECTIONS | TOTAL_CONNECTIONS |

性能事件统计表在setup_consumers表中只受控于"global_instrumentation"配置项,也就是说一旦"global_instrumentation"配置项关闭,所有的统计表的统计条目都不执行统计(统计列值为0);

------------- --------------------- -------------------

内存事件在setup_consumers表中没有独立的配置项,且memory/performance_schema/* instruments默认启用,无法在启动时或运行时关闭。performance_schema相关的内存统计信息只保存在memory_summary_global_by_event_name表中,不会保存在按照帐户,主机,用户或线程分类聚合的内存统计表中。

| NULL |41| 45 |

下一篇将为大家分享 《数据库对象事件统计与属性统计 | performance_schema全方位介绍》 ,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

| 10.10.20.15 |1| 1 |

责任编辑:

| localhost |1| 1 |

------------- --------------------- -------------------

3rows inset ( 0. 00sec)

hosts表字段含义如下:

·HOST:某个连接的主机名,如果是一个内部线程创建的连接,或者是无法验证的用户创建的连接,则该字段为NULL;

·CURRENT_CONNECTIONS:某主机的当前连接数;

·TOTAL_CONNECTIONS:某主机的总连接数。

2. 连接属性统计表

应用程序可以使用一些键/值对生成一些连接属性,在对mysql server创建连接时传递给server。对于C API,使用mysql_options()和mysql_options4()函数定义属性集。其他MySQL连接器可以使用一些自定义连接属性方法。

连接属性记录在如下两张表中:

·session_account_connect_attrs:记录当前会话及其相关联的其他会话的连接属性;

·session_connect_attrs:所有会话的连接属性。

MySQL允许应用程序引入新的连接属性,但是以下划线(_)开头的属性名称保留供内部使用,应用程序不要创建这种格式的连接属性。以确保内部的连接属性不会与应用程序创建的连接属性相冲突。

一个连接可见的连接属性集合取决于与mysql server建立连接的客户端平台类型和MySQL连接的客户端类型。

·libmysqlclient客户端库(在MySQL和MySQL Connector / C发行版中提供)提供以下属性:

* _client_name:客户端名称(客户端库的libmysql)

* _client_version:客户端libmysql库版本

* _os:客户端操作系统类型(例如Linux,Win64)

* _pid:客户端进程ID

* _platform:客户端机器平台(例如,x86_64)

* _thread:客户端线程ID(仅适用于Windows)

·MySQL Connector/J定义了如下属性:

* _client_license:连接器许可证类型

* _runtime_vendor:Java运行环境(JRE)供应商名称

* _runtime_version:Java运行环境(JRE)版本

·MySQL Connector/Net定义了如下属性:

* _client_version:客户端库版本

* _os:操作系统类型(例如Linux,Win64)

* _pid:客户端进程ID

* _platform:客户端机器平台(例如,x86_64)

* _program_name:客户端程序名称

* _thread:客户端线程ID(仅适用于Windows)

·PHP定义的属性依赖于编译的属性:

* 使用libmysqlclient编译:php连接的属性集合使用标准libmysqlclient属性,参见上文

* 使用mysqlnd编译:只有_client_name属性,值为mysqlnd

·许多MySQL客户端程序设置的属性值与客户端名称相等的一个program_name属性。例如:mysqladmin和mysqldump分别将program_name连接属性设置为mysqladmin和mysqldump,另外一些MySQL客户端程序还定义了附加属性:

* mysqlbinlog定义了_client_role属性,值为binary_log_listener

* 复制slave连接的program_name属性值被定义为mysqld、定义了_client_role属性,值为binary_log_listener、_client_replication_channel_name属性,值为通道名称字符串

* FEDERATED存储引擎连接的program_name属性值被定义为mysqld、定义了_client_role属性,值为federated_storage

从客户端发送到服务器的连接属性数据量存在限制:客户端在连接之前客户端有一个自己的固定长度限制(不可配置)、在客户端连接server时服务端也有一个固定长度限制、以及在客户端连接server时的连接属性值在存入performance_schema中时也有一个可配置的长度限制。

对于使用C API启动的连接,libmysqlclient库对客户端上的客户端面连接属性数据的统计大小的固定长度限制为64KB:超出限制时调用mysql_options()函数会报CR_INVALID_PARAMETER_NO错误。其他MySQL连接器可能会设置自己的客户端面的连接属性长度限制。

在服务器端面,会对连接属性数据进行长度检查:

·server只接受的连接属性数据的统计大小限制为64KB。如果客户端尝试发送超过64KB(正好是一个表所有字段定义长度的总限制长度)的属性数据,则server将拒绝该连接;

·对于已接受的连接,performance_schema根据performance_schema_session_connect_attrs_size系统变量的值检查统计连接属性大小。如果属性大小超过此值,则会执行以下操作:

* performance_schema截断超过长度的属性数据,并增加Performance_schema_session_connect_attrs_lost状态变量值,截断一次增加一次,即该变量表示连接属性被截断了多少次

* 如果log_error_verbosity系统变量设置值大于1,则performance_schema还会将错误信息写入错误日志:

[Warning] Connection attributes oflength N were truncated

(1) session_account_connect_attrs表

应用程序可以使用mysql_options()和mysql_options4()C API函数在连接时提供一些要传递到server的键值对连接属性。

session_account_connect_attrs表仅包含当前连接及其相关联的其他连接的连接属性。要查看所有会话的连接属性,请查看session_connect_attrs表。

我们先来看看表中记录的统计信息是什么样子的。

admin@localhost : performance_schema 11:00:45> select * from session_account_connect_attrs;

---------------- ----------------- ---------------- ------------------

| PROCESSLIST_ID |ATTR_NAME | ATTR_VALUE |ORDINAL_POSITION |

---------------- ----------------- ---------------- ------------------

|4| _os |linux-glibc2. 5| 0 |

| 4 |_client_name | libmysql |1|

|4| _pid |3766| 2 |

| 4 |_client_version | 5.7.18 |3|

|4| _platform |x86_64 | 4 |

| 4 |program_name | mysql |5|

---------------- ----------------- ---------------- ------------------

6 rows inset (0.00 sec)

session_account_connect_attrs表字段含义:

·PROCESSLIST_ID:会话的连接标识符,与show processlist结果中的ID字段相同;

·ATTR_NAME:连接属性名称;

·ATTR_VALUE:连接属性值;

·ORDINAL_POSITION:将连接属性添加到连接属性集的顺序。

session_account_connect_attrs表不允许使用TRUNCATE TABLE语句。

(2)session_connect_attrs表

表字段含义与session_account_connect_attrs表相同,但是该表是保存所有连接的连接属性表。

我们先来看看表中记录的统计信息是什么样子的。

admin@localhost : performance_schema 11:05:51> select * from session_connect_attrs;

---------------- ---------------------------------- --------------------- ------------------

| PROCESSLIST_ID |ATTR_NAME | ATTR_VALUE |ORDINAL_POSITION |

---------------- ---------------------------------- --------------------- ------------------

|3| _os |linux-glibc2. 5| 0 |

| 3 |_client_name | libmysql |1|

......

14 rows inset (0.01 sec)

表字段含义与session_account_connect_attrs表字段含义相同。

- END -

下篇将为大家分享 《复制状态与变量记录表 | performance_schema全方位介绍》 ,谢谢你的阅读,我们不见不散!返回搜狐,查看更多

责任编辑:

本文由澳门威斯尼斯人手机版发布于互联网科技,转载请注明出处:澳门威斯尼斯人手机版mysql服务器io等待高定位与

TAG标签:
Ctrl+D 将本页面保存为书签,全面了解最新资讯,方便快捷。