MySQL 慢查询日志分析及可视化结果_MySQL
MySQL 慢查询日志分析
1. pt-query-digest分析慢查询日志
pt-query-digest --report slow.log
登录后复制
2. 报告最近半个小时的慢查询：
pt-query-digest --report --since 1800s slow.log
登录后复制
3. 报告一个时间段的慢查询：
pt-query-digest --report --since '2013-02-10 21:48:59' --until '2013-02-16 02:33:50' slow.log
登录后复制
4. 报告只含select语句的慢查询:
pt-query-digest --filter '$event->{fingerprint} =~ m/^select/i' slow.log登录后复制
5. 报告针对某个用户的慢查询:
pt-query-digest --filter '($event->{user} || "") =~ m/^root/i' slow.log登录后复制
6. 报告所有的全表扫描或full join的慢查询:
pt-query-digest --filter '(($event->{Full_scan} || "") eq "yes") || (($event->{Full_join} || "") eq "yes")' slow.log登录后复制
更多filter的 事件属性
将慢查询日志的分析结果可视化
使用pt-query-digest分析慢查询日志并将查询分析数据保存到MySQL数据库表中.然后使用 Query-Digest-UI 来展示分析结果.
由于Query-Digest-UI是基于PHP的Web应用程序,因此需要LAMP环境的支持.
查询分析结果可视化步骤如下: 1)创建相关数据库表
-- install.sql-- Create the database needed for the Query-Digest-UIDROP DATABASE IF EXISTS slow_query_log;CREATE DATABASE slow_query_log;USE slow_query_log;-- Create the global query review tableCREATE TABLE `global_query_review` (`checksum` bigint(20) unsigned NOT NULL,`fingerprint` text NOT NULL,`sample` longtext NOT NULL,`first_seen` datetime DEFAULT NULL,`last_seen` datetime DEFAULT NULL,`reviewed_by` varchar(20) DEFAULT NULL,`reviewed_on` datetime DEFAULT NULL,`comments` text,`reviewed_status` varchar(24) DEFAULT NULL,PRIMARY KEY (`checksum`)) ENGINE=InnoDB DEFAULT CHARSET=utf8;-- Create the historical query review tableCREATE TABLE `global_query_review_history` (`hostname_max` varchar(64) NOT NULL,`db_max` varchar(64) DEFAULT NULL,`checksum` bigint(20) unsigned NOT NULL,`sample` longtext NOT NULL,`ts_min` datetime NOT NULL DEFAULT '0000-00-00 00:00:00',`ts_max` datetime NOT NULL DEFAULT '0000-00-00 00:00:00',`ts_cnt` float DEFAULT NULL,`Query_time_sum` float DEFAULT NULL,`Query_time_min` float DEFAULT NULL,`Query_time_max` float DEFAULT NULL,`Query_time_pct_95` float DEFAULT NULL,`Query_time_stddev` float DEFAULT NULL,`Query_time_median` float DEFAULT NULL,`Lock_time_sum` float DEFAULT NULL,`Lock_time_min` float DEFAULT NULL,`Lock_time_max` float DEFAULT NULL,`Lock_time_pct_95` float DEFAULT NULL,`Lock_time_stddev` float DEFAULT NULL,`Lock_time_median` float DEFAULT NULL,`Rows_sent_sum` float DEFAULT NULL,`Rows_sent_min` float DEFAULT NULL,`Rows_sent_max` float DEFAULT NULL,`Rows_sent_pct_95` float DEFAULT NULL,`Rows_sent_stddev` float DEFAULT NULL,`Rows_sent_median` float DEFAULT NULL,`Rows_examined_sum` float DEFAULT NULL,`Rows_examined_min` float DEFAULT NULL,`Rows_examined_max` float DEFAULT NULL,`Rows_examined_pct_95` float DEFAULT NULL,`Rows_examined_stddev` float DEFAULT NULL,`Rows_examined_median` float DEFAULT NULL,`Rows_affected_sum` float DEFAULT NULL,`Rows_affected_min` float DEFAULT NULL,`Rows_affected_max` float DEFAULT NULL,`Rows_affected_pct_95` float DEFAULT NULL,`Rows_affected_stddev` float DEFAULT NULL,`Rows_affected_median` float DEFAULT NULL,`Rows_read_sum` float DEFAULT NULL,`Rows_read_min` float DEFAULT NULL,`Rows_read_max` float DEFAULT NULL,`Rows_read_pct_95` float DEFAULT NULL,`Rows_read_stddev` float DEFAULT NULL,`Rows_read_median` float DEFAULT NULL,`Merge_passes_sum` float DEFAULT NULL,`Merge_passes_min` float DEFAULT NULL,`Merge_passes_max` float DEFAULT NULL,`Merge_passes_pct_95` float DEFAULT NULL,`Merge_passes_stddev` float DEFAULT NULL,`Merge_passes_median` float DEFAULT NULL,`InnoDB_IO_r_ops_min` float DEFAULT NULL,`InnoDB_IO_r_ops_max` float DEFAULT NULL,`InnoDB_IO_r_ops_pct_95` float DEFAULT NULL,`InnoDB_IO_r_bytes_pct_95` float DEFAULT NULL,`InnoDB_IO_r_bytes_stddev` float DEFAULT NULL,`InnoDB_IO_r_bytes_median` float DEFAULT NULL,`InnoDB_IO_r_wait_min` float DEFAULT NULL,`InnoDB_IO_r_wait_max` float DEFAULT NULL,`InnoDB_IO_r_wait_pct_95` float DEFAULT NULL,`InnoDB_IO_r_ops_stddev` float DEFAULT NULL,`InnoDB_IO_r_ops_median` float DEFAULT NULL,`InnoDB_IO_r_bytes_min` float DEFAULT NULL,`InnoDB_IO_r_bytes_max` float DEFAULT NULL,`InnoDB_IO_r_wait_stddev` float DEFAULT NULL,`InnoDB_IO_r_wait_median` float DEFAULT NULL,`InnoDB_rec_lock_wait_min` float DEFAULT NULL,`InnoDB_rec_lock_wait_max` float DEFAULT NULL,`InnoDB_rec_lock_wait_pct_95` float DEFAULT NULL,`InnoDB_rec_lock_wait_stddev` float DEFAULT NULL,`InnoDB_rec_lock_wait_median` float DEFAULT NULL,`InnoDB_queue_wait_min` float DEFAULT NULL,`InnoDB_queue_wait_max` float DEFAULT NULL,`InnoDB_queue_wait_pct_95` float DEFAULT NULL,`InnoDB_queue_wait_stddev` float DEFAULT NULL,`InnoDB_queue_wait_median` float DEFAULT NULL,`InnoDB_pages_distinct_min` float DEFAULT NULL,`InnoDB_pages_distinct_max` float DEFAULT NULL,`InnoDB_pages_distinct_pct_95` float DEFAULT NULL,`InnoDB_pages_distinct_stddev` float DEFAULT NULL,`InnoDB_pages_distinct_median` float DEFAULT NULL,`QC_Hit_cnt` float DEFAULT NULL,`QC_Hit_sum` float DEFAULT NULL,`Full_scan_cnt` float DEFAULT NULL,`Full_scan_sum` float DEFAULT NULL,`Full_join_cnt` float DEFAULT NULL,`Full_join_sum` float DEFAULT NULL,`Tmp_table_cnt` float DEFAULT NULL,`Tmp_table_sum` float DEFAULT NULL,`Filesort_cnt` float DEFAULT NULL,`Filesort_sum` float DEFAULT NULL,`Tmp_table_on_disk_cnt` float DEFAULT NULL,`Tmp_table_on_disk_sum` float DEFAULT NULL,`Filesort_on_disk_cnt` float DEFAULT NULL,`Filesort_on_disk_sum` float DEFAULT NULL,`Bytes_sum` float DEFAULT NULL,`Bytes_min` float DEFAULT NULL,`Bytes_max` float DEFAULT NULL,`Bytes_pct_95` float DEFAULT NULL,`Bytes_stddev` float DEFAULT NULL,`Bytes_median` float DEFAULT NULL,UNIQUE KEY `hostname_max` (`hostname_max`,`checksum`,`ts_min`,`ts_max`),KEY `ts_min` (`ts_min`),KEY `checksum` (`checksum`)) ENGINE=InnoDB DEFAULT CHARSET=utf8;
登录后复制
2) 创建数据库账号
$ mysql -uroot -p -h 192.168.1.190 <p>3) 配置Query-Digest-UI</p><pre class="brush:php;toolbar:false">git clone https://github.com/kormoc/Query-Digest-UI.gitcd Query-Digest-UIcp config.php.example config.phpvi config.php$reviewhost = array(// Replace hostname and database in this setting// use host=hostname;port=portnum if not the default port 'dsn' => 'mysql:host=192.168.1.190;port=3306;dbname=slow_query_log', 'user' => 'slowlog', 'password' => '123456',// See http://www.percona.com/doc/percona-toolkit/2.1/pt-query-digest.html#cmdoption-pt-query-digest--review 'review_table'=> 'global_query_review',// This table is optional. You don't need it, but you lose detailed stats// Set to a blank string to disable// See http://www.percona.com/doc/percona-toolkit/2.1/pt-query-digest.html#cmdoption-pt-query-digest--review-history 'history_table' => 'global_query_review_history',);
登录后复制
4)使用pt-query-digest分析日志并将分析结果导入数据库
pt-query-digest --user=slowlog --password=123456 --review h=192.168.1.190,D=slow_query_log,t=global_query_review --review-history h=192.168.1.190,D=slow_query_log,t=global_query_review_history --no-report --limit=0% --filter=" /$event->{Bytes} = length(/$event->{arg}) and /$event->{hostname}=/"$HOSTNAME/"" /usr/local/mysql/data/slow.log登录后复制
5)访问web界面查看可视化结果
转自：http://www.zrwm.com/?p=2668
文章标题: 本文地址: 除非注明，博客文章均为"运维生存时间"原创，转载请标明本文地址Q群：39514058
本站声明
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
热AI工具
Undresser.AI Undress
人工智能驱动的应用程序，用于创建逼真的裸体照片
AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。
Undress AI Tool
免费脱衣服图片
Clothoff.io
AI脱衣机
Video Face Swap
使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸！
热门文章
<🎜>：种植花园 - 完整的突变指南
3 周前
By DDD
<🎜>：泡泡胶模拟器无穷大 - 如何获取和使用皇家钥匙
3 周前
By 尊渡假赌尊渡假赌尊渡假赌
如何修复KB5055612无法在Windows 10中安装？
3 周前
By DDD
北端：融合系统，解释
3 周前
By 尊渡假赌尊渡假赌尊渡假赌
Mandragora：巫婆树的耳语 - 如何解锁抓钩
3 周前
By 尊渡假赌尊渡假赌尊渡假赌
热工具
记事本++7.3.1
好用且免费的代码编辑器
SublimeText3汉化版
中文版，非常好用
禅工作室 13.0.1
功能强大的PHP集成开发环境
Dreamweaver CS6
视觉化网页开发工具
SublimeText3 Mac版
神级代码编辑软件(SublimeText3)
MySQL的角色：Web应用程序中的数据库
Apr 17, 2025 am 12:23 AM
MySQL在Web应用中的主要作用是存储和管理数据。1.MySQL高效处理用户信息、产品目录和交易记录等数据。2.通过SQL查询，开发者能从数据库提取信息生成动态内容。3.MySQL基于客户端-服务器模型工作，确保查询速度可接受。
说明InnoDB重做日志和撤消日志的作用。
Apr 15, 2025 am 12:16 AM
InnoDB使用redologs和undologs确保数据一致性和可靠性。1.redologs记录数据页修改，确保崩溃恢复和事务持久性。2.undologs记录数据原始值，支持事务回滚和MVCC。
MySQL：世界上最受欢迎的数据库的简介
Apr 12, 2025 am 12:18 AM
MySQL是一种开源的关系型数据库管理系统，主要用于快速、可靠地存储和检索数据。其工作原理包括客户端请求、查询解析、执行查询和返回结果。使用示例包括创建表、插入和查询数据，以及高级功能如JOIN操作。常见错误涉及SQL语法、数据类型和权限问题，优化建议包括使用索引、优化查询和分表分区。
MySQL的位置：数据库和编程
Apr 13, 2025 am 12:18 AM
MySQL在数据库和编程中的地位非常重要，它是一个开源的关系型数据库管理系统，广泛应用于各种应用场景。1）MySQL提供高效的数据存储、组织和检索功能，支持Web、移动和企业级系统。2）它使用客户端-服务器架构，支持多种存储引擎和索引优化。3）基本用法包括创建表和插入数据，高级用法涉及多表JOIN和复杂查询。4）常见问题如SQL语法错误和性能问题可以通过EXPLAIN命令和慢查询日志调试。5）性能优化方法包括合理使用索引、优化查询和使用缓存，最佳实践包括使用事务和PreparedStatemen
为什么要使用mysql？利益和优势
Apr 12, 2025 am 12:17 AM
选择MySQL的原因是其性能、可靠性、易用性和社区支持。1.MySQL提供高效的数据存储和检索功能，支持多种数据类型和高级查询操作。2.采用客户端-服务器架构和多种存储引擎，支持事务和查询优化。3.易于使用，支持多种操作系统和编程语言。4.拥有强大的社区支持，提供丰富的资源和解决方案。
MySQL与其他编程语言：一种比较
Apr 19, 2025 am 12:22 AM
MySQL与其他编程语言相比，主要用于存储和管理数据，而其他语言如Python、Java、C 则用于逻辑处理和应用开发。 MySQL以其高性能、可扩展性和跨平台支持着称，适合数据管理需求，而其他语言在各自领域如数据分析、企业应用和系统编程中各有优势。
MySQL：从小型企业到大型企业
Apr 13, 2025 am 12:17 AM
MySQL适合小型和大型企业。1)小型企业可使用MySQL进行基本数据管理，如存储客户信息。2)大型企业可利用MySQL处理海量数据和复杂业务逻辑，优化查询性能和事务处理。
MySQL索引基数如何影响查询性能？
Apr 14, 2025 am 12:18 AM
MySQL索引基数对查询性能有显着影响：1.高基数索引能更有效地缩小数据范围，提高查询效率；2.低基数索引可能导致全表扫描，降低查询性能；3.在联合索引中，应将高基数列放在前面以优化查询。
