记录mysql慢查询

要在Grafana中显示具体的慢查询语句，通常会涉及到收集慢查询日志数据、存储和处理这些数据，以及最终在Grafana中进行展示。以下是一个详细的步骤，包括使用Filebeat、Elasticsearch、Logstash以及Grafana的完整流程。

1. 收集慢查询日志

首先，需要配置MySQL记录慢查询日志。确保在MySQL配置文件my.cnf中启用了慢查询日志，并设置了合理的long_query_time。

[mysqld]
slow_query_log = 1
slow_query_log_file = /var/log/mysql/slow.log
long_query_time = 1

2. 使用 Filebeat 发送日志到 Elasticsearch

Filebeat是一个轻量的日志传输工具，可以将MySQL慢查询日志发送到Elasticsearch。

1. 安装 Filebeat：在你的服务器上安装Filebeat。

2. 配置 Filebeat：编辑filebeat.yml文件，设置输入源为MySQL慢查询日志文件，并配置输出到Elasticsearch。

   filebeat.inputs:
   - type: log
     paths:
       - /var/log/mysql/slow.log
     multiline.pattern: '^#'
     multiline.negate: true
     multiline.match: after
   
   output.elasticsearch:
     hosts: ["http://localhost:9200"]
     username: "elastic"
     password: "password"

3. 启动 Filebeat：启动并确保Filebeat正在运行，日志数据开始流向Elasticsearch。

3. 在 Elasticsearch 中解析数据

可以使用Logstash来进一步解析和处理数据，以便更好地存储和索引慢查询日志。

1. 安装 Logstash：在你的服务器上安装Logstash。

2. 配置 Logstash：设置Logstash从Filebeat输入数据，并解析慢查询日志。

   input {
     beats {
       port => 5044
     }
   }
   
   filter {
     grok {
       match => { "message" => "^# User@Host: %{WORD:user}\[%{DATA:host}\] Id: %{NUMBER:id}# Query_time: %{NUMBER:query_time} Lock_time: %{NUMBER:lock_time} Rows_sent: %{NUMBER:rows_sent} Rows_examined: %{NUMBER:rows_examined}$" }
     }
   }
   
   output {
     elasticsearch {
       hosts => ["localhost:9200"]
       index => "mysql-slow-queries"
     }
     stdout { codec => rubydebug }
   }

3. 启动 Logstash：启动Logstash，让其开始处理从Filebeat传输的数据。

4. 在 Grafana 中配置数据源

1. 添加 Elasticsearch 数据源：在Grafana中，添加Elasticsearch为数据源，指向你的Elasticsearch实例。

2. 配置索引模式：指定索引模式，如mysql-slow-queries-*，并设置时间字段。

5. 创建和配置仪表板

1. 创建新的仪表板：在Grafana中创建一个新的仪表板，并添加一个面板。

2. 查询慢查询数据：使用Grafana的查询编辑器选择Elasticsearch作为数据源，并使用查询DSL来获取和展示慢查询数据。例如，显示最近一小时的慢查询日志：

   {
     "query": {
       "range": {
         "@timestamp": {
           "gte": "now-1h"
         }
       }
     }
   }

3. 显示具体的慢查询语句：在表格或日志面板中，展示具体的慢查询语句及其相关的详细信息（如查询时间、锁等待时间、影响的行数等）。

注意事项

• 数据安全和隐私：在收集和展示慢查询日志时，注意保护敏感数据和用户隐私。
• 性能优化：收集和存储大量日志数据可能对系统性能有影响，确保你的Elasticsearch和其他组件能够处理所需的日志量。

通过这些步骤，你可以在Grafana中查看和分析MySQL的慢查询日志，包括具体的查询语句。这有助于识别性能瓶颈并进行优化。