ELK（Elasticsearch、Logstash、Kibana）是一个开源的日志分析平台，可以用于收集、存储和分析各种类型的日志数据，在本教程中，我们将介绍如何使用ELK分析Nginx访问日志。

1、准备环境

确保你已经安装了以下软件：

Elasticsearch：一个分布式搜索和分析引擎，用于存储和检索日志数据。

Logstash：一个用于收集、处理和转发日志数据的服务器端数据处理管道。

Kibana：一个基于Web的数据可视化工具，用于查询和可视化Elasticsearch中的数据。

2、配置Nginx日志格式

在Nginx配置文件中，设置access_log指令以指定日志格式，使用下面的配置将访问日志发送到指定的IP地址和端口：

http {
    ...
    access_log /var/log/nginx/access.log combined;
    ...
}

3、安装并配置Logstash

下载并安装Logstash，然后创建一个名为nginx.conf的配置文件，内容如下：

input {
  file {
    path => "/var/log/nginx/access.log"
    start_position => "beginning"
  }
}
filter {
  grok {
    match => { "message" => "%{COMBINEDAPACHELOG}" }
  }
  date {
    match => [ "timestamp" , "dd/MMM/yyyy:HH:mm:ss Z" ]
  }
}
output {
  elasticsearch {
    hosts => ["localhost:9200"]
    index => "nginxaccess%{+YYYY.MM.dd}"
  }
}

这个配置文件定义了一个输入插件（从Nginx访问日志文件中读取数据）、一个过滤器插件（使用grok解析日志格式并将时间戳转换为标准格式）和一个输出插件（将处理后的数据发送到本地的Elasticsearch实例）。

4、启动Logstash并加载配置文件

运行以下命令启动Logstash并加载nginx.conf配置文件：

logstash f /path/to/nginx.conf

5、安装并配置Kibana

下载并安装Kibana，然后访问http://localhost:5601，首次登录时，需要设置Elasticsearch实例的连接信息，选择“Dev Tools”选项卡，然后在控制台中输入以下命令：

PUT /_cluster/settings
{
  "transient": {
    "cluster.name": "elasticsearch"
  }
}

接下来，创建一个新的索引模式，以便Kibana能够显示Nginx访问日志数据，在“Dev Tools”选项卡的控制台中输入以下命令：

PUT /nginxaccess*/_mapping?pretty=true&ignore_unmapped=true&expand_wildcards=true
{
  "properties": {
    "clientip": { "type": "ip" },
    "remote_user": { "type": "keyword" },
    "time_local": { "type": "date" },
    "request": { "type": "object", "properties": { "method": { "type": "keyword" }, "uri": { "type": "keyword" }, "protocol": { "type": "keyword" } } }
  }
}

现在，你应该可以在Kibana中看到Nginx访问日志数据了，可以使用搜索框搜索特定的请求或查看请求统计信息等。

网站题目：ELK如何分析nginxaccess日志（elk收集nginx日志）
浏览路径：http://cdysf.com/article/ccdopjd.html