简述ELK收集Nginx正常日志和错误日志的配置 ？

ELK（Elasticsearch、Logstash和Kibana）是一个强大的日志收集、处理和可视化工具组合。以下是使用ELK收集Nginx正常日志和错误日志的基本配置步骤：

1. 安装和配置Nginx：

   • 确保你的Nginx已经正确安装并运行。
   • 配置Nginx以输出正常日志和错误日志到不同的日志文件。例如，你可以设置access_log来记录正常请求日志，error_log来记录错误日志。

2. 安装和配置Logstash：

   • 安装Logstash，它负责接收、解析和转发日志。
   • 配置Logstash的输入部分以从Nginx的日志文件读取数据。你可以使用file插件来读取文件日志。
   • 配置Logstash的过滤部分以解析日志数据。对于Nginx日志，你可能需要使用grok过滤器来解析日志字段。
   • 配置Logstash的输出部分以将解析后的日志数据发送到Elasticsearch。

3. 安装和配置Elasticsearch：

   • 安装Elasticsearch，它是一个分布式搜索和分析引擎，用于存储和搜索日志数据。
   • 配置Elasticsearch以接收Logstash发送的日志数据。

4. 安装和配置Kibana：

   • 安装Kibana，它是一个可视化工具，用于查询、分析和可视化存储在Elasticsearch中的日志数据。
   • 配置Kibana以连接到你的Elasticsearch实例，并创建适当的仪表板和可视化来显示Nginx日志数据。

以下是一个简化的Logstash配置文件示例，用于收集Nginx的正常日志和错误日志：

input {
  file {
    path => "/var/log/nginx/access.log"
    start_position => "beginning"
    sincedb_path => "/dev/null"
    type => "access"
  }
  file {
    path => "/var/log/nginx/error.log"
    start_position => "beginning"
    sincedb_path => "/dev/null"
    type => "error"
  }
}

filter {
  if [type] == "access" {
    grok {
      match => { "message" => "%{COMBINEDAPACHELOG}" }
    }
    date {
      match => [ "timestamp" , "dd/MMM/yyyy:HH:mm:ss Z" ]
    }
  }
  if [type] == "error" {
    grok {
      match => { "message" => "%{GREEDYDATA:error_message}" }
    }
  }
}

output {
  elasticsearch {
    hosts => ["localhost:9200"]
    index => "%{[@metadata][beat]}-%{+YYYY.MM.dd}"
  }
}

这个配置文件配置了两个文件输入，一个用于读取正常日志（access.log），另一个用于读取错误日志（error.log）。然后，它使用grok过滤器来解析日志数据，并将解析后的数据发送到本地运行的Elasticsearch实例。

请注意，这只是一个基本示例，你可能需要根据你的具体需求和环境进行调整。另外，确保你已经正确安装和配置了所有必要的组件，并且它们之间的网络连接是畅通的。