跳到主要内容

分析Nginx日志统计每个URL访问内容的总大小（$body_bytes_sent） ？

参考答案：

要分析Nginx日志并统计每个URL访问内容的总大小（$body_bytes_sent），你可以使用awk工具。awk是一个强大的文本处理工具，非常适合用于此类任务。

以下是一个基本的步骤和示例，说明如何使用awk来分析Nginx访问日志并统计每个URL的总大小：

  1. 日志格式：

首先，确保你的Nginx访问日志包含了$body_bytes_sent字段。默认情况下，它可能不在默认的日志格式中，但你可以自定义日志格式来包含它。例如，你可以在Nginx配置文件中添加或修改以下日志格式：

log_format main '$remote_addr - $remote_user [$time_local] "$request" '
                 '$status $body_bytes_sent "$http_referer" '
                 '"$http_user_agent" "$http_x_forwarded_for"';

然后，将此格式应用到你的访问日志中：

access_log /var/log/nginx/access.log main;
  1. 使用awk分析日志：

假设你的访问日志位于/var/log/nginx/access.log，你可以使用以下awk命令来统计每个URL的总大小：

awk '{sum[$7] += $10} END {for (a in sum) print a, sum[a]}' /var/log/nginx/access.log | sort -k2 -n

解释：

  • $7：代表URL（在上面的日志格式中，URL是日志行的第7个字段）。
  • $10：代表$body_bytes_sent（在上面的日志格式中，它是日志行的第10个字段）。
  • sum[$7] += $10：对于每个日志行，将$body_bytes_sent的值加到对应URL的总和中。
  • END {for (a in sum) print a, sum[a]}：在所有日志行处理完后，打印每个URL及其对应的总大小。
  • sort -k2 -n：按第二列（总大小）进行数值排序。
  1. 输出结果：

上述命令将输出每个URL及其对应的总大小，并按总大小进行排序。例如：

/path/to/url1 12345
/path/to/url2 67890
...

这表示/path/to/url1的总大小为12345字节，/path/to/url2的总大小为67890字节，依此类推。

注意：这只是一个基本示例。根据你的Nginx日志格式和具体需求，你可能需要调整字段的索引或进行其他处理。