Nginx查找访问前10的IP的方法

蓝队云小课堂：

在管理和维护Web服务器时，了解谁正在访问您的网站是非常重要的。Nginx是一个流行的Web服务器，通过分析其访问日志，您可以了解访问者的来源、频率以及他们的行为。有时候，您可能希望查找访问量最高的IP地址，以便进一步分析或采取措施，比如加强安全性或优化性能。下面我们看下如何查找访问Nginx的前10个IP地址的方法。

Nginx访问日志

Nginx访问日志记录了每个访问服务器的请求信息，包括请求的时间、客户端IP地址、请求的URL、HTTP状态码等。访问日志的默认位置通常是 /var/log/nginx/access.log，但具体位置可能会根据您的 Nginx 配置而有所不同。

一个典型的 Nginx 访问日志条目可能如下所示：

127.0.0.1 - - [17/Mar/2024:10:30:00 +0000] "GET /example-page HTTP/1.1" 200 1234 "-" "Mozilla/5.0 ..."

其中：

127.0.0.1 是客户端的IP地址。

[17/Mar/2024:10:30:00 +0000] 是请求的时间。

"GET /example-page HTTP/1.1" 是请求的方法和URL。

200 是HTTP状态码。

1234 是响应的字节数。

"-" "Mozilla/5.0 ..." 是用户代理字符串，指明了客户端的浏览器信息。

1、使用命令行工具分析日志

您可以使用命令行工具来分析Nginx访问日志，并提取前10个IP地址。

使用 grep来过滤出所有的IP地址：

grep -oE "\\b([0-9]{1,3}\\.){3}[0-9]{1,3}\\b" /var/log/nginx/access.log

此命令将在Nginx访问日志中查找并提取出所有的IP地址。

使用 awk 来统计每个IP地址出现的次数，并按出现次数排序：

awk '{print $1}' /var/log/nginx/access.log | sort | uniq -c | sort -nr | head -n 10

这条命令将列出Nginx访问日志中出现次数最多的前10个IP地址，并显示它们出现的次数。

使用 sed 和 sort 来提取前10个IP地址：

sed -E 's/^([0-9]+\\.[0-9]+\\.[0-9]+\\.[0-9]+).*$/\\1/' /var/log/nginx/access.log | sort | uniq -c | sort -nr | head -n 10

2、使用脚本自动化分析日志

尽管命令行工具在分析 Nginx 访问日志时非常有用，但在处理大量日志条目时可能变得不够高效。为了更有效地处理日志并提取前10个IP地址，您可以编写一个简单的脚本来自动化这个过程。

下面是一个使用Bash脚本的示例，用于提取Nginx访问日志中出现次数最多的前10个IP地址：

#!/bin/bash

# 定义日志文件路径

LOG_FILE="/var/log/nginx/access.log"

# 提取日志中的 IP 地址并统计出现次数

IP_COUNT=$(awk '{print $1}' $LOG_FILE | sort | uniq -c | sort -nr)

# 提取前 10 个 IP 地址及其出现次数

TOP_IP=$(echo "$IP_COUNT" | head -n 10)

# 打印结果

echo "Top 10 IP addresses accessing Nginx:"

echo "$TOP_IP"

保存上述代码为一个脚本文件（例如analyze_nginx_logs.sh），然后通过运行bash analyze_nginx_logs.sh来执行它。脚本将读取Nginx访问日志文件，提取前10个最常见的IP地址及其出现次数，并将结果打印出来。

您可以根据需要对脚本进行修改和定制，以满足特定的分析要求。例如，您可能希望将结果写入另一个文件，或者在输出中添加更多的信息。这取决于您的具体需求和偏好。

使用脚本可以节省您在分析日志时的时间和精力，并且使得这个过程更加可重复和可扩展。

3、使用日志分析工具

虽然使用命令行工具和脚本可以对Nginx访问日志进行分析，但是对于大型或复杂的日志文件，使用专门设计的日志分析工具可能更加高效和方便。

AWStats

AWStats是一个强大的开源日志分析工具，它能够生成详细的统计报告，包括访问者数量、页面浏览量、流量分析等。要使用AWStats分析Nginx访问日志，您需要按照官方文档的指导进行安装和配置。一旦配置完成，AWStats将会自动生成分析报告，其中包含了访问量最高的IP地址。

GoAccess

GoAccess是另一个流行的开源日志分析工具，它提供了实时的日志分析和可视化功能。GoAccess支持对Nginx访问日志进行实时监控，并生成交互式的报告。您可以使用GoAccess快速找到访问量最高的IP地址，并查看其他有用的统计信息。

ELK Stack

ELK Stack是一组开源工具的组合，包括Elasticsearch、Logstash和Kibana，用于实时日志分析和可视化。通过配置Logstash来收集和解析Nginx访问日志，然后将数据存储在 Elasticsearch中。最后，使用Kibana来查询和可视化数据，并生成各种报告和仪表盘。ELK Stack 提供了灵活和强大的分析功能，可以帮助您更深入地了解访问模式和行为。

在查找访问Nginx的前10个IP地址时，需要注意一些安全性考虑。由于IP地址是公开信息，因此您应该谨慎处理这些数据，以防止泄露用户的个人信息或敏感信息。另外，如果发现某些IP地址频繁访问您的服务器并且具有恶意行为，您可能需要采取相应的安全措施，比如封锁这些IP地址或加强服务器的安全配置。

更多小知识，可联系蓝队云一起探讨。