计算每个IP地址出现在日志文件中的次数

我有一个格式如下的文件：

$ cat file.txt

27.33.65.2
27.33.65.2
58.161.137.7
121.50.198.5
184.173.187.1
184.173.187.1
184.173.187.1

将文件解析file.txt为以下格式的最佳方法是：

27.33.65.2: 2
58.161.137.7: 1
121.50.198.5: 1
184.173.187.1: 3

换句话说，我想遍历文件并计算每个IP地址出现的次数。我已经运行了它，sort因此所有IP地址都井井有条，彼此紧紧相连。

您正在寻找 uniq -c

如果该输出不符合您的喜好，则可以对其进行解析和重新格式化。

例如：

$ uniq -c logfile.txt | awk '{print $2": "$1}'
27.33.65.2: 2
58.161.137.7: 1
121.50.198.5: 1
184.173.187.1: 3

uniq确实，这似乎是一个更明智的解决方案。awk方式：

awk '{ip_count[$0]++}; '\
'END {for (ip in ip_count) printf "%15s: %d\n",ip,ip_count[ip];}' file

最火的排序文件，然后由unic -c计数

sort filename | uniq -c

我会使用python。如今，每个Linux系统都安装了python2。

将每个IP地址作为键=值对添加到dict（关联数组）中，即{“ 12.34.56.78”：1，“ 87.76.43.21”：3}。

您可以将IP地址“验证”为密钥，并将值增加1。如果使用defaultdict（“ ip”），则如果密钥不存在，则会使用默认值0创建该密钥。已经，defaultdict什么也不做。该值在下一行增加。

#!/usr/bin/python2

infile = open("file.txt","r")
iplist = {}  # create an empty dict

for line in infile:
    line = line.strip()   # remove newline.
    if line: # if not a blank line.
        iplist.setdefault(line, 0) # check for ip and add with default value of 0
        iplist[line] += 1 # increment

outfile = open("out.txt","w") #open output file

for key in iplist.keys():
    line = "%-15s = %s" % (key, iplist[key])
    print line   # print uf desired.
    outfile.write(line + "\n")

输出文件：

cat out.txt                                                          
27.33.65.2      = 2
58.161.137.7    = 1
121.50.198.5    = 1
184.173.187.1   = 3

我知道您在寻找命令行解决方案，但是正如您所看到的，它是一种格式精美的显示器，仅占用了十几行。Python是出色的管理工具。