각 IP 주소가 로그 파일에 나타나는 횟수

다음과 같은 형식의 파일이 있습니다.

$ cat file.txt

27.33.65.2
27.33.65.2
58.161.137.7
121.50.198.5
184.173.187.1
184.173.187.1
184.173.187.1

파일 file.txt을 다음과 같은 형식으로 구문 분석하는 가장 좋은 방법은 무엇입니까?

27.33.65.2: 2
58.161.137.7: 1
121.50.198.5: 1
184.173.187.1: 3

즉, 파일을 반복하고 각 IP 주소가 나타나는 횟수를 계산하고 싶습니다. 나는 이미 sort모든 IP 주소가 순서대로 서로 직접 연결 되도록 실행했습니다 .

당신이 찾고있는 uniq -c

그것의 결과가 당신의 취향에 맞지 않는다면, 그것은 쉽게 파싱되고 재 포맷 될 수 있습니다.

예를 들면 다음과 같습니다.

$ uniq -c logfile.txt | awk '{print $2": "$1}'
27.33.65.2: 2
58.161.137.7: 1
121.50.198.5: 1
184.173.187.1: 3

uniq실제로 영리한 해결책 인 것 같습니다. 어색한 방법 :

awk '{ip_count[$0]++}; '\
'END {for (ip in ip_count) printf "%15s: %d\n",ip,ip_count[ip];}' file

firest sort 파일은 unic -c로 계산됩니다.

sort filename | uniq -c

나는 파이썬을 사용할 것이다. 오늘날 모든 리눅스 시스템에는 python2가 설치되어 있습니다.

각 IP 주소를 dict (연관 배열)에 키 = 값 쌍 (예 : { "12.34.56.78": 1, "87.76.43.21": 3})으로 추가하십시오.

IP 주소를 키로 '확인'하고 값을 1 씩 증가시킵니다. defaultdict ( "ip")를 사용하는 경우 키가 존재하지 않으면 기본값 0으로 작성됩니다. 키가 존재하는 경우 이미 defaultdict는 아무것도하지 않습니다. 다음 줄에서 값이 증가합니다.

#!/usr/bin/python2

infile = open("file.txt","r")
iplist = {}  # create an empty dict

for line in infile:
    line = line.strip()   # remove newline.
    if line: # if not a blank line.
        iplist.setdefault(line, 0) # check for ip and add with default value of 0
        iplist[line] += 1 # increment

outfile = open("out.txt","w") #open output file

for key in iplist.keys():
    line = "%-15s = %s" % (key, iplist[key])
    print line   # print uf desired.
    outfile.write(line + "\n")

출력 파일 :

cat out.txt                                                          
27.33.65.2      = 2
58.161.137.7    = 1
121.50.198.5    = 1
184.173.187.1   = 3

나는 당신이 커맨드 라인 솔루션을 찾고 있다는 것을 알고 있지만, 당신이 볼 수 있듯이 그것은 수십 줄 정도의 우아한 형식의 디스플레이입니다. 파이썬은 훌륭한 관리 도구입니다.