답변:
sort
및 uniq
유틸리티를 사용 하여이 작업을 수행 할 수 있습니다 .
예:
[john @ awesome ~] $ echo -e "test \ ntest \ ntest \ nanother test \ ntest" 테스트 테스트 테스트 다른 테스트 테스트 [john @ awesome ~] $ echo -e "test \ ntest \ ntest \ nanother test \ ntest"| 정렬 | 유니크 다른 테스트 테스트
데이터에 따라 일부 스위치를 활용할 수도 있습니다.
sort -u
대신에 사용하십시오 sort | uniq
. 프로세스를 저장하고 총 I / O를 줄이며 총 비교 횟수를 줄입니다.
sort
전에uniq
경우 데이터가 정렬되지 않습니다. 그렇지 않으면uniq
완전히 작동하지 않습니다.