답변:
sort및 uniq유틸리티를 사용 하여이 작업을 수행 할 수 있습니다 .
예:
[john @ awesome ~] $ echo -e "test \ ntest \ ntest \ nanother test \ ntest" 테스트 테스트 테스트 다른 테스트 테스트 [john @ awesome ~] $ echo -e "test \ ntest \ ntest \ nanother test \ ntest"| 정렬 | 유니크 다른 테스트 테스트
데이터에 따라 일부 스위치를 활용할 수도 있습니다.
sort -u대신에 사용하십시오 sort | uniq. 프로세스를 저장하고 총 I / O를 줄이며 총 비교 횟수를 줄입니다.
sort전에uniq경우 데이터가 정렬되지 않습니다. 그렇지 않으면uniq완전히 작동하지 않습니다.