특정 문자열을 포함하는 모든 줄을 텍스트 파일에서 삭제하는 방법은 무엇입니까?

sed를 사용하여 특정 문자열이 포함 된 텍스트 파일의 모든 줄을 어떻게 삭제합니까?

라인을 제거하고 출력을 표준 출력으로 인쇄하려면 :

sed '/pattern to match/d' ./infile

파일을 직접 수정하려면 – BSD sed에서 작동하지 않습니다.

sed -i '/pattern to match/d' ./infile

동일하지만 BSD sed (Mac OS X 및 FreeBSD)의 경우 – GNU sed에서 작동하지 않습니다.

sed -i '' '/pattern to match/d' ./infile

파일을 직접 수정하고 백업을 작성하려면 – BSD 및 GNU sed와 함께 작동합니다.

sed -i.bak '/pattern to match/d' ./infile

이외에도 특정 문자열이있는 행을 삭제하는 방법에는 여러 가지가 있습니다 sed.

AWK

awk '!/pattern/' file > temp && mv temp file

루비 (1.9+)

ruby -i.bak -ne 'print if not /test/' file

펄

perl -ni.bak -e "print unless /pattern/" file

쉘 (bash 3.2 이상)

while read -r line
do
  [[ ! $line =~ pattern ]] && echo "$line"
done <file > o
mv o file

GNU grep

grep -v "pattern" file > temp && mv temp file

그리고 물론 sed(역을 인쇄하는 것이 실제 삭제보다 빠릅니다) :

sed -n '/pattern/!p' file

sed를 사용하여 파일에서 줄을 바꿀 수 있습니다. 그러나 grep을 두 번째 파일로 반전 한 다음 두 번째 파일을 원본 위로 옮기는 것보다 속도가 훨씬 느린 것 같습니다.

예 :

sed -i '/pattern/d' filename      

또는

grep -v "pattern" filename > filename2; mv filename2 filename

어쨌든 첫 번째 명령은 내 컴퓨터에서 3 배 더 오래 걸립니다.

GNU로하는 쉬운 방법 sed:

sed --in-place '/some string here/d' yourfile

다음을 사용 ex하는 것이 좋습니다 (표준 Unix 명령 기반 편집기 임).

ex +g/match/d -cwq file

어디:

• +실행 (쓰기 및 종료)과 man ex동일하게 지정된 Ex 명령 ( ) -c을 실행합니다.wq
• g/match/d-주어진 줄을 삭제하는 Ex 명령은 다음 match을 참조하십시오 : g의 거듭 제곱

위의 예는이 게시물에 따라 Unix.SE 및 POSIX 사양ex 의 파일을 편집하는 POSIX 호환 방법 입니다 .

차이점 sed은 다음과 같습니다.

sedA는 S tream ED 당사 홈페이지가 아닌 파일 편집기. ^BashFAQ

이식 불가능한 코드, I / O 오버 헤드 및 기타 나쁜 부작용을 즐기지 않는 한. 따라서 기본적으로 일부 매개 변수 (예 : in-place / -i)는 비표준 FreeBSD 확장이며 다른 운영 체제에서는 사용하지 못할 수 있습니다.

나는 Mac에서 이것으로 고투하고 있었다. 또한 변수 교체를 사용하여해야했습니다.

그래서 나는 다음을 사용했다.

sed -i '' "/$pattern/d" $file

where $file는 삭제가 필요한 파일이며 삭제 $pattern를 위해 일치시킬 패턴입니다.

''이 의견 에서를 선택했습니다 .

여기서주의 할 점은에 큰 따옴표 를 사용하는 것 입니다 "/$pattern/d". 작은 따옴표를 사용하면 변수가 작동하지 않습니다.

약 345 000 줄을 포함하는 파일로 작은 벤치 마크를 만들었습니다. 이 방법 grep은 sed방법 보다 약 15 배 빠릅니다 .

LC_ALL = C 설정을 사용하거나 사용하지 않고 시도했지만 타이밍을 크게 변경하지 않는 것 같습니다. 검색 문자열 (CDGA_00004.pdbqt.gz.tar)은 파일 중간에 있습니다.

명령과 타이밍은 다음과 같습니다.

time sed -i "/CDGA_00004.pdbqt.gz.tar/d" /tmp/input.txt

real    0m0.711s
user    0m0.179s
sys     0m0.530s

time perl -ni -e 'print unless /CDGA_00004.pdbqt.gz.tar/' /tmp/input.txt

real    0m0.105s
user    0m0.088s
sys     0m0.016s

time (grep -v CDGA_00004.pdbqt.gz.tar /tmp/input.txt > /tmp/input.tmp; mv /tmp/input.tmp /tmp/input.txt )

real    0m0.046s
user    0m0.014s
sys     0m0.019s

이것을 사용할 수도 있습니다 :

 grep -v 'pattern' filename

여기서는 -v패턴 이외의 것만 인쇄합니다 (반전 일치).

결과와 같은 결과를 얻으려면 grep다음을 수행하십시오.

echo "$(grep -v "pattern" filename)" >filename

SED :

• '/James\|John/d'
• -n '/James\|John/!p'

AWK :

• '!/James|John/'
• /James|John/ {next;} {print}

그립 :

• -v 'James\|John'

perl -i    -nle'/regexp/||print' file1 file2 file3
perl -i.bk -nle'/regexp/||print' file1 file2 file3

첫 번째 명령은 파일을 내부에서 편집합니다 (-i).

두 번째 명령은 동일한 작업을 수행하지만 파일 이름에 .bk를 추가하여 원본 파일의 복사본 또는 백업을 유지합니다 (.bk는 다른 것으로 변경할 수 있음).

echo -e "/thing_to_delete\ndd\033:x\n" | vim file_to_edit.txt

누군가가 정확한 문자열 일치를 위해 그것을 원한다면, -wgrep-w 의 플래그를 전체적으로 사용할 수 있습니다 . 예를 들어, 번호가 11 인 행을 삭제하지만 번호가 111 인 행을 유지하려는 경우 :

-bash-4.1$ head file
1
11
111

-bash-4.1$ grep -v "11" file
1

-bash-4.1$ grep -w -v "11" file
1
111

-f한 번에 여러 개의 정확한 패턴을 제외하려는 경우 플래그 와 함께 작동합니다 . "blacklist"가 "file"에서 삭제하려는 각 행에 여러 패턴이있는 파일 인 경우 :

grep -w -v -f blacklist file

cat filename | grep -v "pattern" > filename.1
mv filename.1 filename

처리 된 텍스트를 콘솔에 표시

cat filename | sed '/text to remove/d' 

처리 된 텍스트를 파일로 저장

cat filename | sed '/text to remove/d' > newfile

처리 된 텍스트 정보에 기존 파일을 추가

cat filename | sed '/text to remove/d' >> newfile

이미 처리 된 텍스트를 처리하려면이 경우 제거 된 줄을 더 제거

cat filename | sed '/text to remove/d' | sed '/remove this too/d' | more

는 | more한 번에 한 페이지의 덩어리에 텍스트를 표시합니다.

당신은 오래된 좋은 사용할 수 있습니다 ed유사한 방식으로 편집에 파일을 대답 사용 ex. 이 경우 가장 큰 차이점은 ed표준 입력을 통해 명령을받는 것이 아니라 명령 줄 인수가 아니라는 것 ex입니다. 스크립트에서 스크립트를 사용할 때이를 수용하는 일반적인 방법은 printf명령을 파이프로 파이프하는 데 사용하는 것입니다.

printf "%s\n" "g/pattern/d" w | ed -s filename

또는 heredoc과 함께 :

ed -s filename <<EOF
g/pattern/d
w
EOF