/tmp/urlFile각 줄이 URL을 나타내는 위치에 파일이 있습니다 . 다음과 같이 파일에서 읽으려고합니다.

cat "/tmp/urlFile" | while read url
do
    echo $url
done

마지막 줄이 줄 바꿈 문자로 끝나지 않으면 해당 줄을 읽을 수 없습니다. 왜 궁금해?

새 줄로 끝나는 지 여부에 관계없이 모든 줄을 읽을 수 있습니까?

당신은 할 것입니다 :

while IFS= read -r url || [ -n "$url" ]; do
  printf '%s\n' "$url"
done < url.list

(효과적으로,이 루프는 마지막 (비) 라인에서 누락 된 줄 바꿈을 다시 추가합니다).

또한보십시오:

• 왜 쉘 루프를 사용하여 텍스트를 처리하는 것이 나쁜 습관으로 간주됩니까?
• "IFS = read -r line"을 이해하십니까?
• 에코보다 printf가 더 좋은 이유는 무엇입니까?

이것은 부분적으로 해결 된 것으로 보입니다 readarray -t.

readarray -t urls "/tmp/urlFile"
for url in "${urls[@]}"; do
    printf '%s\n' "$url"
done

그러나 이것이 합리적 크기의 파일에 대해서는 작동하지만이 솔루션은 매우 큰 파일에 잠재적 인 새로운 문제를 유발합니다. 먼저 파일을 배열로 읽은 다음 반복해야합니다. 매우 큰 파일의 경우 시간이 많이 걸리고 메모리를 많이 소비 할 수 있으며 잠재적으로 오류가 발생할 수 있습니다.

에 의해 정의 , 텍스트 파일은 라인의 순서로 구성되어 있습니다. 라인은 개행 문자로 끝납니다. 따라서 텍스트 파일은 비어 있지 않으면 개행 문자로 끝납니다.

read내장은 텍스트 파일을 읽을 수하기위한 것입니다. 텍스트 파일을 전달하지 않으므로 원활하게 작동하기를 기대할 수 없습니다. 쉘은 모든 행을 읽습니다. 건너 뛰는 것은 마지막 행 다음에 나오는 추가 문자입니다.

마지막 행이 누락되었을 수있는 형식이 잘못된 입력 파일이 있으면 개행을 추가 할 수 있습니다.

{ cat "/tmp/urlFile"; echo; } | …

텍스트 파일이어야하지만 마지막 줄 바꿈이없는 파일은 종종 Windows 편집기에서 생성됩니다. 이것은 일반적으로 Unix의 LF가 아닌 CR LF 인 Windows 줄 끝과 함께 사용됩니다. CR 문자는 어디에서나 거의 유용하지 않으며 어떤 경우에도 URL에 표시 될 수 없으므로 제거해야합니다.

{ <"/tmp/urlFile" tr -d '\r'; echo; } | …

입력 파일의 형식이 양호하고 개행으로 끝나는 echo경우 빈 줄이 추가됩니다. URL은 비워 둘 수 없으므로 빈 줄은 무시하십시오.

또한 read직선으로 행을 읽지 않습니다. URL의 경우 앞뒤 공백을 무시합니다. 행 끝의 백 슬래시를 이스케이프 문자로 취급하여 다음 행을 첫 번째 빼기 백 슬래시-줄 바꾸기 시퀀스와 결합시킵니다. 이는 바람직하지 않습니다. 따라서 -r옵션을에 전달해야 합니다 read. read오히려 옳은 것이 되기는 매우 드 rare니다 read -r.

{ <"/tmp/urlFile" tr -d '\r'; echo; } | while read -r url
do
  if [ -z "$url" ]; then continue; fi
  …
done

글쎄, read그것은 줄 바꿈하기 전에 파일의 마지막을 충족하는 경우 falsy 값을 반환하지만,이 경우에도, 그것은 여전히 읽은 값을 할당합니다. 따라서 최종 호출이 read빈 줄 이외의 것을 반환 하는지 확인 하고 정상적으로 처리합니다. 그래서 후에 만 루프 종료 read반환 거짓을 하고 라인이 비어 있습니다 :

#!/bin/sh
while IFS= read -r line || [ "$line" ]; do 
    echo "line: $line"
done

$ printf 'foo\nbar' | sh ./read.sh 
line: foo
line: bar
$ printf 'foo\nbar\n' | sh ./read.sh 
line: foo
line: bar

다른 방법은 다음과 같습니다.

읽기가 행 끝이 아닌 파일 끝에 도달하면 데이터를 읽고 변수에 지정하지만 0이 아닌 상태로 종료됩니다. 루프가 "읽는 동안; 물건을;

따라서 읽기 종료 상태를 직접 테스트하는 대신 플래그를 테스트하고 읽기 명령을 루프 본문 내에서 해당 플래그로 설정하십시오. 이런 식으로 읽기 종료 상태에 관계없이 전체 루프 본문이 실행됩니다. 읽기는 루프가 실행 될지 여부를 결정하는 요소가 아니라 다른 루프의 명령 목록 중 하나 일뿐입니다.

DONE=false
until $DONE ;do
read || DONE=true
echo $REPLY 
done < /tmp/urlFile

여기 에서 참조 하십시오 .

고양이 "/ tmp / urlFile"| URL을 읽는 동안
하다
    에코 $ url
끝난

의 쓸모없는 사용입니다cat .

아이러니하게도 cat여기서 프로세스를 실제로 유용한 것으로 대체 할 수 있습니다 . POSIX 시스템이 누락 된 줄 바꿈을 추가하고 파일을 적절한 POSIX 텍스트 파일로 만드는 도구입니다.

sed -e '$ a \' "/ tmp / urlFile"| -r url을 읽는 동안
하다
    printf "% s \ n" "$ {url}"
끝난

추가 자료

• 파일 끝에 줄 바꿈을 추가하는 방법은 무엇입니까?