성공적인 최종 복사 후 SSH를 통해 파일 이동 및 소스 삭제

SSH 연결을 통해 원격 호스트로 전송 해야하는 총 크기가 약 300GB 인 ~ 200 000 개의 파일 폴더가 있습니다. 로컬 파일이 원격 호스트에 성공적으로 복사되었음을 확인한 후 로컬 파일을 삭제하는 방법을 찾고 있지만 어떻게해야하는지 알 수 없습니다. rsync --remove-source-files다른 게시물 ( here ) 에 따라 연결이 끊어지면 안전하지 않은 것 같습니다 . 어떻게 안전하게 할 수 있습니까?

쉘 스크립트를 사용하십시오 :
아래에 설명 된 몇 가지 가정을합니다.

#!/bin/sh

# first, upload the directory structure
# be REALLY sure that it made it intact!
while true
do
    # try to upload it:
    rsync $flags --filter="+ */" --filter="- *" $source $destination
    # it uploaded fine? cool, break the loop (else try again):
    [ "$?" -eq 0 ] && break
done

# now the files
for file in $(find $source -not -type d)
do
    # again, be REALLY sure they copied okay!
    while true
    do
        # try to upload it:
        rsync $flags $file $destination/$file
        # it uploaded fine? cool, break the innermost loop (else try again):
        [ "$?" -eq 0 ] && break
    done
    # delete the local copy of the file:
    rm $file
done

이 스크립트는 다음을 가정합니다.

1. 즉 $source, $destination및 $flags중 하나를 환경 변수로 설정하거나 실제 소스, 목적지 및 기타와 스크립트에 대체되었다 rsync당신이 사용하려는 플래그. (교체하지 마십시오 $?또는 $file.)
2. 그것은 $source상대 경로입니다.
3. 그 rsync경우 제로가 아닌 상태로 종료됩니다 어떤 이유로 지정된 $file성공적으로 100 % 복사되지 않았습니다.
4. 내가하지 않았기 때문에 덜 중요한 데이터로 테스트했습니다.

rsync --filter매개 변수에서 복사 된 블로그 게시물 에 의해 필라는 어떤 남자 . 나는 그와 함께 괜찮기를 바랍니다. :)

sshfs 를 사용할 수 있습니다 . sshfs를 사용하면 ssh를 통해 원격 디렉토리를 "마운트"할 수 있습니다 (실제로 ssh 이외의 명령을 수행하여 파일 시스템을 모방 함). 그런 다음 mv파일을 이동 하는 데 사용할 수 있습니다 .

사용자 공간 파일 시스템이기 때문에 수퍼 유저 일 필요는 없습니다.

예를 들어 파일을 10 개의 블록으로 분할 한 다음

rsync (source files) destination

그리고 성공적으로 실행되면

rsync --remove-source-files (source files) destination

두 번째 rsync 명령의 추가 대역폭은 무시할 수 있습니다.