여러 서버에서 로컬 시스템으로 파일을 어떻게 복사합니까?

11

app00, app01 등과 같은 서버에 여러 응용 프로그램을 배포했습니다. 이 모든 서버에서 로컬 로그로 단일 로그 파일을 복사하여 약간의 그 리핑 및 자르기를 수행해야합니다.

이 파일을보기 위해 csshX를 사용했지만 scp에 해당하는 파일을 찾을 수 없습니다. 나는 기본적으로 두 가지를 원한다.

n 개의 이러한 서버에 연결하고 파일을 복사하는 기능
로그 파일 앞에 서버 호스트 이름을 붙여서 이름 충돌이 로컬로 발생하지 않도록하십시오

어떻게해야합니까?

scp file-copy

— 가우 라브
소스

1

아마 직접 스크립트를 작성했을 것입니다. 옵션이 아닙니까?

— Bernhard

베른하르트가 지금하고 있습니다. :) 나는 이것을 위해 csshX와 같은 것이 있기를 바랐습니다.

— Gaurav

18

이것은 작은 스크립트와 관련이 있습니다. 예를 들면 다음과 같습니다.

for server in app0 app1 app4 app5 appN; do
    scp user@$server:/path/to/log/file /local/path/to/"$server"_file
done

위의 내용은 각 서버에서 파일을 순차적으로 복사하여 이름을 지정합니다 SERVERNAME_file. 따라서의 파일은 기타 app0입니다 app0_file. 이름을 원하는대로 변경할 수 있습니다.

— 테라 돈
소스

3

명령 &의 끝과 끝에 A를 넣으면 추가 비용없이 동시성이 있습니다. scpwait

— l0b0

3

@ l0b0 그것이 바람직한 지 모르겠습니다. 복사하지 못한 파일과 파일을 알 수 있기 때문에이 방법이 마음에 듭니다. 그래도 좋은 팁, 감사합니다.

— terdon

12

GNU 병렬 사용 :

parallel -j0 scp {}:/remote_path file_from_{} ::: host1 host2 host3 # and so on

를 사용하는 솔루션과 달리 for모든 다운로드를 병렬로 실행합니다

— 날개 달린 서브 마리너
소스

5

remote_path="/path/to/file"
local_target_dir="/path/to/dir"
hosts=(app00 app01)
for host in "${hosts[@]}"; do
    scp "$host":"$remote_path" "$local_target_dir"/filename."$host"
done

— 하우 크 레이 징
소스

고마워, 나는 프로그래밍을 bash에 처음 접했고 더 더러운 것을 작성했다. :)

— Gaurav

0

파이썬을 사용할 수 있다면 패브릭이라는 기계 관리 작업을 단순화하는 흥미로운 모듈이 있습니다 : http://docs.fabfile.org/en/latest/tutorial.html

나는 그것을 사용하고 싶었지만 너무 돌아 가지 않았다.

— 폴
소스

0

이것은 나를 위해 일했다

#!/bin/bash
#Expect script
/usr/bin/expect -<<EOD 

set SERVERS {1 2 3 .. N}

foreach SERVER \$SERVERS {
    spawn scp user@\$SERVER:remote local/"\$SERVER"RESWeb.log
    expect {
      -re ".*es.*o.*" {
        exp_send "yes\r"
        exp_continue
      }
      -re ".*sword.*" {
        exp_send "pswrd\r"
      }
    }
    expect eof 
}
EOD

echo "completed"

— 사용자 170232
소스