LAN의 여러 시스템에 대용량 파일 복사

가능한 한 빨리 동일한 LAN에있는 하나의 Linux 시스템에서 약 20 개의 다른 Linux 시스템으로 복사해야하는 몇 개의 큰 파일이 있습니다. 이 파일을 복사하는 데 가장 적합한 도구 / 방법은 일회성 복사본이 아니라는 점에 유의하십시오. 이 머신들은 절대 인터넷에 연결되지 않으며 보안은 문제가되지 않습니다.

최신 정보:

내가 묻는 이유는 (내가 이해하는 것처럼) 현재 scp파일을 각 컴퓨터에 복사하기 위해 직렬로 사용 하고 있으며 이것이 너무 느리고 더 빠른 대안이 필요하다는 정보를 받았습니다. 내가 들었던 것에 따르면, scp통화 를 병렬화하려고 하면 하드 드라이브 탐색으로 인해 통화 속도가 더 느려집니다.

비트 토런트. Twitter가 내부적으로 일부를 배포하는 방법입니다.

http://engineering.twitter.com/2010/07/murder-fast-datacenter-code-deploys.html (웹 아카이브 링크)

방법에 대한 UFTP , 그것은 한 번에 여러 클라이언트에 UDP를 통해 파일을 제공하는 멀티 캐스트 사용합니다. 모두를위한 것은 아니며 나는 그것에 대해 전문가가 아니지만 그것은 당신이 원하는 것을하는 것처럼 들립니다.

이 데이터를 복사하려고 했습니까 rsync? 1Gbit LAN 이상인 경우 4 * 20GB 이상을 복사해도 문제가되지 않습니다.

이 사본은 얼마나 자주 발생합니까? 완료하는 데 몇 분이 걸리나요?

scp- 쓰나미가 방법입니다!

https://code.google.com/p/scp-tsunami/

일반적으로 가상화 클러스터에 디스크 이미지를 배포하는 데 사용되며 성능은 거의 비 토렌트이지만 매일 사용하는 것이 더 간단합니다.

NFS 공유를 설정하고 큰 파일의이 공유 저장소에서 각 머신을 가져 오는 것이 가장 빠른 방법 일 것입니다 (NFS는 매우 빠르며 오버 헤드는 거의 없습니다).

추가 NIC를 소스 서버에 추가하고 함께 결합하여 처리량을 향상시킬 수 있습니다.

구현은 각 대상 서버에서 간단한 크론 작업이 될 수 있으며 매 시간 / 일 / 무엇이든 공유에서 맹목적으로 가져옵니다. 새 파일을 폴링하도록 데몬을 설정할 수도 있습니다. 제어 대상 세션을 각 대상 상자에 SSH (키 쌍 사용)로 스크립팅하고 스크립트를 실행할 때 파일을 가져 오도록 지시 할 수도 있습니다.