똑똑하고 새롭거나 변경된 크기의 파일 만 덮어 쓰거나 이름을 바꿀 수있는 웹 다운로드 관리자를 찾고 있습니다. 1 년에 몇 번씩 수십에서 수백 기가 바이트에 이르는 파일의 로컬 복사본을 새로 고쳐야합니다.
지금까지 FileZilla와 WinSCP를 사용했는데 로컬 파일 날짜 / 시간 스탬프와 파일 크기를 서버 복사본과 비교하고 다른 항목 만 다운로드하는 기능이 있습니다. 나와 호스트 모두 시간과 시간과 100GB의 대역폭을 절약하는 매우 유용한 기능입니다.
Ftp는 여전히 작동하지만 호스트는 ftp를 4 개의 연결로 제한하고 최대 결합 속도는 ~ 1-2MB / s입니다. http를 통한 동일한 사이트는 8 개의 연결 및 ~ 3-4MB / s 결합 속도로 제한됩니다. ftp를 사용하면 작업을 밤새 실행하고 아침에 일이 어떻게 진행되는지 확인해야합니다 (일부는 일부를 다시 실행할 수 있음). http를 사용하면 변경된 파일 대신 모든 것을 맹목적으로 덮어 쓰고 실수 나 다시 실행하는 경우에도 점심과 약간의 작업을 실행할 수 있습니다.
그렇다면 http 소스에서 변경된 새 파일 만 대량으로 다운로드하는 방법이 있습니까?
Windows를 선호하지만 Linux VM이 가장 좋은 방법이라면 스핀 업 할 수 있습니다.
이것은 "토렌트 없음"방화벽 규칙 세트를 허용하지 않고 시행하는 회사 환경에 있습니다. 너무 나쁘다. 이것은 피어 투 피어 기술의 비웨어 애플리케이션에 대한 완벽한 시나리오이다.
테스트 할 소스 : http://ftp2.cits.rncan.gc.ca/pub/geobase/official/nhn_rhn/
