웹 사이트에서 모든 페이지를 다운로드하려면 어떻게합니까?

모든 플랫폼이 좋습니다.

HTTRACK 전체 사이트의 내용을 복사하는 챔피언처럼 작동합니다. 이 도구는 활성 코드 컨텐츠가있는 웹 사이트를 오프라인으로 작동시키는 데 필요한 조각을 잡을 수도 있습니다. 나는 그것이 오프라인으로 복제 할 수있는 물건에 놀란다.

이 프로그램은 당신이 필요로하는 모든 것을 할 것입니다.

행복한 사냥!

Wget 이러한 종류의 작업을위한 고전적인 명령 줄 도구입니다. 대부분의 유닉스 / 리눅스 시스템과 함께 제공되므로 얻을 수 있습니다. Windows 용 너무. Mac의 경우, 자작 나무 그것을 설치하는 가장 쉬운 방법입니다 ( brew install wget ).

당신은 다음과 같이 할 것입니다 :

wget -r --no-parent http://site.com/songs/

자세한 내용은 다음을 참조하십시오. Wget 매뉴얼 그리고 그것의 예제들 또는 이들:

• wget : 전체 웹 사이트를 쉽게 다운로드

• Wget 예제 및 스크립트

wget 사용 :

wget -m -p -E -k www.example.com

설명 된 옵션 :

-m, --mirror            Turns on recursion and time-stamping, sets infinite 
                          recursion depth, and keeps FTP directory listings.
-p, --page-requisites   Get all images, etc. needed to display HTML page.
-E, --adjust-extension  Save HTML/CSS files with .html/.css extensions.
-k, --convert-links     Make links in downloaded HTML point to local files.

좀 봐야 해. 스크랩북 , Firefox 확장 기능. 그것은 심층 촬영 모드 .

인터넷 다운로드 매니저 옵션이 많은 Site Grabber 유틸리티가 있습니다. 원하는 모든 웹 사이트를 원하는 방식으로 완전히 다운로드 할 수 있습니다.

1. 다운로드 할 페이지 / 파일의 크기 제한을 설정할 수 있습니다

2. 방문 할 분기 사이트 수를 설정할 수 있습니다.

3. 스크립트 / 팝업 / 복제본의 동작 방식을 변경할 수 있습니다.

4. 해당 도메인에서만 도메인을 지정할 수 있습니다. 필요한 설정을 충족하는 모든 페이지 / 파일이 다운로드됩니다.

5. 찾아보기를 위해 링크를 오프라인 링크로 변환 할 수 있습니다.

6. 위의 설정을 선택할 수있는 템플릿이 있습니다.

그러나 소프트웨어는 무료는 아닙니다. 귀하의 필요에 맞는 소프트웨어인지 확인하고, 평가판을 사용하십시오.

엉덩이 - 그게 프로그램의 이름이야!

나는 브라우저가 사용하는 온라인 버퍼링을 다룰 것이다 ...

일반적으로 대부분의 브라우저는 탐색 캐시를 사용하여 웹 사이트에서 다운로드 한 파일을 잠시 동안 보관하므로 정적 이미지와 콘텐츠를 반복해서 다운로드 할 필요가 없습니다. 이것은 상황에 따라 약간의 속도를 낼 수 있습니다. 일반적으로 대부분의 브라우저 캐시는 고정 된 크기로 제한되며 그 한계에 도달하면 캐시에서 가장 오래된 파일이 삭제됩니다.

ISP는 ESPN 및 CNN과 같이 일반적으로 액세스하는 웹 사이트의 사본을 보관하는 캐싱 서버를 사용하는 경향이 있습니다. 이렇게하면 네트워크에있는 누군가가이 사이트를 방문 할 때마다이 사이트를 방문하는 수고를 덜 수 있습니다. 이는 ISP에 대한 외부 사이트에 대한 중복 요청 량을 대폭 절감 할 수 있습니다.

나는 좋다. 오프라인 탐색기 .
셰어웨어이지만 셰어웨어는 사용하기 쉽고 매우 유용합니다.

WebZip 좋은 제품이기도합니다.

나는 수년 동안이 일을하지 않았지만, 여전히 몇 가지 유틸리티가 있습니다. 시도해 볼 수도 있습니다. 웹 스네이크 . 나는 몇 년 전에 그것을 사용했다고 믿는다. 나는 당신의 질문을 읽을 때 바로 그 이름을 기억했습니다.

나는 Stecy와 동의한다. 제발 그들의 사이트를 망치로하지 마십시오. 아주 나쁜.

시험 백 스트리트 브라우저 .

무료이며 강력한 오프라인 브라우저입니다. 고속, 멀티 스레딩   웹 사이트 다운로드 및보기 프로그램. 동시에 여러 개의   서버 요구, BackStreet 브라우저는 빨리 전체를 다운로드 할 수있다   웹 사이트 또는 HTML, 그래픽, Java 애플릿,   사운드 및 기타 사용자가 정의 할 수있는 파일을 저장하고   하드 드라이브, 원시 형식 또는 압축 된 ZIP 파일   오프라인으로보기.

텔레포트 프로 당신의 목표물이 무엇이든간에 모든 파일을 복사하는 또 다른 무료 솔루션입니다 (또한 더 많은 페이지를 가져올 수있는 유료 버전도 있습니다).

DownThemAll 한 번의 클릭으로 특정 웹 페이지에 대한 모든 콘텐츠 (예 : 오디오 또는 비디오 파일)를 다운로드하는 Firefox 추가 기능입니다. 이것은 전체 사이트를 다운로드하지는 않지만 이것은 문제가 찾고있는 종류 일 수 있습니다.

Linux 및 OS X의 경우 : 움켜 잡다 - 사이트 전체 웹 사이트를 와르 크 파일. 이러한 WARC 파일은 열람 한 또는 추출. grab-site를 사용하면 정규식을 사용하여 건너 뛸 URL을 제어 할 수 있으며 크롤링이 실행 중일 때이를 변경할 수 있습니다. 그것은 또한 광범위한 기본값 집합 정크 URL 무시.

크롤링을 모니터링 할 수있는 웹 대시 보드와 특정 크기 이상의 비디오 내용이나 응답을 건너 뛰는 추가 옵션이 있습니다.

유서 깊은 FreeDownloadManager.org 이 기능도 있습니다.

무료 다운로드 관리자는 두 가지 형태로 두 가지 형태로 제공됩니다. 사이트 탐색기 및 사이트 스파이더 :

사이트 탐색기
사이트 탐색기를 사용하면   웹 사이트를 열고 필요한 파일이나 폴더를 쉽게 다운로드하십시오.
HTML 거미
HTML로 전체 웹 페이지 또는 전체 웹 사이트를 다운로드 할 수 있습니다.    거미. 도구는 지정된 파일을 다운로드하도록 조정할 수 있습니다.   확장 기능 만.

사이트 익스플로러는 전체 사이트를 다운로드하려고 시도하기 전에 포함 / 제외 할 폴더를 확인하는 데 유용합니다. 특히 예를 들어 다운로드하지 않으려는 전체 포럼이 사이트에 숨어있는 경우 특히 그렇습니다.

힘 wget

wget이 이미 언급되었지만이 리소스와 명령 줄은 너무 매끄 럽기 때문에 나는 언급 할 가치가 있다고 생각했습니다. wget -P /path/to/destination/directory/ -mpck --user-agent="" -e robots=off --wait 1 -E https://www.example.com/

이 코드는 explainhell에 설명되어 있습니다.

HTTrack을 다운로드하면 웹 사이트를 쉽게 다운로드 할 수 있습니다.

다운로드 링크: http://www.httrack.com/page/2/

도움이 될만한 동영상 : https://www.youtube.com/watch?v=7IHIGf6lcL4

나는 Google 크롬이 데스크톱 장치에서이 작업을 수행 할 수 있다고 생각하며 브라우저 메뉴로 이동하여 웹 페이지 저장을 클릭합니다.

또한 포켓과 같은 서비스는 실제로 웹 사이트를 저장하지 않을 수도 있으므로 링크 썩음에 취약합니다.

마지막으로 웹 사이트의 내용을 복사하면 저작권이 침해 될 수 있습니다.

Firefox는 기본적으로 그렇게 할 수 있습니다 (적어도 FF 42 이상). "페이지 저장"을 사용하십시오.