웹 사이트의 모든 페이지와 하위 페이지를 긁어 내고 싶습니다 (스크랩하면 모든 온라인 콘텐츠를 로컬 HTML 파일에 저장하는 것을 의미합니다).
모든 페이지를 크롤링하는 가장 좋은 유틸리티는 무엇입니까? 이상적으로는 스크 레이 핑 할 레이어 수를 지정하고 싶습니다.
답변
두 가지 옵션이 있습니다.
다음 wget과 같이 명령 행 유틸리티를 사용할 수 있습니다 .
wget -rl 10
를 교체 10수준의 수는 아래로 재귀 싶습니다.
또는 SiteSucker 를 사용할 수 있습니다 . 웹 사이트를 재귀 적으로 다운로드하는 GUI 응용 프로그램입니다. SiteSucker를 사용하여 재발 할 거리를 지정할 수도 있습니다.
