cURL을 사용한 사이트 스크래핑은 어떻게 "법적"입니까? [닫은]

최근에 나는 cURL을 실험하고 있었고 많은 것이 가능하다는 것을 알았습니다. 온라인 노래를 재생하는 음악 사이트를 크롤링하는 작은 스크립트를 만들었습니다. 실험 도중에 노래 소스도 크롤링 할 수 있음을 발견했습니다. 해당 사이트는 다운로드를 제공하지 않습니다.

나는 단지 무엇을 알아야합니까 .. 사이트를 크롤링하는 것이 완전히 법적입니까? 나는 http and port '80',

시장에서 다운로드 관리자를 잃어 버렸으며 거의 ​​모든 사이트에서 다운로드 할 수 있습니다.

귀하의 질문에 정확히 대답하십시오. cURL이 정적으로 링크 된 SSL 지원으로 구축되었거나 미국에서 적대적인 것으로 간주되는 일부 국가 중 하나로 내보내는 경우 해당 국가의 유일한 암호화는 예외입니다.

사이트의 공개 웹 페이지를 긁어내는 것도 일반적으로 합법적입니다. 브라우저에서 볼 수있는 모든 페이지를 하나씩 다운로드하면 아무런 문제가 없습니다. 다른 용도로 문제가 발생하면 서비스 거부 공격으로 간주 될 수 있습니다. 사이트의 이용 약관을 확인해야 할 수도 있지만 이미 다운로드하여 보았으므로 별 차이가 없습니다 (최상의 미묘한 기술 임).

그러나 음악을 다운로드하는 것만으로는 충분합니다. Limewire, uTorrent, Megaupload, Flashget 또는 cURL을 사용하더라도 여전히 음악을 다운로드하고 있습니다. 아티스트 / 레코드 레이블에 라이센스가 있거나 라이센스가 있거나 일반적으로 합법적으로 허용 된 경우 합법적입니다.

따라서 cURL은 완전히 합법적입니다. 그러나 다른 어떤 것과 마찬가지로, 당신이 그 일을하지 않을 수 있습니다.

IMDB.com은 서비스 약관의 일부로 사이트에서 이와 같은 스크레이퍼를 사용하는 것을 명시 적으로 금지합니다.

여기에 담당자가 없기 때문에 답변에 댓글을 달 수 없지만 웹 사이트 서비스 약관에 따라 합법적이지 않을 수도 있다고 답변했습니다. 그리고 이것은 미묘한 기술이지만,이 경우에도 여전히 합법적이지만 계약 위반 또는 저작권 위반으로 인해 민사에 고소 될 수 있습니다 (저작권 위반은 범죄 적으로도 불법 일 수 있음). 그러나 일반적으로 웹 사이트의 TOS가 무언가를 할 수 없다고 말한다고해서 웹 사이트를 운영하는 것을 금지하는 법적 권한이 있다는 것을 의미하지는 않습니다.

일반적으로 그것은 당신이 무엇을하는지, 그리고 어떻게 그것을 얻는 지 더 중요합니다. IE, CD를 복사 할 수 있지만 그 CD로 무엇을 했습니까? 다른 사람에게 판매했거나 (불법) 오래된 CD 위에 선반에 놓아서 긁히지 않은 사본 (법적)을 얻었습니까? 마찬가지로 음악을 직접 소유 한 경우에도 다른 용도로는 사용할 수 없으며 자신의 용도로만 복사 할 권리가 있습니다.

질문이 있습니다. 일반적으로 인터넷과 관련하여 인터넷을 게시 할 권한이있는 사람이 "게시"한 경우 자유롭게 사용할 수 없다는 규정 이없는 경우 (예 : TOS), 보통 공정한 게임으로 간주됩니다 비상업적 방식으로 사용하기 위해. 그러나 컨텐츠가 웹 페이지의 "보이는"부분에 포함되지 않고 소스 스크래핑 및 폴더 서핑이 필요합니다. "공용"네트워크에 있고 비보안 수단으로 액세스 할 수 있지만. 그것은 누군가가 문을 열어 두었 기 때문에 누군가의 집을 털어 놓을 수 있다고 주장하는 것과 거의 같습니다. 페이지에 링크가없는 경우 내용이 "게시"되지 않았다고 주장 할 수 있습니다.

그러나 그것은 당신이 미친 짓을하지 않거나 다른 일에서 이익을 얻으려고 노력하지 않는다면, 아무것도 아닌 것에 대해 많은 고민을 할 것입니다.