Google 검색 결과에 XML 사이트 맵이 표시되지 않도록 방지

어떻게이의이 결과 같은 Google 검색 결과에 표시 내 XML 사이트 맵 파일을 방지 할 site:검색 쿼리 :

Google이 검색 결과에 사이트 맵 파일을 표시하기로 선택한 이유를 이해하지 못합니다. 이 파일은 사람이 사용할 수 없습니다.

Google은 크롤링하여 처리 할 수 ​​있어야하므로 robots.txt 에서 허용하지 않습니다 . 나는 그들이 처리 한 후 검색 결과에 넣기를 원하지 않습니다.

Google은 XML 사이트 맵 (예 : XML 파일)을 색인합니다. Google이 URL을 알고 있고 올바른 응답을 반환하면 Google의 포함 규칙을 통과하여 색인을 생성 할 수 있습니다. 개인적으로, 나는 GWT를 통해서만 사이트 맵을 제출하고 Sitemap:robots.txt에 참조를 포함하며 이것이 색인을 생성하기에 충분합니다.

Google에서 이러한 파일을 색인 생성하지 못하게하는 권장 방법 X-Robots-Tag은 XML 사이트 맵을 제공 할 때 HTTP 응답 헤더 를 포함하는 것 입니다. 예를 들면 다음과 같습니다.

X-Robots-Tag: noindex

HTML 파일에 로봇 META 태그를 포함하는 것처럼 X-Robots-Tag헤더는 모든 유형의 파일에 사용할 수 있습니다.

참조 : 이 문서 (2008 년 11 월부터!) 는 XML 사이트 맵을 처리 할 때 응답 사용과 관련하여 Google 의 John Mueller (Google) 를 인용 한 것으로 보입니다 X-Robots-Tag.
예, Google은 XML Sitemap 파일의 색인을 생성하고 순위를 매 깁니다.

자세한 내용은 Google 개발자 안내서 :
로봇 메타 태그 및 X-Robots-Tag HTTP 헤더 사양을 참조하십시오.

X-Robots-Tag 사용에 대한 MrWhite의 답변이 올바른 방법으로 보입니다.

다음은 .htaccess 또는 Apache 구성 파일 에서 사용할 수있는 코드입니다 . (참고 : WebmasterWorld-SERP에 표시되는 사이트 맵-이것을 방지하는 방법? )

<Files ~ "sitemap.*\.xml(\.gz)?$">
  Header append X-Robots-Tag "noindex"
</Files>

아래 의 nginx 구성과 다음이 될 것입니다. (참고 : Yoast X-Robots-Tag 예제 )

location ~* sitemap.*\.xml(\.gz)?$ {
    add_header X-Robots-Tag "noindex";
}

왜 중요한가요?

실제로 SERP에서 사이트 맵을 찾을 수 있다면 더 큰 문제가 있습니다.

대신 유용한 콘텐츠로 페이지를 올리는 데 더 집중할 것입니다. 그렇게하면 사이트 맵을 찾는 데 어려움을 겪을 수 있습니다. 어쨌든 그 시점에서 신경 쓰지 않을 것입니다.

추신

거의 모든 사람이 사이트 맵을 같은 장소에 유지합니다. 그래서 누군가가 당신이 그것을 지키는 곳을 찾으려면 :)

robots.txt에 다음을 입력하십시오.

User-agent: *
Disallow: /sitemap.xml

대신 Google 웹 마스터 도구를 통해 사이트 맵을 제출하십시오.