검색 엔진이 내 콘텐츠를 색인 생성하지 않는 이유는 무엇입니까?


29

이것은 사이트 또는 특정 사이트 컨텐츠가 검색 엔진 결과에 나타나지 않는 이유와 관련된 모든 질문을 해결하기위한 일반적인 커뮤니티 위키 포괄 질문 및 답변 쌍입니다.

귀하의 질문이이 질문과 중복되어 닫혀 있고 여기에 제공된 정보가 충분한 답변을 제공하지 못한다고 생각되면 Pro Webmasters Meta 에 관한 토론을여십시오 .

내 사이트 (또는 내 사이트의 특정 페이지)가 검색 ​​엔진 결과에 나타나지 않습니다.

내 콘텐츠가 색인되지 않은 이유는 무엇이며 어떻게해야합니까?

답변:


36

콘텐츠가 검색 엔진 결과에 나타나지 않는 데는 여러 가지 이유가 있지만 검색 엔진의 색인 에는 검색 결과 페이지에 표시되지 않는 페이지가 포함되어있을 수 있습니다 .

콘텐츠가 실제로 색인 생성되는지 확인하는 방법

콘텐츠가 색인화되어 있는지 확인하기가 실제로 어려울 수 있습니다.

  • 귀하의 사이트에서 모든 문서를 검색하고 나열되는 문서 수를 확인하십시오
    • Google : 입력하십시오 site:example.com( example.com도메인 뒤에는 콜론 뒤에 공백이 없어야합니다).
    • 빙 : 입력site: example.com
    • Yahoo : 입력 site: example.com(또는 고급 검색 양식 사용)
  • 8 ~ 12 단어의 고유 한 문장으로 특정 문서를 검색하고 해당 문장을 따옴표로 검색하십시오. 예를 들어이 문서를 찾으려면 "콘텐츠가 검색 엔진 결과에 나타나지 않을 수있는 여러 가지 이유"를 검색하도록 선택할 수 있습니다.
  • 위뿐만 아니라, 사용 키워드를 검색 inurl:하고 intitle:, 같은 당신이 뭔가를 시도 할 수 keyword with another keyword inurl:example.com이것은 단지 특정 도메인에 대한 색인 페이지를 UPI 가져올 것이다.

    • 웹 마스터 도구에 로그인하여 사이트에서 색인이 생성 된 페이지 수에 대한 검색 엔진 자체의 통계를 확인하십시오.
    • Google 웹 마스터 도구 – 정보는 "건강"» "색인 상태"에서 확인할 수 있습니다. 사이트 맵을 제출 한 경우 각 사이트 맵 파일에서 인덱싱 된 문서 수를 확인할 수도 있습니다.
    • Bing 웹 마스터 도구

경우에 따라 이러한 방법 중 하나를 통해 문서가 색인화되지 않은 것처럼 보일 수 있지만 다른 방법을 사용하여 색인에서 문서를 찾을 수 있습니다. 예를 들어, 웹 마스터 도구는 문장을 검색하고 검색 엔진에서 문서를 찾을 수있는 경우에도 색인이 생성 된 문서가 거의 없다고보고 할 수 있습니다. 이 경우 문서 실제로 색인화됩니다.

콘텐츠 색인 생성 방법

검색 엔진은 컨텐츠를 색인화하기 전에 웹 크롤러를 사용하여 컨텐츠를 찾아야합니다 . 웹 서버의 로그를 확인하여 검색 엔진의 크롤러 (예 : Googlebot , Bing / MSNbot 등 의 사용자 에이전트로 식별 )가 사이트를 방문하고 있는지 확인해야합니다.

Google 및 Bing과 같은 큰 검색 엔진은 일반적으로 사이트를 자주 크롤링하지만 크롤러는 새 사이트에 대해 알지 못할 수 있습니다. 웹 마스터 ( Google 웹 마스터 도구 , Bing 웹 마스터 도구 )로 등록하거나 검색 엔진이이 기능을 제공하지 않는 경우 크롤러 (예 : Yahoo )에 링크를 제출하여 검색 엔진에 사이트 존재를 통지 할 수 있습니다 .

사이트 / 콘텐츠가 온라인 상태 인 지 얼마나 되었습니까?

검색 엔진은 콘텐츠를 찾은 후 콘텐츠를 매우 빠르게 색인 할 수 있지만 이러한 업데이트는 때때로 지연됩니다. 작은 검색 엔진은 응답 속도가 훨씬 떨어지고 새로운 콘텐츠를 색인하는 데 몇 주가 걸릴 수 있습니다.

콘텐츠가 며칠 동안 온라인 상태이고 다른 사이트의 링크가 없거나 크롤러가 자주 방문하지 않는 사이트의 링크 인 경우에는 색인이 생성되지 않은 것 같습니다. 몇 달 이상 사이트를 사용하지 않은 경우 검색 엔진은 아직 많은 콘텐츠를 색인화하기에 사이트를 신뢰하지 않을 수 있습니다.

웹 마스터가 콘텐츠를 제외 했습니까?

이 단계는 다른 사람으로부터 사이트를 인수하고 특정 페이지 또는 디렉토리에 문제가있는 경우 특히 중요합니다. robots.txtMETA 로봇 제외를 확인하고 크롤러가 제외되는 컨텐츠를 색인화하도록하려면이를 제거하십시오.

콘텐츠 색인 생성을 방해하는 기술적 인 문제가 있습니까?

사이트가 설정되었지만 특정 콘텐츠가 색인 생성되지 않는 경우 (콘텐츠가있는 URL에 웹 크롤러가 없음) Google 및 Bing에서 제공하는 웹 마스터 도구는 유용한 진단 정보를 제공 할 수 있습니다.

Google의 크롤링 오류 문서는 웹 크롤러의 일반적인 문제에 대한 광범위한 배경을 제공하여 콘텐츠 색인 생성을 방지하며 Google 웹 마스터 도구를 사용하는 경우 사이트에서 이러한 문제가 감지되면 알림을받습니다.

모든 사이트의 컨텐츠가 색인화되도록 가능한 한 빨리 오류 및 구성을 정정하십시오.

콘텐츠의 품질이 낮습니까?

검색 엔진은 크롤링하는 대부분의 페이지를 색인화하지 않습니다. 최고 품질의 콘텐츠 만 색인합니다. 다음과 같은 경우 검색 엔진이 콘텐츠를 색인화하지 않습니다.

  • 스팸, 횡설수설 또는 넌센스입니다.
  • 다른 곳에서 발견됩니다. 검색 엔진은 중복 컨텐츠를 찾으면 색인화 할 복제 중 하나만 선택합니다. 일반적으로 평판과 링크가 더 많은 원본입니다.
  • 얇다. 두 줄 이상의 원본 텍스트가 필요합니다. 바람직하게는 훨씬 더. 각 사용자에 대한 페이지와 같이 내용이 거의없는 자동으로 작성된 페이지는 색인이 생성되지 않을 수 있습니다.
  • 평판이나 링크가 충분하지 않습니다. 귀하의 사이트에 페이지가 너무 깊게 묻혀 순위를 매길 수 없습니다. 외부 링크가없고 모든 페이지에서 몇 번의 클릭이 발생하면 색인이 생성되지 않을 수 있습니다.

일부 콘텐츠가 색인되어 있지만 전부는 아닙니까?

사이트에 수백 개의 페이지가있는 경우 Google은 거의 모든 페이지를 색인으로 생성하지 않습니다. 사이트에 수만 개의 페이지가있는 경우 Google에서 해당 페이지의 일부만 색인을 생성하는 것이 일반적입니다.

Google은 사이트의 전반적인 평판과 콘텐츠 품질에 따라 사이트에서 색인을 생성 할 페이지 수를 선택합니다. Google은 일반적으로 사이트의 명성이 높아짐에 따라 시간이 지남에 따라 더 큰 사이트의 색인을 생성합니다.



1

위에서 언급 한 것과 동일한 것을 반복 할 필요는 없지만 새로운 도구에 익숙하지 않은 경우 아래에서 확인하는 방법이 있습니다.

이전 Google 웹 마스터의 robots.txt 테스터 도구 로 이동하여 robot.txt 파일이 콘텐츠를 차단하지 않는지 확인할 수 있습니다

여기에 이미지 설명을 입력하십시오

Google 검색 콘솔 (새 버전)

Google 검색 콘솔은 이전 버전보다 유용한 정보를 제공합니다. 페이지가 크롤링되는지 여부, 색인 생성 여부, 라이브 여부와 관계없이 Google Search Console에서 바로 문제를 확인하십시오.

  1. 웹 사이트의 Google 검색 콘솔에 로그인
  2. 도메인 속성이 여러 개인 경우 원하는 도메인을 선택했는지 확인하십시오.

Google 웹 마스터에서 더 이상 사용되지 않는 도구

이것은 구식입니다

이것은 당신이 통과 할 수있는 방법입니다 새 검색 콘솔

새로운 Google 검색 콘솔


0

루트 디렉토리에 robots.txt 파일이 있으면 사이트에 색인을 생성하지 않도록 Google에 지시 할 수 있습니다.

그거 확인 했어?

일반적으로 색인을 생성하려는 것처럼 들리기 때문에 해당 파일을 삭제하거나 이름을 바꾸는 것이 안전합니다.

중요 : 귀하의 사이트에서 Google Adsense를 사용하려는 경우 거래를 중단시킬 수 있습니다.

특수 코드를 어디에 두었 든 색인을 작성하지 않으면 사이트가 다운되었다는 메시지가 표시되므로 확인할 수 없습니다.


robots.txt 파일에는 크롤링 할 사용자 정의 규칙 세트가 있으므로 크롤링 할 첫 번째 파일이므로이를 제거하는 것은 해결책이 아닙니다. 최상의 해결책은 규칙을 수정하고 robots.txt 파일을 테스트하십시오. robot.txt에 사이트 맵 지시문을 추가하십시오. lastmod를 사용하여 사이트 맵을 최신 상태로 유지하고 빈도 속성을 변경하십시오.
Deepak Mathur
당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.