방금 새 사이트에서 robots.txt 파일을 업데이트했습니다. Google 웹 마스터 도구에서 마지막 업데이트 10 분 전에 내 robots.txt를 읽었습니다.
Google이 가능한 빨리 robots.txt를 다시 읽도록 권장 할 수있는 방법이 있습니까?
업데이트 : 사이트 구성 | 크롤러 액세스 | robots.txt 테스트 :
홈페이지 액세스 표시 :
Googlebot이 http://my.example.com/ 에서 차단되었습니다 .
참고 : Google에서 마지막으로 읽은 robots.txt는 다음과 같습니다.
User-agent: *
Allow: /<a page>
Allow: /<a folder>
Disallow: /
내가 발로 직접 쏜 적이 있습니까, 아니면 마지막으로 읽었습니까?
내가해야 할 일에 대한 아이디어가 있습니까?