3
robots.txt를 사용하여 하위 도메인 만 허용하지 않으려면 어떻게해야하나요?
내 코드베이스는 여러 환경 (라이브, 준비, 개발) 및 하위 도메인 (간에 공유 staging.example, dev.example등)와 두 크롤링하도록 허용 (예.해야 www.example하고 example). 일반적으로 수정 /robots.txt하고 추가 Disallow: /하지만 공유 코드 기반으로 인해 /robots.txt모든 (하위) 도메인에 영향을 미치지 않으면 수정할 수 없습니다 . 그것에 대해 어떻게 생각하십니까?