웹사이트를 가져오지 않고 URL에 대해 붙여넣은 크롤러 규칙을 테스트합니다.
일치하는 도구가 없습니다.
로컬 규칙 시뮬레이션은 사용자 에이전트 그룹, 허용, 허용 안 함, 와일드카드 * 및 끝 마커 $를 지원합니다. 가장 구체적으로 일치하는 에이전트 그룹과 가장 긴 경로 규칙이 승리합니다. 승리 동점을 허용합니다. 크롤링 지연 및 지원되지 않는 지시어는 무시된 것으로 보고됩니다. 가져오기, HTTP 상태, 캐시된 정책, 인덱싱 또는 액세스 제어는 테스트되지 않습니다. 하나의 웹사이트 출처를 사용하세요.
샘플은 /admin/을 차단하지만 /admin/help를 허용합니다. /products/shirt에는 차단 규칙이 없습니다.