← Mochi Tools

robots.txt-regelkontroll

Testa inklistrade sökrobotregler mot webbadresser utan att hämta din webbplats.

Om det här verktyget

Hur använder jag det här verktyget?

Testa inklistrade sökrobotregler mot webbadresser utan att hämta din webbplats.

Vad ska jag kontrollera innan jag använder resultatet?

Lokal regelsimulering stöder användaragentgrupper, Tillåt, Disallow, jokertecken * och slutmarkör $. Den mest specifika matchande agentgruppen och regeln för längsta väg vinner; Tillåt vinner band. Genomsökningsfördröjning och direktiv som inte stöds rapporteras som ignorerade. Ingen hämtning, HTTP-status, cachad policy, indexering eller åtkomstkontroll testas. Använd en webbplats ursprung.

Arbetat exempel

Exemplet blockerar /admin/ men tillåter /admin/help. /products/shirt har ingen blockeringsregel.

Relaterade verktyg

Metodreferenser

Dokumentationen uppdaterad