Contrôle granulaire des robots et des chemins
Définissez des règles d'autorisation et d'interdiction distinctes pour tous les robots ou des robots spécifiques tels que Googlebot, Bingbot et les grattoirs AI (GPTBot, CCBot).
Générateur de robots.txt
Générez des fichiers robots.txt personnalisés avec des règles d'autorisation/interdiction du robot d'exploration, plusieurs plans de site, le blocage des robots IA et des paramètres de délai d'exploration en temps réel.
User-agent: *.Appends a dedicated Disallow block for LLM crawlers without affecting search engines.
Add full URL(s) including https://. You can add multiple sitemaps separated by line breaks.
Used by Bingbot, YandexBot, etc., to control request frequency. (Googlebot ignores Crawl-delay).
# robots.txt generated by Tool 200 (https://tool200.com)
# 100% Client-Side Free Robots.txt Generator
User-agent: *
Disallow: /admin/
Disallow: /api/
Disallow: /private/
Allow: /
# Sitemap location(s)
Sitemap: https://example.com/sitemap.xmlInstruisez avec précision les robots d'exploration de recherche Web et les robots IA, protégez les itinéraires sensibles et optimisez l'efficacité de l'exploration SEO directement dans votre navigateur.
Définissez des règles d'autorisation et d'interdiction distinctes pour tous les robots ou des robots spécifiques tels que Googlebot, Bingbot et les grattoirs AI (GPTBot, CCBot).
Intégrez les emplacements du plan de site XML et configurez les taux d'exploration pour empêcher le trafic des robots de surcharger les ressources du serveur.
Toutes les analyses de règles et la création de fichiers s'exécutent directement dans la mémoire de votre navigateur local, sans aucun suivi ni téléchargement à distance.
Besoin d’un rafraîchissement mental de 2 minutes ? Plongez dans un jeu de réflexion classique directement dans votre navigateur.