Kostenloses Tool
Blockiert Ihre robots.txt KI-Crawler?
Fügen Sie Ihre robots.txt unten ein. Wir prüfen sie gegen 15 bekannte KI-Crawler und zeigen Ihnen, welche noch auf Ihre Inhalte zugreifen können.
So funktioniert es
Dieses Tool analysiert Ihre robots.txt-Datei und prüft jeden KI-Crawler-User-Agent gegen Ihre Regeln.
robots.txt einfügen
Kopieren Sie den Inhalt Ihrer robots.txt-Datei und fügen Sie ihn in das Textfeld ein.
Wir prüfen 15 KI-Crawler
Wir analysieren Ihre Anweisungen gegen GPTBot, ClaudeBot, Bytespider und 12 weitere bekannte KI-Crawler.
Sehen Sie Ihre Exposition
Erhalten Sie einen klaren Bericht, welche Crawler blockiert sind und welche noch auf Ihre Website zugreifen können.