Crawler-IP-Checker
Vergleichen Sie mit diesem Crawler-IP-Checker bis zu 50 Adressen mit veröffentlichten IP-Bereichen von Bots. Fügen Sie IP-Adressen oder einen Logauszug ein und prüfen Sie, welche Betreiber übereinstimmen.
Ein Crawler-IP-Checker vergleicht die IP-Adresse einer Anfrage mit den vom Crawler-Betreiber veröffentlichten Bereichen. Fügen Sie bis zu 50 Adressen oder einen Logauszug ein, um IPv4 und IPv6 zu prüfen. Eine Übereinstimmung zeigt einen veröffentlichten Netzwerkbereich an, nicht den konkreten Bot oder dessen Absicht. Prüfen Sie die Quelle und das Aktualisierungsdatum, bevor Sie sich auf das Ergebnis verlassen.
Abdeckung und Grenzen der Überprüfung
Dokumentation geprüft am 11. Oktober 2026. Dieses Tool führt für Ihre IP-Adressen keine Reverse-DNS-Abfragen durch.
- Meta
- Meta dokumentiert die User-Agents seiner Crawler und die Steuerungsmöglichkeiten über robots.txt. Eine vollständige offizielle Liste der IP-Adressen ist hier nicht eingebunden. Ein Meta-User-Agent allein belegt nicht, dass eine Anfrage tatsächlich von Meta stammt. Dokumentation der Betreiber
- ByteDance
- Die offizielle Bytespider-Seite nennt zehn IPv4-Adressbereiche und Hinweise zur Prüfung per Reverse DNS. Dieses Prüfwerkzeug lädt die per JavaScript gerenderte Liste nicht herunter. Daher bleibt unbestätigt, ob eine Adresse zu Bytespider gehört. IP-Listen von Drittanbietern werden nicht verwendet. Dokumentation der Betreiber
- Amazon
- Amazon veröffentlicht separate Adresslisten für Amazonbot, Amzn-SearchBot und Amzn-User. Dieses Prüfwerkzeug liest die vollständigen JSON-Blöcke auf diesen offiziellen HTML-Seiten. Einzelne Adressen werden als Host-Adressbereiche abgeglichen. Dokumentation der Betreiber
- Mistral AI
- Die geprüfte Dokumentation verlinkt IP-Listen für MistralAI-User und MistralAI-Index, aber keine separate Liste für MistralAI-Training. Trainingsanfragen sind daher nicht abgedeckt. Dokumentation der Betreiber
- Majestic
- Majestic dokumentiert einen verteilten Crawler ohne zusammenhängende IP-Blöcke. Nutzen Sie den MJ12bot-User-Agent und die Steuerung über robots.txt. Dieses Prüfwerkzeug kann anhand des Namens keine IP-Adresse bestätigen. Dokumentation der Betreiber
- Google dokumentiert Reverse-DNS-Abfragen mit kategoriespezifischen Hostnamen unter googlebot.com, google.com oder googleusercontent.com. Eine anschließende DNS-Abfrage muss wieder die ursprüngliche IP-Adresse liefern. Cloud-basierte Abrufdienste für Nutzer werden nicht unbedingt von Google betrieben. Dokumentation der Betreiber
- Apple
- Laut Apple muss der Reverse-DNS-Hostname auf applebot.apple.com enden. Prüfen Sie, ob sich der Hostname wieder zur ursprünglichen IP-Adresse auflösen lässt, bevor Sie ihm vertrauen. Dokumentation der Betreiber
- Common Crawl
- Common Crawl veröffentlicht eine IP-Datei für CCBot. Für IPv4 dokumentiert Common Crawl Reverse-DNS-Hostnamen unter crawl.commoncrawl.org, die per DNS-Abfrage bestätigt werden. Für seine IPv6-Adressen gibt es laut Common Crawl keine Reverse-DNS-Einträge. Dokumentation der Betreiber
So funktioniert dieses Tool
- Die tatsächliche Gegenstellen-IP verwenden
- Fügen Sie eine Adresse pro Zeile oder einen kurzen Logauszug ein. Prüfen Sie, ob Ihre Logs die tatsächliche Gegenstellen-IP erfassen oder eine von einem vertrauenswürdigen Proxy weitergeleitete Adresse. Das Tool extrahiert gültige Adressen und prüft höchstens 50 unterschiedliche IP-Adressen.
- Den übereinstimmenden Bereich prüfen
- Der Server liest offizielle Dateien mit IP-Bereichen und speichert sie 24 Stunden zwischen. Scheitert die Aktualisierung, bleibt die letzte vollständige Kopie verfügbar und wird als veraltet markiert. Bereiche gemeinsam genutzter Infrastruktur lassen keinen Rückschluss auf einen einzelnen Crawler zu. Bleibt eine Übereinstimmung aus, kann das auch an einer unvollständigen Abdeckung liegen.
- Den Kontext der Anfrage prüfen
- Vergleichen Sie den angegebenen User-Agent mit dem ermittelten Betreiber und dessen Dokumentation. Wo dies dokumentiert ist, kann eine Reverse-DNS-Abfrage mit anschließender Vorwärtsauflösung zusätzliche Anhaltspunkte liefern. Dieser Checker führt keine Reverse-DNS-Abfragen für Ihre Adressen durch.
Bevor Sie beginnen
Prüfen Sie, was Assistenten über Sie finden
Der Zugriff für Crawler ist ein Teil der KI-Sichtbarkeit. Finden Sie mit einem kostenlosen Scan heraus, wie Assistenten Ihr Unternehmen beschreiben und welche Quellen sie zitieren.