Crawler-IP-checker
Vergelijk met deze crawler-IP-checker maximaal 50 adressen met gepubliceerde IP-bereiken van bots. Plak IP-adressen of een logfragment en bekijk welke operators overeenkomen.
Een crawler-IP-checker vergelijkt het IP-adres van een verzoek met de bereiken die crawleroperators publiceren. Plak maximaal 50 adressen of een logfragment om IPv4 en IPv6 te controleren. Een overeenkomst wijst op een gepubliceerd netwerkbereik, niet op een specifieke bot of diens bedoeling. Controleer de bron en de datum van de laatste update voordat je op het resultaat vertrouwt.
Grenzen aan dekking en verificatie
Documentatie geraadpleegd op 11 oktober 2026. Deze tool voert geen reverse DNS-zoekopdrachten uit voor je IP-adressen.
- Meta
- Meta beschrijft zijn crawler-useragents en de instellingen in robots.txt. Hier is geen volledige officiële lijst met IP-adressen beschikbaar. Een Meta-useragent alleen bewijst niet dat een verzoek echt van Meta komt. Documentatie van de aanbieder
- ByteDance
- De officiële Bytespider-pagina vermeldt tien IPv4-bereiken en geeft richtlijnen voor reverse DNS. Deze checker downloadt die met JavaScript weergegeven lijst niet, dus blijft onbevestigd of een IP-adres van Bytespider is. IP-lijsten van derden worden niet gebruikt. Documentatie van de aanbieder
- Amazon
- Amazon publiceert aparte adreslijsten voor Amazonbot, Amzn-SearchBot en Amzn-User. Deze checker leest de volledige JSON-blokken op die officiële HTML-pagina's. Afzonderlijke adressen worden als hostbereiken gecontroleerd. Documentatie van de aanbieder
- Mistral AI
- De gecontroleerde documentatie verwijst naar IP-lijsten voor MistralAI-User en MistralAI-Index, maar niet naar een aparte lijst voor MistralAI-Training. Trainingsverzoeken vallen daarom buiten deze controle. Documentatie van de aanbieder
- Majestic
- Majestic beschrijft een gedistribueerde crawler zonder aaneengesloten IP-blokken. Gebruik de MJ12bot-useragent en robots.txt om de crawler te beheren. Deze checker kan op basis van die naam geen IP-adres verifiëren. Documentatie van de aanbieder
- Google beschrijft een omgekeerde DNS-controle met hostnamen onder googlebot.com, google.com of googleusercontent.com, afhankelijk van de categorie. Daarna moet een gewone DNS-lookup het oorspronkelijke IP-adres opleveren. Fetchers voor cloudklanten worden niet per se door Google beheerd. Documentatie van de aanbieder
- Apple
- Volgens de documentatie van Apple eindigt de hostnaam bij een omgekeerde DNS-controle op applebot.apple.com. Controleer of die hostnaam weer naar het oorspronkelijke IP-adres verwijst voordat je erop vertrouwt. Documentatie van de aanbieder
- Common Crawl
- Common Crawl publiceert een IP-bestand voor CCBot. Volgens de documentatie gebruiken IPv4-adressen omgekeerde DNS onder crawl.commoncrawl.org, te bevestigen met een gewone DNS-lookup. De IPv6-adressen hebben volgens Common Crawl geen omgekeerde DNS-records. Documentatie van de aanbieder
Hoe deze tool werkt
- Gebruik het oorspronkelijke IP-adres van de verbinding
- Plak één adres per regel of een kort logfragment. Controleer of je logs het daadwerkelijke IP-adres van de verbinding vastleggen, of een doorgestuurd adres van een proxy die je vertrouwt. De tool haalt geldige adressen eruit en controleert maximaal 50 unieke IP-adressen.
- Bekijk het overeenkomende bereik
- De server haalt officiële bestanden met IP-bereiken op en bewaart ze 24 uur in een cache. Als bijwerken mislukt, blijft de laatste volledige kopie beschikbaar en wordt die als verouderd gemarkeerd. Gedeelde infrastructuurbereiken kunnen geen specifieke crawler identificeren. Geen overeenkomst kan ook betekenen dat de dekking onvolledig is.
- Controleer de context van het verzoek
- Vergelijk de opgegeven useragent met de gevonden operator en diens documentatie. Waar de documentatie dit beschrijft, kunnen reverse DNS en daarna een forward lookup extra aanwijzingen geven. Deze checker voert geen reverse DNS-lookups uit voor jouw adressen.
Voordat je begint
Bekijk wat assistenten kunnen vinden
Toegang voor crawlers is één onderdeel van AI-zichtbaarheid. Doe een gratis scan om te zien hoe assistenten je bedrijf beschrijven en welke bronnen ze vermelden.