AblaufLeistungenTäglich neuErgebnissePreiseFAQBranchenWissenBlogKontaktKostenloser Check

Plattformen

KI-Plattformen im Überblick: 10 Systeme und ihre Crawler

Jede Seite beschreibt ein System: welche Kennungen seine Crawler tragen, wofür der Anbieter sie nach eigener Dokumentation einsetzt und was Sie in der robots.txt entscheiden können. Wo die Dokumentation eine Frage offen lässt, steht das dabei.

Alle Kennungen auf einen Blick

Stand der Dokumentation der Anbieter am 11.10.2026. Die Spalten trennen, was die Anbieter selbst trennen: Suche, Abruf im Auftrag eines Nutzers und Training.

AnbieterSucheAbruf für einen NutzerTraining
OpenAI (ChatGPT)OAI-SearchBotChatGPT-UserGPTBot
Anthropic (Claude)Claude-SearchBotClaude-UserClaudeBot
PerplexityPerplexityBotPerplexity-Userlaut Perplexity keines
Google (Suche, Gemini)Googlebot–Google-Extended (Kennwort)
Apple (Siri, Spotlight)Applebot–Applebot-Extended (Kennwort)
Meta (Meta AI)Meta-WebIndexerMeta-ExternalFetcherMeta-ExternalAgent
Amazon (Alexa)Amzn-SearchBotAmzn-UserAmazonbot (möglich)
MistralMistralAI-IndexMistralAI-UserMistralAI-Training
DuckDuckGo–DuckAssistBot (Abruf in Echtzeit)laut DuckDuckGo keines
Common Crawl––CCBot (offenes Archiv)

Die vier großen Systeme

Zu den meistgenutzten Systemen gibt es ausführliche Seiten: ChatGPT-SEO · Sichtbarkeit in ChatGPT · Perplexity-SEO · Gemini-SEO · Google AI Overviews.

Assistenten

Claude: So wird Ihr Unternehmen in den Antworten von Claude gefunden
Claude greift über Claude-SearchBot und Claude-User auf das Web zu; ClaudeBot sammelt Inhalte für das Training.
Microsoft Copilot und Bing: Wie Ihre Inhalte in die Antworten gelangen und wie Sie das steuern
Was Bing indexiert hat, kann in den Chat-Antworten von Microsoft erscheinen.
ChatGPT-Suche: Wie aus einer Frage Suchanfragen werden und woher die Quellen stammen
ChatGPT schreibt eine Frage nach Angaben von OpenAI in eine oder mehrere gezielte Suchanfragen um und kann dafür mit anderen Suchanbietern zusammenarbeiten.
Apple: Wie Applebot Ihre Website für Siri, Spotlight und Apple Intelligence erfasst
Applebot ist der Crawler von Apple.
Meta AI: Welche Crawler von Meta Ihre Website abrufen und wofür
Meta nennt mehrere Crawler mit getrennten Zwecken.
Amazon und Alexa: Was Amazonbot, Amzn-SearchBot und Amzn-User auf Ihrer Website tun
Amazon unterscheidet drei Kennungen.
Mistral: Die drei Crawler des europäischen KI-Anbieters und was sie abrufen
Mistral nennt drei getrennte Kennungen: MistralAI-User für Abrufe im Auftrag eines Nutzers, MistralAI-Index für den Suchindex und MistralAI-Training für Trainingsdaten.

Suchmaschinen

Google AI Mode: Was Unternehmen über die KI-Ansicht der Google-Suche wissen müssen
Der AI Mode ist laut Google für Fragen gedacht, die Vertiefung, Abwägung oder komplexe Vergleiche brauchen, und liefert eine umfassende Antwort mit Links auf Websites.
DuckDuckGo: Was DuckAssistBot abruft und wie Sie in den KI-Antworten vorkommen
DuckAssistBot ruft Seiten in Echtzeit ab, um die KI-Antworten von DuckDuckGo zu stützen, die ihre Quellen nennen.

Datenquellen

Common Crawl: Was CCBot sammelt und warum die Entscheidung darüber weiter reicht als bei anderen Bots
CCBot ist der Crawler von Common Crawl, einer gemeinnützigen Stiftung, die ein offenes, für jeden zugängliches Archiv von Webdaten pflegt.
Weiter im Thema
Von der Plattform zur Messung
Sehen Sie in zwei Minuten, was KI-Systeme heute über Ihr Unternehmen sagen.
Kostenloser Check

Fachlich verantwortlich: Malte Schätzel · Stand: 11. Oktober 2026 · Quellen zuletzt geprüft am 11.10.2026