← Cartlantis Wiki

KI & Agents

Die 14-Bot-Matrix

Übersicht der wichtigsten KI-Crawler — Training-Bots vs. Retrieval-Bots.

Training-Bots (holen sich Trainingsdaten für die nächste Modell-Generation): GPTBot, ClaudeBot, Google-Extended, ByteSpider, CCBot, cohere-ai, Diffbot.

Retrieval-Bots (holen live Daten für Antworten): OAI-SearchBot, PerplexityBot, ClaudeUserBot, Google Bingbot (Copilot), Applebot, DuckAssistBot, YouBot.

Faustregel: Retrieval-Bots solltest du immer erlauben. Training-Bots ist eine strategische Entscheidung — Blockieren schützt Content, kostet aber langfristige Sichtbarkeit.