AI-Crawler steuern (GPTBot, ClaudeBot, PerplexityBot)
Welche KI-Bots deine Seite besuchen, der Unterschied zwischen Training und Live-Retrieval — und wie du per robots.txt bewusst entscheidest.
Redaktion
AI-Crawler
in GEO
Steuerung von LLM-Bots (GPTBot, ClaudeBot, PerplexityBot) und Standards wie llms.txt.
Lexikon
llms.txt — was es ist und was es (nicht) bringt
Der vorgeschlagene Markdown-Standard für LLMs, ehrlich eingeordnet: günstig umzusetzen, aber von den großen Anbietern bislang nachweislich nicht genutzt.
Redaktion