Das Ablehnen von KI-Training in der robots.txt hat jetzt eine Zeile, die alle großen Unternehmen anerkennen. Am 30. Oktober 2026 haben OpenAI, Google, Microsoft und Anthropic am selben Tag ihre Unterstützung für das gemeinsame Signal __usage_ai-training angekündigt. Zwei Zeilen in der robots.txt genügen, um Ihre Position klarzustellen — aber jedes Unternehmen setzt es nach eigenem Zeitplan um, also müssen die alten Regeln bis dahin bestehen bleiben.
Erst die zwei Zeilen richtig schreiben
User-Agent: __usage_ai-training
Disallow: /Es kann auch nur für einen Teil der Website gelten oder einzelne Verzeichnisse freigeben — zum Beispiel mit einer weiteren Zeile Allow: /press-kit/. Beachten Sie: Eine Wildcard-Regel wie User-Agent: * zählt nicht. Das Token __usage_ai-training muss ausdrücklich ausgeschrieben werden, und ein einziger falscher Buchstabe bedeutet, dass es gar nicht gilt. Das Signal stammt aus einem Internet-Draft der IETF-Arbeitsgruppe für KI-Präferenzen, verfasst vom Anthropic-Ingenieur Kevin Kelley. Die vier Unternehmen haben ihre Unterstützung am selben Tag angekündigt, damit Website-Betreiber es nur einmal schreiben müssen und es überall gilt.
Zeitplan der einzelnen Unternehmen
| Unternehmen | Umsetzung |
|---|---|
| Microsoft | Crawling nach der neuen Präferenz ab dem 1. Februar 2027 |
| Unterstützung im Laufe des Jahres 2027 angestrebt | |
| OpenAI | Umsetzung in den kommenden Monaten |
Bis jedes Unternehmen es umgesetzt hat, müssen die alten Regeln — GPTBot, Google-Extended, ClaudeBot und andere — bestehen bleiben. Wer sie zu früh löscht, gibt in der Übergangszeit faktisch die Erlaubnis.
Grenzen und Missverständnisse
Dieses Signal betrifft nur das Training: Es blockiert kein Crawling, beeinflusst die Suchindexierung nicht und hindert KI-Antworten nicht daran, Ihre Seiten zu zitieren. Microsoft hat eine separate, seitenbezogene AI-Grounding-Präferenz, die Training und Zitieren in Antworten unterscheidet. Auf Googles Seite gibt es einen wichtigen Punkt: Wer das gemeinsame Signal nutzt, ohne Google-Extended separat zu erwähnen, wird so behandelt, als würde er auch Google-Extended blockieren — um weiterhin in Gemini-Antworten zu erscheinen, braucht es ein ausdrückliches Allow. Der Entwurf ist außerdem freiwilliger Natur und hat keine formelle IETF-Unterstützung; Meta, Apple, Amazon und xAI haben sich bisher nicht zur Unterstützung verpflichtet.
