Startseite > Blog > SEO & Content > KI-Training Opt-out: Eine robots.txt-Gruppe soll für alle gelten

News SEO & Content

KI-Training Opt-out: Eine robots.txt-Gruppe soll für alle gelten

Google, Microsoft und OpenAI wollen dieselbe robots.txt-Angabe gegen KI-Training beachten. Noch wirkt sie nirgends. Und bei Google hängt mehr daran als nur das Training.

KI-Training Opt-out per robots.txt: Google, Microsoft und OpenAI planen ein gemeinsames Signal. Was es kann und wo der Haken liegt.

Sönke Jacob

Digital Marketing Enthusiast

1. November 2026 3 Min. Lesezeit
Sinnbild für den KI-Training Opt-out: Mann von hinten vor einer leuchtenden Website-Tafel, davor eine orange Schranke, an der kleine Roboter anhalten

Was der KI-Training Opt-out ändert

Beim KI-Training Opt-out geht es um eine Frage: Darf ein Anbieter deine Inhalte zum Trainieren nutzen? Bisher sprichst du jeden KI-Anbieter einzeln an: GPTBot für OpenAI, Google-Extended für Google, ClaudeBot für Anthropic. Künftig soll eine Gruppe in der robots.txt für alle Teilnehmer reichen. Sie steht in einem Entwurf, den ein Anthropic-Entwickler am 30. Oktober 2026 bei der IETF eingereicht hat. Ein offizieller Standard ist das noch nicht.

robots.txt
User-Agent: __usage_ai-training
Disallow: /
Allow: /press-kit/

Das heißt: kein KI-Training mit der ganzen Website, nur der Presse-Bereich bleibt frei. Gemeint ist das Training generativer Modelle. Das Crawling steuert die Gruppe nicht. Eine vorhandene Gruppe User-Agent: * zählt ebenfalls nicht. Fehlt die neue Gruppe, hast du schlicht nichts festgelegt.

Wer wann mitmacht

Anbieter

Start

Was das Signal bewirkt

Google

Anfang 2027

Gilt wie ein Disallow für Google-Extended, außer du nennst Google-Extended selbst.

Microsoft

1. Februar 2027

Sperrt das Training. KI-Antworten regelst du getrennt davon je Seite.

OpenAI

Kommende Monate

Details folgen. Die bisherigen robots.txt-Regeln gelten weiter.

Anthropic

Kein Termin

Hat den Entwurf eingereicht. Die bestehenden Crawler bleiben.

Stand 1. November 2026

Noch beachtet kein Anbieter die neue Gruppe. Offen ist auch, was bei Widersprüchen gilt, etwa wenn GPTBot erlaubt ist und das Signal das Training sperrt.

Der Haken beim Opt-out: Bei Google ist es ein Schalter für zwei Dinge

Google-Extended regelt nicht nur das Training. Es entscheidet auch über das Grounding, also darüber, ob Gemini deine Seite beim Antworten heranzieht und verlinkt. Setzt du das Signal, gilt das für beides. Erlaubst du Google-Extended ausdrücklich, darf Google wieder trainieren. Getrennt einstellen lässt sich das nach heutigem Stand nicht.

Die Google-Suche bleibt davon unberührt, auch das Ranking. Microsoft trennt sauberer: Training und Grounding sind eigene Einstellungen, und die klassische Bing-Suche hängt an keiner von beiden.

Was heißt das für dich?

  • Kein Schnellschuss: Die Gruppe kostet nichts, wirkt aber noch nirgends. Entscheide bis Anfang 2027.
  • Alte Regeln behalten: Sperren für GPTBot oder Google-Extended gelten weiter. Die neue Gruppe ersetzt sie nicht.
  • Seiten mit NoArchive oder NoCache prüfen: Hier läuft bei Microsoft eine Frist.

Frist bei Microsoft: 1. März 2027

Danach zählen NoArchive und NoCache nicht mehr als KI-Einstellung. Wer damit KI-Antworten begrenzt, setzt bis dahin die neuen Angaben auf den Seiten. Zusätzlich gehört die Einstellung in die Bing Webmaster Tools, dort geht das ab 15. Dezember 2026. Sonst gilt bis zum nächsten Crawl: erlaubt.

Meine Einschätzung

Lebst du von Anfragen, lass die robots.txt erst mal in Ruhe. Sichtbarkeit in KI-Antworten bringt dir dann mehr als die Sperre. Verkaufst du Inhalte, zum Beispiel als Verlag, sieht die Rechnung anders aus.

Häufige Fragen

Schadet der KI-Training Opt-out meinem Google-Ranking?

Nein. Google-Extended beeinflusst laut Google weder die Aufnahme in die Suche noch das Ranking. Du riskierst aber deine Sichtbarkeit in Gemini-Antworten.

Hält die neue Gruppe KI-Crawler von meiner Website fern?

Nein. Sie sagt nur, wofür deine Inhalte nicht genutzt werden sollen. KI-Crawler sperrst du weiter über eigene Gruppen mit ihrem Namen, etwa GPTBot.

Du willst das nicht allein umsetzen?

Ich helfe dir bei Auswahl, Einrichtung und den ersten Schritten – ohne Agentur-Overhead.

Gespräch vereinbaren

Beitrag teilen

Hat dir der Beitrag geholfen? Schick ihn weiter.

Geschrieben von

Sönke Jacob

Baut Websites, Automatisierungen und Agenten-Teams für kleine und mittlere Unternehmen – aus Norddeutschland, mit viel KI.

Weiterlesen

Begriffe zum Thema