Veröffentlicht: 2026-10-31
Autor: Jule | Seoholics
Lesezeit: 3 min
Was ist passiert?
Google plant die Einführung einer gemeinsamen Steuerung für das KI-Training innerhalb der robots.txt. Basierend auf den Arbeiten der IETF-Arbeitsgruppe AIPREF soll ein einheitlicher Policy-Token es Website-Betreibern ermöglichen, Trainingspräferenzen für mehrere KI-Anbieter gleichzeitig mit einer einzigen Anweisung zu definieren.
- Inventur der KI-Strategie (Diese Woche)
- Prüfung der aktuellen robots.txt (Dieses Quartal)
- Implementierung des AIPREF-Tokens (Nächstes Jahr/2027)
Die Fakten
- Google wird einen geteilten Standard-Token in der robots.txt unterstützen, um KI-Trainingspräferenzen plattformübergreifend zu steuern.
- Die Initiative basiert auf dem AIPREF-Entwurf der Internet Engineering Task Force (IETF) und reagiert auf Forderungen von Regulierern und Publishern.
- Wenn der gemeinsame Token ein Opt-out signalisiert und Google-Extended nicht explizit genannt wird, behandelt Google dies wie eine Ablehnung von Google-Extended.
- Bestehende, unternehmensspezifische Steuerungen wie Google-Extended bleiben weiterhin voll funktionsfähig und können parallel zum Industriestandard genutzt werden.
- Die Umsetzung dieses Mechanismus steht im Einklang mit dem EU Code of Practice für General Purpose AI Model Providers unter dem EU AI Act.
Was bedeutet das für Dich?
Diese Entwicklung betrifft primär Marketingverantwortliche und Content-Strategen, die über hochwertige, proprietäre Daten verfügen und die kommerzielle Nutzung ihrer Inhalte durch KI-Modelle kontrollieren wollen. Wer keine strategischen Bedenken hinsichtlich des KI-Trainings hat oder seine Sichtbarkeit in generativen Antworten maximieren möchte, ist von unmittelbaren Handlungszwängen nicht betroffen.
- Inventur der KI-Strategie (Diese Woche): Definieren Sie, ob Ihre Inhalte als Trainingsdaten für KI-Modelle dienen dürfen oder ob dies ein Wettbewerbsnachteil ist. Sie erkennen den Erfolg an einer schriftlich fixierten Richtlinie, die als Basis für die robots.txt dient. Der Aufwand ist gering, erfordert aber eine Entscheidung auf Management-Ebene.
- Prüfung der aktuellen robots.txt (Dieses Quartal): Überprüfen Sie, ob bereits spezifische Anweisungen wie Google-Extended implementiert sind und wie diese zu Ihren Zielen passen. Ein Erfolg liegt vor, wenn die aktuelle Steuerung konsistent mit der definierten KI-Strategie ist. Der Aufwand ist minimal und rein administrativ.
- Implementierung des AIPREF-Tokens (Nächstes Jahr/2027): Integrieren Sie den neuen Policy-Token in Ihre robots.txt, sobald die technische Spezifikation finalisiert und aktiv ist. Die Wirkung ist messbar, wenn KI-Crawler die einheitliche Anweisung über verschiedene Anbieter hinweg respektieren. Der Aufwand ist gering, da es sich um eine einfache Textänderung handelt.
Für Informationsportale und Verlage
Hier steht der Schutz des geistigen Eigentums im Vordergrund. Die Priorität liegt darauf, den neuen Industriestandard zu nutzen, um ein breites Opt-out ohne manuelle Pflege jeder einzelnen KI-Liste zu erreichen.
Für E-Commerce und Lead-Gen-Seiten
Die Priorität liegt hier auf der Sichtbarkeit. Da Websites, die Google-Extended explizit erlauben, in Gemini Apps erscheinen und Klicks über Grounding generieren können, sollte hier ein gezieltes Opt-in für Google bei gleichzeitigem Opt-out für andere Anbieter geprüft werden.
Wer diese Steuerung ignoriert, verliert die Kontrolle darüber, welche KI-Modelle welche Daten nutzen, und riskiert, dass proprietäre Inhalte ohne Steuerungsmöglichkeit in generative Modelle einfließen.
Experten-Meinung
Die Einführung eines gemeinsamen Tokens markiert den Übergang von proprietären Insellösungen hin zu einem industrieweiten Standard. Google erkennt damit an, dass die manuelle Pflege einzelner User-Agents für Publisher nicht skalierbar ist.
„Websites, die spezifisch Google-Extended erlauben, sind berechtigt, in Antworten zu erscheinen und Klicks via Grounding in Gemini Apps zu erhalten.“
Dies zeigt deutlich, dass die Steuerung nicht nur ein Schutzmechanismus ist, sondern ein strategisches Instrument zur Steuerung der Sichtbarkeit in der generativen Suche. Die Kopplung an den EU AI Act verleiht dem Ganzen zudem eine regulatorische Relevanz, die über rein technische SEO-Aspekte hinausgeht.
Daten und Zahlen
Die zeitliche Planung ist hier die entscheidende Kennzahl: Google bietet die spezifische Steuerung über Google-Extended bereits seit 2023 an. Der neue, branchenübergreifende Standard soll gemeinsam mit anderen KI-Anbietern im Jahr 2027 unterstützt werden. Dieser Zeitrahmen gibt Entscheidern ausreichend Raum, ihre Content-Strategie anzupassen, bevor die technische Umsetzung des AIPREF-Tokens zwingend wird. Es gibt derzeit keine quantitativen Daten zur aktuellen Nutzungshäufigkeit der bestehenden Controls, jedoch ist die Ausrichtung an der IETF-Arbeitsgruppe ein qualitatives Signal für eine hohe Standardisierungswahrscheinlichkeit.
Ausblick
In den kommenden Monaten wird die IETF die AIPREF-Vokabularien weiter verfeinern. Für Marketingverantwortliche bedeutet das, dass die Phase der reinen Beobachtung nun in die strategische Planung übergeht. Es ist zu erwarten, dass weitere große KI-Player diesem Standard folgen, wodurch die robots.txt wieder zum zentralen Kontrollzentrum für die Sichtbarkeit in der Ära der generativen KI wird. Die finale Implementierung erfolgt planmäßig 2027.