DEEN
Zurück zum Bot-Katalog

Google-Extended: Kein Bot, sondern ein Steuerhebel

Google · Verifikation läuft

Steckbrief

  • Betreiber: Google · Herkunft: USA

  • Klasse: Training-Opt-out (steuert Nutzung, nicht Crawling)

  • robots.txt-Token: Google-Extended

  • Produkt: Steuert die Nutzung eurer Inhalte in Gemini-Apps und Vertex-Grounding

  • Prüfweg: entfällt, es gibt keinen eigenen Bot mit dieser Kennung

  • Verifizierbar: entfällt

User-Agent

Keiner. Google-Extended ist kein Crawler. Es gibt keinen Abruf, den man beobachten oder gegen eine IP-Liste prüfen könnte. Es ist ausschließlich ein robots.txt-Token, das die Verwendung bereits gecrawlter Inhalte steuert (Google).

Was Google-Extended tut

Das ist der wichtigste Missverständnis-Punkt im ganzen Katalog: Google-Extended sammelt nichts. Es steht in eurer robots.txt, aber es ändert nichts daran, wie oft Googlebot bei euch vorbeischaut oder was er lädt. Was es ändert: ob Google die Inhalte, die Googlebot ohnehin gecrawlt hat, in die Trainings- und Grounding-Prozesse von Gemini-Apps und Vertex AI einfließen lassen darf (Google).

Es ist damit funktional Googles Antwort auf die Frage: „Ich will in der Suche gefunden werden, aber nicht Trainingsmaterial für Gemini sein." Vor Google-Extended gab es diese Trennung nicht, man hätte Googlebot komplett blockieren müssen und wäre damit gleichzeitig aus der Suche verschwunden.

So verifizierst du ihn

Entfällt, es gibt keinen Crawler-Traffic zum Verifizieren. Prüfen könnt ihr nur, ob die Direktive in eurer robots.txt korrekt gesetzt ist. Ob Google sie einhält, ist eine Vertrauensfrage. Google verpflichtet sich in seiner Dokumentation dazu (Google).

Was Google-Extended dir bringt

  • Trennung von Suche und AI-Nutzung: Ihr könnt in der Google-Suche und in AI Overviews sichtbar bleiben, aber die Nutzung als Trainingsdaten für Gemini und als Grounding-Basis in Vertex ausschließen

  • Kein Suchverlust: Anders als ein Googlebot-Block hat Google-Extended keinerlei Auswirkung auf die klassische Sichtbarkeit (Google)

  • Vergleichbare Instrumente bei anderen Anbietern: Applebot-Extended (Apple), reines Opt-out-Token, kein Crawler (Apple)

Empfehlung

Bewusste Entscheidung. Das ist eine der wenigen Stellen im Katalog, an denen sich Blockieren wirklich lohnen kann, weil ihr nichts verliert, was Traffic bringt.

  • Erlauben (Weglassen der Regel), wenn ihr wollt, dass Gemini und Vertex eure Marke „kennen"

  • Blockieren, wenn ihr eure Inhalte nicht als Trainingsmaterial für Google-KI zur Verfügung stellen wollt

robots.txt zum Kopieren:

# AI-Nutzung ausschließen, Suchsichtbarkeit behalten
User-agent: Google-Extended
Disallow: /

Verwandte Bots

  • Googlebot, der klassische Suchcrawler; Blockieren wäre der Holzhammer

  • Applebot-Extended, Apples Entsprechung, gleiches Prinzip

  • GPTBot, OpenAIs Trainings-Bot; hier gibt es kein Extended-Konzept, Blockieren betrifft nur das Training

Stand & Changelog

Stand: 12. August 2026

  • Aug 2026: Doku-Stand unverändert

  • Sep 2023: Erste Einführung des Tokens durch Google