Google-Extended

Was ist Google-Extended?

Google-Extended ist ein eigenständiger Produkt-Token von Google für die robots.txt-Datei. Websitebetreiber können damit festlegen, ob Google bereits gecrawlte Inhalte zur Verbesserung bestimmter Gemini-Produkte und generativer Dienste von Vertex AI verwenden darf. Die Einstellung beeinflusst laut Google weder die Aufnahme noch das Ranking einer Website in der Google-Suche.

Google-Extended gibt Websitebetreibern Kontrolle über die Verwendung ihrer öffentlich erreichbaren Inhalte durch bestimmte generative KI-Produkte von Google. Der Name lässt sich sinngemäß als erweiterte Google-Steuerung verstehen. Technisch handelt es sich um keinen eigenständigen Crawler, sondern um eine Anweisung innerhalb der robots.txt-Datei.

Wie funktioniert Google-Extended?

Google-Extended ist ein sogenannter Produkt-Token. Google ruft die Website weiterhin mit vorhandenen Google-Crawlern ab. Der Token legt anschließend fest, ob die erfassten Inhalte für die Verbesserung von Gemini Apps und generativen APIs von Vertex AI verwendet werden dürfen. Deshalb erscheint Google-Extended normalerweise nicht als eigener User-Agent in den Server-Logfiles.

Die Steuerung erfolgt über eine Gruppe in der robots.txt-Datei. Mit der folgenden Regel schließt du die gesamte Website für den durch Google-Extended beschriebenen Verwendungszweck aus:

Beispiel für eine vollständige Sperre:
User-agent: Google-Extended
Disallow: /

Die Regel betrifft den Produkt-Token Google-Extended. Sie blockiert nicht automatisch Googlebot und entfernt keine Seiten aus der klassischen Google-Suche.

Eine gezielte Steuerung ist ebenfalls möglich. Mit Disallow: /intern/ kannst du beispielsweise nur ein bestimmtes Verzeichnis ausschließen. Die robots.txt-Datei liegt im Stammverzeichnis einer Domain, etwa unter https://www.example.de/robots.txt. Regeln für Subdomains müssen in der robots.txt-Datei der jeweiligen Subdomain stehen.

Google-Extended und Googlebot

Der Unterschied zwischen Google-Extended und Googlebot liegt in ihrer Funktion. Googlebot crawlt Inhalte für die Google-Suche. Google-Extended steuert einen festgelegten Verwendungszweck bereits erfasster Inhalte für generative Google-Produkte. Eine Sperre des Produkt-Tokens beendet daher nicht das Crawling durch Googlebot.

Merkmal	Googlebot	Google-Extended
Typ	Crawler beziehungsweise User-Agent	Produkt-Token
Hauptzweck	Crawling für die Google-Suche	Steuerung der Nutzung für bestimmte generative Produkte
In Server-Logs sichtbar	Ja, bei entsprechenden Abrufen	In der Regel nicht als eigener User-Agent
Einfluss auf klassische Rankings	Zugriff ist für Crawling und Indexierung relevant	Laut Google kein direkter Einfluss
Steuerung	robots.txt und weitere Suchmaschinen-Direktiven	robots.txt

Ein verbreiteter Fehler besteht darin, User-agent: Googlebot zu sperren, obwohl nur die Nutzung für generative KI-Produkte eingeschränkt werden soll. Eine vollständige Googlebot-Sperre kann das erneute Crawling relevanter Seiten verhindern und damit die organische Auffindbarkeit beeinträchtigen. Prüfe deshalb immer, welcher User-Agent oder Produkt-Token tatsächlich angesprochen wird.

Auswirkungen auf SEO und SEA

Eine Sperre über Google-Extended wirkt sich laut Google nicht auf die Aufnahme oder Position einer Seite in der Google-Suche aus. Für klassische SEO bleiben Googlebot, Indexierbarkeit, interne Verlinkung, Canonical Tags und andere technische Signale maßgeblich. Auch für Google Ads ist Google-Extended keine Steuerungsmöglichkeit, da der Token weder Anzeigenfreigaben noch Landingpage-Prüfungen regelt.

Google-Extended ist auch nicht das passende Mittel, um eine Seite aus Suchergebnissen zu entfernen. Dafür kommen je nach Ziel ein noindex-Robots-Meta-Tag, ein passender HTTP-Header, eine Zugriffsbeschränkung oder eine Entfernung der URL infrage. Die robots.txt-Datei kontrolliert primär den Abruf und ist kein allgemeines Löschwerkzeug.

Relevanz für GEO 2026

Für GEO (Generative Engine Optimization) entsteht ein Zielkonflikt: Unternehmen möchten ihre Inhalte vor unerwünschter KI-Nutzung schützen und zugleich in generativen Antworten als Quelle erscheinen. Google-Extended bietet dafür eine technische Auswahlmöglichkeit, liefert aber keine Garantie dafür, dass freigegebene Inhalte in Gemini-Antworten genannt oder verlinkt werden.

Eine vollständige Sperre kann die Nutzung eigener Inhalte in den erfassten generativen Google-Produkten begrenzen. Sie sagt jedoch nichts über andere KI-Anbieter aus. ChatGPT, Perplexity und weitere Dienste verwenden eigene Crawler, Abrufmechanismen und Richtlinien. Eine Google-Extended-Regel gilt ausschließlich für den von Google definierten Produkt-Token.

Informationsportale sollten abwägen, ob Reichweite und Quellenpräsenz in KI-Antworten zum Geschäftsmodell gehören.
Onlineshops können öffentliche Ratgeber und Produktinformationen anders behandeln als geschützte Datenbereiche.
B2B-Unternehmen sollten prüfen, welche Inhalte Markenwissen vermitteln und welche Informationen einen besonderen wirtschaftlichen Wert besitzen.
Verlage und Lizenzanbieter sollten robots.txt-Regeln mit ihren rechtlichen und kommerziellen Vorgaben abstimmen.

Die technische Freigabe allein erzeugt keine KI-Sichtbarkeit. Zitierfähige Definitionen, klare Entitäten, nachvollziehbare Aussagen, thematische Autorität und zugängliche Seiten bleiben die Grundlage. Eine strukturierte Optimierung für generative Suchsysteme verbindet diese Anforderungen mit klassischer SEO, statt beide Kanäle getrennt zu behandeln.

Google-Extended richtig einsetzen

Vor einer Änderung solltest du festlegen, welches Ziel die Regel erfüllen soll. Eine pauschale Sperre ist nachvollziehbar, wenn sämtliche öffentlichen Inhalte von der beschriebenen KI-Nutzung ausgeschlossen werden sollen. Bei gemischten Geschäftsmodellen ist eine Steuerung nach Verzeichnissen oft genauer, sofern die URL-Struktur öffentliche und sensible Bereiche sauber trennt.

Rufe die robots.txt-Datei der Hauptdomain und aller relevanten Subdomains ab.
Suche nach vorhandenen Gruppen für Google-Extended, Googlebot und dem Platzhalter *.
Dokumentiere, welche Verzeichnisse freigegeben oder ausgeschlossen werden sollen.
Teste, ob die robots.txt-Datei erreichbar ist und keine unbeabsichtigten Googlebot-Sperren enthält.
Prüfe die Datei nach Relaunches, CMS-Wechseln und Änderungen an der URL-Struktur erneut.

Robots.txt-Regeln sind öffentlich einsehbare technische Anweisungen. Google-Extended ersetzt deshalb weder Zugangsschutz noch vertragliche Lizenzregeln. Vertrauliche Dokumente gehören hinter eine Authentifizierung. Inhalte, die über eine öffentliche URL ohne Zugangsbeschränkung erreichbar sind, sollten grundsätzlich als öffentlich abrufbar behandelt werden.

Google-Extended und KI-Sichtbarkeit messen

Messbar ist die Wirkung einer Freigabe oder Sperre nicht über einen eigenen Google-Extended-Trafficwert, weil der Produkt-Token keinen separaten Crawler-User-Agent bereitstellt. Beobachte stattdessen, ob deine Marke und Domain in generativen Antworten vorkommen, welche Quellen genannt werden und wie sich diese Werte nach technischen oder inhaltlichen Änderungen entwickeln.

Das KI-Analyse-Tool der Performance Suite erfasst dafür die KI-Sichtbarkeit in ChatGPT, Perplexity, Gemini und Grok. Die Auswertung ersetzt keinen technischen robots.txt-Test, verbindet aber die Konfiguration mit der Frage, ob eine Marke in KI-Antworten empfohlen oder als Quelle verwendet wird. Ergänzend helfen eine strukturierte Content-Strategie und die gemeinsame Planung von SEO und GEO.

Häufige Fragen zu Google-Extended

Muss Google-Extended in jeder robots.txt-Datei stehen?

Nein. Ohne eigene Regel gelten die von Google vorgesehenen Standardeinstellungen. Ein Eintrag ist erforderlich, wenn du die Nutzung für den Produkt-Token gezielt einschränken oder nach Verzeichnissen steuern möchtest.

Kann ich einzelne Seiten für Google-Extended sperren?

Ja. Die robots.txt-Datei erlaubt Regeln für Verzeichnisse und URL-Pfade. Die Struktur der Website muss die gewünschten Bereiche jedoch eindeutig abbilden, damit keine relevanten Inhalte versehentlich erfasst werden.

Verschlechtert eine Sperre meine Google-Rankings?

Laut Google beeinflusst Google-Extended weder die Aufnahme noch das Ranking in der Google-Suche. Eine separate Sperre von Googlebot kann dagegen Crawling und Indexierung beeinträchtigen.

Gilt Google-Extended auch für ChatGPT und Perplexity?

Nein. Google-Extended gilt für den von Google definierten Verwendungszweck. Andere KI-Anbieter besitzen eigene Crawler, Produkt-Tokens und Regeln, die getrennt geprüft werden müssen.

Kann ich Google-Extended in meinen Server-Logs erkennen?

Normalerweise nicht als eigenen User-Agent. Google-Extended ist ein Produkt-Token und kein separater Crawler. Zugriffe können daher unter vorhandenen Google-User-Agents erscheinen.

Entfernt Google-Extended bereits verwendete Inhalte aus KI-Modellen?

Eine robots.txt-Regel ist kein Löschauftrag und keine rückwirkende Entfernungsmethode. Sie steuert die von Google beschriebene künftige Nutzung im Rahmen des Produkt-Tokens. Für weitergehende Anliegen müssen die jeweiligen Verfahren des Anbieters geprüft werden.