Zum Inhalt springen
Tomas KadlecGespräch buchen

Artikel · 19. November 2026 · 4 Min. Lesezeit

Google-Agent hereinlassen: Prüfen Sie diese 6 Punkte

Google erklärt, wie Sie seinen KI-Agenten hereinlassen, und nennt sechs Fehler, die ihn trotzdem blockieren. Sechs Fragen ans CDN-Team und ein Log-Check.

Am 17. November 2026 hat Google einen Leitfaden mit dem Titel „Allow Google-Agent traffic“ veröffentlicht. Er erklärt, wie Sie den KI-Agenten von Google auf Ihre Website lassen. Er nennt auch sechs Wege, wie Websites den Agenten weiter blockieren, obwohl sie glauben, ihn freigegeben zu haben.

Wenn Sie einen Shop oder ein Lead-Formular betreiben, ist das kein SEO-Detail. Es entscheidet, ob ein Agent eine Aufgabe für Ihren Käufer auf Ihrer Website zu Ende bringen kann.

Was Google-Agent ist

Google beschreibt ihn als den Namen, den Agenten auf Google-Infrastruktur nutzen, um im Web zu navigieren. Er liest nicht nur Seiten. Er führt Aktionen aus, wenn ein Nutzer darum bittet.

So erkennen Sie ihn laut Google:

  • Der User-Agent enthält „Google-Agent“.
  • Die IP steht in einer JSON-Datei, die Google veröffentlicht: user-triggered-agents.json. PPC Land hat eine Version gesehen, die am 16. November 2026 erzeugt wurde, mit 20 Präfixen: 12 IPv4 und 8 IPv6.
  • Experimentell: Anfragen können mit HTTP Message Signatures (RFC 9421) signiert sein, mit einem Header namens Signature-Agent.

Der Ablauf von Google für Ihre Firewall hat vier Schritte. Prüfen, ob der User-Agent Google-Agent enthält. Prüfen, ob die IP in der JSON-Datei steht. Die Signatur verifizieren, falls es eine gibt. Bot-Challenges für verifizierte Anfragen auslassen.

Eines sagt der Leitfaden nicht: ob Google-Agent die robots.txt beachtet. Ich rate da in keine Richtung.

Warum das für Shops und Lead-Formulare wichtig ist

Die meisten Blockaden passieren nicht auf der Startseite. Sie passieren tiefer, bei Suche, Filtern, Warenkorb, Buchung und Formularen. Genau dort erledigt ein Agent seine Arbeit. Ein erfundenes Beispiel: Die Produktseite lädt, der Warenkorb-Aufruf bekommt eine Challenge, der Agent gibt auf. Die Aufgabe scheitert still.

Ich habe schon früher über Agenten geschrieben, die bezahlen können, und was ein Shop dafür braucht. Dieser Leitfaden ist der Zugangsteil derselben Geschichte.

Die sechs Wege, wie Websites ihn weiter blockieren, und die passende Frage

  1. Reihenfolge der Regeln. Die Freigabe muss vor den Sperren für Cloud- und Rechenzentrumsnetze (ASNs), verwalteten Bot-Regeln und KI-Agenten-Kategorien stehen. Fragen Sie: „Steht unsere Freigabe für Google-Agent über all diesen Regeln?“
  2. CAPTCHA und JavaScript-Challenges. Auch die innerhalb der Seite, bei Suche oder Formularen. Fragen Sie: „Überspringen verifizierte Google-Agent-Anfragen jede Challenge, auch die auf der Seite?“
  3. Nur die erste Seite freigegeben. Suche, Filter, Produktseiten, Warenkorb, Buchung sowie XHR-, GraphQL- oder API-Endpunkte bleiben gesperrt. Fragen Sie: „Deckt die Freigabe den ganzen Pfad ab, auch die API-Aufrufe?“
  4. Rate Limits pro IP. Viele Nutzer teilen sich dieselben ausgehenden IPs. Fragen Sie: „Kann unser Rate Limit Google-Agent treffen, wenn viele Nutzer von einer IP kommen?“
  5. Veraltete IP-Listen. Ihre Liste muss mit der JSON-Datei von Google synchron bleiben. Fragen Sie: „Wie und wie oft synchronisieren wir sie?“
  6. Proxys und Load Balancer, die Header verlieren. Gehen die Client-IP, der User-Agent oder die Signatur-Header verloren, kann die nächste Schicht die Anfrage nicht verifizieren. Fragen Sie: „Reichen alle unsere Schichten diese Angaben weiter?“
Checkliste mit sechs Stellen, an denen Google-Agent noch blockiert wird: Reihenfolge der Regeln, CAPTCHA, nur erste Seite freigegeben, Limits pro IP, veraltete IP-Liste, Proxy verliert Header

Was Sie diese Woche tun

  1. Schicken Sie die sechs Fragen an die Stelle, die Ihr CDN, Ihre Firewall oder Ihre Shop-Plattform betreut: Cloudflare, Ihre Shop-Plattform oder Ihr Hosting. Schriftliche Antworten, kein „sollte passen“.
  2. Testen Sie den Kaufpfad. Schreiben Sie jeden Schritt auf, den ein Käufer macht: Suche, Filter, Produktseite, Warenkorb oder Buchung, Absenden des Formulars. Notieren Sie für jeden Schritt, welche URL und welchen API-Aufruf er nutzt, und fragen Sie, ob eine Bot-Regel oder Challenge darauf liegt.
  3. Suchen Sie in Ihren Logs nach „Google-Agent“. Schauen Sie dann, was diese Anfragen zurückbekommen haben.

Hier ist ein Prompt für den Log-Schritt:

Ich hänge Zeilen aus meinem Server- oder CDN-Log an. Finde jede Anfrage, deren User-Agent Google-Agent enthält. Liste für jede die Uhrzeit, den Pfad, den Statuscode und die IP auf. Markiere die Anfragen, die blockiert oder mit einer Challenge belegt aussehen, zum Beispiel Status 403 oder 429 oder eine Challenge-Seite. Gruppiere sie nach Schritt im Kaufpfad: Suche, Filter, Produktseite, Warenkorb, Buchung, Formulare, API-Aufrufe. Rate nichts, was nicht im Log steht. Wenn es keine Google-Agent-Zeilen gibt, sag das.

Wenn Sie gar keine Google-Agent-Zeilen sehen, ist das auch eine Antwort. Fragen Sie Ihr CDN-Team, ob die Logs den ursprünglichen User-Agent behalten.

Zusammenfassung

Google sagt jetzt, wie Sie Google-Agent hereinlassen: den User-Agent prüfen, die IP mit der JSON-Datei abgleichen, die Signatur verifizieren, falls vorhanden, und Challenges für verifizierte Anfragen auslassen. Die meisten Websites scheitern an einem von sechs Punkten, und die meisten davon liegen tief im Kaufpfad, nicht auf der Startseite. Schicken Sie sechs Fragen, testen Sie den Pfad, lesen Sie die Logs.

Beginnen Sie mit dem kostenlosen AI Crawler Check. Er testet, wie Ihr Server bekannten KI-Crawlern antwortet. So sehen Sie in einer Minute, ob Ihr Setup mit KI-Bots allgemein streng ist. Wenn Sie das ganze Bild für Ihre Marke wollen, also Zugang plus die Frage, wo KI Sie findet und zitiert, ist das das KI-Sichtbarkeitsaudit. Oder buchen Sie ein kostenloses 20-Minuten-Gespräch.

Wer in Ihrem Unternehmen könnte diese sechs Fragen heute beantworten?

Quellen: Google Search Central, Allow Google-Agent traffic, 17. November 2026 · Search Engine Roundtable, Bericht über den Google-Agent-Leitfaden von Google, 17. November 2026 · PPC Land, Google lists six ways sites still block its AI agent after allowing it, 17. November 2026

Wollen Sie das in Ihrem Team?

Ich richte KI-Workflows für Marketing- und Vertriebsteams ein, mit eingebauten Prüfungen. Buchen Sie ein kostenloses 20-Minuten-Gespräch.

Kostenloses 20-Minuten-Gespräch