Vom Ranking zur Empfehlung: Machen Sie Ihre Website fit für das Zeitalter der KI-Agenten

Ihr nächster Kunde findet Sie möglicherweise nicht über eine Suchmaschine. Stattdessen fragt er vielleicht einen AI-Assistenten: „Wie mache ich XY?“, „Welche Option ist die beste für jemanden wie mich?“, „Kannst du das für mich erledigen?“. Ein Agent findet dann die Antwort, wägt die Wahlmöglichkeiten ab und handelt im Namen des Kunden. Der Entscheidung für einen bestimmten Anbieter fällt immer häufiger beim Lesen der Antwort eines Modells – also bevor ein Mensch die zugehörige Homepage jemals auch nur gesehen hat.

Dieses Agenten-Publikum existiert bereits: Nach unseren Erhebungen entfällt inzwischen weniger als die Hälfte aller HTML-Seitenanfragen auf einen Menschen. Nicht immer handelt es sich bei diesen Maschinen um Agenten, die im Auftrag eines Menschen handeln. Dieser Anteil wächst jedoch rasant und Antwort-Engines, Einkaufsassistenten und Forschungstools werden maßgeblichen Einfluss darauf haben, welche Unternehmen gefunden und empfohlen werden. Früher bedeutete Auffindbarkeit, im Ranking einer Ergebnisseite aufzutauchen. Heute kommt es für Websites dagegen darauf an, von den Agenten, die ihren Kunden den Weg zeigen, gefunden, gelesen und mit Überzeugung empfohlen zu werden.

Bisherige Kennzahlen wie Klicks und Seitenaufrufe von Menschen liefern heute nur noch ein unvollständiges Bild. Wir haben mit Website-Betreibern gesprochen, deren Zugriffsprotokolle vor KI-Bots überquellen und die sich völlig im Unklaren darüber sind, ob diese Bots ihre Website überhaupt benutzen können oder ihre Produkte und Dienstleistungen ihren Nutzern empfehlen. Insbesondere zwei Fragen haben wir in diesem Kontext immer wieder gehört:

• Können Agenten meine Website tatsächlich benutzen?
• Werde ich empfohlen?

Um ihnen bei der Beantwortung zu helfen, haben wir unsere vorherige Arbeit zu Agent Readiness in das Cloudflare-Dashboard integriert und dieses um unser neues AEO (Answer Engine Optimization)-Tool ergänzt. Diese Werkzeuge behandeln Agenten als zentrale Benutzergruppe Ihrer Website und zeigen Ihnen, wie oft diese von einem Agenten gesehen wird und wie häufig Sie empfohlen werden.

Das bietet große Chancen und die Ansprüche sind bislang nicht besonders hoch, weil die meisten Websites noch nicht für diese Art Nutzer gebaut sind. So, wie in den Anfangszeiten von SEO die für Suchmaschinen erstellten Internetauftritte honoriert wurden, geschieht das jetzt für Websites, die von vornherein für Agenten gebaut wurden. Wenn eine Webpräsenz leicht auffindbar und lesbar ist und zudem Vertrauen einflößt, werden die Agenten sie auch empfehlen.

Diagnostics: Ist Ihre Website für Agenten bereit?

Diagnostics übernimmt die technische Überprüfung innerhalb von Agent Readiness. Das Tool durchsucht Ihre Website so, wie ein Agent sie liest: Es prüft, ob der Zugriff erlaubt ist und ob es Ihre Inhalte finden kann, ruft eine saubere maschinenlesbare Kopie ab und findet die Schnittstellen, an die es Abfragen richten kann. 

Während eine Person einfach nur Ihre Homepage lädt, prüft ein Agent Ihre robots.txt-Datei, Ihre Sitemap, Ihre Antwortheader, eine Markdown-Version Ihrer Inhalte und veröffentlichte Metadaten für Authentifizierung und Tools auf Herz und Nieren.

Diagnostics verknüpft diese Überprüfung mit einem Hostnamen und fasst die Ergebnisse in einer einzigen Agent Readiness-Übersicht zusammen. Die Einstufungsgrade reichen von „Nicht bereit“ bis zu „Völlig agentennativ“. Nach jeder Prüfung wird angegeben, ob sie bestanden, nicht bestanden oder neutral ausgegangen ist. Dies wird mit einem Kommentar dazu, warum das von Bedeutung ist, sowie mit einer Nachweiskette mit der genauen Anfrage und der von uns verzeichneten Antwort versehen.

Diese Kontrollen sind nach dem Grad des mit ihnen verbundenen Arbeitsaufwands gruppiert, damit Sie wissen, wo Sie anfangen sollten:

• Schnelle Erfolgserlebnisse: Zu den grundlegenden und zugleich besonders hilfreichen Elementen, die die meisten Websites nicht vorweisen können, gehören eine von Crawlern lesbare robots.txt-Datei, eine XML-Sitemap, Regeln für KI-Crawler und ein sorgfältiges Markdown für Agenten.
• Technische Grundlagen: Die nächste Ebene umfasst Signale, die deutlich machen, wie Ihre Inhalte verwendet werden dürfen, einen API-Katalog, Link-Header und Anmeldeanweisungen für Agenten.
• Erweiterte Integration: Hier wird nach Merkmalen der Agentennativität wie OAuth-Erkennung, MCP (Model Context Protocol), A2A (Agent2Agent)-Agentensteckbriefe, einem Index der vorhandenen Funktionen, Web Bot Auth und WebMCP Ausschau gehalten.
• Handel: Die neuen Standards für von Agenten abgewickelte Zahlungen wie x402 (eine Erweiterung des klassischen HTTP-Statuscode 402 „Payment required“), ACP (Agent Commerce Protocol), Universal Commerce Protocol (UCP) und AP2 (Agent Payments Protocol). Dies hat derzeit reinen Informationscharakter und fließt nicht in Ihre Bewertung ein.

Every suggested improvement comes with a next step. When there’s a Cloudflare feature that can help, there's a "Set up in Cloudflare" link straight to the setting, such as switching on Markdown for Agents or managed robots.txt. For everything else, there’s a "Copy Agent Prompt" button that proposes what your coding agent needs to build. Make the change, re-scan, and watch the checkmark turn green.

AEO: Werden Sie von KI-Assistenten empfohlen?

Diagnostics verrät, ob Ihre Website von Agenten gelesen werden kann. Unter der Registerkarte „AEO“ können Sie sehen, was danach passiert: Wenn ein Kunde einem KI-Assistenten eine Frage stellt, die für Ihr Geschäftssegment relevant ist, empfiehlt der Agent dann Sie oder einen Ihrer Mitbewerber? Diese Information lässt sich nicht wie bei einem Suchmaschinenranking einfach nachschlagen. Es gibt keine Statistik dazu, wie oft Ihre Inhalte gesehen wurden oder wie häufig falsch geklickt wurde. Wird also an Ihrer Stelle ein Konkurrent genannt, entgeht Ihnen dieses Geschäft, ohne dass Sie das überhaupt mitbekommen.

Wir schließen anhand Ihrer Website auf Ihre Branche (z. B. Gesundheit und Fitness) und Ihr Segment (z. B. Sportbekleidung) und füttern die führenden KI-Assistenten (zurzeit sind das Claude von Anthropic und GPT von OpenAI) testweise mit zu erwartenden Prompts von Kunden, um herauszufinden, wie die Agenten reagieren. Diese Prompts bauen wir so auf, dass dabei die Art und Weise nachempfunden wird, in der Dinge in der echten Welt normalerweise entdeckt werden. Wir fragen also nach Empfehlungen, Produktvergleichen und allgemeinen Ratschlägen innerhalb Ihres Segments. Die Analyse der Antworten von Modellen auf diese realistischen Anfragen liefert unter anderem folgende aufschlussreiche Kennzahlen:

• Zitierquote (Citation Rate): der Anteil der Antworten in Ihrem Segment, bei denen Ihre Website als Quelle genannt wird.
• Sichtbarkeit (Prominence): wie groß im Fall einer Zitierung Ihr tatsächlicher Anteil an der Antwort ist und wie früh dieser Teil angezeigt wird.
• Erwähnungsquote: wie oft Assistenten Ihren Markennamen in ihrer Antwort nennen – also beispielsweise, wie oft „Cloudflare“ in der Antwort erscheint, unabhängig davon, ob cloudflare.com als Quelle zitiert wird. In Kombination mit der Zitierquote werden damit das Wahrgenommenwerden und die Zurechnung voneinander abgegrenzt: Wenn Sie von Assistenten häufiger erwähnt als zitiert werden, heißt das, dass das entsprechende Modell Sie zwar auf dem Schirm hat, Sie aber noch nicht als zitierwürdig ansieht. Das ist ein feiner Unterschied.
• Marktgewicht (Share of Voice): ihr Anteil an den Zitierungen im Vergleich zu dem Ihrer Wettbewerber – das verrät Ihnen, wem die Prompts zugutekommen, bei denen Sie leer ausgehen.

Um beurteilen zu können, wie ein KI-Modell Ihre Marktpräsenz wahrnimmt, ermitteln wir für jede Branche und jedes Segment einen Benchmarkwert, bevor wir eine bestimmte Website bewerten. Dafür füttern wir KI-Assistenten mit Prompts, die in diesem Segment mit hoher Wahrscheinlich benutzt werden. Ihre Marke wird dabei nicht konkret genannt. Dann protokollieren wird, welche Websites zitiert werden, wo sie erscheinen und wie sehr sie dabei hervorstechen.

Anstatt jedes Mal eine neue Abfrage an die Modelle zu richten, wenn ein Website-Betreiber einen Scan absolvieren lässt, führen wir diese Auswertung einmal pro Segment durch und verwenden die Basiswerte für alle Konten dieser Domain wieder. Die Vorberechnung dieses Datensatzes bietet im Wesentlichen drei Vorteile:

• Keine Latenz: Anstatt auf Echtzeit-Abfragen des Modells zu warten, werden die Ergebnisse sofort aus einem Schnappschuss geladen.
• Geringerer Rechenleistungsbedarf: Durch das Zusammenführen von Abfragen auf Segmentebene werden im Rahmen Tausender Scans überflüssige KI-Aufrufe vermieden.
• Bewertung der Brancheneignung: Durch die Wiederverwendung des Datenkorpus kann ermittelt werden, welche Marken regelmäßig zusammen auftauchen. Daraus lässt sich ein Score bezüglich der Brancheneignung ableiten. Dieser verrät, ob ein KI-Assistent Ihre Website gemeinsam mit Ihren tatsächlichen Mitbewerbern betrachtet.

KI-Assistenten geben auf dieselbe Frage oft unterschiedliche Antworten. Um dem Rechnung zu tragen, geben wir mithilfe von Cloudflare AI Gateway den Assistenten der verschiedenen Modelle etliche Male dieselben Prompts vor. So bekommen wir die Antworten zu Gesicht, die auch ein normaler Kunde sehen würde, also den Antworttext mit den von den jeweiligen Assistenten zitierten Quellen. Daraus lassen sich dann mehrere Schlüsse ziehen. 

Wir überprüfen, ob Ihre Website erwähnt wurde, ob Sie als Quelle angegeben wurden und wenn ja, wie früh innerhalb der Antwort, und welcher Anteil der Antwort im Kern Ihnen zugeschrieben wird. Wenn echtes Urteilsvermögen gefragt ist, übernimmt Workers AI den Hauptteil der Arbeit. Wir betreiben die Lösung nativ auf unserer eigenen Infrastruktur, sodass sie jede Antwort lesen und bewerten kann, wie Sie in den Antworten zitiert und erwähnt werden. Außerdem nutzen wird eine genaue Textanalyse anstelle eines Modells, das seine eigenen Antworten bewertet. Bei dieser Vorgehensweise werden Dutzende von Einzelantworten in praxisrelevante Kennzahlen überführt. Durch die Abstraktion der Abfrage- und Auswertungs-Pipeline für mehrere Modelle liefert das Tool Metriken, ohne dass ein eigenes Auswertungskonzept entwickelt werden muss.

Zusätzlich zu den Antworten schlüsselt eine Darstellung der KI-Betreiber-Aktivität den tatsächlichen durch Crawling und Verweise generierten Datenverkehr auf Ihrer Website nach Betreiber (OpenAI, Google usw.) auf. Sie können damit sehen, wer Ihre Inhalte ausliest, wer dafür sorgt, dass Ihr Internetauftritt von Besuchern auch aufgerufen wird, und welche Fehlermeldungen ihnen dabei begegnen (403: gesperrt; 404: nicht funktionierender Link). Reagiert werden sollte, wenn einer dieser Agenten Tausende Ihrer Seiten durchsucht, aber nie jemanden dorthin weiterleitet. Das bedeutet nämlich, dass der betreffende Betreiber Ihre Arbeit also für sich nutzt, ohne Kunden für Sie zu generieren.

Da diese Zahlen speziell für Ihre Website erhoben werden, können Sie damit experimentieren, den Scan erneut durchführen und die Auswirkungen auf die konkreten Fragen messen, die für Ihr Unternehmen geschäftsfördernd sind.

Lernen Sie Ihr anderes Publikum kennen

Bisher konnte man nur im Nebel stochern, um eine Ahnung davon zu bekommen, welchen Einfluss Agenten auf das eigene Geschäft haben. Man musste Protokolle durchforsten, um daraus abzuleiten, wer die Website besucht hatte, oder selbst eine Frage an einen Chatbot richten, um zu sehen, ob das eigene Unternehmen erwähnt wurde. Doch jetzt liefern Agent Readiness und AEO Ihnen die Daten, die Sie brauchen, um handeln zu können. Und da die Anfragen über Cloudflare geleitet werden, liefern diese Tools – die sich im Laufe der Zeit noch verbessern werden – wo immer möglich keine Schätz-, sondern Messwerte. 

Wir haben schon immer dafür gesorgt, dass Betreiber herausfinden können, wer Ihre Website besucht, und selbst entscheiden können, auf welche Weise sie mit diesen Besuchern interagieren. Agenten sind dabei nur die neueste Publikumgeneration. Wenn Unternehmen es Agenten leicht machen, sie zu finden, zu verstehen und ihnen zu vertrauen, werden sie auch empfohlen. Unter Agent Readiness erfahren Sie, ob Sie zu diesem Kreis gehören, und was Sie andernfalls unternehmen können.

Möchten Sie herausfinden, ob KI-Agenten Kunden zu Ihnen lotsen? Dann rufen Sie in Ihrem Dashboard die Registerkarte „Overview“ (Übersicht) auf. Darüber können Sie ihre Website fit für Agenten machen und Frühzugang zu AEO Visibility anfordern.

Sie setzen bei der Entwicklung auf das offene, für Agenten optimierte Web? Unter der Registerkarte „Agent Readiness“ in Ihrem Cloudflare-Dashboard können Sie uns im Cloudflare Developer Discord-Kanal davon berichten.