Cloudflare bietet Entwicklern mit seiner neuen Web Search API, die über das AI Gateway zugänglich ist, eine direkte Möglichkeit, das Internet für ihre KI-Anwendungen zu durchsuchen.
Die Art und Weise, wie wir auf Informationen zugreifen und wie Webseiten gefunden werden, steht vor einem Wandel. Cloudflare hat am 2. Oktober 2026 eine Web Search API im Beta-Stadium über seinen AI Gateway gestartet. Diese ermöglicht es Entwicklern, das Internet zu durchsuchen und ihre KI-Agenten mit aktuellen, Live-Informationen zu versorgen. Bisher waren KI-Modelle auf ihre Trainingsdaten beschränkt, die schnell veralten können. Mit dieser neuen API können Agenten nun auf das Internet zugreifen, ähnlich wie Menschen eine Suchmaschine verwenden, und erhalten so Informationen, die auf Live-Daten basieren.
Funktionsweise der KI-gestützten Suchfunktion
Das Herzstück des neuen Cloudflare-Angebots ist eine standardisierte Schnittstelle, die drei unabhängige Suchdienste bündelt: Ceramic.ai, Exa und Linkup. Wenn ein Entwickler die Web Search API aufruft, wird die Anfrage an einen dieser Anbieter weitergeleitet. Standardmäßig wird Ceramic.ai verwendet, falls keine explizite Auswahl getroffen wird. Die Antworten aller Anbieter werden von Cloudflare in eine einheitliche Struktur gebracht. Jedes Ergebnis enthält typischerweise einen Titel, eine URL und eine kurze Beschreibung. Dies vereinfacht die Weiterverarbeitung der Suchergebnisse erheblich, insbesondere in automatisierten Workflows. Die API ist über eine REST-Schnittstelle oder über eine Workers AI-Bindung zugänglich, was eine flexible Integration in bestehende oder neue Anwendungen ermöglicht. Die Antworten sind so konzipiert, dass sie die Probleme lösen, die entstehen, wenn KI-Agenten versuchen, URLs zu erraten, was häufig zu Fehlern wie „404 Not Found“ führt.
Integration in Apps und Workers
Die nahtlose Integration in die Cloudflare-Plattform ist ein wesentlicher Vorteil. Entwickler können die Web Search API von verschiedenen Punkten aus aufrufen: direkt aus einem Backend-System, innerhalb eines Cloudflare Workers oder als Teil eines komplexeren Agenten-Workflows. Diese Flexibilität erlaubt es, die Suchfunktion dort einzusetzen, wo sie am dringendsten benötigt wird. Beispielsweise kann ein Kundenservice-Bot aktuelle Produktinformationen abrufen, um eine Anfrage zu beantworten, oder ein Nachrichtenaggregator kann die neuesten Schlagzeilen in Echtzeit zusammenfassen. Cloudflare positioniert diese Retrieval-Funktion als Teil einer verwalteten KI-Infrastruktur innerhalb des AI Gateways. Dies bedeutet, dass die Web-Suche neben anderen wichtigen Funktionen wie Model-Routing, Sicherheitskontrollen und Nutzungsmanagement angesiedelt ist. Alle drei Suchanbieter, die über die API zugänglich sind, haben sich zudem den Crawling-Standards für verifizierte Bots von Cloudflare verpflichtet, was eine gewisse Kontrolle und Verlässlichkeit des Crawlings gewährleistet.
Kosten, Credits und Anbieterwahl
Die Nutzung der Web Search API erfolgt über Cloudflare AI Gateway-Credits. Die Kosten richten sich nach den Listenpreisen der jeweiligen Suchanbieter, wobei Cloudflare keinen zusätzlichen Aufschlag berechnet. Entwickler haben die Möglichkeit, entweder ihre bestehenden AI Gateway-Credits zu verwenden oder einen eigenen API-Schlüssel des bevorzugten Suchanbieters zu hinterlegen. Dies bietet eine flexible Kostenstruktur und die Freiheit, den Anbieter basierend auf Leistung und Preis zu wählen. Für Anfragen, die über Cloudflare abgewickelt werden, gilt eine Zero Data Retention-Richtlinie, was bedeutet, dass Cloudflare keine Daten speichert, die zur Identifizierung von Nutzern oder zur Erstellung von Profilen verwendet werden könnten. Diese Datenschutzfunktion ist ein wichtiger Aspekt für Unternehmen, die sensible Anwendungen entwickeln.
Auswirkungen auf Entwickler und Markt
Die Einführung der Web Search API hat tiefgreifende Auswirkungen auf die Art und Weise, wie Entwickler auf Informationen zugreifen und wie KI-Agenten funktionieren. Sie bietet eine direkte Alternative zu den integrierten Suchwerkzeugen, die von einigen großen Modellplattformen angeboten werden, und zu direkten Integrationen mit spezialisierten Suchunternehmen. Cloudflare setzt darauf, dass Teams, die mehrere Modelle oder Suchanbieter nutzen, die Verwaltung über ein unabhängiges Gateway wie das ihre bevorzugen. Dies könnte zu einer Fragmentierung des Marktes für Suchlösungen im KI-Bereich führen, aber auch Innovationen fördern, da Entwickler nun mehr Auswahlmöglichkeiten haben. Die Fähigkeit, KI-Agenten mit Live-Daten zu versorgen, eröffnet neue Möglichkeiten für personalisierte und dynamische Anwendungen, von Echtzeit-Nachrichtenanalysen bis hin zu interaktiven Lernplattformen.
Sicherheits- und Datenschutz-Features
Cloudflare legt Wert auf Sicherheit und Datenschutz. Die Web Search API unterstützt Zero Data Retention für Anfragen, die über Cloudflare abgewickelt werden. Dies bedeutet, dass die Suchanfragen und die daraus resultierenden Daten nicht von Cloudflare gespeichert werden, was die Privatsphäre der Nutzer schützt. Darüber hinaus haben sich die drei unterstützten Suchanbieter – Ceramic.ai, Exa und Linkup – den Crawling-Standards für verifizierte Bots von Cloudflare verschrieben. Dies impliziert, dass ihr Web-Crawling-Verhalten den Richtlinien von Cloudflare entspricht und potenziell sicherer und transparenter ist als unregulierte Crawling-Aktivitäten. Diese Maßnahmen sind entscheidend, um Vertrauen bei Entwicklern und Endnutzern aufzubauen, insbesondere wenn es um den Zugriff auf und die Verarbeitung von Informationen aus dem Internet geht.
Tags: ai, search, api, cloudflare, workers, gateway, ceramic.ai, exa, linkup
Quellen
- Cloudflare Web Search API via AI Gateway - Kingy AI
- Cloudflare Is Introducing Web Search API via AI Gateway, Turning Search Into Infrastructure
- Cloudflare - Introducing Web Search API via AI Gateway
- Introducing Web Search API · Changelog
- Introducing Web Search API via AI Gateway | Cloudflare Blog
- Cloudflare Extends AI Search to Make it Easier for Agents and Developers to Search Custom Data - InfoQ