Aujourd’hui, l’interaction entre les internautes et les sites web évolue à grande vitesse grâce à l’intelligence artificielle. Les utilisateurs comme les agents IA veulent formuler leurs questions en langage naturel et obtenir des réponses immédiates, sans devoir naviguer de page en page. Pour répondre à ce bouleversement, Cloudflare et Microsoft proposent une approche inédite, ouverte et clé en main, avec NLWeb et AutoRAG : un duo conçu pour rendre n’importe quel site conversationnel, prêt à affronter les nouveaux standards du web piloté par l’IA.

Pourquoi rendre son site conversationnel en 2025 ?

La recherche par mots-clés devient obsolète face aux attentes d’utilisateurs habitués aux réponses instantanées des IA (ChatGPT, Claude, Copilot). Non seulement les internautes veulent un accès conversé à l’information, mais les agents IA (bots, assistants) cherchent aussi à dialoguer directement avec les sites pour fournir des réponses fiables et structurées à leurs propres utilisateurs. Les éditeurs doivent ainsi adapter leur expérience et ouvrir leurs contenus à des accès nouvelle génération, tout en gardant la main sur l’usage de leurs ressources.

NLWeb : le protocole ouvert pour la recherche conversationnelle

NLWeb, développé chez Microsoft avec Cloudflare, standardise l’accès via des queries en langage naturel sur le web. Chaque site compatible NLWeb agit comme un serveur Model Context Protocol (MCP), proposant :

• Un point d’accès /ask pour les interactions conversationnelles via une interface web ou un widget embarqué. Celui-ci gère l’historique de la discussion et améliore automatiquement la pertinence des réponses.
• Un endpoint /mcp à destination des agents IA de confiance, pour offrir un accès structuré, scripté et contrôlé au contenu du site.

Ce standard vise à généraliser la transformation de tout site en véritable application IA, où l’humain comme la machine peuvent questionner le contenu de manière contextuelle et transparente.

AutoRAG : l’infrastructure clé en main de Cloudflare

AutoRAG simplifie radicalement la mise en place de cette nouvelle expérience conversationnelle. Il suffit de choisir un domaine dans l’interface Cloudflare, puis :

• AutoRAG crawle automatiquement le site selon le sitemap et les directives robots.txt (jusqu’à 100 000 pages), en utilisant le rendu navigateur pour capturer aussi le contenu dynamique généré par JavaScript.
• Le contenu est stocké dans un bucket R2, avant d’être vectorisé (embedding) dans une base de données dédiée à la recherche sémantique (Vectorize).
• Une re-indexation régulière maintient la base de connaissance synchronisée avec la dernière version du site : chaque modification est rapidement prise en compte.
• Un Worker Cloudflare est déployé automatiquement pour exposer l’API NLWeb et fournir l’interface utilisateur, sans que l’éditeur n’ait à gérer d’infrastructure ou de code personnalisé.

L’ajout d’un module JobManager et la distribution du traitement à l’aide de FileManagers garantissent la scalabilité et la fiabilité de l’indexation, même sur des sites ultra volumineux.

Nouveaux scénarios d’engagement et de monétisation

Transformer son site en source de données de première classe pour l’IA, c’est aussi répondre au risque d’être dépossédé de la relation avec son audience. L’approche NLWeb + AutoRAG valorise l’accès direct à l’information sur le site de l’éditeur, recentre l’engagement sur l’environnement...