Avec l'essor rapide des grands modèles d'IA et l'énorme demande de contenu public sur Internet pendant la formation, les opérateurs de sites web accordent également une plus grande attention à leurs propres droits sur le contenu. Face à cette tendance, Cloudflare a récemment annoncé le lancement deServices de marché Pay per Crawl, permettant aux propriétaires de sites Web de décider d'autoriser ou non les robots d'exploration IA à explorer le contenu selon leurs propres souhaits, et même de définir des tarifs pour chaque exploration, ouvrant ainsi un nouveau modèle commercial pour la gestion de contenu.
Cloudflare a annoncé que le service était entré en phase de test bêta. Les entreprises d'IA et les éditeurs de sites web participants devront vérifier leur identité et configurer une autorisation via leurs comptes Cloudflare. À l'avenir, les robots d'exploration IA ne pourront plus « saisir » du contenu en toute discrétion, mais nécessiteront désormais une autorisation légale par paiement.
Cloudflare agira en tant qu'intermédiaire, aidant les deux parties à mener à bien le processus de transaction et à distribuer les bénéfices aux fournisseurs de contenu.
Plus important encore, Cloudflare a également annoncé qu'à compter d'aujourd'hui, tous les sites web nouvellement enregistrés et protégés par Cloudflare seront totalement bloqués par défaut contre les robots d'exploration IA. Sauf autorisation proactive du propriétaire du site, aucun robot d'exploration IA ne pourra accéder au contenu. Cet ajustement vise clairement les entreprises d'IA, notamment Google, OpenAI et Anthropic, connues pour avoir extrait de grandes quantités de contenu web sans autorisation ces dernières années, offrant ainsi plus d'autonomie aux créateurs de contenu.
De grands médias, dont Condé Nast, Time, The Atlantic, Fortune et Associated Press, ont signé des contrats avec Cloudflare, permettant à leurs sites web de bloquer par défaut l'accès au contenu des robots d'exploration IA. Cela reflète les efforts proactifs des éditeurs traditionnels pour préserver la valeur de leur contenu et développer de nouvelles sources de revenus à l'ère de l'IA.
Matthew Prince, PDG de Cloudflare, a souligné que le potentiel du marché du paiement à la séance ne se limite pas au secteur de l'édition de presse. À mesure que l'IA agentique se généralisera, elle deviendra probablement une source de données essentielle, notamment pour l'entraînement des modèles et la fourniture de réponses en temps réel.
Les données publiées par Cloudflare montrent que Google explore actuellement le contenu web 14 fois pour chaque recommandation de recherche qu'il fournit, contre 1700 73000 fois pour OpenAI et jusqu'à XNUMX XNUMX pour Anthropic. Il existe un déséquilibre évident entre les deux acteurs en termes de trafic et d'exploration de contenu, et le marché pourrait clairement réajuster le partage des bénéfices.
Il est intéressant de noter que Cloudflare a révélé être disposé à utiliser des stablecoins ou sa propre monnaie numérique pour traiter ces transactions à l'avenir, améliorant ainsi l'efficacité des transactions transfrontalières. Cependant, la place de marché n'utilise actuellement aucun mécanisme de monnaie numérique et s'appuie encore principalement sur les méthodes de règlement traditionnelles.
Dans l’ensemble, la décision de Cloudflare n’est pas seulement une mise à niveau technologique, mais a également le potentiel d’ouvrir de nouvelles opportunités commerciales pour les opérateurs de sites Web à l’ère de l’IA, passant de la « fourniture passive de contenu » à la « définition active de normes d’autorisation et de facturation », remodelant davantage la logique de distribution de valeur de l’économie du contenu en ligne.
