Cloudflare y OpenAI contaron el 15 de octubre de 2026 que un piloto conjunto, en marcha desde julio, llevó al índice de búsqueda de ChatGPT cientos de millones de páginas que no conocía. Afecta a las webs que pasan por Cloudflare y a cualquier negocio que quiera aparecer como fuente en las respuestas de ChatGPT.
Lo que se sabe
- El piloto: según el blog de Cloudflare, empezó en julio de 2026 y prueba si las señales de su red ayudan a que los usuarios de ChatGPT encuentren contenido nuevo. El artículo lo firman dos personas de Cloudflare y dos de OpenAI.
- El tamaño: participó un grupo de webs equivalente a cerca del 1 % de la red de Cloudflare. El artículo no explica cómo se eligió.
- El resultado: según Cloudflare, OpenAI descubrió e indexó «cientos de millones» de páginas nuevas. No da más cifras: ni cuántas webs, ni cuántas visitas llegaron después.
- Qué señales se usan: filtros para no pedir páginas que no existen, que redirigen casi todo a la portada o que repiten el mismo contenido; señales de cambio para saber cuándo vale la pena volver a una página, todavía en pruebas; y avisos sobre páginas concretas que pueden ser dañinas, como un formulario de acceso falso puesto por un atacante. Cloudflare dice que marca esa página y no el dominio entero.
- Quién decide qué sale: OpenAI evalúa y ordena por su cuenta las páginas descubiertas, según lo relevantes y útiles que sean, dice el artículo.
- Qué no se comparte: según Cloudflare, se usan metadatos de la web, no el contenido de las páginas para entrenar modelos, y una señal sobre una página «no da permiso para acceder» a ella.
- Lo que viene: mejorar la selección de páginas, probar señales de cambio más rápidas y medir qué pasa después del descubrimiento. Cloudflare avisa de que, al principio, encontrar páginas nuevas puede aumentar el rastreo.
Qué cambia y qué no
Cambia una vía de entrada. Además de los enlaces y los sitemaps, parte de lo que descubre la búsqueda de ChatGPT puede salir de lo que ve la red de Cloudflare, al menos en las webs del piloto. Una página útil con pocos enlaces externos, como un manual o una carta de restaurante, tiene más opciones de ser encontrada.
No cambia quién manda en el acceso. Según la documentación de OpenAI, una web que bloquea a OAI-SearchBot en su robots.txt no se muestra en las respuestas de búsqueda de ChatGPT, aunque puede salir como enlace de navegación. Tampoco hay un botón para apuntarse: el artículo no explica cómo entrar en el piloto ni si se ampliará. Y que una página sea descubierta no garantiza que se cite.
Cómo saber si te afecta
- Mira tu robots.txt. Abre tudominio.com/robots.txt y busca OAI-SearchBot. Si está bloqueado, o si bloqueas a todos los bots, tus páginas no saldrán en las respuestas de búsqueda de ChatGPT. GPTBot es otra cosa: según OpenAI, es el rastreador para entrenar sus modelos y puedes bloquearlo sin salir de la búsqueda. Un cambio en robots.txt tarda unas 24 horas en notarse, dice OpenAI.
- Si tu web usa Cloudflare, entra en AI Crawl Control y mira qué rastreadores de IA visitan tu sitio y cuáles tienes permitidos o bloqueados. Un bloqueo puesto hace meses puede estar dejando fuera a OAI-SearchBot.
- Corrige lo que estos filtros descartan. Direcciones que no existen y aun así cargan una página, redirecciones de todo a la portada y páginas duplicadas son justo los patrones que el piloto aprende a saltarse. Que una página inexistente devuelva un error 404 real y que cada URL tenga contenido propio ayuda a cualquier rastreador, también al de Google.
- Busca páginas comprometidas. Si alguien coló un formulario falso en una sección olvidada, esa página puede quedar marcada. Revisa en Search Console el informe de problemas de seguridad y busca en Google `site:tudominio.com` páginas que no reconozcas.
- Vigila el rastreo. Si ves más visitas de OAI-SearchBot en tus registros, puede ser parte de esta etapa de descubrimiento: Cloudflare dice que al principio el rastreo puede subir.
Esta lista es un consejo de este artículo: ni Cloudflare ni OpenAI publican una guía para participar en el piloto.
Relacionado: Cloudflare: 46 anuncios en una semana y qué cambia en tu web
Fuentes
- Cloudflare, «Cloudflare and OpenAI: Making AI discovery better for everyone», 15 de octubre de 2026 (en inglés)
- OpenAI, «Overview of OpenAI Crawlers» (en inglés)
Actualizaciones: si Cloudflare u OpenAI abren el programa a más webs o publican más cifras, se añadirá aquí con su enlace.