Cloudflare acaba de regalar la pieza que le faltaba a tu IA: buscar en la web de verdad

Red global de servidores y centros de datos
Cloudflare mueve el trafico de medio mundo. Ahora quiere saber que buscas.

Hubo un tiempo en que tu bot de Discord tenia que responder datos del clima con informacion de 2023. Hoy, con modelos que cortocircuitan su propio entrenamiento, esa excusa ya no existe. El problema real es otro: ninguna IA se atreve a decirte que no sabe algo, y el parche casero mas usado sigue siendo inventar la URL.

Esto acaba de cambiar. Cloudflare lanzo en beta una Web Search API que se conecta de forma nativa con su AI Gateway, y en menos de 24 horas la noticia se comio la primera pagina de Hacker News con 457 puntos y 209 comentarios.

Que es la Web Search API de Cloudflare

La propuesta es simple y por eso mismo incomoda para los demas. Una sola ruta que te entrega resultados de busqueda web en vivo, listos para que tu modelo se apoye en ellos en lugar de inventarse la respuesta.

Lo relevante no es el producto, es el lugar donde lo metieron. No es un producto suelto: corre por dentro de AI Gateway, y eso significa que las peticiones de busqueda aparecen en los logs de tu gateway y se facturan contra tus creditos de AI Gateway, al precio de lista de cada proveedor.

Sin markup adicional. Eso es lo que dicen, y eso es lo que hay que mirar.

Tres proveedores en el lanzamiento: Ceramic.ai, Exa y Linkup. Y aqui viene la parte que hizo arder los 209 comentarios: los tres ofrecen Zero Data Retention en las peticiones que pasan por Cloudflare, y los tres se comprometieron a los estandares verificados de crawling de bots de Cloudflare.

Por que 457 puntos en menos de un dia

Porque toca un nervio real. La discusion en los comentarios se movio casi entera alrededor de la confianza, no de la tecnologia. Y es razonable: tus consultas de busqueda son una de las cadenas de texto mas sensibles que puedes enviar a un tercero, a veces mas reveladoras que tu prompt, porque a veces van a ciegas.

El punto mas repetido entre los que rencananya a favor: ya no necesitas un intermediario al estilo man-in-the-middle si controlas tu servidor DNS y tu certificado TLS. Ese argumento es correcto, y por eso la promesa de Zero Data Retention importa mas de lo que parece a primera vista.

El punto mas repetido entre los que lo criticaron: llevas anos confiando en Cloudflare como infraestructura neutral y ahora les estas confiando el contenido de lo que buscas, no solo el trafico. La respuesta mas lapidaria de la discusion lo resume perfecto: prefiero que sea Cloudflare dueno de internet a que lo sea otro, pero prefiero que nadie lo sea.

Lo que significa para un dev en America Latina

La consecuencia practica no es glamour, es margen. Si antes tenias que montar tu propio proxy de busqueda para poder limitar el gasto por proyecto, ahora esa limitacion vive en el gateway que probablemente ya tienes en produccion.

Segundo: la palabra beta y la promesa de Zero Data Retention conviven en el mismo comunicado oficial. Los tres proveedores estructura su negocio cobrando por API, no por cumplimiento. Confiar en una promesa de retencion escrita en un changelog es un riesgo que tu empresa tiene que asumir por ti.

Tercero, y esto es lo que de verdad importa: si la busqueda web se vuelve una commodity empujada por la infraestructura que ya tienes corriendo, la diferencia entre un agente que funciona y uno que alucina se va a volver casi gratis. Eso es un empate tecnologico brutal para quien hoy cobra por la pieza mas dificil.

La conclusion incomoda

Me gusta la herramienta y me preocupa el precedente. El precedente es este: la capa que routea tu trafico empezo a vender tambien el contenido de lo que buscas. Si manana el gateway factura por creditos, sus ingresos por busqueda pueden quedar por debajo de su margen. Lo cual significa que el incentivo no esta en cobrarte caro por buscar, esta en que no busques en otro lado.

Mi opinion: pruebalo en un proyecto lateral, no lo pongas en produccion con datos de clientes. Y si hoy dependes de Exa o de Linkup por separado, no hagas el cambio por esto.

Comparte esto si crees que la infraestructura de red deberia decidir por nosotros que se puede buscar en internet.