La preparación para la inteligencia artificial: Un nuevo estándar para la web

Introducción

La web ha evolucionado de comunicarse con los navegadores a los motores de búsqueda. Ahora, Cloudflare propone que los sitios web deben prepararse para interactuar con los agentes de inteligencia artificial (IA). Presenta una herramienta para ayudar en esta tarea, pero plantea tantas preguntas como soluciones ofrece.

La propuesta de Cloudflare: isitagentready.com

Cloudflare lanza isitagentready.com, una herramienta gratuita que asigna un puntaje de optimización a los sitios web basándose en su compatibilidad con los agentes de IA. Evalúa cuatro aspectos: la descubrimiento, contenido, control de acceso y capacidades. Sin embargo, la web todavía está lejos de estar lista: sólo el 4% de los 200.000 sitios analizados declaran sus preferencias de uso por los agentes de IA y menos de 15 sitios han adoptado los estándares más recientes como las tarjetas de servidor MCP o los catálogos de API.

Lentitud de los agentes:

Cuando un agente de IA intenta acceder a un sitio web para leer documentación, comprar un producto o interactuar con una API, se enfrenta a una infraestructura diseñada para humanos: HTML denso, formularios, sesiones de navegación, captchas. Esto resulta en agentes lentos, costosos en tokens y con frecuencia inexactos.

Los estándares emergentes

Varios de los estándares resaltados en el puntaje propuesto por Cloudflare están en proceso de redacción en la IETF, o son propuestas informales sin garantía de adopción generalizada. Es la realidad de una web en evolución. Pero esto implica una incertidumbre que Cloudflare tiende a minimizar. Adoptar un estándar que será revisado o abandonado en 18 meses podría significar un esfuerzo de integración que deberá ser reecho.

El contenido en Markdown: Un ahorro real, medido

Uno de los aspectos más concretos y útiles de la iniciativa de Cloudflare es la capacidad de un servidor para responder en Markdown cuando un agente envía un encabezado Accept: text/markdown. Cloudflare afirma haber medido hasta un 80% de reducción en el número de tokens necesarios para leer una página, en comparación con su versión HTML.

Cloudflare: Evaluador y vendedor de soluciones

Cloudflare publica el puntaje de referencia para la "preparación de agentes", integra este puntaje en su URL Scanner, propone soluciones para corregir cada punto de fallo... y vende los productos que permiten implementar estas correcciones. Esto no es necesariamente problemático, pero significa que los criterios del puntaje pueden evolucionar en función de los intereses comerciales de la empresa tanto como de las necesidades reales de los agentes.

Acciones concretas para los desarrolladores

A pesar de las reservas, hay varias acciones que tienen un retorno de inversión claro e inmediato, independientemente de la evolución de los estándares: servir Markdown a demanda, cuidar el robots.txt para los agentes de IA y estructurar un llms.txt por sección para los sitios con mucho contenido.

Adopción como indicador de mercado, no como obligación

La verdadera utilidad de la iniciativa de Cloudflare puede estar en el conjunto de datos Radar que introduce. Este seguimiento semanal de la adopción de cada estándar por los 200.000 sitios más visitados permitirá medir si los estándares están ganando terreno o si la mayoría de los sitios permanecen pasivos esperando que los agentes se adapten a ellos, como han estado adaptándose al HTML durante treinta años.

Conclusión

La propuesta de Cloudflare de puntuar la preparación de los sitios web para interactuar con los agentes de IA es ambiciosa y plantea muchos interrogantes. Sin embargo, también ofrece una serie de acciones concretas que los desarrolladores pueden tomar para mejorar la compatibilidad de sus sitios con la IA y proporciona un conjunto de datos útil para rastrear la adopción de los estándares de IA en la web.