Comprueba si un agente puede completar tareas en tu sitio
Una revisión técnica detecta, por ejemplo, que faltan datos estructurados de producto. Una prueba con un agente muestra además si consigue encontrar lo que busca, dónde se atasca y si responde con información que no aparece en tu sitio.
Qué tarea realiza el agente
Le damos una instrucción como la de un cliente: encontrar el precio de un producto, llegar a la página de pago, consultar el horario de hoy o citar un artículo. Seleccionamos las tareas según el tipo de sitio y las páginas que contiene.
48 tareas para 7 tipos de sitio
Las tareas que no corresponden a tu sitio se marcan como no aplicables. Por ejemplo, no evaluamos la capacidad de citar artículos si tu sitio no publica artículos.
Qué tiene permitido hacer
El agente puede solicitar páginas, leer archivos de /.well-known y devolver una respuesta. Solo realiza peticiones GET. No tiene herramientas para enviar formularios, iniciar sesión, añadir productos al carrito ni realizar compras.
- 01
fetch_pagesolicitar una página
- 02
read_well_knownleer un archivo de /.well-known
- 03
donedetenerse y decir qué encontró
Cada ejecución está limitada a doce páginas y menos de un minuto. Si alcanza ese límite sin completar la tarea, el resultado lo indica para que puedas identificar recorridos difíciles de resolver.
El agente lee el contenido que envía tu servidor sin ejecutar JavaScript: hasta 6000 caracteres de texto y 80 enlaces por página.
Cómo termina una ejecución
Cada ejecución termina con uno de estos seis resultados:
hasta dónde llegó
- success
- Completó la tarea.
- partial
- Completó parte de la tarea, pero faltó información o algún paso.
- fail
- No pudo completar la tarea.
- blocked
- El sitio bloqueó el acceso.
- hallucinated
- Dio una respuesta que no está respaldada por el contenido de tus páginas.
- not_applicable
- La tarea no corresponde a este sitio.
Detecta respuestas sin respaldo en tus páginas
Si el agente devuelve un precio que no aparece en tu sitio, lo señalamos. Este problema puede pasar inadvertido en una revisión del HTML y los datos estructurados: solo se detecta al observar la respuesta que obtiene un posible cliente.
El porcentaje de éxito de varias pruebas
Los modelos pueden responder de forma distinta en cada intento. Por eso repetimos la tarea y mostramos tanto el porcentaje de éxito como el número de intentos completados. Resolverla tres de cinco veces no ofrece la misma fiabilidad que resolverla cinco de cinco.
Del problema a la corrección
Cada fallo incluye un código que identifica el motivo y enlaza con la comprobación correspondiente y su guía. Si se puede corregir con un archivo, puedes generarlo a partir del contenido de tu sitio.
se detuvo aquí
el motivo del fallo
- checks
- la comprobación que lo mide
- guides
- la sección de la guía que lo resuelve
- artifact
- el archivo generado a partir de tus páginas
- null
- puede requerir una corrección manual
Algunos problemas requieren una intervención manual. Si hay que restaurar una página o reparar un enlace, lo indicamos en lugar de ofrecer un archivo que no solucionaría el fallo.
Comprueba el resultado después de corregir
Repite la tarea y compara los registros antes y después del cambio. Podrás ver si el agente supera el paso en el que antes se detenía.
Un resultado independiente de la puntuación AX
El porcentaje de tareas completadas se muestra por separado. No modifica la puntuación AX, que sigue calculándose con las mismas 26 comprobaciones para todos los sitios.