Qué hace VozRadarBot en tu sitio.

Qué es VozRadarBot

VozRadar mide cómo los asistentes de IA (motores de respuesta) mencionan, recomiendan y citan marcas en mercados específicos. Para hacerlo necesita leer algunas páginas públicas de la web: las de las marcas que nuestros clientes monitorean y las que citan las respuestas de IA. VozRadarBot es el rastreador que las solicita.

Cada solicitud se identifica con este user agent:

VozRadarBot/0.1 (+https://vozradar.com/bot)

El token que debes usar en robots.txt es VozRadarBot. No distingue entre mayúsculas y minúsculas.

Qué visita

VozRadarBot solo solicita páginas por un motivo ligado a un cliente de VozRadar. Hay tres casos.

• El sitio web del propio cliente. Cuando un cliente conecta su sitio web a un proyecto, el bot hace un rastreo inicial de hasta unas 250 páginas. También ejecuta una verificación de "acceso para IA" que solicita la página de inicio, /robots.txt y /llms.txt.
• Sitios web de competidores. Para los competidores que un cliente monitorea, el bot solicita hasta 100 páginas por sitio, empezando por las páginas que citan las respuestas de IA. Los competidores más mencionados se actualizan aproximadamente una vez por semana; un cliente también puede pedir una actualización manual, como máximo una vez al día.
• Páginas citadas en respuestas de IA. Para ver qué marcas menciona una página citada, el bot solicita bajo demanda una cantidad pequeña de páginas públicas de terceros, hasta 20 páginas por verificación.

Cómo se comporta

• Solo solicita páginas públicas. Nunca inicia sesión, envía formularios, elude muros de pago ni intenta acceder a nada privado.
• Antes de rastrear, lee robots.txt y sigue el grupo de VozRadarBot o, si no existe, el grupo *. Admite Allow y Disallow, incluidos los patrones con * y $. La única excepción es la verificación de acceso para IA en el sitio web del propio cliente, que solicita la página de inicio, /robots.txt y /llms.txt para informar sobre ellos.
• Cuando rastrea un sitio, hace una sola solicitud a la vez, con al menos un segundo entre una y otra, y respeta un Crawl-delay en robots.txt de hasta 10 segundos.
• No ejecuta JavaScript. Lee el HTML tal como se sirve.
• Cada solicitud tiene un límite de tamaño de 2 MB y un tiempo de espera máximo.
• Solo usa http y https en los puertos estándar.

Cómo bloquearlo o frenarlo

Agrega reglas para VozRadarBot en tu robots.txt. Los cambios se aplican la próxima vez que el bot lee el archivo, lo que hace al inicio de cada rastreo. La verificación de acceso para IA en el sitio web del propio cliente sigue solicitando la página de inicio, /robots.txt y /llms.txt para poder informar sobre ellos.

Bloquearlo en todo el sitio:

User-agent: VozRadarBot
Disallow: /

Dejarlo fuera de una carpeta:

User-agent: VozRadarBot
Disallow: /private/

Frenarlo a una solicitud cada cinco segundos:

User-agent: VozRadarBot
Crawl-delay: 5

Qué guardamos

De los sitios web de competidores guardamos solo metadatos de la página: la URL, el título, la meta descripción, los encabezados principales, el idioma, las fechas que la página publica, el estado HTTP y el número de palabras. No guardamos el texto de la página.

De las páginas de terceros citadas en respuestas de IA guardamos la URL, el título, el estado HTTP y qué marcas monitoreadas nombra la página. No guardamos el texto de la página.

Del sitio web del propio cliente guardamos el texto de las páginas, para que las recomendaciones que le damos a ese cliente puedan usarlo.

Contacto

Preguntas, quejas o una solicitud para dejar de rastrear un sitio: [email protected]. Si nos pides que dejemos de rastrear un sitio, incluye su dominio.