BiVelioOneBot: qué lee y cómo pararlo
Lee unas pocas páginas públicas de la web de una empresa, solo cuando alguien lo pide para la web de su empresa o de un cliente que le ha dado su consentimiento, y estima qué procesos merece la pena descubrir con su equipo. Respeta robots.txt y la reserva de minería de textos y datos, y se identifica siempre.
Quién es BiVelioOneBot
Es el lector web de BiVelio One, el espacio de trabajo de BiVelio Inc. Lo usan el diagnóstico «Descubre tus procesos desde tu web» de bivelio.com y la fase de Comprensión de One.
Solo a petición
No recorre Internet por su cuenta: cada lectura empieza porque una persona da una web y declara que es la de su empresa o la de un cliente que le ha dado su consentimiento.
Un solo sitio
Lee la portada y algunas páginas del mismo sitio (con o sin www). No sigue enlaces a otros dominios ni lee redes sociales.
Reglas, no copias
Convierte cada página en texto, aplica reglas explicables y tira el HTML. El resultado es una estimación de procesos, nunca una copia de tu web.
Qué lee y qué no hace
Lo que lee
- /robots.txt primero y, antes de analizar nada, /.well-known/tdmrep.json (la reserva de minería de textos y datos); después, un sitemap: el que indique robots.txt o, si no indica ninguno, /sitemap.xml.
- Hasta 8 páginas HTML públicas (portada incluida), una por tema: contacto, servicios, reservas, empleo, aviso legal, preguntas frecuentes…
- Solo HTML: no descarga imágenes, PDF, hojas de estilo ni scripts, y no ejecuta JavaScript.
- Con topes: 2 MiB por página, 8 MiB y 20 segundos en total, como mucho 3 redirecciones y siempre dentro del mismo sitio.
Lo que no hace
- No envía formularios, no inicia sesión, no crea cuentas y no añade nada a ningún carrito.
- No guarda copias de las páginas. El diagnóstico de bivelio.com no se queda con nada de tu web. En One, la empresa que lo pidió conserva 90 días el resultado del análisis (las páginas leídas, los procesos y citas breves de 240 caracteres como mucho, sin correos ni teléfonos), y una huella (SHA-256) de cada página para poder comprobar qué se leyó sin guardar una copia, y después se borra solo; nunca el HTML.
- No lleva cookies, cabecera Authorization ni Referer.
- No rodea bloqueos: ante un 403, un 429 o un 503 (lo que responden los bloqueos y casi todas las páginas de desafío) se para, sin reintentar.
Cómo excluir tu web
Basta con cualquiera de estas cuatro vías. BiVelioOneBot las mira antes de analizar nada y no hace falta avisarnos.
robots.txt
Sigue robots.txt (RFC 9309) con el nombre BiVelioOneBot, sin distinguir mayúsculas. Para que no lea nada de tu web:
User-agent: BiVelioOneBot
Disallow: /Cabecera o meta (TDMRep)
Reserva la minería de textos y datos con el protocolo TDMRep del W3C: la cabecera HTTP o el meta en tus páginas.
tdm-reservation: 1
<meta name="tdm-reservation" content="1">/.well-known/tdmrep.json
O un fichero para todo el sitio (o solo para las rutas que quieras), también de TDMRep:
[
{ "location": "/", "tdm-reservation": 1 }
]En tu aviso legal o tus condiciones
Si tu aviso legal o tus condiciones de uso dicen que te reservas la minería de textos y datos (por ejemplo, «Queda prohibida la minería de textos y datos de este sitio»), BiVelioOneBot lo lee como una reserva y no analiza la web.
Queda prohibida la minería de textos y datos de este sitio.- Si no hay un grupo para BiVelioOneBot, sigue el de «User-agent: *», y gana la regla más específica.
- Un noindex en la portada (meta robots o cabecera X-Robots-Tag) hace que no analice el sitio; con nofollow no sigue sus enlaces.
- Si tu robots.txt responde con un error 5xx, no lee nada; si tdmrep.json responde 429 o 503, tampoco.
- Si prefieres que no lo intente nunca, escríbenos a support@bivelio.com desde una dirección de tu dominio y lo añadimos a nuestra lista de exclusión.
Por qué respeta estas señales
La excepción de minería de textos y datos del art. 4 de la Directiva (UE) 2019/790 (en España, el art. 67 del Real Decreto-ley 24/2021) no se aplica cuando el titular se la ha reservado expresamente y de forma adecuada; en lo que se publica en línea, por medios de lectura mecánica. BiVelioOneBot trata como reserva el protocolo TDMRep del W3C (cabecera, meta y /.well-known/tdmrep.json) y, además, sigue robots.txt.
Solo lee a petición de quien declara que la web es la de su empresa o la de un cliente que le ha dado su consentimiento, y el diagnóstico de bivelio.com no se queda con nada de lo que lee. Para cualquier cuestión de protección de datos: privacy@bivelio.com.
Si en tu web aparecen datos de personas (por ejemplo, un nombre en una de las citas): los trata BiVelio Inc (en One, por cuenta de la empresa cliente que pidió el análisis) para estimar los procesos de la empresa titular de la web, con base en el interés legítimo (art. 6.1.f RGPD; la evaluación, a quien la pida en privacy@bivelio.com). Vienen de la propia web pública. El diagnóstico de bivelio.com no guarda nada; en One, como mucho 90 días, en citas de 240 caracteres sin correos ni teléfonos. Puedes pedir el acceso, la supresión o oponerte en privacy@bivelio.com, y reclamar ante la Agencia Española de Protección de Datos (aepd.es).
¿Ha leído tu web?
Si BiVelioOneBot ha pasado por tu web y quieres saber por qué, que no vuelva o que se borre lo que haya quedado en One, escríbenos a support@bivelio.com (para protección de datos, a privacy@bivelio.com). Te contestamos en menos de 24 horas laborables.