Rastreador
Sobre SEOHeroBot
SEOHeroBot es el rastreador de SEOHero (seohero.app), operado por Fourwrd V.O.F. Se identifica con el agente de usuario que aparece abajo y descarga páginas para comprobar su optimización para buscadores.
SEOHeroBot/1.0 (+https://seohero.app/bot)
Qué hace
Para los sitios web de nuestros clientes, a petición suya, el bot realiza una auditoría SEO: descarga la página de inicio, hasta diez páginas internas enlazadas desde el inicio o incluidas en el sitemap, robots.txt y sitemap.xml, y comprueba hasta cuarenta enlaces internos en busca de códigos de error. Las auditorías se ejecutan una vez por semana por sitio y cuando el cliente inicia una. Para una comparación con la competencia o una comprobación comercial, el bot solo descarga la página de inicio, robots.txt y sitemap.xml de un sitio.
Cómo se comporta
El bot lee tu robots.txt y respeta las reglas Disallow para el agente de usuario SEOHeroBot (o *) en todas las páginas salvo la página de inicio del propio cliente; un Disallow: / detiene el análisis de cualquier sitio que no sea de nuestro cliente. Descarga como máximo tres páginas a la vez, espera como máximo diez segundos por página, no envía cookies, no rellena formularios y solo conserva el HTML mientras dura el análisis.
Bloquear el bot
Añade las siguientes líneas a tu robots.txt para mantener a SEOHeroBot fuera de tu sitio (o de determinadas rutas):
User-agent: SEOHeroBot Disallow: /
¿No quieres que tu sitio se descargue en absoluto, ni siquiera a petición de uno de nuestros clientes? Escríbenos y excluiremos el dominio.
Contacto
Preguntas o reclamaciones sobre el rastreador: contact@fourwrd.nl, Fourwrd V.O.F., De Nieuwe Erven 3, 5431 NV Cuijk, Países Bajos.