Rastreador AhrefsSiteAudit

Descubre el rastreador web que proporciona la tecnología a la herramienta Site Audit de Ahrefs.

Versión	6.1
Tipo de bot	Bueno (se identifica, tiene un nombre oficial)
Categoría	SEO
Obedece al archivo robots.txt	Sí, de forma predeterminada (los propietarios de sitios web pueden solicitar en sus sitios que se desobedezca robots.txt)
Obedece el retraso de rastreo	Sí, de forma predeterminada (los propietarios de sitios web pueden solicitar en sus sitios que se desobedezca el retraso de rastreo)
Cadena de agente de usuario de escritorio	Mozilla/5.0 (compatible; AhrefsSiteAudit/6.1; +http://ahrefs.com/robot/site-audit)
Cadena de agente de usuario móvil	Mozilla/5.0 (Linux; Android 13) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.5359.128 Mobile Safari/537.36 (compatible; AhrefsSiteAudit/6.1; +http://ahrefs.com/robot/site-audit)
Sufijo DNS inverso	ahrefs.com
Intervalo de direcciones IP	Lista actual, documentación API

Estado del sitio web

¿Qué es el rastreador AhrefsSiteAudit?

AhrefsSiteAudit es un rastreador web que alimenta la herramienta Site Audit de Ahrefs. Los usuarios de Ahrefs pueden utilizar Site Audit para analizar sitios web y descubrir problemas de SEO técnico y SEO On-Page.

Este bot puede rastrear cualquier sitio web, excepto los no autorizados, y evita una carga excesiva en los servidores de los sitios web limitando el rastreo a 1 solicitud cada 2 segundos de forma predeterminada. Si eres el propietario de un sitio web, puedes rastrear tus propios sitios web a mayor velocidad y permitir que el rastreador AhrefsSiteAudit ignore robots.txt. Para ello, debes verificar la titularidad en la herramienta Site Audit.

¿Tienes preguntas? Tenemos las respuestas

¿Qué está haciendo el bot AhrefsSiteAudit en mi sitio web?
Si ves AhrefsSiteAudit en el registro de tu servidor, significa que alguien realizó un análisis de tu sitio web con la herramienta Site Audit de Ahrefs. Este bot rastrea un sitio web y sigue sus enlaces internos de una URL a otra. También verifica los recursos del sitio web, como los archivos CSS y JS y las imágenes.El rastreador AhrefsSiteAudit no aporta números a tu tráfico en Google Analytics.
¿Respeta el archivo robots.txt?
Sí. De forma predeterminada.Solo los propietarios verificados pueden permitir que el rastreador AhrefsSiteAudit desobedezca el archivo robots.txt en su sitio.
¿Cómo puedo controlar el rastreador AhrefsSiteAudit en mi sitio web?
Como el bot AhrefsSiteAudit sigue de forma rigurosa el archivo robots.txt de tu sitio web, tienes el control de lo que hace.Si quieres que AhrefsSiteAudit deje de visitar tu sitio web, añade estas dos líneas al archivo robots.txt de tu servidor:
Agente de usuario: AhrefsSiteAuditNo permitir: /
También puedes permitir o restringir el rastreo en cualquier parte de tu sitio web con el archivo robots.txt. Obtén más información sobre robots.txt en www.robotstxt.org.El bot AhrefsSiteAudit comprueba tu archivo robots.txt antes de cada nuevo rastreo.Si tu archivo robots.txt contiene errores, el bot AhrefsSiteAudit no podrá reconocer tus comandos y seguirá rastreando tu sitio web de la misma forma que lo hacía antes.Si crees que el bot AhrefsSiteAudit está mostrando un mal comportamiento en tu sitio web o si tienes preguntas, ponte en contacto con [email protected] y haremos todo lo posible para ayudarte.

¿Tienes más preguntas?

Si tienes más preguntas,
contáctanos para que podamos ayudarte.