AhrefsSiteAudit Rastreador

Saiba mais sobre o crawler web que impulsiona a ferramenta Site Audit da Ahrefs.

Versão	6,1
Tipo de bot	Bom (identifica a si mesmo, tem um apelido oficial)
Categoria	SEO
Obedece ao robots.txt	Sim, por padrão (os proprietários de sites podem solicitar desobedecer aos robots.txt em seus sites)
Obedece o atraso de rastreamento	Sim, por padrão (os proprietários de sites podem solicitar a desobediência ao atraso de rastreamento em seus sites)
String de agente de usuário para desktop	Mozilla/5.0 (compatible; AhrefsSiteAudit/6.1; +http://ahrefs.com/robot/site-audit)
String de agente de usuário móvel	Mozilla/5.0 (Linux; Android 13) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/108.0.5359.128 Mobile Safari/537.36 (compatible; AhrefsSiteAudit/6.1; +http://ahrefs.com/robot/site-audit)
Sufixo DNS reversa	ahrefs.com or ahrefs.net
Intervalo de endereços IP	Lista atual, documentação da API

Status do website

O que é o rastreador AhrefsSiteAudit?

AhrefsSiteAudit é um rastreador web que alimenta a ferramenta de Auditoria de Sites da Ahrefs. Os utilizadores Ahrefs podem usar a Auditoria de Sites para analisar websites e encontrar tanto SEO técnico quanto problemas de SEO na página.

Este bot pode rastrear qualquer site, a menos que seja proibido, e evita sobrecarga nos servidores de sites limitando o rastreamento a 1 solicitação a cada 2 segundos por padrão. Se você for o proprietário de um site, pode rastrear seus próprios sites em velocidades maiores e também permitir que o rastreador AhrefsSiteAudit ignore o robots.txt. Para isso, você precisará verificar a propriedade na ferramenta de Auditoria de Sites.

Perguntas? Nós temos respostas

O que o bot AhrefsSiteAudit está fazendo no meu site?
Se você ver AhrefsSiteAudit no log do seu servidor, isso significa que alguém realizou uma análise do seu site usando a ferramenta Auditoria de Sites do Ahrefs. Este bot rastreia um site e segue seus links internos de uma URL para outra. Ele também verifica recursos do site, como arquivos CSS, arquivos JS e imagens.O crawler do AhrefsSiteAudit não adiciona números ao seu tráfego do Google Analytics.
Respeita o arquivo robots.txt?
Sim. Por padrão.Somente proprietários verificados podem permitir que o rastreador AhrefsSiteAudit desobedecer ao robots.txt em seu site.
Como controlo o crawler AhrefsSiteAudit no meu website?
Uma vez que o bot AhrefsSiteAudit segue estritamente o ficheiro robots.txt no seu site, está em controlo total do que ele faz.Se você deseja impedir que o AhrefsSiteAudit visite seu site, adicione essas duas linhas ao arquivo robots.txt no seu servidor:
User-agent: AhrefsSiteAuditRetirar permissão: /
Você também pode permitir ou desautorizar a indexação de qualquer parte do seu site com o seu arquivo robots.txt. Leia mais sobre robots.txt em www.robotstxt.org.O bot AhrefsSiteAudit verifica seu arquivo robots.txt antes de cada nova varredura.Se o seu robots.txt contiver erros, o bot AhrefsSiteAudit não conseguirá reconhecer seus comandos e continuará a rastrear seu site da mesma forma que fazia antes.Se você acha que o bot AhrefsSiteAudit está se comportando mal em seu site ou se tiver algum questionamento, entre em contato via [email protected] e faremos o nosso melhor para ajudar.

Tem outras dúvidas?

Se você tem mais perguntas,
contacte-nos para que possamos ajudar.