AhrefsBot
Scopri di più sul web crawler che alimenta Ahrefs.
| Versione | 7.0 |
|---|---|
| Tipo di bot | Buono (Si identifica, ha uno pseudonimo) |
| Categoria | Marketing |
| Obbedisce al robots.txt | Sì |
| Rispetta il ritardo di scansione | Sì |
| Stringa user-agent | Mozilla/5.0 (compatibile; AhrefsBot/7.0; +http://ahrefs.com/robot/) |
| Suffisso DNS inverso | ahrefs.com or ahrefs.net |
| Intervallo di indirizzi IP |
Stato del sito web
Che cos'è AhrefsBot?
AhrefsBot è un crawler web che alimenta il database sia per Ahrefs, un set di strumenti di dati online, sia per Yep, un motore di ricerca web basato su un modello di condivisione dei profitti. È il secondo crawler più attivo dopo Google, poiché visita oltre 8 miliardi di pagine web ogni 24 ore e aggiorna il suo indice ogni 15–30 minuti.
Il nostro bot indicizza dati recenti e accurati sui siti web, sui loro contenuti e su come questi si collegano tra loro. Questi dati sono incredibilmente utili e possono essere usati in molti modi:
Cerca con Yep per trovare contenuti di alta qualità e tutte le informazioni di cui hai bisogno, supportando allo stesso tempo un motore di ricerca alternativo che cerca di mettere denaro nelle tasche dei tuoi creatori di contenuti preferiti.
Se sei proprietario di un sito web, usa Ahrefs per analizzare la struttura, il contenuto e i backlink del tuo sito e ottenere approfondimenti sulle relative prestazioni. Poi, ottimizza il tuo sito per migliorare l'esperienza degli utenti, posizionarti meglio nei motori di ricerca e ottenere più traffico.
Quando si tratta di ricerca su scala web, Ahrefs ti permette di capire come è cambiata nel tempo la popolarità di un sito web o di un argomento specifico, quali siti web contengono link a quali tipi di contenuto, quante volte un brand è stato menzionato di recente, e così via.
Rank | Bot | Owner | Category |
|---|---|---|---|
1 | GoogleBot | Search Engine Crawler | |
2 | AhrefsBot | Ahrefs | Search Engine Optimization |
3 | Qualys | Qualys | Security |
4 | BingBot | Microsoft | Search Engine Crawler |
5 | Amazonbot | Amazon | AI Search |
Bot classificati per numero di richieste. Dati trasmessi a dicembre 2024
Domande? Noi abbiamo le risposte
AhrefsBot rispetta i file robots.txt?
Sì. Assolutamente.Rispettiamo rigorosamente robots.txt per le regole sia di disallow sia di allow.Come faccio a controllare AhrefsBot sul mio sito web?
Poiché AhrefsBot segue rigorosamente il file robots.txt sul tuo sito web, hai il pieno controllo su ciò che fa.Per modificare la frequenza con cui AhrefsBot visita il tuo sito, specifica semplicemente il ritardo minimo accettabile tra due richieste consecutive nel tuo file robots.txt:User-agent: AhrefsBotRitardo di scansione: [valore](Dove il valore di Crawl-Delay è il tempo in secondi.)Se vuoi impedire ad AhrefsBot di visitare il tuo sito, aggiungi queste due righe al file robots.txt sul tuo server:User-agent: AhrefsBotDisallow: /Tieni presente che AhrefsBot potrebbe aver bisogno di un po' di tempo per rilevare le modifiche nel tuo file robots.txt. Quest'azione viene fatta prima della prossima scansione programmata.Inoltre, se il tuo file robots.txt contiene errori, AhrefsBot non sarà in grado di riconoscere i tuoi comandi e continuerà a scansionare il tuo sito web come faceva prima.Leggi di più su robots.txt su www.robotstxt.org.Se pensi che AhrefsBot si comporti in modo inappropriato sul tuo sito web o se hai domande, contatta [email protected] e faremo del nostro meglio per aiutarti.
Hai altre domande?
Se hai altre domande,
contattaci così possiamo aiutarti.