Siamo alimentati da big data davvero grandi
Ahrefs collects, processes, and stores large amounts of data for search marketing professionals.
Similar to search engines, we crawl the entire web 24/7 and store petabytes (1PB = 1000TB) of information about live websites – like how they link to each other and what keywords they rank for in search results.
We're also really proud of our backend infrastructure. Since no existing solution could keep up with the volume of data we operate, most of our software infrastructure was built in-house.
3400
Servers
613
K
CPU cores
4
PB
RAM
33
PB
HDD
406
PB
SSD
$900
M
The amount we’d have to spend on the cloud in 3 years without our own infrastructure.
Most active web crawler in the SEO industry
AhrefsBot is the most active web crawler in the “Search Engine Optimization” category on Cloudflare Radar. It’s also the 3rd most active web crawler in the world.
Every minute, we crawl
There are
5
M
170
T
Pagine
Rows in our key-value database
Rank | Bot | Owner | Category |
|---|---|---|---|
1 | GoogleBot | Search Engine Crawler | |
2 | BingBot | Microsoft | Search Engine Crawler |
3 | DataDog Synthetic Bot | DataDog | Monitoring & Analytics |
4 | AhrefsBot | Ahrefs | Search Engine Optimization |
5 | Qualys | Qualys | Search Engine Crawler |
6 | YandexBot | Yandex | Search Engine Crawler |
7 | PetalBot | Huawei | Search Engine Crawler |
8 | Google AdsBot | SAdvertising & Marketing | |
9 | Google Image Proxy | Page Preview | |
10 | Google Images | Search Engine Crawler |
Bots ranked by number of requests. Data supplied as of April, 2023
Content index
Il nostro indice dei contenuti alimenta Content Explorer, che è fondamentalmente un motore di ricerca dei contenuti.
Every 24 hours, we discover
10
M
New pages
Every 24 hours, we update metrics for
300
M
Pagine
Total content index size
14.3Mld
Pagine
Keyword index
Questo alimenta Keywords Explorer, il nostro strumento di ricerca per parole chiave per trovare ciò che i tuoi potenziali clienti stanno cercando online.
216
Posizioni
Total keyword index size
20.4Mld
Parole chiave
Organic search traffic index
Il nostro database di query di ricerca e la quantità di traffico di ricerca che inviano alle migliori pagine. Alimenta le stime del traffico di ricerca in Site Explorer.
189
Posizioni
651
M
Parole chiave
Indice di backlink
Il più grande indice al mondo di backlink live, aggiornato con nuovi dati ogni 15-30 minuti. Questo indice alimenta i dati di backlink in Site Explorer e viene utilizzato per calcolare le nostre metriche proprietarie: Ahrefs Rank, Domain Rating e URL Rating.
External backlinks history
35.0Miliardi
Records
Pagine in indice
340.8
B
Domains (post-vetting)
206.3
M
Backlink interni
23.5
T