了解为 Ahrefs 提供支持的网络爬虫。
版本 | 7.0 |
---|---|
机器人类型 | Good (Identifies itself, has an official moniker) |
类别 | Marketing |
服从 robots.txt | Yes |
服从抓取延迟 | Yes |
用户代理字符串 | Mozilla/5.0 (compatible; AhrefsBot/7.0; +http://ahrefs.com/robot/) |
反向 DNS 后缀 | ahrefs.com |
IP地址范围 | <a1>当前列表</a1>、<a2>API 文档</a2> |
AhrefsBot is a <a1>web crawler</a1> that powers the database for both <a2>Ahrefs</a2>, an online data toolset, and <a3>Yep</a3>, a revenue-sharing web search engine. It’s the third most active crawler after Google’s and Bing's, visiting over 8 billion web pages every 24 hours and updating its index every 15–30 minutes.
我们的机器人索引有关网站及其内容的最新、准确的信息,以及它们如何相互链接。 这些数据非常有用,可以通过多种方式加以利用:
使用 Yep 进行搜索以查找高质量的内容和您需要的所有信息,同时支持替代搜索引擎,旨在将钱放在您最喜欢的内容创建者的口袋里。
如果您是网站所有者,请使用 Ahrefs 分析您网站的结构、内容和反向链接以深入了解其性能——然后对其进行优化以改善用户体验、在搜索引擎中排名更高并获得更多流量。
在网络规模研究方面,Ahrefs 可以让您深入了解网站或特定主题的受欢迎程度如何随时间变化、哪些网站链接到哪些类型的内容、某个品牌最近被提及了多少次等等 在。
Rank | Bot | Owner | Category |
---|---|---|---|
1 | GoogleBot | Search Engine Crawler | |
2 | BingBot | Microsoft | Search Engine Crawler |
3 | DataDog Synthetic Bot | DataDog | Monitoring & Analytics |
4 | AhrefsBot | Ahrefs | Search Engine Optimization |
5 | Qualys | Qualys | Search Engine Crawler |
6 | YandexBot | Yandex | Search Engine Crawler |
7 | PetalBot | Huawei | Search Engine Crawler |
8 | Google AdsBot | SAdvertising & Marketing | |
9 | Google Image Proxy | Page Preview | |
10 | Google Images | Search Engine Crawler |
机器人按请求数量排名。 截至 2023 年 4 月提供的数据
AhrefsBot 是否尊重 robots.txt 文件?
我如何在我的网站上控制 AhrefsBot?
如果您对我们的定价和套餐有更多疑问,请点击联系我们,以便我们提供帮助。