Barkrowler 概况
活动 Barkrowler/0.9
爬虫类别
首次出现时间
最后一次出现时间
是否遵守 robots.txt 协议
遵守
说明：
如何增加 Barkrowler 查询之间的间隔？
我们在同一主机上的两个查询之间有 5 秒的间隔时间策略，在同一域的同一 IP 上的两个查询之间有 2.5 秒的间隔时间策略。您可以使用 robots.txt 文件延长抓取延迟：
User-agent: barkrowler
Crawl-Delay: [delayInSec]
请注意，抓取延迟只适用于特定的主机。如果同一台网站服务器托管着不同域名的网站，上述规则将适用。如果您的服务器托管了大量具有大量独立域名的网站，那么不太可能但也有可能在给定时间内有几个爬虫查询同一台服务器。
如何防止 Barkrowler 抓取我网站指定目录？
robots.txt 文件允许您使用 disallow 指令禁止 Barkrowler 抓取您网站的一部分或全部。例如，要防止 Barkrowler 访问 wordpress 管理部分：
User-agent: barkrowler
Disallow: /wp-admin/
IP 地址总数
278
爬虫 IP 地址列表
| # | IP 地址 | Hostname | 国家代码 | 旗帜 |
|---|---|---|---|---|
| 1 | 217.113.194.18 | c018.babbar.eu | FR |
|
| 2 | 217.113.194.22 | c022.babbar.eu | FR |
|
| 3 | 217.113.194.26 | c026.babbar.eu | FR |
|
| 4 | 217.113.194.21 | c021.babbar.eu | FR |
|
| 5 | 217.113.194.28 | c028.babbar.eu | FR |
|
| 6 | 217.113.194.29 | c029.babbar.eu | FR |
|
| 7 | 217.113.194.30 | c030.babbar.eu | FR |
|
| 8 | 217.113.194.23 | c023.babbar.eu | FR |
|
| 9 | 154.54.249.194 | crawl-prodd4-2.babbar.eu | FR |
|
| 10 | 217.113.194.27 | c027.babbar.eu | FR |
|
注：最多只显示10个 IP 地址
