爬虫识别支持 IPv6 地址访问 了解详情
IONOS Crawler 是 IONOS 的网络爬虫。它的工作是不断抓取网络,以便我们改进和扩展我们世界一流的托管服务。
如果您要禁止 IonCrawl 抓取网站所有内容,robots.txt 写法如下:
User-agent: IonCrawl
Disallow: /
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 82.165.224.252 | crawlbap123.1and1.org | DE | |
2 | 82.165.224.251 | crawlbap122.1and1.org | DE | |
3 | 82.165.224.250 | crawlbap121.1and1.org | DE | |
4 | 82.165.224.249 | crawlbap120.1and1.org | DE | |
5 | 82.165.224.248 | crawlbap119.1and1.org | DE | |
6 | 82.165.224.247 | crawlbap118.1and1.org | DE | |
7 | 82.165.224.246 | crawlbap117.1and1.org | DE | |
8 | 82.165.224.245 | crawlbap116.1and1.org | DE | |
9 | 82.165.224.244 | crawlbap115.1and1.org | DE | |
10 | 82.165.224.243 | crawlbap114.1and1.org | DE |