爬虫识别支持 IPv6 地址访问 了解详情
oBot 是 IBM Germany Research & Development GmbH 内容安全部门的网络爬虫机器人。使用多台计算机来抓取网页,并使用一个大型计算机集群来对这些页面的内容进行分类。
可以使用 robots.txt 文件来屏蔽 oBot/2.3.1。
具体的写法为:
User-agent: oBot
Disallow: /
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 161.156.29.33 | 21.1d.9ca1.ip4.static.sl-reverse.com | US | |
2 | 194.153.113.13 | DE | ||
3 | 206.253.226.12 | DE | ||
4 | 194.153.113.223 | DE | ||
5 | 161.156.29.62 | 3e.1d.9ca1.ip4.static.sl-reverse.com | US | |
6 | 161.156.29.61 | US | ||
7 | 161.156.29.60 | US | ||
8 | 161.156.29.59 | 3b.1d.9ca1.ip4.static.sl-reverse.com | US | |
9 | 161.156.29.58 | 3a.1d.9ca1.ip4.static.sl-reverse.com | US | |
10 | 161.156.29.57 | US |
oBot 是 IBM 内容安全部门的网络爬虫机器人。
当前的 User-agent 为:Mozilla/5.0 (compatible; oBot/2.3.1; +http://filterdb.iss.net/crawler/)
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 194.153.113.12 | DE | ||
2 | 206.253.224.74 | dnvr-ngfr.netrex.com | DE | |
3 | 206.253.226.12 | DE | ||
4 | 206.253.226.14 | DE | ||
5 | 206.253.226.18 | DE | ||
6 | 206.253.226.7 | DE | ||
7 | 206.253.226.23 | nis-seaman.netrex.com | DE | |
8 | 206.253.226.8 | DE | ||
9 | 194.153.113.13 | DE |
oBot 是 IBM 内容安全部门的网络爬虫机器人。
当前的 User-agent 为:Mozilla/5.0 (compatible; oBot/2.3.1; http://filterdb.iss.net/crawler/)
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 206.253.226.18 | DE | ||
2 | 206.253.226.12 | DE |
oBot/2.3.1 是 IBM Germany Research & Development GmbH 内容安全部门的网络爬虫机器人。
当前的 User-agent:Mozilla/5.0 (compatible; oBot/2.3.1; http://www.xforce-security.com/crawler/)
# | IP 地址 | Hostname | 国家代码 | 旗帜 |
---|---|---|---|---|
1 | 194.153.113.35 | DE | ||
2 | 206.253.226.7 | DE | ||
3 | 194.153.113.13 | DE | ||
4 | 206.253.226.12 | DE | ||
5 | 194.153.113.101 | DE | ||
6 | 206.253.224.75 | DE | ||
7 | 206.253.224.14 | DE | ||
8 | 194.153.113.100 | DE | ||
9 | 194.153.113.223 | DE | ||
10 | 161.156.29.33 | 21.1d.9ca1.ip4.static.sl-reverse.com | US |