日志中有些 ua 标记是百度,但是反查发现没有返回信息
搜索了一下 网络上也有一些相关信息,都在问是不是百度的蜘蛛,没有一个答案
搜索了一下 网络上也有一些相关信息,都在问是不是百度的蜘蛛,没有一个答案
1
westoy Apr 30, 2023
dns 反查不到的一般不是
爬虫确实会用非标 IP 段去检测网页, 但那是测针对爬虫作弊输出, 一般不会顶着自己的 UA 的 |
2
zictos Apr 30, 2023
113.24.225.1
这个 ip 用 ip138 查询,显示是百度蜘蛛 |
4
SingeeKing PRO 只要通不过反查一定是伪造
|
5
kdwnil Apr 30, 2023
|