当前位置:  开发笔记 > 人工智能 > 正文

只说"Mozilla/4.0"的用户代理是机器人,对吗?

如何解决《只说"Mozilla/4.0"的用户代理是机器人,对吗?》经验,为你挑选了3个好方法。

我在Web应用程序中收到了几个请求,这些请求在我的代码不应该生成的方式上基本上是错误的......主要是它在没有指定任何GET参数的情况下对.ashx的请求.

用户代理是"Mozilla/4.0"(仅此而已)IP日常变化.

这是一个机器人,对吗?

谢谢!



1> Proton..:

很抱歉老问题,但我认为这是中国防火墙使用的机器人.他们抓取网页内容,并进行审查.

检查您的日志,看看是否有'GET /cert/bazs.cert'之类的内容.

100%确定是否找到了这个.



2> Joel Coehoor..:

这对我来说似乎很奇怪.任何合法的机器人都会以您能识别的方式识别自己.任何恶意机器人都能够做得更好,使用户代理看起来像普通的浏览器.这是在中间的某个地方.结合不好的要求,这让我相信你正在处理普通的无能.

无论哪种方式,您可能希望404这些请求而不是返回黄屏错误.



3> gacrux..:

根据http://www.user-agents.org,"雅虎心态:意图驱动搜索"机器人报道了这一点.

但是,它不会是一个浏览器报告.

推荐阅读
可爱的天使keven_464
这个屌丝很懒,什么也没留下!
DevBox开发工具箱 | 专业的在线开发工具网站    京公网安备 11010802040832号  |  京ICP备19059560号-6
Copyright © 1998 - 2020 DevBox.CN. All Rights Reserved devBox.cn 开发工具箱 版权所有