use*_*521 8 asp.net screen-scraping .net-3.5
如何防止我的asp.net 3.5网站被我的竞争对手屏蔽掉？理想情况下,我想确保没有webbots或screenscrapers可以从我的网站提取数据.
有没有办法检测到有一个webbot或屏幕刮板运行？
Jam*_*ell 12
可以尝试检测屏幕刮刀:
使用cookies和计时,这将使那些开箱即用的屏幕刮刀更难.还要检查javascript支持,大多数刮刀都没有.检查Meta浏览器数据以确认它确实是一个Web浏览器.
您还可以在一分钟内检查请求,驱动浏览器的用户每分钟只能发出少量请求,因此服务器上每分钟检测到过多请求的逻辑可能会假定正在进行屏幕抓取并阻止访问一段时间内违规的IP地址.如果这开始影响爬网程序,请记录被阻止的用户ip,并根据需要开始允许其IP.
您也可以使用http://www.copyscape.com/来保护您的内容,这至少会告诉您谁在重复使用您的数据.
也看到这个问题:
另外看一看
关于屏幕抓取的好文档:
如何防止屏幕抓取:
http://mvark.blogspot.com/2007/02/how-to-prevent-screen-scraping.html
拔下网线连接到服务器.
释义:如果公众可以看到它,它可以被刮掉.
更新:第二次看,似乎我没有回答这个问题.抱歉.Vecdid提供了一个很好的答案.
但任何一半体面的编码都可能击败列出的措施.在这种情况下,我的答案可能被视为有效.
| 归档时间： |
|
| 查看次数： |
5726 次 |
| 最近记录： |