如何识别页面请求是否用于预览

Bru*_*hes 7 http web

当我在社交网络(例如Facebook或Twitter)粘贴我的网站链接时,社交网络访问我的网站以向用户显示预览.

我想在我的报告中将此访问与实际访问分开,但为此,我需要确定这种情况.

这种访问发送任何类型的默认为everysite的信息,我可以确定这种访问不是真正的用户,而是机器人?

jun*_*gli 7

您应该能够从其用户代理字符串中识别这些机器人.例如,Twitter使用TwitterbotUser-Agent.此处记录 Facebook爬虫识别.