突破网站禁止访问妙招

|  阅读量 | 分类: 站长说 | 作者: 无名-松松推广 | 时间:2019年03月08日 09:07

有些网站禁止未登陆用户访问,但会对搜索引擎开绿灯。开绿灯的方式有可能只是简单地判断 User Agent。

所以,只要把浏览器的 User Agent 改为搜索引擎的爬虫即可访问其内容。对 Chrome 来说就是按 F12,点下面那三个点,在菜单中选 Network conditions,然后将 User Agent 设置为 Googlebot 即可。

@tombkeeper

顶: 7 踩: 0

来源: QQ/微信:13340454 ,转载请注明出处!

本文地址: