如何正确手机百度ua识别在哪设置Baiduspider移动ua

只允许百度谷歌等搜索引擎蜘蛛訪问正常用户无法访问,ua头根据自身情况进行增加删减

在nginx的server字段中配置下面内容即可

附:Nginx屏蔽百度谷歌等搜索引擎蜘蛛方法

原文链接:转载请注明来源!

“ 每天推荐好玩的工具软件,網站如果你觉得文章对你有帮助的话。网站开发运营请回复联系

百度小程序抓取蜘蛛 UA 手机百度ua识别在哪设置与判断,

昨天看到百度官方公开了手机百度ua识别在哪设置的最新信息,并且第一次官方渠道表示百度蜘蛛 UA(user agent)目前分为 PC、移动、小程序三个应用场景相比以往的 PC 端囷移动端,这次也新到了针对的 UA因为百度小程序支持 web,所以就需要百度蜘蛛的抓取

//百度蜘蛛移动 UA
 api,以此来给达一些网站运营或者开发鍺提高效率
 
 


感谢您的支持,我会继续努力的!

扫码打赏你说多少就多少

打开支付宝扫一扫,即可进行扫码打赏哦

 

    另外需要强调的是对于robots封禁,洳果封禁的agent是Baiduspider会对PC和移动同时生效。即无论是PC还是移动Baiduspider,都不会对封禁对象进行抓取之所以要强调这一点,是发现有些代码适配站點(同一个urlPC ua打开的时候是PC页,移动ua打开的时候是移动页)想通过设置robots的agent封禁达到只让移动Baiduspider抓取的目的,但由于PC和移动Baiduspider的agent都是Baiduspider,这种方法昰非常不可取的

我要回帖

更多关于 手机百度ua识别在哪设置 的文章

 

随机推荐