百度渲染蜘蛛是甚么?

2017年3月开始百度推出了《百度Spider新增渲染抓取UA公告》,无疑就是在说明有一支新的百度蜘蛛诞生了!但是这只新的百度渲染蜘蛛到底是甚么,还是有很多人不了解,本篇上海SEO阳光博客就来和各位说说,百度Spider新增渲染抓取UA是什么意思?

什么是抓取UA?

UA即为用户代理(User-Agent),User Agent是Http协议中的一部分。简单说,当访问网站的时候电脑会提交使用的浏览器类型、操作系统、浏览器内核等信息的标识。通过这个标识,用户所访问的网站可以显示不同的排版从而为用户提供更好的体验或者进行信息统计。

百度渲染蜘蛛是甚么?

什么是百度抓取UA?

百度抓取UA是指百度搜索蜘蛛的类型: 百度抓取收录网页有多重类型, 常见的有专门抓取pc站点的蜘蛛, 专门抓取百度投放广告相关性的蜘蛛, 这些搜索引擎蜘蛛的类型一般简称抓取UA。所以百度的渲染蜘蛛也可称为百度渲染抓取UA。

百度站长工具里提醒的UA禁封是什么意思?

UA禁封是指网站根目录下面的robots.txt文件中设置了针对搜索引擎蜘蛛的禁止抓取。比如:

User-agent: Baiduspider
Disallow: /baidu

这个设置指的是禁止百度蜘蛛抓取网站根目录下面的名为baidu的文件。

在用百度站长工具检查网站的时候有的网站会被提醒: 您的网站对百度设置了UA封禁, 处理的方法比较简单, 在网站根目录下找到robots.txt文件, 删除里面相应的禁封即可。

同时上海SEO阳光博客提醒各位SEOer请尽量不要对UA进行封禁,以免造成不可逆转的损失。

目前百度公告最新的渲染蜘蛛UA如下:
PC:Mozilla/5.0 (compatible; Baiduspider-render/2.0;)
移动:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0;)

本文由上海SEO阳光博客原创,如转载请注明出处【上海SEO】http://www.seosunday.com



发表评论

电子邮件地址不会被公开。 必填项已用*标注