证据表明百度蜘蛛可以爬行纯文本网址
很久之前我写过文本格式的网址对网站的权重有好处,今天我终于发现了纯文本网址可以吸引百度蜘蛛的证据。
大家知道百度站长平台已经对站长开放了,其中有很多有用的功能,包括提交网站地图、提交死链接、查看robots等等。其中有一项功能大家可能没有太注意,那就是站点抓取异常查询。
有时候我们的网站收录或者其他方面出现异常了,这时候还得分析网站日志等,查找原因。而这个工具可以直接查到,百度在抓取你的网站的时候出现了哪些错误,方便找到原因。
我今天检查的时候发现了有一个404抓取错误,本来抓取的是http://***.com/1227.html 但是后面多了个“>”,理论上不会出现这种链接错误啊。
经过搜索发现,有网站在转载文章的时候,出现了如上图的网址,而且是纯文本的网址:
百度因为抓取到了上面的网址,并把>也当做网址的一部分,并进行抓取,自然就出现了404错误。
从这个例子就可以知道,百度是可以抓取纯文本的网址的,这对广大SEO工作者和互联网从业人员是个好消息。
- 上一篇: 揭秘:百度大规模K站的真实原因
- 下一篇: 百度快照让很多站长为之纠结
- 相关文章:
百度组建深度机器学习开源平台 研发“虫洞”项目 (2015-8-1 12:27:8)
百度https化、取消referer关键词显示有何影响? (2015-8-1 12:9:43)
为何你的百度快照停留在6月12日 (2015-7-1 15:25:43)
浅谈影响百度收录的六大因素 (2015-5-27 10:17:50)
如何让百度谷歌快速收录新浪博客 (2015-5-5 18:40:10)
Seo实战经验之百度11位现象解决办法 (2015-5-4 19:37:21)
对百度超链作弊的算法升级的感想 (2015-4-30 15:47:28)
网站优化:百度关键词优化如何做才适合百度 (2015-4-26 11:23:31)
百度判断网站用户体验度的依据 (2015-4-20 12:0:20)
针对不同搜索引擎的优化-百度和Google (2015-4-18 11:47:27)
- 留言列表:
- 最新
- 热门
- 随机
- 搜索
-
- 日历
- 网站分类
-
- 最近发表
-
- 网站收藏
-
- Tags列表
-
- 图标汇集
-
- 友情链接
-