什么样子的结构不利于蜘蛛爬行抓取

来源:懒猫seo博客 时间:2020-11-20

有一些网站的结构不利于蜘蛛爬行,和搜索引擎特别的不友好,不能让蜘蛛更好的爬行和抓取。我们称之为蜘蛛陷阱。

常见的蜘蛛陷阱分为以下的几种:

常见一:JavaScript链接

示例:

常见二:在网页里穿插FLASH

常见三:Sesssion ID

常见四:框架结构(iframe)

示例: 百度MP3音乐盒

红色代码为百度音乐盒调用框架结构

常见五:动态RUL、参数过多RUL

此URL中,动态参数过多,不利于搜索引擎蜘蛛抓取

常见六:社区等需要登陆的页面

蜘蛛和人一样如果需要访问一些没有权限的页面的话,一样需要登陆进去,但是蜘蛛不会和人一样申请账号来登陆,所以抓取不到没有权限的页面。

做seo的时候避免以上的陷阱,让搜索引擎更容易懂得你的站!

文章来源:懒猫seo博客

来源地址:http://www.lanmaoseo.com/seojs/7084.html

相关文章

标签:

A5创业网 版权所有