咱们对一个网站进行优化,是为了能够让关键词取得更好的排名从而来取得更多的流量和转化,可是许多站点存在着或多或少的“蜘蛛圈套”阻止搜索引擎蜘蛛的匍匐和抓取,这样会导致网站全体录入较低,变相影响了网站排名和SEO作用。
一、蜘蛛圈套的界说:
简略的来说,蜘蛛圈套便是阻止蜘蛛匍匐和抓取页面的障碍物。这些障碍物有的是网站为了寻求特定作用,可是并不一定对搜索引擎的蜘蛛友爱;有些蜘蛛圈套是由于站长不了解SEO而无意设置的。、
二、常见的蜘蛛圈套有哪些?
1、Flash
在网页的某一部分运用flash能够增加视觉作用,招引用户的目光,常见于主页中的banner或许轮播图,这种flash仅仅网页中的一小部分,对搜索引擎的录入和抓取没有任何影响。可是有的站点将主页直接设置成一个全屏flash,这种做法用户能够看懂,可是搜索引擎是无法读取flash里边的文字信息和链接的内容,这便是咱们常说的蜘蛛圈套。
跟着互联网的开展,人们对SEO的重要性逐步加深,即使是网站主页的轮播图现已很少有站长运用flash了,一般会运用js文件替换flash。假如由于各种原因网站主页有必要运用flash,那么在主页flash之外的代码中增加一个指向HTML网站的链接。
2、各种跳转
网站跳转状况每一个互联网用户基本上都遇到过,咱们翻开某一个URL之后,网站会主动跳转到别的一个URL,完成跳转的办法有许多种,包括301跳转、302跳转、js跳转、Meta Refresh跳转等。
301跳转是咱们最常见、也是搜索引擎引荐的跳转方法,除掉301跳转之外的其他跳转方法搜索引擎都比较灵敏,不主张咱们运用。
3、结构
学过网页制造的同学应该知道,这儿咱们所说的结构,最常见的一种作用便是一个页面中包括左右两部分,一般左边为文章列表,右侧为文章具体内容,当咱们点击左边文章列表中的某一个标题的时分,右侧会显现相应的内容。
从搜索引擎的视点动身,谷歌不主张运用结构,但仍会抓取,可是百度的情绪是不抓取,如没有特别必要,网站不要运用结构,你也别浪费时间研讨怎么让搜索引擎录入结构里边的内容。
4、动态网址(动态URL)
咱们所说的动态网址指的是由数据库驱动,网站内容实时生成而且带有问号、等号和传参参数的网址。前期搜索引擎抓取动态网址要弱一些,现在搜索引擎抓取动态网址现已没有任何问题了,可是过多的传参参数的动态网址仍不利于搜索引擎匍匐和抓取,所以咱们要尽量防止或许经过伪静态将动态网址改成静态网址显现。
5、要求登录
有些站点(论坛方式比较多)需求用户登录才干看到一些会员区域,或许强制用户登录才干够看到文章的内容,这些会员区域和内容搜索引擎是无法看到的,蜘蛛只不过是一个机器人,不会主动注册、登录乃至回复。现在咱们也就能够了解为什么许多站长喜爱将文章部分内容供读者阅读,剩余的部分内容需求注册才干够观看,这也是为了投合搜索引擎。
6、Session ID
跟着网站程序的复杂性越来越高,许多网站运用回话ID盯梢用户的拜访,每逢用户拜访网站的时分,网站程序都会对拜访的页面成一个带着动态ID的URL,如此以来,搜索引擎蜘蛛每次拜访时便得到同一个页面对应多个URL,这也是当今网站程序设计中常见的蜘蛛圈套之一。所以主张盯梢用户的拜访运用cookies,而不要挑选Session ID。
7、强制运用Cookies
这种现象咱们遇到的比较少,可是并不代表不存在。某些网站为完成某种特定功用,强制用户运用Cookies,但搜索引擎蜘蛛就像是一个禁用了Cookies的阅读器。如此设置,只能形成搜索引擎蜘蛛无法正常拜访网站。