大家知道,搜索引擎蜘蛛是根据链接抓取网页的,网页没有链接或者链接不自然,就会给搜索引擎蜘蛛带来抓取麻烦。网站收录老是停滞不前,如果出现这种情况那就要看看网站是否有问题,是否有搜索引擎蜘蛛蜘蛛陷阱?
所谓蜘蛛陷阱就是不利于搜索引擎爬行或者是对搜索引擎不友好的表现,蜘蛛陷阱有哪些?我们应该如何避免?
1.谨慎使用CMS建站,会对搜索引擎蜘蛛形成一定的干扰,比如js、ajax、链接分布、frame结构等等。
2.flash
很多的网站都喜欢使用flash,看起来好看,效果好,但是flash对于seo来说是相当糟糕的事,根本就无法搜索引擎蜘蛛更好的爬行你的站点。
3、复杂的框架
框架也是不利于搜索引擎蜘蛛爬行抓取的,如果你的网站现在还在使用,建议立即更换。
4、JS导航
利用js来做网站导航,这是不利于搜索引擎蜘蛛爬取网页的,蜘蛛目前还不能识别出js里面的文字代码。
5、首选域
有多个域名,而且全部都是指向同一个站点的,那么你最好是设置一下首选域,多个域名同时指向一个站点,这时你网站的权重则可能会分散。
6、跳转
跳转的话做301吧,这也是搜索引擎所推荐的,如若不是万不得已,不建议使用其他跳转方式。
7、静态化
静态化的页面防止搜索引擎蜘蛛进入一个死循环,而一旦蜘蛛进入这些死循环里将不断的顺着链接不停的抓取,所以搜索引擎降低了对动态URL的抓取。