那些容易被忽略的蜘蛛陷阱
摘要:那些容易被忽略的蜘蛛陷阱,常见蜘蛛陷阱有哪些,对搜索引擎来说,网站建设中有很多细节要求,为了避免站长建站的时候掉进蜘蛛陷阱,合肥网站建设跟大家分享都有哪些蜘蛛陷阱。
对搜索引擎来说,网站建设中有很多细节要求,为了避免站长建站的时候掉进蜘蛛陷阱,
合肥网站建设跟大家分享都有
哪些蜘蛛陷阱。
总的来说蜘蛛陷阱有一下几种情况,
动态URL,Flash动画,JS链接,Frame框架,各种跳转,不合理的链接结构,我们了解比较多的也就这些,下面简单来介绍一下。
一,动态的URL
我们都知道URL链接蜘蛛是可以抓取的,动态URL都是在数据库中直接生成的,URL中有很多中文标点符号,比如等号问号等,这样的网址是不利于蜘蛛抓取的,还有可能会造成死循环,这就是一个蜘蛛陷阱,所以建议大家只用静态URL,利于网站建设和优化。
二,Flash动画
Flash动画也是我们常见的,之所以把它说成陷阱,是因为蜘蛛识别不了Flash。我们见过的很多网站首页都是一个大的Flash动画,然后再进入到内页,这对用户来说没什么影响,而对蜘蛛来说就困难了,Flash阻碍了蜘蛛抓取内页。如果一定要使用Flash动画,很好有链接通向内页。
三,JS链接
程序员都应该知道,JS可以给人的视觉带来一定的效果,还会用JS脚本生成导航系统,这样做也是不对的,蜘蛛也不认识JS。如果将需要被爬行的链接一同放进JS中,蜘蛛就无法抓取,只要将不需要被爬行的链接放进
JS效果中就可以了,还要避免使用太多JS特效。
四,Frame框架
Frame框架也是阻碍蜘蛛爬行的一道坎,和前面说的Flash和JS都是一样的,所以在网站建设和优化中是不可取的。
五,网站跳转
我们见过很多种跳转,301重定向的我们很常见的,301和302跳转是很合理的跳转,蜘蛛对他们并不反感,而其他跳转就不可以了。黑帽多是使用跳转去黑别人的网站,其他JS跳转和代码跳转很好不要使用。这里要说明的一点就是404页面一定要使用代码跳转,时间不能超过5秒。