下面我们就一起来看看常见的一些蜘蛛陷阱，大家也可以对照一下自己的网站是否存在这些陷阱。

       1.动态URL，动态的URL中带有问号和等号等一系列参数，导致网址非常非常。。。的长，虽然搜索引擎对抓取动态URL有了长足的进步，但是还没有说达到完美的地步，如果参数太长，同样会影响收录，我们所要做的不是给搜索引擎添堵，而是给它的工作创造便利，再者URL参数过长，用户体验度也会非常差，我们可以对动态URL进行伪静态或者静态处理，有很多主机支持伪静态，包括现在的很多模板都有这个功能。

       2.权重分配不清不楚，网站的所有页面都能有个比较高的权重是我们所有seoer的梦想，但是过分追求每个页面的权重可能会出现某个单页面权重比首页还高，导致搜索引擎还在为考量到底哪个是主页面而傻傻分不清楚，网站权重的传递有它自己的规则，可以参考狄吉堂网站seo优化博客中的网站权重和链接传递的思维逻辑这篇文章，当网站首页权重高了，底层页面的权重提高也是水到渠成的事情，不要干为了某颗小树苗放弃整片大森林的事情。

       3.JavaScript和iframe框架结构，之所以把这两个因素放在一起是因为它们的效果有点相似，网站中使用JavaScript和iframe框架结构都会造成蜘蛛爬行困难，iframe更加严重，如果是为了增加网站的收录建议大家少用，不过JavaScript和iframe也不是毫无用武之地，很多站长对不想让搜索引擎抓取的内容则使用了JavaScript和iframe，比如百度对淘宝客的“封杀”，很多站长就选择把淘宝客的链接放在JavaScript或iframe框架中，更是有人为了安全起见甚至采取JavaScript中嵌套iframe框架的方法，2者具体使用方法大家可以到网上查看。

       4.各种“黑猫seo”跳转，除了搜索引擎比较认可的301跳转外，其他的JavaScript跳转，Flash跳转，refresh跳转，302跳转等等，都是搜索引擎比较反感的，对蜘蛛的爬行都会造成障碍，这些跳转也更多的应用在“黑猫seo”作弊手法中，用来欺骗搜索引擎，不过下场就是降权或K站，现在已经很少有人在用了，在狄吉堂网站优化博客中也对“黑猫seo”进行了分析，有兴趣的朋友可以去看一下。

       5.网站结构犹如迷宫，很多朋友认为搜索引擎蜘蛛在自己网站中呆的时间越长，页面收录的几率就越大，于是把网站整的跟迷宫一样，网站结构逻辑不清，层次不明，内部链接混乱，殊不知蜘蛛已经“蒙圈”了，哪里还能高效的爬行你的页面。

      6.session id，也叫会话id，会话id一般会出现在一些销售类型的网站，站长为了提高销售业绩，往往会对客户进行跟踪和分析，在网址中会出现会话id，一个用户一个id，包括蜘蛛也把它当成了一个用户，这样的结果就是搜索引擎判定该网站的同一个页面对应大量的不同的网址，有作弊嫌疑。

       7.强制使用cookies，有些网站为了实现某些功能，则会记住用户的登陆信息，访问路径等，强制用户使用cookies，否则不给显示正常内容，其中蜘蛛也被划入了用户的行列，强迫蜘蛛使用cookies，结果当然是无法正常访问了，很多网站被搜索引擎判定有高危漏洞大多是因为这个因素。