所谓“蜘蛛陷阱”是指当搜索引擎爬去网站时会遇到的一些障碍，导致蜘蛛不能顺畅抓取文章内容。在网站SEO优化过程中，这种情况是不可避免的，即使我们在网站建设过程中已经仔细研究，慎重设计，但也无法保证网站能够出现“100%正常抓取”的情况，当然偶尔也会出现。作为站长，我们应该了解网站SEO优化中不可忽视的蜘蛛陷阱有哪些，然后针对这些陷阱制定出相应的策略，尽量避免蜘蛛陷阱的出现。
网站SEO优化中不可忽视的蜘蛛陷阱有：
1、网站动态URL
这个是在网站建设初期，由于没有专业的SEO优化人员参与，所以在建站过程中，开发人员为了方面，一般都会将网站的URL地址建设为动态的。但做SEO的都知道，动态的URL不利于搜索引擎蜘蛛的抓取，所以我们在建设时，便可以避免这个问题出现。如果网站已经上线运行，那么我们可以将URL静态化处理。推荐阅读：网站URL伪静态化必须注意的问题
2、网站使用框架结构
框架结构一般在互联网刚刚兴起的时候应用的比较多。框架结构对网站的维护与更新具有一定的方便性，但由于其非常不利于搜索引擎蜘蛛的抓取，所以现在大多数网站已经不再使用。
3、网站跳转设置过多
在搜索引擎优化中，蜘蛛非常反感网页的跳转，这样会导致蜘蛛遇到跳转页面时，便不再继续抓取。比如：JavaScrit跳转、MetaRefresh跳转、Flash跳转等，这种跳转设置尽量减少使用，最好不要使用。但在跳转设置中，搜索引擎蜘蛛唯一有好转的跳转——301跳转，所以当我们的页面链接发生变化时，可以使用301重定向设置。
4、网站登录要求
有些网站为了获取用户信息，当用户进入网站首页后，便跳转到登录页面，如果不进行注册或登录，那么将无法看到网站文章页面的内容。比如现在比较知名的“知乎”便是这样。虽然这样做会得到一些用户的信息，但是将会导致部分流量流失，因为很多用户不愿去留取自己的信息，当他还没有获得有用的价值的时候。
5、网站使用Session ID
当网站使用Session ID跟踪用户访问，就会出现一种情况：搜索引擎每一次访问我们的页面时出现一个不一样的Session ID，即使访问的是同一个页面，它也会出现不一样的ID，但是内容却是一样的，就形成了大量的重复性内容，这也就形成了一个蜘蛛陷阱，也不利于网站的优化。那么我们通常建议大家使用cookies而不要生成Session ID。
6、强制使用Cookies
一些站长也许是为了用户体验，方便用户记住账户、密码，这样在下次登录时，便不用再进行输入，所以强制使用Cookies。但这样也会出现一个严重的问题，如果用户未开启，那么将会导致用户无法正常访问，这样反而不利用户体验。而这种设置也将会导致蜘蛛无法访问。
我们在进行网站SEO优化时，常遇到的蜘蛛陷阱就是上述所介绍的6种。当网站建设过程中出现蜘蛛陷阱，将不利于蜘蛛的访问与抓取，那么直接导致网站不收录和关键词排名做不上去的情况。除了网站建设本身的问题，我们还要注意搭建网站的服务器租用选择，因为服务器的正常运行是网站正常访问与收录的基础，只有选择优质的服务器，才能保证用户和蜘蛛在访问网站时，提供顺畅快速的用户体验。
相关文章推荐：如何选择优质虚拟主机