4.3 蜘蛛陷阱 【摘自野狼网站内部优化手册】

  这一节我们来说说蜘蛛陷阱。那么到底什么是蜘蛛陷阱呢？“蜘蛛陷阱”是阻止蜘蛛程序爬行网站的障碍物，通常是那些显示网页的技术方法，目前很多浏览器在设计的时候考虑过这些因素，所以可能网页界面看起来非常正常，但这些蜘蛛陷阱会对蜘蛛程序造成障碍，如果消除这些蜘蛛陷阱，可以使蜘蛛程序收录更多的网页。SEO工作中，网页被收录是基础工作，但对于搜索引擎来讲，极少情况会100%收录你网站的所有网页，搜索引擎的爬虫程序设计的再精巧，也难以逾越所谓的蜘蛛陷阱。

  一、常见的蜘蛛陷阱有哪些？

  （1）flash导航链接。

  当然，我们这里说的是广义的，是指有链接指向的所有网页导航。各种各样的，比如说flash主导航，比如说flash的引导页上的导航等等。有些人就喜欢用比较炫的导航结构，做了很好看的flash导航，看上去是不错，但是搜索引擎不能理解到底这个flash是干什么的，自然搜索引擎如果找不到其他文字性质的导航链接，就会两眼一抹黑，什么都看不到，那就别提能够进入你的网站了。

  （2）JS导航链接。

  有时候弄一些JS的来做链接，蜘蛛是没有办法抓取到的。

  （3）框架结构。

  蜘蛛并不喜欢框架的结构，所以我们在做的时候尽量避免这样的页面结构。

  （4）长的动态URL。

  虽然蜘蛛并不讨厌动态URL，但是如果连接过长，参数过多，那肯定是不利于蜘蛛爬行和索引的。

  （5）强制登录。

  强制用户登录并不是一个好的办法。蜘蛛可没有跟人一样的去登陆。这里特别要说某些论坛，让优质内容隐藏，用户必须登录才能看到，这样蜘蛛看不到这些内容，可能就不喜欢这个网站了。

  （6）各种不友好的跳转。

  有时候网站各种原因导致出现跳转，这些跳转可能会造成搜索引擎认为网站在作弊。这些跳转有的会给蜘蛛爬行带来困难。一定要避免。

  二、怎么防范避免蜘蛛陷阱

  （1）找专业的建站公司做网站。

  有一些不懂SEO的建站公司，做出来的网站对搜索引擎一点都不友好，这样不行。尽量选择专业的SEO团队来建网站，这样对网站绝对会好很多。

  （2）网站做好最好请专业SEO人员把把关。

  有些时候网站已经做好了，那就找SEO人员看看，能修正的修正，不能修正的舍弃这个网站。网站优化不管是自己做还是找专业公司来做，一个好网站都是必不可少的。

  （3）减少flash、js等的使用。

  一般现在的网站其他情况造成的蜘蛛陷阱比较少，主要是falsh和js的运用是比较常见的。这样的情况尽量的避免，能不用就不用。