1、在网站建设过程中，一些网站设计对搜索引擎很不友好，不利于蜘蛛爬行和抓取，这些被称为蜘蛛陷阱。所以网站建设过程中我们要尽量避免蜘蛛陷阱。常见的应该避免的蜘蛛陷阱包括一下几点：
2、掂迎豢畦Flash有的网站喜欢用Flash增强视觉效果，比如用Flash做成广告，动态图标等。这种小的Flash，只是HTML代码中的很小一部分，敌颉缪莽页面还有很多其他以文字为主的内容，所以对搜索引擎抓取和收录没有影响。但是有的网站整个首页就是一个打的Flash文件，这就构成了蜘蛛陷阱。搜索引擎抓取的HTML代码中只有一个链向Flash文件的链接，没有其他文字内容。搜索引擎不能搜索出文字信息，也就无法判断相关性。
3、Session ID有些网站使用SessionID跟踪用户访问，每个用户访问网站时都会生成独特唯一的SessionID，加在URL中，搜索引擎蜘蛛每次来访都会被当做一个新的用户，这样搜索引擎每次来访问时所得到的同一个页面的URl将不一样，这也是最常见的蜘蛛陷阱之一。通常建议跟踪用户访问使用cookies而不要生成SessionID，或者进行程序判断访问者是蜘蛛还是普通用户，从而做出不同的响应。
4、各种跳转除了301转向外，搜索引擎对其他形式的跳转都比较敏感，如300跳转、Javascript跳转、Flash跳转、Meta Refresh跳转。如果必须转向，301转向是搜索引擎推荐的、用于网址更改的转向，可以把页面权重从旧网址转移到新网址。其他转向方式都对蜘蛛爬行不利。在网站建设过程中我们要注意转向问题，需要转向时尽量使用301转向。
5、动态URL动态URL指的是数据库驱动的网站所生成的、带有问号、等号及参数的网址。目前搜索引擎抓取动态URL都没任何问题，但一般来说带有过多参数的动态URL还是不利于搜索引擎蜘蛛爬行，也不利于用户体验，应该尽量避免。
6、Javascript 链接由于Javascript可以制造出很多吸引人的视觉效果，有些网站喜欢使用Javscript脚本生成导航系统。这也是比较严重的蜘蛛陷阱之一。虽然搜索引擎都在尝试解析JS脚本，但是我们要让搜索引擎跟踪爬行链接的工作尽量简单容易，这样搜索引擎才会喜欢我们的网站，才会经常爬行抓取我们的网站。
7、在网站建设过程中，我们要尽可能的避免以上提到的蜘蛛陷阱，降低搜索引擎蜘蛛爬行的难度，这样我们的网站才能吸引蜘蛛的光顾，才能提高转化率。
