站长们会考虑要如何给网站优化，往往有时网站在设计过程中，用到的一些技术方法不合理，这些方法又会影响到蜘蛛的抓取，对于这样的技术手段，我们要如何去避免，不让网站进入陷进。网站的设计过程中，要尽量避免对搜索引擎不友好的，提高网站的蜘蛛爬行速率，提高网站整体效果。
首先：避免flash。很多图片网站或是产品网站，需要用到flash的动画，动画产生的效果的确是可以提高用户体验，用户是可以读懂flash，但是对于蜘蛛来说是无法识别的，蜘蛛只能抓取html里面的代码，对于flash里面的文字信息是无法抓取的，也无法呈现给搜索用户。如果网站的首页一开始就是设置的flash动画，那蜘蛛是根本无法继续抓取网站其他内容，如果对于一些网站是必须要flash的，那我们只能在首页再设置指向html的链接，引导蜘蛛对其他内容进行抓取，否则网站就进入到蜘蛛的陷阱里面。可能近几年来蜘蛛在flash的抓取方面做了很多进步，但是对flash抓取仍然有障碍，站长们要想更长久的运营网站，还是尽量的少用到flash。
其次：避免欺骗跳转。很多网站为了谋取眼前的利益，给网站加上各种样式的跳转，可能是弹窗式的广告，可能是JS的跳转等，蜘蛛对这些跳转都是特别反感的。如果你的网站跳转是为了提高用户的体验，这时可以不用考虑到蜘蛛的抓取，如果不是那最好是不要采取这样的跳转方式，对搜索引擎来说是不友好的，对于你的用户来说更是不友好的。这样的做法往往会出现在资源下载站，或是一些垃圾的小说站点，用户点击去的都是其他站点的链接，或是欺骗的下载链接，这样会严重的影响用户的体验。对于网站的跳转来说，蜘蛛唯一认可的就是网站的301跳转，用来改变网站的权重，其他的跳转站长们还是要慎用的。
再次：避免frame结构。技术人员在设计网站时，会了能更好的管理网站的结构，会用到frame的框架，虽然这样的框架结构有利于管理，但是和flash一样，蜘蛛抓取时只能识别html的代码，其他的都是很难识别的。对于frame框架不是说网站不可有，这些技术可以用到网站不想被蜘蛛识别的地方，比如自己站点的一些广告链接，比如一些站群操作中的友链中，可以降低网站权重的流失，因为是自己的站点链接，别人也不会说你是不诚信的，但是这样的框架不要用到和外部的友情链接中，这种是很不诚信的，蜘蛛抓取不到，对别人来说也是很不好的，站长们要酌情考虑的去使用，别让网站进入陷进中。
评论