有些网站对搜索引擎不友好，这会阻碍蜘蛛抓取网页。这种情况叫做蜘蛛陷阱。常见的蜘蛛陷阱主要是flash（如果你想使用flash，你必须在主页和Html版本之间添加一个超链接。这个超链接应该添加到flash文件之外的HTML代码中。有了这个超链接，搜索引擎就可以抓取下面的HTML页面，使用Sessionid（当sessionid被使用时，用户每次访问网站都会生成一个sessionid，并把它放在URL的后面，那么同一页面的URL就会不同，这是不合理的。因此，建议使用Cookies而不是sessionid来跟踪用户访问）、各种跳转（搜索引擎对301以外的跳转非常敏感，比如302跳转、flash跳转和frame的使用（搜索引擎不能读取用frame设计的网页的HTML代码，只能读取调用网页的HTML代码，如果仍使用框架结构，请立即更改它）。
清晰的导航是网站层次化设计的重要目标，可以给用户带来良好的体验。从的角度来看，应该考虑以下几点：
（1）导航设计。导航系统是网站重要的内部链接。在设计导航时，禁止为搜索引擎设置障碍。根据搜索引擎对HTML文本抓取的小阻力，导航设计应采用HTML文本导航代替Javascript脚本、flash和图片进行导航设计。简而言之，建议使用CSS设计视觉效果，如字体样式、颜色样式、二级菜单等，避免使用搜索引擎无法识别或难以抓取的元素。
（2）平面设计。页面和主页之间的距离越近越好。内页距主页的点击量不应超过5次，即链接应平展。
（3）导航文本包括关键词。导航系统中的链接是网站页面中链接的主要来源。因此，在设计导航系统时，应选择目标关键字并对栏目进行分类，栏目分类名称应为四五个字。在导航关键词的设计中，要考虑用户体验，不能在导航中堆积关键词。很多网站设计者喜欢在导航中堆积关键词，这种设计方法可以提高之前的排名，但是随着搜索引擎的发展，目前的搜索引擎很可能会将其作为行为来处罚。
（4）面包屑导航和子导航设置。面包屑导航是一个概念，你可以百度。面包屑导航用于告诉用户当前网站的位置以及如何返回。面包屑导航是指导用户的方式。一般来说，面包屑导航的网站架构比较清晰，类似于子导航。子导航的设计使网站架构更加清晰，增加了搜索引擎的收录量，在一定程度上减少了用户的点击距离。所以在导航设计中，尽量使用面包屑导航和子导航。
