如果我们从搜索引擎蜘蛛的角度去看待一个网站，在抓取、索引和排名时，会遇到哪些问题，那么我们解决了这些问题，就是搜索引擎的。
seo网站设计
1.搜索引擎蜘蛛能不能找到网页。要让搜索引擎发现网站首页就必须要有外部链接连接到首页，找到首页后，蜘蛛会沿着内部链接找到更深的内容页，所以网站要有良好的结构，符合逻辑，并且所有页面可以通过可爬行的普通html链接达到。网站所有页面离首页点击距离不能太远，控制在3到4次点击之内比较好，要被搜索引擎收录，页面需要有最基本的权重，良好的网站链接结构可以适当传递权重，使更多的页面达到收录门槛。
链接结构
2.找到网页后能不能抓取页面内容?被发现的URL必须是可以被抓取的。带有过多参数的URL、Session ID、整个页面是flash、框架结构、可疑的转向、大量复制内容等都可能使搜索引擎敬而远之。某些文件站长可能不希望被收录，除了不链接到这个文件，更保险的方法是使用robots文件或meta robots标签禁止收录。
提炼页面有用信息
3.抓取页面后怎样提炼有用信息。关键词在页面重要位置的合理布局，重要标签的撰写，html代码的精简，起码的兼容性等，可以帮助搜索引擎理解页面内容，提取有用的信息。只有搜索引擎能顺利找到所有页面，抓取这些页面并提取出其中真正有相关性的内容，网站才可以被视为是搜索引擎友好的。关于网站结构的优化，有一句话非常精辟，“良好引用、良好结构、良好导航”。
