如今，你的网站有必要从搜索引擎获得更多的流量，也有必要关注网站代码优化。有时候在建网站的过程中会有很多冗余代码，增加了蜘蛛爬行的工作量，所以会对代码进行优化。

结构优化

页面应该有简洁的导航。导航可以让搜索引擎知道网站的结构，也可以让搜索引擎知道当前页面在网站结构中的级别。建议：每个页面都包含导航。广度导航可以用于内容更多的网站。链接使用文本链接，如果是图片，通过alt属性通知搜索引擎链接的方向。

一、导航

网站结构要清晰。一般网站的结构都是树形的，一般分为三个层次：首页渠道页(列表页)文章页(详情页)。

网站的结构应该是扁平的。结构层数越少越好。一般不应超过三层。搜索引擎一般到了第三层就不想继续深度爬行了。大多数网站，如掘金、雪球等。有两层网站结构，而且它们的首页和频道页都是同一个页面。

二、网站结构

搜索引擎爬行网站访问的第一个文件是robots.txt在这个文件中，声明网站中不想被蜘蛛访问的部分，这样网站的部分或全部内容就不能被搜索引擎访问和包含，或者搜索引擎只能通过robots.txt包含指定的内容

三、robot.txt

Sitemap可以通知搜索引擎哪些网页可以抓取，这样搜索引擎就可以更智能地抓取网站。

其实网站优化并不难，关键是要遵守搜索引擎的优化规则，比如：网站结构、网站代码、关键词布局等。这会影响网站的排名效果，否则会阻碍蜘蛛对网站进行抓取，从而影响网站的排名。