首页是蜘蛛访问量最大的页面，也是网站权重最高的页面，可以在首页设置更新栏目，这样不仅可以更新首页，促进蜘蛛访问频率，还可以促进更新页面的抓取和收录，在栏目页面上也可以进行同样的操作。

扁平网站结构

蜘蛛也有自己的爬行路线，你要事先给它们铺好路，网站结构不要太复杂，链接层级不要太深，一般三层就够了，如果链接层级太深，后面的页面蜘蛛就很难抓取了。

网站内部链接建设

蜘蛛是通过跟踪链接进行爬行的，因此合理的优化内链可以帮助蜘蛛抓取更多的页面，促进网站的收录。在内链建设过程中，要给用户合理的推荐，除了在文章中添加锚文本，还可以设置相关推荐、热门文章、更多收藏等栏目，很多网站都是通过这种方式，让蜘蛛抓取更广泛的页面。

施工现场图

搜索引擎蜘蛛非常喜欢站点地图，站点地图是网站所有链接的容器，很多网站的链接层次比较深，蜘蛛抓取起来比较困难，站点地图可以帮助搜索引擎蜘蛛抓取网站页面，通过抓取网站页面，可以清晰的了解网站的结构，因此建立站点地图不仅可以提高抓取率，还可以赢得蜘蛛的青睐。

检查断开的链接并设置 404 页面

搜索引擎蜘蛛是通过链接进行抓取和搜索的，如果太多链接无法到达，不但索引页面数量会减少，而且您的网站在搜索引擎中的权重也会大大降低。蜘蛛遇到死链接，就如同走进了死胡同，不得不回头重来，大大降低了蜘蛛在网站上的抓取效率。因此，一定要定期检查网站的死链接，并提交给搜索引擎。同时，一定要为网站准备一个404页面，告知搜索引擎错误页面。

检查文件

很多网站在文件中有意无意地屏蔽了百度或者网站的部分页面百度收录哪些网站最多，却整天找蜘蛛不抓取我的页面的原因。这能怪百度吗？你不让别人进，百度怎么收录你的网页？所以，时不时检查网站文件是否正常是很有必要的。

10

监视蜘蛛的运动

利用网站日志来监控蜘蛛正在爬取哪些页面，已经爬取了哪些页面。还可以使用站长工具来查看蜘蛛的爬取速度，合理分配资源，以达到更高的爬取速度，吸引更多的蜘蛛。网站想要获得更多的收录，就需要优化搜索引擎蜘蛛的抓取。网站优化不是一朝一夕就能完成的，耐心做好基础工作才是网站优化的基础。

正在收集SEO信息

SEO 文档

SEO视频教程

SEO交流小组