网页收集是SEO工作的核心之一，努力提高页面的收录，是SEO的日常工作的重点。为了提高网页收集的可能性，我们需要做以下工作。

　　首先，为网站建立一个站点地图文件。网站上的站点地图文件就像生活地图，告诉蜘蛛他们有什么重要的文件以及在哪里得到它们。

　　做一个好的站点地图文件，你可以上传站点地图文件到站点一般放在站点的根目录下，下一步是把地图提交给搜索引擎让蜘蛛跟随地图。关于如何将站点地图提交给搜索引擎，每个站点的方式都有一些不同。但一般的要求是注册一个搜索引擎的站长账号，然后验证站点属于你，在站长管理板上有一个提交站点EMAP区域，直接提交给站点SITMAP LIIII.按照提交的网址到Web页面。

　　除了提交站点地图，为了促进收录，在网站建设中建立一个好的内链也是非常重要的。网站内部的结构就像一棵垂直的树，它不断地向下扎根，如果页面没有良好的内链，蜘蛛不能从一页爬行到另一页，也就是说，虽然有很多岛屿但搜索引擎找不到这些岛屿的存在，而且它们不能包含在索引库中。因此，尽量避免孤立页面的存在是一项非常重要的工作。此外，一部分内链实际上起着锚文本的作用，这对于提升关键词排名非常重要。

　　在爬行网页的过程中，蜘蛛遇到页面异常，比如由于服务器原因无法访问或页面不再存在，会返回提示，SEO人员需要分析这些反馈信息，尽可能修复蜘蛛不能正常爬行的页面。

　　包含分析是对网站的页面集合进行系统分析，通过分析包含的比例，可以看到SEO的空间。例如，页面的数量是100，包含比例为5%，也就是说，有100个页面就包含了5个页面。相反，如果页面的数量是100，包含的页面数是80%，这意味着在100页中，搜索引擎所包含的页面总数已经达到了80，这样的包含状态是十分理想的。

　　包含分析可以分为两种方式，第一种是基于URL层次分析，第二种是基于通道分析。

　　根据通道分析，一般要求每个通道下的URL是唯一的，并且不与其他通道URL重合，使得分析结果更准确。如果你在一个频道中遇到多个URL模式，你只能通过枚举方法来计算每个通道中的URL规则，然后聚合相关页面以获得分析结果。

　　蜘蛛爬行分析是分析蜘蛛爬行网页的行为，目的是分析在实际网页数量中蜘蛛爬行网页的百分比，用来检测网站链的连通性和洞察蜘蛛爬行规律。