如今，让搜索引擎优化者最头疼的不是排名问题，而是索引。 过去一年，百度调整了索引机制，很多网站都没有收录，更别说排名了，不过百度虽然不愿意收录，但总会收录。 如果只收录了首页，而没有收录内页，那不只是百度的问题。 然后，百度爬虫只抓取第一页。 是什么原因以及如何解决？

1.robots协议

首先要检查的是robots的规则是否有问题 .txt 文件。 您可以通过输入：您的域名/robots.txt 打开此文件，其中允许：显示以后允许哪些页面。 我们一般不填，不允许：后面写的是禁止爬取的页面。 如果不小心填写了网站url，会导致蜘蛛不爬的问题。 解决这个问题，可以参考，各大机器人生成工具，提供的解释。

然后通过FTP或者服务器下载这个文件，一般放在后台的根目录下，修改后上传到根目录。

2. 网站内容

一般来说，机器人没有太多问题。 如果没有，则无法设置。 但是，由于这个原因，其中许多不包括在内。 例如，由于内容，内页不包括在内。

你可以通过查看网站日志来判断，蜘蛛是否抓取了内页，如果内页被抓取了，但是没有被收录，那么你应该检查你网站的内容是否是原创的 内容以及是否对用户有帮助。 这对搜索引擎有意义。 如果是大量采集，不收录是对的，但不是不爬。 需要修改原创内容，提高原创性，提交url，逐步收录。

3. 新站点沙箱

另外，如果是新站点，只包含首页是正常的。 几乎每一个新网站百度都会给出一个检查期，如果你是一个新域名，也逃不过沙盒期的命运，所以你不必太在意，只要有蜘蛛在爬 ，保持内容更新，保持内容原创率，一般一个多月后，内页就会被收录，当然，添加一定数量的外链会缩短沙盒周期。

4. 网站被黑了

还有另一种网站被黑、植入病毒或恶意修改设置。 一般我们可以使用ftp日志或者服务器杀毒来发现和解决这个问题，要经常做网站备份，及时做网站漏洞补丁，还需要注意密码的管理。

由于服务器被黑，百度蜘蛛只抓取主页的情况并不常见。 因此，如果我们只遇到首页而不是内页，首先要考虑前面几个影响因素。

总结：关于SEO蜘蛛只爬首页，为什么会出现问题以及如何解决，这里就讨论一下。 以上内容仅供参考。