老域名购买

百度蜘蛛为什么会抓取网站不存在的路径？

做seo我们需要经常性的去看我们网站的服务器日志，也就是iis日志，因为我们需要很好的掌握蜘蛛爬取了我们网站的什么地方，哪个页面。但是有些朋友有的时候在进行例行检查的时候，却发现蜘蛛爬取了一些我们网站并不存在的页面，今天SEO管家中心就讲解下为什么百度蜘蛛会爬取我们网站没有的页面。

1、蜘蛛是怎么发现我们网站的链接的

我们都知道，蜘蛛是沿着链接爬来爬去的，他会自动提取网站中所有的链接，保存入库，然后进行爬取，这也就是为什么我们觉得网站的收录少了或者刚发布的文章没有被收录，我们就会说“引蜘蛛”了，其实引蜘蛛就是发外链了，当这条链接呗蜘蛛发现之后，他就会进行爬取，然后通过一系列复杂的算法之后，决定是否放出该页面的收录。