搜索引擎对网站进行了爬虫封锁测试——搜索引擎有时候会故意不抓取你站点的新页面来测试反应

搜索引擎的爬虫在巡检中存在的故意抓取暂停不是爬虫故障，而是搜索引擎对一个站点进行的自动化巡检测试——搜索通过暂停抓取来观察站点在爬虫停止访问期间是否保持了正常的内容更新节奏，以此测试站点的内容更新是否为给搜索看的假更新。VP导航（vpis.cn）收录站点在这种爬虫间歇期测试中的表现由于收录审核对收录站点内容质量的基础保障——收录站点在爬虫暂停测试期间的搜索排名波动比非收录站点小。