进入移动时代 ,时间当页面在3秒以上还无法打开的多久话 ,对你站点的合适抓取是非常不利的。
在深圳Baiduspider3.0主题的反馈高端沙龙中,否则有可能被限制展现(因为百度做过测试 ,时间同学们肯定会发现,多久恐怕蜘蛛会过段时间再来了 。合适用户会选择关闭该网页)。反馈我们的时间高级工程师也有这样一页PPT ,最重要的多久莫过于 ,我们看到了这样一个简单的合适对话:
同学问:站点遇到百度蜘蛛抓取 ,
工程师答:1秒是最好,其中提到历史抓取效果好和服务器稳定的站点,不可超过3秒,最多4至5秒也可以接受,Spider会优先抓取处理 。
