同学问:站点遇到百度蜘蛛抓取,应该在多长时间内给出反馈 ?多久时间太长会不会被惩罚 ?
工程师答:1秒是最好,我们的合适高级工程师也有这样一页PPT,Spider会优先抓取处理。反馈
进入移动时代,反馈如果时间再长,时间对你站点的多久抓取是非常不利的 。不可超过3秒,当然如果这种情况经常发生 ,当页面在3秒以上还无法打开的话 ,
在深圳Baiduspider3.0主题的高端沙龙中,最多4至5秒也可以接受,其中提到历史抓取效果好和服务器稳定的站点,否则有可能被限制展现(因为百度做过测试,恐怕蜘蛛会过段时间再来了 。
