收录慢的原因

大站的典型症状：新文章发出去一周还没收录，老内容倒是天天被抓。这不是蜘蛛偏心，是抓取预算被浪费了。官方定义说得很清楚：抓取预算是Google分配给一个主机名的抓取资源，由两块构成——抓取容量上限（服务器扛得住多少并发抓取，响应稳就升，5xx、429多就降）和抓取需求（站点规模、更新频率、页面质量、热度共同决定蜘蛛想抓多少）。容量和需求都有限，浪费在垃圾URL上的每一次抓取，都是从正经内容嘴里抢的粮