由 快蜘蛛官方平台 
搜索引擎算法一年一改,总有人担心蜘蛛池是不是已经过时了。与其猜,不如测。我把同一个站、同一套池子配置,在百度、神马、yandex三个入口连续跑了八周,今天把实测结果分入口说清楚。
百度端:抓取依然稳,收录看内容
八周数据里,百度的抓取频次一直稳定在预期水平,新页面当天被抓的概率超过七成。但收录成功率跟内容质量高度绑定:前四周内容一般,成功率三成左右;后四周优化栏目和原创度,升到四成五。结论:池子对百度还有用,但它的作用边界很清楚,只到抓取为止。
神马端:脉冲出量,节奏得摸
| 入口 | 抓取效果 | 收录节奏 | 结论 |
|---|---|---|---|
| 百度 | 稳定 | 持续渐进 | 有用 |
| 神马 | 稳定 | 脉冲式 | 有用 |
| yandex | 较快 | 隔天出量 | 有用 |
神马是脉冲式出量,隔几天集中放一批,单看周数据会觉得忽上忽下,按批次看总量就正常了。它对移动端适配要求高,内容层没做好,脉冲也会变平。
yandex端:隔天出量,外贸站的惊喜
yandex对新URL的响应很快,实测隔天进索引的比例不低,这对做外贸的站是个惊喜。但yandex的收录稳定性一般,需要持续的内容更新撑着,断更两周,出量速度明显掉。
三端实测的总结论
蜘蛛池现在还有用,但它的用处收敛在抓取层,收录和排名靠内容。三端的机制各有差异,别用一套配置通吃,按入口调节奏才是正确用法。
常见疑问
三端同时喂,配置要分几套?
至少两套:国内入口一套,外贸入口一套。百度和神马的节奏可以共用一套基础配置,yandex单独调。
实测里哪端效果最明显?
yandex的隔天出量最直观,百度最稳,神马需要耐心摸节奏。效果感受因人因站而异。
算法再改,这套结论还成立吗?
抓取层的价值短期内不会消失,收录标准会越来越严,所以内容层的权重只会越来越高。
半年数据的版本,昨天在蜘蛛池现在还有用吗,把近半年的收录数据摆出来里聊过,这篇是八周三端的新实测。常见问题类更多内容,看现在还有用吗栏目。