由 快蜘蛛官方平台 
今年五月,一个做工业阀门网站的客户拿来两张蜘蛛池套餐对比表,一张每月八千个URL配额,一张五千个,问我要不要直接上贵的。我把两家都测了一周,发现贵的那个URL配额只是数字好看,必应抓取深度只有两级,内容页根本没被带走;反而是配额少的那家深度到了三级,长尾词出了十几个排名。套餐对比这件事,真不是比谁数字大。
套餐表上哪些数字会骗人
URL配额、更新频率、线程数这三样是套餐表最常拿来撑门面的。URL配额不等于有效收录,更新频率写的每分钟一次也不代表必应会买账,线程数高更可能触发风控。我一般让客户直接问三句话:抓取深度到几级、内容页占比多少、有没有周度收录明细,这三句话能过滤掉大半虚标套餐。
抓取深度为什么是分水岭
深度决定蜘蛛池喂进去的URL能被搜索引擎吃到第几层。只抓到首页和栏目页,权重全留在列表页,内容页等于白做;能抓到内容页并持续跟踪,长尾流量才真正落地。必应对深度的容忍度相对高,但也看站内结构,内链混乱的站深度上不去,再好的池子也白搭。
| 对比项 | 表层套餐 | 有效套餐 |
|---|---|---|
| URL配额 | 数字大,重复URL多 | 配额内有效URL占比高 |
| 必应抓取深度 | 只到首页或栏目页 | 能覆盖内容页 |
| 更新频率 | 写得很高,实际排队 | 与调度窗口匹配 |
| 数据透明度 | 不给明细 | 周度收录明细可查 |
一周测试法,把套餐打回原形
选定候选套餐后,我建议至少跑七天测试,而不是看一两天就下单。测试期间每天固定生产一批同结构的URL,重点看四个指标:内容页的抓取记录、深度变化、有效收录占比、以及必应侧的长尾词是否开始出排名。七天数据出来,哪个套餐虚标一目了然。
怎么判断深度有没有真的上去
看抓取日志里URL的层级,内容页如果持续被回访,说明深度稳定;如果只有列表页反复被抓,内容页一次都没有,深度就是假的。我用这个办法帮客户筛掉了至少六家标着高深度、实际只抓两级的服务商。
套餐里必须写明的三条款
第一,有效URL占比每周公布一次;第二,深度不达标的时段要有补偿机制;第三,套餐升级允许按剩余天数补差价。这三条写进合同,套餐对比就不再是嘴上功夫,后面维权也有依据。
不同入口的深度表现差异很大,上一篇聊了神马出量时段,这篇讲套餐深度,结合起来选套餐会稳很多。想看完整的套餐对比口径,可以进套餐对比栏目,昨天的原文在这里。
测出深度后,内容结构还要跟上
套餐深度测出来,只是解决了被看见的问题,内容结构跟不上,深度照样维持不住。内容页之间要有清晰的层级和互链,别让蜘蛛在站里迷路。我见过一个客户深度明明到了三级,两周后又退回两级,一查是批量上了两百篇无关联的页面,内链乱成一锅粥,蜘蛛爬到一半就放弃了。
正确的做法是:每一批内容页上线前,先在站内规划好它从哪里进、往哪里出,锚文本用真实相关的关键词,而不是一律写成点击这里。深度是套餐给的,稳得住深度的是你自己的结构。
常见疑问
抓取深度两级和三级的差别有多大?
两级基本只有列表页有排名机会,三级开始内容页进索引,长尾词才有着落,对靠内容吃饭的站差别非常大。
测试期要不要钱?
正规服务商一般提供三到七天试用,不提供试用或者试用期就要全款的基本可以排除。
必应深度上不去,换谷歌会不会好?
入口偏好不同,谷歌对内容页更敏感,但也要看站本身质量,别指望换个入口就能救一个内链混乱的站。