蜘蛛池配置方法里,最容易出问题的是参数调整顺序。四个核心参数,乱动和按序动,结果差很多。

第一个先动权重比例

权重比例决定抓取偏向哪个页面,这是地基。地基没定,后面调频率、调入口都是瞎忙。先把重点页面权重给足,再谈别的。

第二个动抓取频率

频率按内容厚度定,内容多的可以高一些,内容薄就压低。360 和搜狗的站长后台里,频率和内容不匹配的站,抓取波动特别明显。

参数 作用 调整顺序
权重比例 抓取偏向 第1
抓取频率 访问节奏 第2
刷新间隔 页面新鲜度 第3
入口数量 抓取覆盖面 第4

后两个参数怎么定

刷新间隔按新老站区分,新站短、老站长;入口数量稳中渐增,别一上来铺一大堆。每次只调一个参数,调完观察两三天再动下一个。

参数调整的完整方法,在蜘蛛池配置方法详解里。

配置类教程在配置方法专区

FAQ

四个参数可以一起调吗

不建议,一次只调一个,才能知道谁在起作用。

调完多久能看到变化

一般两三天看日志趋势,别朝调夕看。

权重比例有固定值吗

没有,按你页面优先级试出来的才是准的。