郑州SEO优化:分类页翻到第 5 页就没人管,几千个分页正在吃掉抓取预算
上周给一个做金属结构件的客户看站。他开口第一句是:「我这站一百多页,百度一条都没收,是不是得推倒重做?」我登后台看了一眼,产品分类 12 个,每个列表按 8 条一页,底下挂着三组筛选:材质、厚度、表面处理。模板把每个筛选组合都当成一个新地址往外输出。真正的有效页面我数了一遍,四十多个。
他嘴里那一百多页,绝大部分是翻页和筛选参数。这种情况我这些年看得太多,多到成了固定套路:客户以为自己找郑州网站建设公司做了个大站,其实是一个小站被模板复制成了几千个地址,然后这些地址排着队去消耗搜索引擎每天给它那几个抓取名额。
这篇不讲大道理,就讲一件事:页面里那些翻页和筛选,是怎么一点点把收录拖垮的,以及按什么顺序收拾。做郑州SEO优化十来年,我修过最多次的毛病就是这个,比关键词选错还常见——郑州做网站这行模板换了一茬又一茬,翻页的写法几乎没变过。
先算一笔账:一个产品中心,能长出多少个地址
还按那个客户的结构算,这也是郑州网站制作里最常见的模板配置,算术都可核:
- 产品中心下设 12 个分类,这一层 12 个地址;
- 每个分类按 8 条一页,12 条到 20 条产品不等,多的要翻 3 页,少的 2 页,合计 30 个左右分页地址;
- 三组筛选:材质 4 个值、厚度 4 个值、表面处理 4 个值,全组合是 4×4×4=64 种;
- 这 64 种和 30 个分页一乘,一千九百多个;参数还能任意两个拼在一起,模板不判重,实际能吐出的地址超过六千。
这就是那个「一百多页」的真相——按页码它确实能翻出很多页,但能被写进 title、能有自己一段描述、值得被客户搜到的,只有四十多个。
搜索引擎那边是什么情况?一个中等规模的企业站,百度蜘蛛一天来几十次到几百次,这个数不是随机的,它跟站点权重、更新频率、服务器响应速度都有关系。额度就这么多,它在你站上停留的时间也有限。你把六千个参数地址摆在它面前,它不会挑,它顺着链接走,走到第 40 个长得一模一样的翻页时,就回去了。真正该收的产品详情页,在第 3 页后面,它一次都没碰到。
所以「网站收录没排名」这个抱怨,很多时候得往前挪一步看:不是收录了排不上,是压根没收;不是没收录,是爬虫根本没走到那一页。这句话我跟郑州做网站的客户说过不下十遍,说完他们的第一反应往往是去看后台的「页面数」,而不是去看日志。
坑一:第 2 页的 canonical,写回了第 1 页
这个坑最隐蔽,也最普遍。我扒过不少郑州网站建设公司交付的站,列表页翻页那段标签基本是写死的:
不管你在第几页,它都指回栏目第一页。写这段代码的人想的是「分页内容重复,收敛一下权重」,逻辑听着对,含义完全错了。这行标签的意思在搜索引擎看来就一句话:本页是那一页的副本,别单独收录。于是第 2 页到第 8 页,全站所有栏目,一本正经地告诉爬虫「我不用被收」。
改法很简单,每个分页指向自己:第 2 页的 canonical 就是第 2 页自己的地址。别怕重复,分页页的重复是结构性重复,搜索引擎认这个,它有能力处理。真正会让权重摊薄的,是同一个页面被记成好几个地址——那个问题我在一页被记成六个网址里专门写过,和分页是两回事,别混着治。做郑州网站设计的同行有时候把 canonical 当成万能药,哪里重复往哪里贴,贴错方向反而是自伤。
坑二:给第 2 页以后加 noindex
这是另一个「看起来很懂」的做法。思路是:分页页没独立价值,加个 noindex 省得占索引份额。
问题是,分页页除了列产品,还兼着一个更重要的活:它是爬虫往深页走的唯一通道。你把第 2 页以后标成不收录,爬虫爬到第 1 页,看到「别收」,多数就折返了,第 3 页上的产品详情页从此没有入口。结果是几百个产品页变成孤岛,百度索引量低就是这么来的,然后你发现源码里明明有内容,收录里却查不到。
我的做法是:分页页允许收录,不做 noindex,也不做 nofollow,就让链接老老实实待在那儿。这其实是最基础的内链优化——分页页本身不值得抢排名,但它得把路通着。
坑三:筛选参数才是真正的碎钞机
翻页顶多几十个地址,筛选项一旦叠加,量级立刻不一样。?material=304&thickness=3&finish=mirror,这种 URL 在后台看着挺方便,对爬虫就是无穷无尽的岔路。它还容易被当成「新页面」收录,收进去以后标题全是「产品中心」,描述全是站点默认那一段。
处理有先后,我一般这么排:
- 能不留地址的,就别留。筛选默认走前端交互,点了只改列表,不动地址栏。这是最干净的,一下午能改完;
- 必须留地址的,用 robots.txt 封参数。比如
Disallow: /*?material=。封完那些已经收录的参数页会慢慢消失,别慌,这是预期内的; - 已经生成一大堆的,先收敛再封。canonical 指回不带参数的分类页,链接上加 nofollow,等收录掉下去再封,别一刀切。网址这一层的整体规矩,我在网址怎么取、栏目分几级里写过一套,筛选参数是同一套逻辑的延伸。
这里顺便说个判断标准:如果一组筛选组合,你作为老板都说不出「什么客户会专门搜这个词进来」,那它就不该有独立地址。这条规矩最好在郑州网站设计阶段就定死,等页面上线再回头改,成本要翻几倍。参数页的价值在于帮人筛货,不在于被搜到,这一点想清楚,内链优化才不会被一堆参数页拖住。
坑四:96 个分页,同一个标题
模板生成的分页,title 和 description 通常是同一个变量,于是全站 96 个分页标题一模一样,描述一模一样。搜索引擎看一眼就知道这批页面没有独立信息,抓取优先级自然排在后面。做郑州SEO优化的老同行都见过这一幕,改起来却总被排在最后,结果就是网站收录没排名这个问题一直挂着。
改法不复杂:第 2 页的 title 后面带上页码,描述写这一页具体有什么,比如「304 不锈钢法兰 - 第 2 页 | 规格 12 种 现货 3 天发」。别小看这一行字,第 2 页以后那些具体型号能不能被搜到,靠的就是这种笨办法,长尾关键词布局里最难啃的一块就在这儿——词是现成的,就摆在列表里。
但有个前提得说清楚:分页页的差异化只能来自它列出的内容,不能靠硬凑一段文字。我见过为了「每页不一样」,在分页底部塞一段无关的产品介绍,那不叫优化,那叫制造垃圾页。这也是我一直劝客户的一件事——百度索引量低的时候,先看这批页面是不是本来就该存在,而不是急着给它们各写一段话。
坑五:查看更多和滚动加载
移动端改造之后,很多站把分页换成了「加载更多」,内容靠接口一截一截取。用户滑着舒服,源码里却只有第一屏那 8 条。第 2 页以后的内容,在爬虫眼里不存在。
正确的做法不冲突:默认输出真实的分页链接,让地址、链接、内容都留在源码里;JS 再去接管这些链接,做成无刷新加载。用户拿到体验,爬虫拿到结构。这套写法在我们做郑州网站建设、郑州企业官网建设时是写进交付标准的,可惜多数模板图省事,直接把链接砍了。
怎么查:三个地方能看到真相
不用猜,做郑州SEO优化这些年我就靠三个地方对着看。
一是百度搜索资源平台里的抓取频次曲线,正常站点是一条平稳的线,参数页泛滥的站会看到尖峰和断崖,一天几百次、隔天个位数。抓取诊断里抓一次首页和一次深层产品页,对比返回的字节数,也能看出模板有没有把正文藏起来。
二是服务器访问日志。grep 一下 Baiduspider,按天统计它要了多少个地址、其中多少带着问号。这个数最有说服力,我一般直接截给客户看——他会自己发现,一天几百次抓取里绝大多数是在翻页。做郑州网站制作的项目,上线第一个月我一定看这个。
三是站内搜索 site:你的域名 inurl:page,看分页被收了多少。收得多但一条没排名,那是另一种「网站收录没排名」:这批页占着名额不产出,该合并就合并;一条都没收录,那就回去看 canonical。
动手顺序:四步,改完别再反复动
顺序有讲究,别一上来就调标题。
- 第一步,关水龙头。筛选参数不再生成新地址,排序、每页条数这类参数一并封掉,先让地址总量停止增长;
- 第二步,修 canonical。全站分页改成自己指自己,顺手查一遍列表页有没有指错;
- 第三步,补标题和描述。按页码和当页条目写,别套模板;
- 第四步,改交互。「加载更多」换回真链接,再让 JS 接管。
四步做完,提交一次 sitemap,然后在资源平台手动推几条深层产品页——这一步是为了告诉爬虫「路通了,来这儿」。别每天推,一周一次足够,推太多反而像刷。顺手把栏目页、分类页、详情页之间那几条主线做一遍内链优化,让爬虫从任何入口都能走到最深一层,这比再多推十条链接有用。
改完最忌讳的是反复动。我见过客户今天改 canonical、明天觉得不对又改回去,两周折腾三轮,抓取频次直接趴了。结构类的调整,一次改到位,然后至少留三周不动,让爬虫重新熟悉路径。这是我们做站时写进验收单的一条:上线后一个月内,除内容外不动结构。
多久能看到变化,说个实在区间
多久见效这个问题,在郑州SEO优化里被问得最多,我从来不愿意给准数。抓取频次的变化大概 2 到 6 周能看出来,收录跟上再要 2 到 4 周,排名更往后。这个区间跟站点原有的权重有关,编一个「七天见效」哄人没意义。
能给的判断依据是:日志里蜘蛛要的地址总数没变,但带问号的地址占比明显下来、深层产品页开始被访问,这就说明方向对了,剩下的是等。四周过去日志一点没变,那多半是第二步没改干净,或者站点还有别的入口在批量生成地址,回头再查一遍。
这段时间最该干的事是写内容,不是改代码。郑州做网站的单子里,我最怕遇到改完三天就来催结果的老板——数据还没开始动,他自己先动摇了。
写在最后
公司全称河南卫民信息科技有限公司,技术团队始于 2010 年,办公地址在郑州市中原区陇海西路 98 号院 5 号楼 805 室。这些年郑州网站建设、郑州网站制作、郑州做网站的单子做下来,我养成一个习惯:接新站先不看设计稿,先打开后台数一数,这个站能生成多少个地址,其中多少个是模板顺手吐出来的。
数完心里就有底了。一个郑州企业官网建设做出来的小站,被模板吹成六千个地址,你在前面怎么做长尾关键词布局、怎么调标题,都追不上后面漏的速度。内链优化也好,郑州SEO优化里别的动作也好,前提都是爬虫愿意往里走。
想自己动手的,今晚花二十分钟做件小事:打开你的产品列表,翻到第 3 页,右键看源码,搜一下 canonical,看它指哪儿。指回第一页的,明天就改。这一处改完,比再写十篇稿子管用。