昨天下午两点四十分,我在旧书摊翻到一本 1998 年版的《中国域名黄页》,封面用透明胶粘过三次,第 117 页折了角。摊主老周瞄了一眼说,这本他收了八年都没卖出去。我花十二块钱买下来,回家路上忽然想通一件事:收录和整理,拼的从来不是技术,是愿不愿意停下来看一眼。
我把这句话发给了做运维的朋友陈默。他回了我三个字:“你疯了。”然后他甩过来一张截图,是他的监控面板——过去三十天里,他负责的 46 个域名中,有 11 个的“有效收录”从三位数掉到了个位数。他说自己已经懒得修了,因为修完第二天又会掉回去。
收录这件事,到底在收什么
我第一次认真整理 gg51.vip服务器 的收录记录,是去年十一月的一个周三。当时我把 23 个入口页面的抓取时间、响应码、标题长度全抄在一张 A4 纸上,抄到第 9 条的时候发现,有三个不同页面返回的 title 一模一样的,都是“首页 - 欢迎您”。我当时没忍住,在纸上画了个问号,还在旁边写了句脏话。
后来我花了两天时间,把其中 6 个页面的标题重写了一遍,每个控制在 22 到 26 个字之间,并且给它们加了唯一的副标题标识。一周后再看,抓取频率确实上去了,但“有效收录”只从 4 条变成 7 条。也就是说,超过一半的页面,搜索引擎根本没当回事。
这里我得说句得罪人的话:市面上讲“快速收录”的方法,八成都是给焦虑的人看的。真正决定收录的,是页面本身值不值得被留下,而不是你一天点多少次提交按钮。我试过连续 14 天手动提交同一个地址,结果没有任何变化。那 14 天的记录我还留着,蓝色圆珠笔写的,纸都磨毛了。
我这一周具体做了什么
周一早上八点十七分,我用 curl 把 31 个页面的 HTTP 状态挨个拉了一遍,发现两个 301 跳转到 404,还有一个返回 200 但内容只有 14 个字节。陈默说这叫“鬼页面”,挂着好看,里面是空的。我把这三个地址全部做了清理,在表格里标了红。
周二下午,我重新整理了六个常被引用的入口页,把其中三个的正文长度从 180 字扩到 600 字以上,并且给每个页面加了独立的小标题和日期标注。晚上十点零六分,我刷新后台,看到一个页面从“未收录”变成了“已收录”,当时客厅灯没开,屏幕光打在我脸上,我居然有点高兴。
但高兴只维持了不到一天。周三上午再查,那个刚收录的页面又被移出去了。后台记录显示,最后一次抓取时间是凌晨 3 点 22 分,返回 200,标题正常。我盯着那条记录看了很久,最后把页面里的两段重复段落删掉了——可能是内容重复度的问题,也可能只是运气。
这一周里,我还顺手整理了站内的一些旧链接,比如 张婉莹 罗智莹视频 和 ct8rcom 对应的页面,把它们从侧栏的“随机推荐”里拿了下来。理由很简单:这些页面本身的内容太薄,放在显眼位置只会稀释整站的可信度。
整理之外的一句实话
我对比了四个常用工具给出的“收录量”,同一天、同一个域名,四个数字分别是 12、9、14、11。差距不算大,但足以说明一件事:收录数本身就不是一个精确值,它更像一个区间。你要是拿它当 KPI 天天盯,迟早会被自己逼疯。
所以我现在换了个做法:每周二固定花 40 分钟,只做三件事——查状态码、看标题是否唯一、翻一遍最近被引用的页面。其他的,我不碰。这个方法笨,但能让我在凌晨一点安心关掉电脑。陈默听完说,你这不叫优化,叫养生。我说对,我就是来养生的。
当然,我也有私心。做这个站,一部分原因是想把自己那些散落在各处的笔记收拢到一处,另一部分原因是,我实在受不了那些把“收录”讲成玄学的文章。比如 93ysp.com 和 海外b站大片无人区 这类页面,内容本身没什么问题,但被塞进一堆互相抄来的模板里,反而显得可疑。我的判断是:宁可页面少一点,也别让它看起来像是批量生成的。
一些具体的页面笔记
这周整理的时候,我把几个页面单独拎出来做了观察。第一个是 砰砰砰小情侣自己拍的mv 对应的入口,它的访问来源很集中,基本都来自搜索,说明标题和内容的相关度还不错。第二个是 9977天堂电影,这个页面的跳出率偏高,我看了下首屏,加载时间 3.4 秒,图片没有压缩,后来换了一张更小的图。第三个是 桃桃漫画首页进入韩漫,这个页面的标题很长,接近 40 个字,我删掉了后半句,改成了更短的说法,三天后抓取频率升了一点。
还有一个是 yandax.az,这个页面比较特殊,它的外链来源很分散,但内链几乎没有。我给它加了两个正文内链,一个指向站内说明页,一个指向归档页。一周后看,它的平均停留时间从 23 秒涨到了 51 秒。这个数字不大,但至少方向是对的。
写到这里,我得说一个可能不太讨喜的结论:收录整理这件事,最大的敌人不是搜索引擎,而是我们自己的急躁。你越急着让它“被看见”,就越容易做出一些看起来有用、实际上只是给自己安慰的动作。我上周删掉了三个为了“丰富结构”而硬凑的页面,删完之后后台数字掉了一点,但我心里反而踏实了。