动态资源分类失效？用深度学习重构资讯分发
|
线上报警那一刻，我正把第三勺糖倒进咖啡里——杯子早凉透了，糖块在底下堆成小山，搅都懒得搅。手机震了一下，是运维老张发的截图：「分类服务响应超时 92%」，后面跟着个哭脸表情包。我第一反应是去翻缓存命中的日志，结果发现连缓存都没进，直接 fallback 到兜底规则——那个用 if-else 套了七层、注释写着「2017 年为应付双十二临时加的」的老分类器。 说白了，不是它崩了，是它彻底失语了。去年国庆那会儿，流量涨得挺高，我们全以为是热点事件带动的资讯热度迁移，产品天天催「能不能把旅行类目再往下压一压」，前端小陈联调时甩给我个截图：同一用户刷三屏，出现 2 次“故宫预约攻略”、1 次“淄博烧烤测评”、0 次“电竞比赛前瞻”——他键盘敲得噼啪响，人没抬头：“哥，你这分类是不是把‘兴趣’当‘GPS 定位’用了？” 我原以为只是规则权重配置错了。结果 debug 了一下午，发现连「分类」这个动作本身都在失效：后台打标模块吐出来的「资讯类型」字段，命名是 category_v3_temp_fallback_new，光这名字我就念了两遍才顺下来；点进去看代码，发现 v3 是 2019 年改的，temp 是 2021 年加的，fallback 是 2022 年补的，new 是去年五月上线前夜 rename 的……中间还夹着一行注释：// 此处不处理短视频，交给前端兜底（但前端去年就删了这块逻辑）。窗外天黑了，我盯着这行注释看了五分钟，没敢动。 其实分类失效这事，早就露过苗头。上个月排期会上，产品又拎着 KPI 来谈「个性化渗透率提升」，我说：“现在连‘新闻’和‘段子’都分不清，你让我拿什么渗透？”她笑：“那不正好重构？”语气轻飘得像在问今晚吃不吃饺子。可真落到干，我翻了一遍整个资源中心的服务链路，发现最底层的打标逻辑居然还依赖一个离线脚本跑每天的词频统计——没错，就是那个每天凌晨两点定时跑、跑崩了也没告警、跑了大半年没人看过输出日志的 Python 脚本。运维老张提过一嘴，说有次磁盘满了它直接静默退出，第二天所有「社会」类内容全被塞进了「娱乐」桶。我听了嗯一声，转头去修接口超时，忘了跟进。 谁的键盘声很响。隔壁工位那位新来的兄弟，写了个「动态规则热更新」，每次上线都要重启三次网关——上周五我亲眼见他重启了三回，第四回我实在没忍住说：“兄弟，你这热更新热得比我的咖啡还慢。”他挠头：“可文档里真写着‘毫秒级生效’啊。”文档？我点开链接，跳转到内部 Wiki 第四版，最后编辑时间：2020 年 8 月 17 日。我关掉页面的时候，工单系统又弹了条消息，标题是《【紧急】推荐流曝光 PV 下降 17%》，内容空着，附件是张截图，边缘裁掉了——只留下一行字：“用户停留时长跌破基线 2.1 秒”。我没点开。 用深度学习重构资讯分发？这话听着像技术中年危机发作。但你细想——分类失效的本质，不是模型不准，是“分类”这个概念本身就塌了。我们还在用静态规则强分「资讯」「短视频」「直播切片」「互动话题卡」，可用户手指划过去的时候，哪管你是 MP4 还是 JSON 渲染？他只认一个东西：戳下去之后，值不值得看三秒。所以优胜劣汰这事，真不是口号。模型不管你怎么命名、怎么埋点、怎么灰度，它只认反馈信号：跳失率、完播、收藏、二刷、分享路径里的反向点击……这些玩意儿不会撒谎，也不会 rename 自己的名字。当然，我也不知道这模型会不会把“鬼畜视频”判成“教育内容”——毕竟训练数据里有三成标注是运营半夜手抖填错的，这个我至今没敢跟算法团队提。 岔个题。上个月招人，面了一个清华 PhD，聊到特征工程，他说他们实验室跑模型不用 GPU，全靠 cache 层优化 pipeline。我愣了半天，问他：“你们 cache 用的啥？”他说 Redis Cluster。我笑了：“哦，那还是得靠人肉预热 key……”他点点头，然后问我我们怎么预热。我说：“先让测试同学狂刷首页 20 分钟，等缓存满了再上线。”他眼神有点恍惚，后来 HR 说他没接 offer，不知道是不是因为听到了这个方案。 前两天旧同事老周约饭，他说他们公司刚把推荐系统全量切到图神经网络，理由特别朴素：“原来那套规则引擎，改一个标签要走七道审批，上线还要等下周二。”我说我们也是。他叹气：“你们那个分类字段……还是叫 category_v3_temp_fallback_new？”我点头。他摇头：“这名字比我前女友备注还长。”说完自己先笑了。其实我知道他没全说真话——他上个月刚离职，听说是因为跟架构组吵崩了，对方坚持要用 GraphQL 替换全部 REST 接口，而他死磕“HTTP 就是 HTTP，别给它起外号”。
文章配图，仅供参考 我原以为重构分发就是换个模型训一下，结果跑通第一个 embedding 向量后才发现：下游所有消费方，包括那个连 Git 都只用 clone/pull 的旧版推送 SDK，全按字符串 match 「category」字段做路由——你喂它一个 128 维向量，它报错是「String index out of range: 0」。现在卡在这儿，没往下推。我打算明天找前端小陈对下 schema，看他愿不愿意把「type」字段放开成 object；要是他摇头，我就先硬编码一个映射表，把 top20 向量聚类结果强行 round 成字符串……先让流量跑起来。至于这个映射表以后怎么维护、什么时候能去掉、会不会哪天又变成另一个 category_v3_temp_fallback_new_new —— 我没细看，也不敢想太远。（编辑：站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
