第180章 成功上线(第1页)

灰度发布定在周一上午十点。

这是林晨和王皓商量之后定下的时间点。理由很简单——周一是流量最低谷,即使出问题,影响面最小。等过了前三天的低流量灰度,周四开始的10%放量阶段正好赶上流量上升期,能更好地观察模型在高并发下的表现。

整个周末,林晨都在反复检查上线方案。十二项检查清单,他逐条过了一遍,又逐条过了一遍,像考试前反复默写公式的高中生。苏婉看他坐在书桌前对着电脑皱眉头,端了一杯热水放在旁边:放轻松,你已经准备得够充分了。

不是紧张,林晨抬头看着她,是谨慎。上线这种事,准备得再充分都不为过。

苏婉笑了笑没说话,去客厅陪乐乐搭积木了。

周一早上八点,林晨到公司的时候,张明远和陆小溪已经在了。三个人围在林晨工位旁边,像出征前的士兵做最后的检查。

模型包已经部署到预发环境,陆小溪看着她的屏幕,容器化方案跑了两轮预检,没有问题。流量切分逻辑已经配置好了,5%灰度组的用户标签已经生成。

归因指标的离线评估管道已经就绪,张明远接着说,每天凌晨两点跑批,早上出结果。

监控面板呢?林晨问。

陆小溪点开一个链接,监控大屏上密密麻麻排列着各种指标曲线——CTR、CVR、人均时长、留存率、推理延迟、QPS、错误率。每个指标旁边都标着阈值和告警线,任何指标越界就会触发企业微信告警。

王皓昨晚帮忙检查了一遍监控面板配置,陆小溪补充,他说工程侧没问题,随时可以开始。

林晨看了一眼时间,九点四十五分。

我去跟王皓确认最后一遍。他站起来,走向王皓的工位。

王皓正对着屏幕喝咖啡,看到林晨过来,放下杯子:准备好了?

准备好了。林晨把上线方案的最终版递过去,灰度5%流量,初始观察期三天。监控面板已经上线,告警阈值按陈博要求配置。回滚预案两个方案都就绪,旧模型包已保留在线上。

王皓接过方案扫了一眼,然后看着林晨:有个事情提前跟你说——灰度期间如果出问题,你来决定是否回滚。这是你第一次负责上线,但也是你第一次独立做决策。

林晨点头:明白。

不过,王皓的语气缓和了一些,如果你拿不准,随时找我或者陈博。上线决策不是一个人的事,尤其是在T厂,出了问题影响的是整个业务线。
(本章节未完结,点击下一页翻页继续阅读)