「了不起的技术人」幕后算法是如何一步步走近客户的？

淘天背后有一些了不起的技术人，他们坚持在各自领域全心投入、追求终极，或勇闯未知、或拒绝重复、或打破常规。他们每时每刻都要问：是否还是世界领先的技术？技术是否在新的阶段落后了？在哪些领域还有技术提升的机会？

《了不起的技术人》是一档致力于打捞宝藏技术人的内容栏目，只记录真实，看见技术背后的Power。第四期，我们迎来@秋水（化名），一起踏入他为探索帧帧出彩的视频画质，一路披荆斩棘的故事吧！

【人物小传】 

秋水（化名），中科大硕博连读，主攻计算机视觉方向。求学路上不服输的心态和自信积极的行动，让他从学渣“逆袭”成学霸，汗水换来的味道是甘甜的。在陪伴手淘近3年的视频化之旅中，他专注低画质治理，也关注高清化升级。

今年双11，他参与的1080P高清视频放量项目，让手机屏幕在方寸之间，帧帧出彩。他也不断重塑角色，刷新自我，从幕后算法一步步走进直播间、走近创作者，去感知内容主播最真切的需求。他是幕后的技术工匠，像一只萤火，从不展露万丈光芒，也从未停止发光。

【TA的故事】

“我是最早参与淘宝画质改善的一批员工。”

这段革新之旅，从低画质治理到高清化升级，演变了多个阶段。他多次转换身份，一路陪伴与见证。凡是能把这件事干成的，他都以不同的角色参与其中。

逆袭学霸，从不服输开始

中学时期，他在县城中学里表现平平。凭着在数理化上的小聪明，年少时的他有些“小傲娇”。直到被家人强制安排补习功课，才将他的自信心彻底击沉。

不服输的个性和积极的信念，促使他疯狂学习。吭哧吭哧爬坡，一步步地成长，逐步尝到甜头。最终，他为读书生涯交出了最好的答卷——保研中科大并顺利博士毕业。

两年前，他加入淘天内容技术。从一名底层技术的算法小二，悄然变成部门画质体验业务接口人。身份的转变，如同一次全新开始，成长伴随着挑战也接踵而至。

因视觉算法的专业背景，他拥有对画质体验的强烈的敏感度，为了让画面更好看更真实，让特写更流畅更清晰，他没少下功夫。

秋水（化名）花费了大量业余时间，沟通主播商家们的开播需求，他深知中小主播们的困境在于，除了不知道采购哪些设备，更是对专业设备的调试一无所知，求助无门。

通过翻书自学影像专业知识，加之产品经理牵线，他和小伙伴们与佳直播专业机构整理了一份《电商直播高画质开播指南》，针对不同行业、预算的主播出了5套完整开播方案，帮助主播开播，促进体验提升。

每当看到客户在钉钉的那头，发来肯定的表情包，他都会在屏幕的这一头，露出“老父亲”的微笑。这段经历，从他转型后的持续相信说起，他没有犹豫，只是把对未来的慷慨都献给了现在。

从720P到1080P高清化背后的极致探索

因为常和商家主播们接触，他也会收到来自客户们的犀利吐槽：

“这视频的画质怎么这么糟糕？像是土豆拍的一样。”

”清晰度低到让人怀疑自己是否需要配眼镜。”

“像素这么差，分辨率低得可以数得出来每个方块。”

今年双11，他把对客户的洞察和理解，充分应用到1080P试播辅助1080P放量的项目实践中。“技术不该离客户太远，否则容易陷入产品研发的自嗨。”

考虑到市场上缺乏对流媒体明确的质量评价标准，对内也没有量化视频画质与竞品差距的工具。为此，秋水（化名）和他所在的技术团队，相信总有一种考量办法能帮助淘宝准确定位画质水平。经过一点点推敲，他们自研出一个结合多种失真特征——画面亮度、抖动程度、噪声强度、彩度以及内容语义特征，联合训练出符合人眼主观感受的质量评价算法——MD-VQA质量评价算法（该算法在NTIRE 2023质量评价赛道中夺冠）。

NTIRE 2023质量评价比赛冠军方案

这个评价算法，每天会针对审核和线上高热的几十万个视频，进行画质分评价，决策其后续处理链路，并生成大盘整体分值。针对一些不达预期画质的源视频，潇岑和小伙伴们还在技术上提供了解决方案——自研的智美高清2.x转码增强算法，辅助线上提升画质并还原更多画面细节。

同时，他还细心地从观察主播的开播习惯里发现，iOS端的前置摄像头存在缺陷，在感光元件较小导致灯光不足下开播时，画面噪声很强，严重影响开播效果。今年双11，团队里给力的小伙伴们，专门去常接触的直播间里采集了大量直播间素材，经多次模型设计和算法验证测试，实现了支持iOS端直播画质增强和去噪，并赶在双11 iOS端1080P放量过程中完成上线。

淘宝视频高清化是多项目组合作的结果，还有诸如新一代视频编解码标准S266的落地——可提供成本和画质同步优化的可能，和弱网环境的自适应视频传输与播放策略——在保障画质的同时可显著降低降低卡顿等等。

眼下，淘宝视频1080P的覆盖pv达到60%，双11期间峰值期达到80%+。接下来，他计划再次转换姿态，从前台业务接口人的角色回归算法工程师，带着主播和内容创作者的一手反馈，与所在团队的小伙伴们，继续做深转码和推流侧的增强算法，以探究1080P视频高清化背后的极限。

【编者后记】

很多时候，我们还没尝试，就喊着没劲儿了。我们也容易忘记，只有行动起来，才会有答案。

我所见到的秋水（化名），温和而坚定，他在一次次的求新求变中主动出击，保持拉伸，用相信自我的力量不断刷新。或许迎接他的多数都是重新开始，超燃时刻只是偶尔的“剧情”，但这正是他最旺盛的生命力。