淘宝视频质量评价技术,获得全球顶级技术比赛CVPR NTIRE冠军下载
近日,CVPR NTIRE 2023比赛结果公布,淘宝音视频技术团队(TB-VQA)拿下视频质量评价项目冠军。
CVPR NTIRE是图像和视频增强处理领域最具影响力的全球顶级赛事。其中视频质量评价项目,系今年首次举办,并且知识兔只设置了单个赛道,即无参考视频质量评价。主办方构建了包含1211个真实应用场景的视频数据集,并对其色彩、亮度、对比度进行增强以及去抖动、去模糊处理后进行打分,作为GT(真实的有效值)。参赛团队通过各自技术方案对上述视频打分,与GT越接近名次越高。
据悉,该项目字节、快手、网易、小米、Shopee等知名科技企业,以及北京航空航天大学、新加坡南洋理工大学等高校均有参赛。淘宝音视频技术团队在国内外顶级的几十只参赛队伍中脱颖而出,主得分(Main Score)、SRCC及PLCC(SRCC和PLCC越高表明与GT越接近)三项指标均位居第一。
(淘宝视频质量评价技术获全球顶级科技比赛CVPR NTIRE冠军)
当下短视频、直播等UGC内容在互联网平台被大量生产及传播,受限于拍摄、编码、传输及用户收看环境等因素,整体质量层次不齐,如何通过技术手段系统有效地评价内容质量,并针对性优化就成为一项重要且紧迫的任务。
获得比赛冠军的淘宝视频质量评价技术,综合了视频语义、失真、运动等多维度信息,来衡量视频绝对质量高低,并快速、精准地筛选出不同画质水位,知识兔帮助提升内容质量。目前该技术已全面应用于淘宝直播、逛逛、首页信息流等淘宝内容业务,也在支撑钉钉直播、ICBU直播和支付宝直播等画质体验。
以淘宝直播为例,该技术以分钟级的在线视频质量监测能力,为不同画质水位的直播间分享实时的改进建议。目前正在使用该项服务的直播间中,超75%希望服务能持续保持。
近些年,淘宝深耕音视频核心技术,以推动淘宝内容体验。此前在MSU 2020和2021世界编码器比赛及CVPR NTIRE 2022压缩视频超分与增强比赛中,淘宝技术团队也摘得榜首。本次再度夺冠,也表明淘宝在音视频核心技术领域处于绝对行业领先位置。
下载仅供下载体验和测试学习,不得商用和正当使用。