阿里云视频云直播转码每天都会处理大量的不同场景.不同编码格式的直播流.为了保证高画质,团队借助VMAF标准来对每路转码的效果做质量评估,然后进行反馈.调优.迭代.这么做的原因在于,像动作片.纪录片.动画片.体育赛事这些场景,影响画质的因素各不相同,基于VMAF的视频质量反馈机制,可以在保证画质的前提下,对不同的场景做针对性优化,达到画质最优.成本最低的效果.本文由阿里云视频云高级开发工程师杨洋撰写,旨在分享VMAF的核心模块与技术实践. 背景 图像质量的衡量是个老问题,对此人们提出过很多简单可行…

作者:杨洋,阿里云技术专家,从事直播相关媒体处理引擎开发 背景 图像质量的衡量是个老问题,对此人们提出过很多简单可行的解决方案.例如均方误差(Mean-squared-error,MSE).峰值信噪比(Peak-signal-to-noise-ratio,PSNR)以及结构相似性指数(Structural Similarity Index,SSIM),这些指标最初都是被用于衡量图像质量的,随后被扩展到视频领域. 这些指标通常会用在循环用在编码内部,可用于对编码决策进行优化并估算最终编码后视频的质…

VMAF 方法: 基本想法: 面对不同特征的源内容.失真类型,以及扭曲程度,每个基本指标各有优劣.通过使用机器学习算法(支持向量机(Support Vector Machine,SVM)回归因子)将基本指标“融合”为一个最终指标,可以为每个基本指标分配一定的权重,这样最终得到的指标就可以保留每个基本指标的所有优势,借此可得出更精确的最终分数.我们还使用主观实验中获得的意见分数对这个机器学习模型进行训练和测试. VMAF可在支持向量机(SVM)回归因子中使用下列基本指标进行融合: 1.视觉信息保真…

ITU-R BT.1788建议书 对多媒体应用中视频质量的主观评估方法 (ITU‑R 102/6号研究课题) (2007年) 范围 数字广播系统允许提供多媒体和数据广播应用,包括视频.音频.静态图像.文本和图表.本建议书规定评估多媒体应用视频质量的非交互式主观评估方法. 国际电联无线电通信全会, 考虑到 a)        许多国家正在引入数字广播系统: b)        利用数字广播系统,已经引入或计划引入包括视频.音频.静态图像.文本.图表等的多媒体和数据广播服务: c)        多…

目录 1. ABSTRACT 2. INTRODUCTION 3. RELATED WORKS 3.1. Quality Enhancement 3.2. Multi-frame Super-resolution 3. 压缩视频的质量波动 4. MF-CNN 4.1. Framework 4.2. SVM-based PQF detector 4.3. MC-subnet Architecture Training strategy 4.4. QE-subnet Architecture Tra…

如何确定一个视频质量的好坏一直以来都是个棘手的问题.目前常用的方法就是通过人眼来直接观看,但是由于人眼的主观性及观看人员的单体差异性,对于同样的视频质量,不同的人的感受是不一样的.为此多个研究机构提出了视频质量客观测试方法,即利用机器或程序来评价视频质量的方法.本文正是要介绍一下其中的一种方法:VQM,并且总结了一些有关VQM视频质量评价方法的资料.VQM方法给出的客观分数比较符合主观感受,属于比较好的一种质量评价算法. 各种视频质量评价方法对比: 目前最常见的客观测试标准是PSNR(峰值信噪比…

对于电子行业的小伙伴来说,经常要找PCB板厂打板,总难免遇到跟板厂因PCB上的质量缺陷扯皮的时候,这是就要有一份公认PCB质量可接受性标准作为最终PCB产品的验收标准,即IPC-A-600标准规范. IPC—国际电子工业联接协会(www.IPC.org.cn)是一家全球性非盈利电子行业协会,IPC总部位于美国伊利诺伊州班诺克本,中国总部设在青岛.IPC会员企业遍布在包括设计.印制电路板.电子组装和测试等电子行业产业链的各个环节.作为会员驱动型组织,IPC提供的服务主要有:行业标准.培训认证.市场…

本文记录一种无参考视频质量评价算法.这是我们自己实验室前两年一个师姐做的,算法还是比较准确的,在此记录一下. 注意本算法前提是高清视频.而且是H.264编码方式. 该方法主要使用两个码流里面的参数进行质量评价:量化因子(QP)和跳过宏块数(skip_num). 使用了四个序列作为测试序列:spray,running,dunk,flower. 下图显示了QP和MOS(主观评价平均意见分)之间的关系.可见因为内容不同,不同序列同等QP下的MOS值不尽相同.但是趋势是差不多的:随着QP的升高,MOS降…

MOT16是多目标跟踪领域非常有名的评测数据集,Ref 1详细阐述了这个数据集的组成以及评测标准(及其评测代码),Ref 2详细地解释了许多标准的由来和考虑,本部分主要介绍MOT任务中常用的评测标准. Reference: "MOT16: A Benchmark for Multi-Object Tracking" (http://arxiv.org/pdf/1603.00831.pdf) "Evaluating Multiple Object Tracking Perfor…

上一篇文章中介绍了实验的准备工作, HDTV(1920x1080)码率和视频质量关系的研究 1 (前期准备) 本文介绍一下实验的结果. 首先来看一下主观评价的试验结果: 从实验结果来看,可以得出以下结论: 1.观看距离比较近(3H)的主观质量要差于观看距离比较远(4H)的主观质量 2.随着码率的下降,视频的质量逐渐下降 3.同等码率下1080i/25的主观质量要低于1080p/50(这个结果是比较惊人的,造成这种结果可能有多种原因:显示器,编码器等等) 4.1080i/25随着码率的下降,主观质…