简介
图像质量评价(Image quality assessment,IQA)目的在于使用计算模型来衡量图像质量使结果与主观质量保持一致(即主观质量好的图像其IQA评分也应该越高)。随着数字图像和传输技术的快速增加,IQA在图像获取、传输、压缩、恢复、加强等领域也变得更加剧要。因为主观IQA技术在不少场景(例如实时场景等)没法使用,因此须要发展客观IQA技术来自动的、稳健的衡量图像质量。同时须要评价结果与人类观察员是统计一致的。在过去几十年间已经出现了多种IQA方法。算法
IQA分类
根据是否有参考图像,IQA分为全参考(full reference,FR),半参考( reduced-reference,RR),无参考(no-reference)。微信
全参考FR:在FR问题中除了给出失真图像,还给出了无失真的参考图像。ide
半参考RR:在RR问题中给出了失真图像,没有参考图像,可是给了参考图像的部分信息。至因而哪一种信息取决于你的算法。RR算法在实时系统中颇有用,RR的工做原理以下图所示。性能
无参考NR:在NR问题中仅给出了失真图像。NR是最难的图像质量评价方法。
url
如何检验IQA评价是否准确?
若是你想评价现有IQA算法的性能,或将你的IQA算法与现存的IQA算法作比较,你须要在公开的IQA数据集上作大量实验。一般,这样的数据集有大量参考图像,每一个参考图像对应多个失真图像(失真类型不一样)。每一个失真图像都有一我的类观察员的主观评分。为了评价一个IQA算法,你须要对数据集的每一个失真图像计算其IQA,而后计算IQA评分与主观评分的相关性。spa
Database | Source Images | Distorted Images | Distortion Types | Image Type | Observers |
---|---|---|---|---|---|
TID2013 | 25 | 3000 | 24 | color | 971 |
TID2008 | 25 | 1700 | 17 | color | 838 |
CSIQ | 30 | 866 | 6 | color | 35 |
LIVE | 29 | 779 | 5 | color | 161 |
IVC | 10 | 185 | 4 | color | 15 |
Toyama-MICT | 14 | 168 | 2 | color | 16 |
A57 | 3 | 54 | 6 | gray | 7 |
WIQ | 7 | 80 | 5 | gray | 60 |
目前主流的IQA数据集如上表所示。其中TID200八、CSIQ、LIVE是综合性最好使用最多的。.net
假如你已经使用一种IQA算法计算出数据集中全部失真图像的IQA值,那如何衡量这个IQA值是否准确(即与主观结果是否接近)?一般有四种方法评价IQA算法的性能。code
一、Spearman rank order correlation coefficient(SROCC)斯皮尔曼等级相关系数orm
n是数据集中失真图像数量,di是第i幅图像的主观和客观等级差值。
server
二、Kendall rank order correlation coefficient(KROCC)肯德尔相关系数
nc是数据集中一致性元素对数,nd是数据集中不一致性元素对数。
matlab计算上面两种相关系数的方法以下:
SROCC_Corr_Coef = corr(subjetiveScores, objectiveScores, 'type', 'spearman');
KROCC_Corr_Coef = corr(subjetiveScores, objectiveScores, 'type', 'kendall');
三、Pearson linear correlation coefficient (PLCC)
四、root mean squared error (RMSE)
在PLCC和RMSE计算中si表明第i幅图像的主观质量,qi是映射后的客观质量。在计算PLCC和RMSE前须要将第i幅图像的客观质量xi进行非线性映射为qi,映射方式以下:
beta_i是须要拟合的参数。
除了上面四种评价方法,研究者也能够画出数据集内每幅失真图像的主观评分和对应客观评分的散点图及拟合的曲线。下图是TID2008数据集分别使用FSIM客观评价指标和VIF客观评价指标的散点图。
在接下来的文章中会陆续介绍一些主流FR IQA算法。
参考
https://sse.tongji.edu.cn/linzhang/IQA/IQA.htm
感兴趣的请关注微信公众号Video Coding
本文分享自微信公众号 - Video Coding(gh_17eb8f3e0fe7)。
若有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一块儿分享。