双线性插值图像放大算法优化及硬件实现文档格式.docx
《双线性插值图像放大算法优化及硬件实现文档格式.docx》由会员分享，可在线阅读，更多相关《双线性插值图像放大算法优化及硬件实现文档格式.docx（17页珍藏版）》请在冰豆网上搜索。
双线性插值;
轮廓增强;
实时处理
中图分类号:
TN773 文献标识码:
A 文章编号:
025820934（20200120205204
图像放大是一种常用的数字图像处理技术,在航空航天、医学、通讯、广泛的应用,,放大图像会出现明显的方块或锯齿,不能很好地保留原始图像的边缘信息[1]。
双线性插值是一种比较实用的放大方法,它能够较好地消除锯齿,放大后的图像平滑性好,并且运算过程也较简单,其缺点是图像高频信息丢失严重,主要表现为细节与轮廓的模糊,影响了放大图像的清晰度。
本文在双线性插值放大技术的基础上,提出了一种改进算法,加入边缘锐化处理,增强平滑图像的轮廓,使放大后的图像有较好的清晰度[2]。
基于双线性插值放大的优化算法处理速度快,硬件实现简单,有较高的图像质量,特别适合于图像的实时处理。
本文给出了该算法的硬件实现方案,改进的放大算法已经应用于一款图像处理芯片中,且有较好的效果。
11双线性插值是指利用映射点在输入图像的
4个邻点的灰度值对映射点进行插值,即待插点处的数值用离待插点最近的四个点的值加权求得。
在同一行内根据待插值像素点与其前后的原图像像素点的位置距离进行加权线性插值,即离原图像像素点越近的待插值像素点,原图像像素的加权系数就越大;
行间根据待插值行与其上下的原图像行间的距离进行加权线性插值,即离原图像行越近的待插值行,原图像行的加权系数就越大。
其原理图如图1所示
。
收稿日期:
2020209205
项目:
湖南省自然科学资助（No.052
jd40095。
简介:
帅金晓（1985-,男,江西南昌人,硕士研究生。
研究方向:
数字集成电路设计及图像处理。
图1 双线性插值算法原理示意图
55
对于一个目的像素,其行列坐标值分别除以放大倍数,通过反向变换映射为原图像的浮点坐标（i+p,j+q,其中i和j均为非负整数,p和q是取余后[0,1]区间内的浮点数,则这个目的像素的值f（i+p,j+q可由原图像
（i+1,j、（i,j+1、（i+1,j+中坐标为（i,j、
1所对应的周围四个像素的值来决定,如公式（1。
（1f（i+p,j+q=
（1-p（1-qf（i,j+（1-pqf（i+1,j+p（1-qf（i,j+1+pqf（i+1,j+1
（2式中,（∑{w（i,jp（i,j}是p（i,j邻
i,j
近点的高频分量,把这个分量加到p（i,j点,
就增加了该点像素的锐化程度。
对整个图像的所有像素点进行高通滤波处理,可以恢复放大后图像的高频信息,从而实现了图像的边缘锐化,使图像效果更加清晰。
2 硬件实现
本文提出的双线性插值优化算法已经实际应用于图像处理芯片中,该系统在YUV数据格式下实现图像由分辨率QVGA放大到VGA,即实现了图像的4倍放大。
其系统框图如图2所示。
其中,f（i,j表示（i,j处的像素值,p,q随着放大后像素行列坐标的不同而改变。
将这四个点的像素值按照权重不同做相加,得到放大图像目标位置的像素值。
双线性插值得到的图像本身比较平滑,较好地抑制了采用邻近取样法带来的“小锯齿”弊端。
由于双线性内插法具有低通滤波器的性质,使高频分量受损,所以用这个算法会使图像轮廓在一定程度上变得模糊。
大算法处理速度快,,,112 针对双线性插值算法会使高频分量受损而出现边界模糊的问题。
本文提出了一种优化算法,即在双线性插值算法的基础上加入轮廓增强处理,可改善边界模糊问题。
图像中边缘的细节部分与图像频谱的高频分量相对应,因此可采用高通滤波让高频分量通过,使图像的边缘或线条等细节变得清楚,实现图像锐化。
考虑到实时性的要求,本文将采用线性的FIR滤波器来实现高通滤波[3]。
如公式（2。
p′i,j=p（i,j+
（i,j
图2 图像放大系统框图
{w（i,jp（i,j}∑
（2
其中w（i,j为高通滤波算子的系数,p（i,
j为中心点像素值。
在一个3×
3的窗口中,各
像素点的系数如式（3。
w（i-1,j-1w（i,j-1w（i+1,j-1
w（i-1,jw（i,jw（i+1,j-1
-1
w（i-1,j+
1w（i,j+1w（i+1,j+1--1-（3=
1/8-1
56
8
本模块硬件实现QVGA放大到VGA需
要用到4个RAM。
其中RAM1用于缓存Y分量的一行数据,RAM2用于缓存UV分量的行数据,RAM3用于对图像锐化时缓存两行Y分量数据,而RAM4用来实现FIFO功能,整合YUV的数据使其有序输出,控制输出数据的速率。
输入图像经放大4倍后,每一行的输入数据会得到两行新的数据,并且每行也有数据扩展。
211 图像数据放大处理
双线性插值放大数据处理结构如图3所示,其中y_buf1为输入图像数据一级缓冲,y_buf2为输入图像数据二级缓冲,y_out1为RAM1读出数据一级缓冲,r1_buf1为从RAM1读出数据二级缓冲。
以图像两行数据的处理为例,原图像前两行分量数据如表（1所示,由原始图像第一行的320个Y数据插值可得到两行640的数据。
当原始第一行数据到来时,通过插值计算可得到放大后图像第一行数据,同时把原图像第一行的数据依次送入RAM1。
当输出数据第二行
此时RAM1中存储的是原图像第二行的数据。
接着从RAM1中读出原图像第二行的数据,根据权重q,放大后图像第四行的数据将会只由读出的第二行数据计算得到。
放大后图像第3行数据计算过程为:
放大后图像第3行数据是由原图像1,2行数据共同得到。
如表1中,原图像第2行的第一个点yin（2,1=98,通过与RAM1读出的前一行的第一个数据95计算,可得到新图像第三行的前两
图3 插值计算示意图
的同步信号到来时,把RAM1的数据读出,同
时根据权重计算出放大后的第二行数据。
这样,当输入数据行计数结束时,我们就得到了两行放大后的数据,并且RAM1中存放了第一行输入数据。
表1 输入Y分量数据
112
9598
29999
399100
49899
个点:
yout（3,1=yout（3,2=yin（2,130.5+yin（1,130.5=（95+98/2=96;
原图像第2行的第2个点yin（2,2=99,与原图像前一个点水平取平均,同时与RAM1读出的前一行的第1,2个数据95,99计算,可得到新图像的第3,4个点:
yout（3,3=yin（2,130.5+yin（1,130.5+yin（1,235+yin（2,230.5
=（+/499/35+yin（1,230.5（+y_out1/2
=（99+99/2=99
首先将输y_buf1与RAM1中读出缓存的数据yout1进行计算,然后把原图像第二行的输入点送入RAM1,即每次先读出RAM1中存的上一行的点与当前行进行计算,同时在写信号有效时,将当前输入行的数据写入RAM1中。
这样在原图像第二行数据送入后,我们将得到计算后放大图像第3行的数据,
图4为插值计算的仿真波形,y_tmp为放大后图像第3行的数据。
通过比较可以看出仿真数据与实际计算数据一致。
以上是Y分量数据的运算过程,UV分量也可以通过类似计算得到。
这样经插值计算后就得到了YUV各分量的数据。
图4 插值计算波形
212 锐化处理
由于经过双线性插值后的图像出现边界模
糊的问题,而人眼对亮度即Y分量是十分敏感的,本文通过对亮度进行锐化处理来增强图像轮廓,使图像边缘变得清晰。
如图5所示,放大处理后的Y分量数据进入锐化模块后,对其行
和列的数据各缓存两次,可得到一个3×
3的窗口,通过这9个数据对中心像素点进行高通滤波处理,还原高频信息,最后可得到锐化后亮度数据[4]。
经过锐化处理的Y分量数据和放大后的UV分量数据,经过FIFO的整合,可最后得到
57
有序的YUV图像数据
利用本文优化算法所得到的图像。
通过比较发现,图（c效果在清晰度上明显优于图（b。
说明本算法对图像效果有了较大的改善。
4 结论
本文提出并实现了基于双线性插值的图像放大优化算法,通过在原算法基础上加入锐化处理,保留了图像高频信息,改善了边缘模糊问题。
双线性插值运算简单,且本设计对图像信
图5 锐化处理结构图
3 实验结果分析
图6是一组图像效果图,其中图（a为原始
图像,图（b、图（c为图像4倍放大后截图,图（b为双线性插值算法所得到的图像,图（c为
号采用流水线处理,进一步提高了计算速度。
同时通过比较效果图发现本文优化算法对放大图像质量有了较大的提高。
因此,改进的双线性插值放大算法在处理速度、硬件实现成本和图像质量等方面都有很大的优势
图6 放大图像效果比较
参考文献:
[1]王岳环,彭晓.基于FPGA的数字图像实时放大设
计[J].计算机工程与应用,2020,（8:
1082110.[2]TohruYamadaandRokuyaIshii.Analgorithmto
magnifyimages[J].ProceedingsofTheIEEEIn2ternationalConferenceonIndustrialTechnology,1996:
6742677.
[3]K.ParulskiandK.E.Spaulding,Colorimage
processingfordigitalcameras,inDigitalColorIma2gingHandbook,（eds.G.Sharma,CRCPress,BocaRaton,FL.,pp.7282757,2002.
[4]OlukayodeA.OjoandTatianaG."
Analgorithm
forintegratednoisereductionandsharpnessen2hancement"
[J].IEEETransactionsonConsumerElectronics,2000,46（3:
4762480.
AnImprovedAlgorithmandItsRealization
of
升级会员 