国际上有两个负责视音频编码的标准化组织,一个是VCEG(Video code Expert Group),是国际电信联合会下的 视频编码专家组,一个是MPEG(Motion Picture Expert Group),是国际标准化组织下的运动图像专家组。这两个视音频编码标准化组织都对视音频的编解码做出了非常重要的贡献:一是推动视音频编码技术的发展,一是推动视音频编解码的应用。
: z" Z& O, f* F# }5 c , C6 }/ Y# u+ \: r/ K+ n
视音频编解码涉及很多项视频和音频处理技术,每一项技术的改进都对视音频编码做出贡献,但作为一套完整、高效的编码方案,需要集中全人类在视音频编解码方面的最新智慧。个人或公司的研究成果,都希望被标准化组织,其经济回报是标准使用费。2 p' ~, S! U3 w% _* T: r6 c
j# a% F7 _* n0 m8 [" h; p: z
) u* t4 m( p! g" j7 j5 m3 @
这两个标准化组织制定的相关编码标准都获得了广泛的应用,VCEG制定的标准有H.261(被国际电信联合会选定为电视会议的视频压缩标准)、H.262(该标准同MPEG-2完全一样,是VCEG同MPEG组成的联合编码专家组JVT制定的压缩标准,VCEG发布的是H.262,MPEG发布的是MPEG-2)、H.263(该标准被国际电信联合会选定为可视电话的视频压缩标准,有增强型版本H.263+、H.263++)、H.264(该标准是2002年5月VCEG为新一代交互式视频通讯制定的标准)。& ~/ `' J7 N, W, v; p: ~
' i" o4 S$ X; L/ J; ZMPEG名气要大得多,制定的标准有MPEG-1、MPEG-2、MPEG-4、MPEG-7和MPEG-21 ,MPEG-1压缩标准为VCD所采纳,MPEG-2的压缩标准为DVD采纳,MPEG-4是为交互式多媒体通讯制定的压缩标准,MPEG-7是为互联网视频检索制定的压缩标准。1 x, L7 F8 a; m% d! K
6 T6 d. L8 }. C) T4 {8 B
VCEG制定的压缩标准H.26X都是针对单一矩形视频对象,其追求的是更高的压缩效率。MPEG-4在目前之所以很热,是因为MPEG-4是基于多个视音频对象的压缩编码标准,这非常适合于互联网上的多媒体应用。: A% L. W* `8 _% a& e' u; I& z
& D7 d+ v7 X3 ^" S+ m' G$ _! k在互联网上传播的多媒体信息,很多是可以划分为多个视频对象的,如电脑制作的动画节目、电视新闻节目等,而在实时视频图像编码中,在一个图象矩形框中很难实时识别多个视频对象,还是把一个视频源当作一个矩形视频对象进行编码。# h7 `7 X8 |1 _
. l7 B% Q$ `1 K* S5 l3 S Z, t VCEG在97年发布H.263的压缩标准后,制定了短期开发计划H.26N和长期开发计划H.26L,H.26N发展成H.263+和H.263++,H.26L经过5年时间的发展,在2002年5月作为H.264压缩标准进行发布。
6 j( y) Z( U' J/ L9 h1 R
/ r0 U6 _% ?- Q* ]6 G9 nMPEG在VCEG发布H.263之后,发布了MPEG-4 SP(即MPEG-4第一板),在该版本中引入了两个非常重要的概念:一个是一个视频源多个视音频对象编码,一个是码流传输异常处理(特别是无线传输应用)。从这里可以看出,VCEG致力于高效率的视频编码技术,MPEG更侧重系统和框架。0 ~4 J) ?) ~( Q0 K9 n
. R/ o. [9 n$ F: M; v
在2001年第四季度,VCEG H.26L发展到TML9.0时,MPEG同VCEG再次组成联合联合视频编码专家组JVT,对H.26L的算法进行了改进和完善,在2003年5月VCEG发布了H.264的压缩标准。MPEG在JVT对H.26L压缩算法修改的基础上,将该技术规范纳入到MPEG-4的标准中,作为MPEG-4 PART10发布,即MPEG-4的第三版,MPEG-4 AVC。H.264和MPEG-4 AVC代表了全人类在视音频编解码方面的最新成果。) l7 O* D7 P# K
( k1 k* u, R! d. P' b5 Y3 O" z4 ~
针对单一矩形视频对象,MPEG-4 AVC比MPEG-4第二版MPEG-4 ACE的压缩效率提高30%以上。
' q8 n" p! m* \+ X- p0 b
+ {, z: T4 g3 d' T5 c. Z. T
& T, L) p7 W# s: s7 u) N2 J: N同以前的视频压缩标准H.263++和MPEG-4 ACE相比,H.264与MPEG-4 PART10采用了一些新的算法,主要表现在以下几个方面:) f, G- F" h% P
! J( f6 G: D$ x' ?6 t
1、运动搜索
" _0 t9 n- g- @# I6 h / i: e' @' |( _8 y1 O4 ~" w i
a、 引入多参考帧,引入多达5个参考帧。) p0 ]- F2 u: N4 H6 j9 t6 K6 F \5 ^
b、 多种BLOCK形状
: R+ ?4 x3 `! }有16*16、16*8、8*16、8*8、8*4、4*8、4*4七种BLOCK形状。
# b( @) [3 p; c4 G1 a- rc、运动搜索精度更高
0 {5 [& ?( l, a) K% v5 T
" t$ D4 r4 w0 `; }' i) I# J) s5 ~1/2象素精度搜索采用了6阶滤波器,搜索精度有很大提高。也引入了1/4象素精度搜索和1/8象素精度搜索。
. B( S6 F) i) a
4 ~* K$ M3 I) c9 m* E3 z2、残余编码
3 I: h! d% g7 E; d* O8 H% j% D0 L+ J+ S% J. H# I6 R
a、 采用整型4*4 DCT变换! G/ U3 r4 K% n* T- q4 ?
b、 量化技术改进
1 T( [7 ~* q$ Q6 oc、 采用DE-BLOCK技术
& x, L1 E6 i+ _& N6 c. R# \d、 SP帧技术; U( u& [* }/ U
k# C6 T0 b; ^- [. i: R2 V" W这些技术的改变,一方面提高了压缩效率,另一方面运算强度大幅提高,大大地提高了实现的难度.
- e/ s5 ]* \ p6 ?
6 M9 p5 E5 j& F6 T
. ?/ C. t3 L% G# T# E |