差错恢复视频编码技术是抑制视频传输差错扩散的关键技术,本项目主要研究1)信道失真估计通用模型。研究H.264编码策略、信道差错模式、打包策略和差错掩盖等因素对信道失真影响,得出信道失真通用快速模型,改进提高H.264失真度估计策略,并使其与宏块级率失真优化、差错掩盖和参考帧选择等多项技术很好结合。2)基于块变形的差错掩盖。研究物体复杂运动特征,根据复杂运动特征采用块变形技术制定对应的掩盖策略,提
提出了两个信道失真估计的通用模型基于仿真的信道失真精确估计模型(PSECD)和基于递推的信道失真快速估计模型(FECD)。PSECD具有比H.264的30个信道仿真器更高的估计精度和较少的存储开销,但是但仍需要较多缓存。FECD模型仅仅比30个信道仿真器的精度略低,但是计算复杂度较低且仅需很少缓存。提出了单参考帧和多参考帧预测的关键参考帧(KRPS)预测结构。在单参考帧时,根据编码距离与编码效率的关系,以有损率失真优化来快速选择最优参考帧。在多参考帧时,以传输失真最小为优化目标,结合最优宏块编码模式选择来增强差错恢复能力。实验表明,有反馈时KRPS的PSNR性能显著高于经典的ACK和NACK模式;无反馈时KRPS的性能也都好于H.264有损RDO优化和最优宏块编码模式选择。引入了信道代价均值和编码获益概念,提出了基于率失真优化框架的视频差错综合控制(IVEC)策略,实现了最优宏块模式选择、关键参考帧选择、差错掩盖等多项差错控制技术的融合。模拟实验证实IVEC在各种情况下都明显优于单一差错控制技术。