特征域多假设预测视频压缩感知重构神经网络

摘要

在预测-残差重构框架中，利用视频时间相关性进行多假设预测是视频压缩感知重构的关键步骤。针对目前的视频压缩感知多假设重构神经网络预测精度不够，且理论解释性较差等问题，文中结合传统多假设理论，提出了一种特征域多假设预测视频压缩感知重构网络(FMH＿CVSNet)。首先，提出了一种新的特征域多假设预测模块，通过构造合理的运动估计模块与假设权重求解模块来增强网络的预测能力；然后，提出了两阶段多参考帧运动补偿模式，以适应序列特征构造更优的假设集，进一步提升预测精度。仿真结果表明，FMH＿CVSNet在各实验条件下均取得了较好的重构性能，相比于2sMHR和VCSNet-2,平均PSNR分别提升了4.76、3.87 dB。

关键词