一种基于Transformer网络的视频运动放大方法

作者：王飞; 郭丹; 李坤; 汪萌

来源：2023-04-28, 中国, CN202310481761.2.

本发明公开了一种基于Transformer网络的视频运动放大方法,其步骤包括：1、利用所提出的运动表示编码器提取运动表示；2、计算运动表示的差值以获取运动变化；3、使用所提出的运动放大转换模块执行非线性放大,得到放大运动表示；4、将放大运动表示与查询帧的运动表示的特征融合；5、通过所提出的多重细化解码器得到精细的放大融合特征；6、重建高质量的运动放大图像。本发明能快速准确地放大与可视化视频中人眼难以观测的微小运动,基于所提出的Transformer网络可以有效地抑制运动放大视频中存在的振铃伪影、噪声、运动模糊等问题,从而能生成高质量的运动放大视频。

• 出版日期2023-4-28
• 单位合肥工业大学