基于机位计算的云演艺智能虚拟拍摄系统

作者：吴晓雨^*; 闵静萱; 邱驹成; 吴建琴

来源：中国传媒大学学报(自然科学版), 2023, 30(04): 17-26.

DOI：10.16196/j.cnki.issn.1673-4793.2023.04.003

• 智能拍摄
• 机位计算
• 美学评估
• 云演艺

云演艺智能虚拟拍摄对于降低拍摄专业门槛和空间人力等成本具有重要意义。本文提出了以机位计算为核心、美学评估为辅助的基于数据驱动的智能拍摄仿真技术，构建虚拟环境下的云演艺智能拍摄系统。首先提取真实视频中的人物关节点信息，然后判断主要演员并构建复曲面坐标系。接着用特征估计网络提取出相机和人物特征，通过相机运动提取门控网络和相机轨迹预测网络计算得到相机的运动参数。然后在Unity3D环境下，控制虚拟相机并生成相机轨迹和相应画面。再通过美学评价模型对画面进行整体美学评分和主要构图模式判断，选取较优机位。最终，用户可以在小程序端得到较优机位下的运镜轨迹和虚拟环境的仿真画面视频。以中国传媒大学礼堂和威海荣成西霞口剧场的虚拟场景为例展示了智能拍摄系统的效果。

• 出版日期2023
• 单位中国传媒大学