摘要

本发明公开了一种基于深度学习的虚拟电梯交互系统和方法,所述系统包括:一投影仪,安装于支架上方且与电脑电气连接,用于向投影板投影出交互画面;一摄像头,安装在支架的上方且与所述电脑电气连接,用于采集投影在所述投影板上的交互画面;一支架,用于安装所述投影仪、摄像头和投影板;一投影板,安装在所述支架中,用于显示所述投影仪所投影的交互画面;一电脑,用于根据所述摄像头采集的交互信息做出相应的交互动作并通过所述投影仪将交互结果投影显示在所述投影板上。本发明利用深度学习的方法对触摸键盘的指尖位置进行检测,采用YOLOv3神经网络检测得到指尖位置后,通过判断其是否处在按键区域中,控制系统做出相应的交互动作。