Real-time Projection of Lip Animation onto Face Masks using OmniProcam
Real-time Projection of Lip Animation onto Face Masks using OmniProcam
复制标题
使用 OmniProcam 将嘴唇动画实时投影到面罩上
DOI：
10.1145/3450618.3469171
复制
发表时间：
2021
期刊：
影响因子：
--
通讯作者：
Koike Hideki
中科院分区：
文献类型：
--
作者：
Takagi Luna;Sato Toshiki;Miyafuji Shio;Koike Hideki
本文介绍了一种OmniProcam系统，它通过一个鱼眼透镜和一个同轴Procam实现360 °水平投影，其中摄像机和投影仪的光轴精确匹配。结合2D标记识别，OmniProcam可以在3D空间的任意位置将图像显示在屏幕上。作为示例应用，我们开发了一个系统，该系统将嘴唇动画投影到用户的面罩上，以便在当前COVID-19情况下在物理会议上更好地沟通。该系统识别用户的语音，使用Lipsync生成嘴唇动画，并将动画投影到用户的面罩上。
This paper describes an OmniProcam system, which enables 360 degree horizontal projection by a fisheye lens with a coaxial procam in which the optical axes of the camera and projector are exactly matched. Combined with 2D marker recognition, the OmniProcam can display images onto screens at arbitrary positions in 3D space. As an example application, we developed a system which projects lip animation onto the user’s face masks for better communication at the physical meeting in current COVID-19 situation. The system recognizes the user’s speech, generates the lip animation using Lipsync, and projects the animation onto the user’s face masks.
面向非母语参与者的面对面会议支持系统
DOI：
--
发表时间：
2008
期刊：
影响因子：
--
作者：
Takashi Yoshino;Taku Fukushima;Chigusa Kita
通讯作者：
Chigusa Kita