Development of Gaze and Head Direction Detection and Lip-Reading Technology Using Pupil and Nostril Positions for Small Devices

开发利用小型设备的瞳孔和鼻孔位置的注视和头部方向检测以及唇读技术

• 批准号: 19K04293
• 负责人: FUKUMOTO Kiyotaka
• 金额: $ 2.58万
• 依托单位: Shizuoka University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2019
• 资助国家: 日本
• 起止时间: 2019-04-01 至 2022-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-19K04293/
• 关键词: 瞳孔; 鼻孔; 口領域; 視線検出; 顔方向; 口唇; 小型デバイス; 発話解析; ディープラーニング; スマートフォン; 注視点検出; 視線; 頭部方向; 読唇

项目成果

瞳孔検出のロバスト性改善のための自動アノテーションによるCNN閉眼画像追跡

具有自动注释功能的 CNN 闭眼图像跟踪，提高瞳孔检测的鲁棒性

• 发表时间: 2022
• 作者: HAYASHI Tatsuya;SEKI Hiroaki;TSUJI Tokuo;HIKIZU Masatoshi;澤本佑樹，関啓明，辻徳生，平光立拓;林竜也，関啓明，辻徳生，平光立拓， 疋津正利;林竜也; 関啓明; 辻徳生; 平光立拓; 疋津正利;太和田亘輝，福元清剛，海老澤嘉伸;田中槙，福元清剛，海老澤嘉伸
• 通讯作者: 田中槙，福元清剛，海老澤嘉伸

注視点検出用近赤外LED光源のLED個数削減を想定した画像差分と乗算に基づく瞳孔検出のロバスト性向上

假设减少用于凝视点检测的近红外 LED 光源的数量，提高基于图像差异和乘法的瞳孔检测的鲁棒性

• 发表时间: 2021
• 作者: HAYASHI Tatsuya;SEKI Hiroaki;TSUJI Tokuo;HIKIZU Masatoshi;澤本佑樹，関啓明，辻徳生，平光立拓;林竜也，関啓明，辻徳生，平光立拓， 疋津正利;林竜也; 関啓明; 辻徳生; 平光立拓; 疋津正利;太和田亘輝，福元清剛，海老澤嘉伸;田中槙，福元清剛，海老澤嘉伸;山本蓮，福元清剛，海老澤嘉伸;福元清剛，松田亜門，海老澤嘉伸
• 通讯作者: 福元清剛，松田亜門，海老澤嘉伸

頭部姿勢に基づき2カメラの姿勢制御を行う遠隔視対象物体の3D鑑賞システム

用于远程观察物体的 3D 查看系统，根据头部姿势控制两个摄像头的姿势

• 发表时间: 2019
• 作者: HAYASHI Tatsuya;SEKI Hiroaki;TSUJI Tokuo;HIKIZU Masatoshi;澤本佑樹，関啓明，辻徳生，平光立拓;林竜也，関啓明，辻徳生，平光立拓， 疋津正利;林竜也; 関啓明; 辻徳生; 平光立拓; 疋津正利;太和田亘輝，福元清剛，海老澤嘉伸;田中槙，福元清剛，海老澤嘉伸;山本蓮，福元清剛，海老澤嘉伸;福元清剛，松田亜門，海老澤嘉伸;福元清剛，小柳良介，生源寺類，海老澤嘉伸;清水凌雅，福元清剛，小野修司，海老澤嘉伸;阪口恵真，彦坂俊秀，福元清剛，海老澤嘉伸;福元清剛，海野晃人，海老澤嘉伸;福元清剛，宮本裕基，海老澤嘉伸
• 通讯作者: 福元清剛，宮本裕基，海老澤嘉伸

2系統の周辺配置光源の時分割点灯法と高速度カメラを用いた視線検出可能角度の広範囲化

使用两个外围光源和高速摄像机的时分照明方法扩大视线检测角度

• 发表时间: 2020
• 作者: HAYASHI Tatsuya;SEKI Hiroaki;TSUJI Tokuo;HIKIZU Masatoshi;澤本佑樹，関啓明，辻徳生，平光立拓;林竜也，関啓明，辻徳生，平光立拓， 疋津正利;林竜也; 関啓明; 辻徳生; 平光立拓; 疋津正利;太和田亘輝，福元清剛，海老澤嘉伸;田中槙，福元清剛，海老澤嘉伸;山本蓮，福元清剛，海老澤嘉伸;福元清剛，松田亜門，海老澤嘉伸;福元清剛，小柳良介，生源寺類，海老澤嘉伸;清水凌雅，福元清剛，小野修司，海老澤嘉伸;阪口恵真，彦坂俊秀，福元清剛，海老澤嘉伸;福元清剛，海野晃人，海老澤嘉伸
• 通讯作者: 福元清剛，海野晃人，海老澤嘉伸

Horizontal Wide-Range GazeDetection System by Combination of Pupil Ellipticity and Pupil-CornealReflection Methods

瞳孔椭圆率与瞳孔角膜反射方法相结合的水平大范围注视检测系统

• 发表时间: 2019
• 作者: Y. Ebisawa;K. Fukumoto;and Y. Nakazawa
• 通讯作者: and Y. Nakazawa