An Emotional Recognition AI Mentoring System for Children with Intellectual Disabilities to Support their Self-Study through E-Learning

点击翻译按钮获取中文摘要

本研究の目的は、AI（Artificial Intelligence:人工知能）の応用技術である骨格検出や感情認識に基づくリアルタイム・メンタリング（助言・支援）機能を有するAR（Augmented Reality:拡張現実）カード教材eラーニング（electronic-learning）システムを開発し、知的障碍を持つ児童生徒の自律的学習を支援することである。学習時における学習者の様子をパソコンに接続されたカメラから取り込み、AIが判断した学習者の集中度や感情状態の推定結果に基づきリアルタイムで学習難易度を調整する。また、CG（Computer Graphics）で実現したキャラクタ（AIメンタ）が次の学習を指示すると同時に、学習者への適切な助言や励まし、集中力が途切れたタイミングでの声掛けなどのフィードバック（AIメンタリング）を行う。今年度は、学習者の骨格推定により、「立ち上がる」、「横を向く」、「うつ伏せになる」、「上を向く」などの非学習状態と思われる姿勢を抽出し、AIメンターが学習者に「前を向いてください」「座ってください」「疲れましたか」などと注意を促したり、「頑張っているね」などの励ましたりすることを可能にした。従来の学習履歴（正解率、解答時間）に基づくメンタリングシステムとは異なり、知的障碍のある学習者の感情状態、集中度、理解度を非言語情報から推定するところに本研究の新規性がある。音声言語による表出が困難な児童生徒に対する感情を汲み取った教育も期待できる。支援学校の先生に本eラーニング支援システムのデモンストレーションを行った結果、学習障害の児童生徒の学習支援になるだろうという意見を頂いた。また、eラーニングを頑張るように支援するだけでなく、体調に合わせて適度に休ませることにも利用できるのはないかといった特別支援学校の教員ならではの意見もいただいた。