construction of customizable lecture formats that makes full use of , AI, xRs and self-decoration of textbooks using A-txt technology

充分利用人工智能、xRs和A-txt技术对教材进行自我装饰，构建可定制的讲座格式

• 批准号: 21H00914
• 负责人: 鈴木 真ノ介
• 金额: $ 11.07万
• 依托单位: Oyama National College of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2021
• 资助国家: 日本
• 起止时间: 2021-04-01 至 2026-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-21H00914/
• 关键词: 拡張現実（AR); 仮想現実（VR）; 複合現実（MR); アクティブラーニング; オンライン; 仮想現実（VR); セルフ・デコレーション; xR; AI; DX; カスタマブル化

昨年度までの実績と本年度の計画について，以下に項目ごとに記載する．・A-txt：昨年度までに完成していたUnity版のA-txtおよびモバイル端末用のA-txt用コンテンツ制作アプリコンテンツメーカー（C-mkr）については，イントラネット下での利用に一部不具合が生じていたため，その修正を優先させた．その結果，学外利用可能となるコンテンツサーバのクラウド化については遅れを生じたため，その完成に取り組む．それを受けて，セルデコ環境の実践に取り組む．また，ウェアラブル端末によるA-txt Glassについては，OS対応の問題が生じたため，その解決にも取り組む．教材については，講義・実験について順次開発を進める．・VR,MR,LMS関係：昨年度，VRプラットフォームとして当初予定のSecondLifeからTeams変更する旨言及したが，Teamsにおけるメタバース環境構築の情報が開発元から滞っている．これを引き続き取り組むとともに，MetaQuest上で構築することを試みる．また，MRについては，Microsoft HoloLenz2を用いたアプリケーションの開発に取り組む．なお，LMSの効果的な運用については，Teamsをメインで用いることに加えて，今年度より高専機構全体で導入したWebClassによる効果の検証も行う．高専MCCおよびCBTとの連携も引き続き検討する．・AI関係：AI音声処理によるテキストマイニングと対話型FAQについては，テキストベース開発から音声ベースへの移行に移り，試作段階を終えたので，制動向上を目指し引き続き取り組む．AI画像処理によるImageCorrectionについては，学生描画のグラフについての自動採点の第一段階として，グラフ画像の分類に取り組んだ．これを受けて採点段階に進む．

The achievements of last year and the plans of this year are recorded in the following items.・A-txt: A-txt of the Unity version of last year's までにcompleted していたUnity version of およびモバイルTerminal use コンテンツ produced アプリコンテンツメーカー（C-mkr）については，イントラネット下でのutilizationに一不合が生じていたため, そのcorrection を priority させた． As a result, it can be used outside of school.ド化については遅れを生じたため, そのcompleted にtakeり集团む.それをReceived けて, セルデコ Environment の実practice にGETり集团む．また, ウェアラブルEnd-end によるA-txt Glass については, OS 対応のproblem が生じたため, そのsolved にもtake り集团む. The teaching materials and lecture notes are opened in turn.・Relationship between VR, MR and LMS: Last year, the VR program was originally scheduled for SecondLife eams has changed its purpose and made a statement, and Teams has established an environment and built the information of the environment.これを cited the き続きtake the り group むとともに, the でconstructed することをtrial みる on MetaQuest.また, MR については, Microsoft HoloLenz2 を Use いたアプリケーションの开発に取り组む．なお, なについては for LMS effects, いることにplus for Teams をメインでて, this year, the entire high-tech institution introduced the WebClass and the effect was confirmed.高専MCC およびCBT との连合も cited き続き検検する．・AI relationship: AI voice processing によるテキストマイニングと対 type FAQ については, テキストベースOpen the 発から sound ベースへの行にshift り, try the stage をfinal えたので, brake upward をeyes refer しinducing き続きtake りgroup む. AI image processing, Image Correction, student drawing, automatic point picking, the first stage, and image classification, grouping.これをReceived けて mining points step by step に む．

项目成果

Improvement of Active Textbook System (A-txt) on Unity Version and Examination of Usage in Consideration of Copyright

Unity版活动教科书系统（A-txt）的改进及考虑版权的使用审查

• DOI: 10.1016/j.procs.2021.08.184
• 发表时间: 2021
• 期刊: Procedia Computer Science
• 作者: Suzuki Shin-nosuke;Kameyama Ryohei;Yamaguchi Masaya;Okada Akira;Hirata Katsumi;Kato Takehito;Akimoto Yutaro;Yajima Kuniaki;Ogawa Nobuyuki;Kanematsu Hideyuki;Fukumoto Tadashi
• 通讯作者: Fukumoto Tadashi

Virtual Experiences of Metaverse Using Mobile Type Head-Mounted Displays and Their Applicability

移动式头戴式显示器的元界虚拟体验及其适用性

• DOI: 10.1016/j.procs.2022.09.506
• 发表时间: 2022
• 期刊: Procedia Computer Science
• 作者: Kanematsu Hideyuki;Barry Dana M.;Shirai Tatsuya;Ogawa Nobuyuki;Yajima Kuniaki;Nakahira Katsuko T.;Kawaguchi Masashi;Suzuki Shin-nosuke;Kato Takehito;Yoshitake Michiko
• 通讯作者: Yoshitake Michiko

Three Dimensional Experiences Using a Commercially-Integrated Stand-alone Head-Mounted Display and Applying it to Education

• DOI: 10.1016/j.procs.2022.09.492
• 发表时间: 2022
• 作者: H. Kanematsu;D. Barry;Tatsuya Shirai;Nobuyuki Ogawa;K. Yajima;Katsuko T. Nakahira;Masashi Kawaguchi;Shin-nosuke Suzuki;T. Kato;Michiko Yoshitake

Development of Contents Maker for mobile terminals in Active Textbook System and examination of cloud-based content server

Active Textbook系统中移动终端Content Maker的开发及基于云的内容服务器的检验

• DOI: 10.1016/j.procs.2022.09.197
• 发表时间: 2022
• 期刊: Procedia Computer Science
• 作者: SUZUKI Shin-nosuke;KAMEYAMA Ryohei;YAMAGUCHI Masaya;OKADA Akira;HIRATA Katsumi;KOBAYASHI Yasuhiro;KATO Takehito;AKIMOTO Yutaro;YAJIMA Kuniaki;OGAWA Nobuyuki;KANEMATSU Hideyuki;FUKUMOTO Tadashi
• 通讯作者: FUKUMOTO Tadashi