ｅテスティングにおける項目類似度の自動推定に関する研究

电子考试中题项相似度自动估计研究

• 批准号: 13J08284
• 负责人: 高木 輝彦
• 金额: $ 1.77万
• 依托单位: The University of Electro-Communications
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2013
• 资助国家: 日本
• 起止时间: 2013-04-01 至 2015-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-13J08284/
• 关键词: eテスティング; アイテム・バンク; 類似項目; LDA; 項目間類似度; 項目反応理論; 自然言語処理; 情報検索; 類似度

昨年度は，まず，これまで本研究で提案したテスト項目（多肢選択式問題）間の類似度算出手法（全4手法）の精度を示すために，一般的な文書を対象とした類似度算出手法と提案手法を利用した類似項目の検索実験を行った．評価の結果，一般的な文書で用いられる手法に比べ，各提案手法の再現率と適合率が有意に向上したことが示唆された．そして，これら提案手法を基に類似項目検索機能の開発を行った．サーバ環境はLinux（CentOS），Apache，MySQL，PHP（またはPerl）となっている．項目の作成や選択などのユーザインタフェースにはPHPを用い，語の抽出や出現箇所の自動決定，項目間類似度の算出などの内部処理にはPerlを用いた．これらの研究活動や博士論文が認められ，平成27年1月に人工知能学会誌の「人工知能分野における博士論文」という特集で，博士論文の紹介記事が掲載された．また，岩手県立大学の修士学生と教員と共同で，多肢選択式の試験問題の自動生成を行うための知識ベースの自動構築手法を検討した．そして，知識ベースの構築に本研究で提案してきた項目間類似度を用いた手法が提案された．これらの研究成果をまとめ，平成27年2月に情報処理学会コンピュータと教育研究会の研究論文セッションにて修士学生が研究発表を行った．さらに，創価大学の修士学生と共同で行った，テスト項目間の類似度を用いた，新規項目の難易度の自動推定手法（平成25年1月に情報処理学会論文誌に掲載済）を基に，被験者の理解度に合った難易度の類似項目を出題するための手法を検討した．この手法では，被験者の理解度を測定する際に項目反応理論（IRT; Item Response Theory）の知識が必要となる．そのため，サンプルデータを基に，Rで項目反応理論を用いた簡易実験を行った．

In this paper, the similarity calculation method (all four methods) between the proposed items is used to calculate the similarity between the proposed items. As a result of the evaluation, the general document is used in comparison with the method, and the reproduction rate of each proposal method is intentionally upward. The development of similar project search functions is based on the proposal method. Environment Linux (CentOS), Apache, MySQL, PHP (Perl). Project creation, selection, selection In January 2007, the Journal of the Society for Artificial Intelligence published a special collection of doctoral theses, which was published in the Journal of the Society for Artificial Intelligence. The students and teachers of Iwate Prefectural University jointly discuss the automatic generation of multi-limb selection test problems and the automatic construction of knowledge. The knowledge base of this study was constructed by using the method of similarity between items. The research results of the Institute of Information Processing were published in February 2007. In addition, the students of the founding university jointly studied the similarity between items, and the automatic estimation method of the difficulty of the new item (published in the Journal of the Information Processing Society in January 2005) was based on the understanding of the examinee and the difficulty of similar items. The knowledge of IRT (Item Response Theory) is necessary to determine the degree of understanding of the receiver. A simple way to solve the problem is to use the theory of R.

项目成果

eテスティングにおけるLDAを用いた項目間類似度の算出

电子测试中使用LDA计算项目之间的相似度

• 发表时间: 2014
• 期刊: 情報処理学会論文誌
• 作者: 西田翔;筧雄介;嶋田幸久;藤原徹;高木 輝彦
• 通讯作者: 高木 輝彦