日本のテスト文化に適したIRTテストデザインの提案：大問形式を含む出題に着目して

适合日本测试文化的 IRT 测试设计提案：重点关注问题，包括大问题格式

• 批准号: 19K14308
• 负责人: 泉 毅
• 金额: $ 1.25万
• 依托单位: Tohoku University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Early-Career Scientists
• 财政年份: 2019
• 资助国家: 日本
• 起止时间: 2019-04-01 至 2020-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-19K14308/
• 关键词: 項目反応理論; 局所独立; テストレット; 大問形式; テストデザイン; IRT; シミュレーション

一問一答形式と大問形式が混在するテストデザインにおいて，実データを用いたIRTによる分析可能な事例研究は存在するが，このテストデザインにおける能力パラメタ，項目パラメタの精度に関する知見は得られていない。また，この精度は，一問一答形式，大問形式が含まれる割合によって左右されることが考えられる。上記のようなテストデザインの際，一問一答形式が何問，大問形式が何問でテストを設計した場合に，高い精度を確保した上で，IRTでの分析が可能なのだろうか。この問いに応えるために，シミュレーションデータ，実データ，両面からのIRTによる分析を行い，その分析結果の精度に関して知見を得る。一問一答形式と大問形式が混在するテストにおいて，IRTによる分析の際に高い精度が確保できるテストデザインを明らかにするため，どのような割合で一問一答形式と大問形式が構成される場合に能力パラメタ，項目パラメタが高い精度で測定できるのか，ということをシミュレーションにより検討することが本年度の計画であった。具体的には，受験者数，問題数，テストレットの数，テストレットに含まれる問題数等の観点から，複数のパタンでデータを発生させ，その後IRTによる分析を行う。この作業を繰り返し，真値と推定値の差異の指標を算出する。すべてのパタンにおいてこの指標を算出し，結果の比較検討を行う予定であったが，今回の研究期間では，シミュレーションデータ整備，シミュレーションデータの分析段階にとどまり，精度の検証，評価には至らなかった。

Question and answer form と big q が mixed す る テ ス ト デ ザ イ ン に お い て, be デ ー タ を with い た IRT に よ る analysis may exist な case study は す る が, こ の テ ス ト デ ザ イ ン に お け る ability パ ラ メ タ, project パ ラ メ タ の precision に masato す る knowledge は have ら れ て い な い. Youdaoplaceholder0, <s:1> <s:1> precision また, question-and-answer form, big question form が contains まれる and によって or so される とが とが とが test えられる. Written の よ う な テ ス ト デ ザ イ ン の interstate, question and answer form が ask, ask big q form が で テ ス ト を design し に た situations, high precision い を ensure し た で, IRT で が の analysis may な の だ ろ う か. こ の asked い に 応 え る た め に, シ ミ ュ レ ー シ ョ ン デ ー タ, be デ ー タ, struck surface か ら の IRT に よ る analysis を い, そ の analysis results の precision に masato し て knowledge を る. Question and answer form と big q が mixed す る テ ス ト に お い て, IRT に よ る analysis (the event の に high precision い が で き る テ ス ト デ ザ イ ン を Ming ら か に す る た め, ど の よ う な cut close で ask an answer form と big q が constitute さ れ る occasions に ability パ ラ メ タ, project パ ラ メ タ が determination of high precision い で で き る の か, と い う こ と を シ ミ ュ レ ー シ ョ ン に よ り beg す 検 る こ と が の plans this year で あ っ た. Specific に は, 験 number, issue number, テ ス ト レ ッ ト の number, テ ス ト レ ッ ト に containing ま れ る problem number の 観 point か ら, plural の パ タ ン で デ ー タ を 発 raw さ せ, そ の after IRT に よ を line う る analysis. The <s:1> operation を returns the <s:1>, the true value と presumed value <s:1> difference <e:1> index を calculates the する. す べ て の パ タ ン に お い て こ を の index to calculate し, results の 検 line for を う designated で あ っ た が, today back to の study period で は, シ ミ ュ レ ー シ ョ ン デ ー タ touches シ ミ ュ レ ー シ ョ ン デ ー タ の analysis Duan Jie に と ど ま り, precision の 検 license review 価 に は to ら な か っ た.