An Development of automated short-answer scoring system based on deep learning without using supervised scoring data

基于深度学习的不使用监督评分数据的自动简答评分系统的开发

基本信息

项目摘要

近年、自然言語で記述される文を順番のある時系列データと見なし、時系列データを入力データとして処理するリカレントニューラルネットワークと呼ばれるディープラーニング手法、特にBERTなどのトランスフォーマーの研究が進み、その性能の良さが証明されてきた。そこで平成29年および30年に実施した共通テスト試行調査の計12万件による記述回答データを文字認識から一気通貫でBERTによる自動採点までを行うことを試み、多くの学会で発表した。大学入試センターと農工大の共同研究グループは、通常の採点システムが用いる人手による補助輪をしない実運用で平均96%,最低でも93%の一致率を確保した。また各問6万件という膨大なデータにより、機械学習における必要なサンプルサイズについても新たな知見を得た。いままでの研究では学習データに用いるサンプルはせいぜい2千件程度であり、どの程度のサンプルがあれば十分な予測ができるかの目安は与えられていなかった。さらに九大グループでは意味的埋め込みと呼ばれる異なったアプローチによる方法を試みた。これら結果については本科研で3件の学会表彰(1.日本計算機統計学会第35回大会, 学生研究発表賞;2.Duolingo Award for IMPS 2021;3. SMASH22 Winter Symposium,準優秀賞.)を受け、その成果については日本教育新聞や日経新聞に掲載された。千葉大グループも別の方法を試みており、良い結果を得ている。
In recent years, the natural language has been described in the order of time series, time series, and force processing. In the 29 - 30 years since the founding of the People's Republic of China, a total of 120,000 articles have been investigated. University entrance examination and joint research of agricultural and industrial universities ensure an average of 96% and a minimum of 93% consistency in the use of subsidies. 60,000 pieces of information are needed for mechanical learning, and new knowledge is obtained. In the study, the study was conducted in the middle of the 2,000-piece level. The nine ways to make a living 3 awards for this research (1. The 35th General Assembly of Japan Computer Statistics Society, Student Research Award; 2. Duolingo Award for IMPS 2021;3. SMASH22 Winter Symposium, Quasi-Excellent Award. The Japanese Education News and the Japanese News are published in this article. Chiba big group to choose a different method to try, good results

项目成果

期刊论文数量(12)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
AI-based+ Automated Short-answer Scoring System
基于人工智能的自动简答评分系统
  • DOI:
  • 发表时间:
    2020
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Ishioka;T.
  • 通讯作者:
    T.
Short answer scoring of the trial test for Japanese Common University Entrance Examination,
日本统一大学入学考试简答题评分,
  • DOI:
  • 发表时间:
    2021
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Oka,H.;Hung,N.T.;Cuong,N.T.;Nakagawa,M.;Ishioka,T.
  • 通讯作者:
    Ishioka,T.
自動採点研究のこれから.「英語教育研究における自動採点 現状と課題」
自动评分研究的未来。“英语教育自动评分研究:现状与挑战”。
  • DOI:
  • 发表时间:
    2020
  • 期刊:
  • 影响因子:
    0
  • 作者:
    須藤敬仁;柏原昭博;石岡恒憲 (石井雄隆・近藤悠介(編))
  • 通讯作者:
    石岡恒憲 (石井雄隆・近藤悠介(編))
大学入学共通テスト試行調査における短答式記述答案の完全自動採点
高考普通考试试调查简答笔试答案全自动评分
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    岡知樹,N.T.Hung;N.TCuong;中川正樹;石岡恒憲
  • 通讯作者:
    石岡恒憲
共通テストの試行調査国語記述解答データを用いた自動採点のアルゴリズムとその評価
自动评分算法及其使用普通测试试验调查日语书面答案数据的评估
  • DOI:
  • 发表时间:
    2021
  • 期刊:
  • 影响因子:
    0
  • 作者:
    石岡恒憲;岡知樹;N.T.Hung;N.TCuong;中川正樹
  • 通讯作者:
    中川正樹
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

石岡 恒憲其他文献

擬似白色化信号を用いたハウリングキャンセラに関する検討
利用伪白化信号的啸叫消除器研究
  • DOI:
  • 发表时间:
    2015
  • 期刊:
  • 影响因子:
    0
  • 作者:
    石岡 恒憲;亀田 雅之;劉 東岳;藤村達弘,工藤憲昌,田所嘉昭
  • 通讯作者:
    藤村達弘,工藤憲昌,田所嘉昭
テキストマイニング新展開(特別講演)
文本挖掘新进展(专题讲座)
  • DOI:
  • 发表时间:
    2008
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Toshiharu Enomae;Michihisa Hotate;Yoon-Hee Han;坂本旬;石岡 恒憲
  • 通讯作者:
    石岡 恒憲
岩倉と金沢の精神病者保養所――患者と共生した精神科看護の源流――
岩仓和金泽的精神病疗养院:与患者共存的精神科护理的起源
  • DOI:
  • 发表时间:
    2015
  • 期刊:
  • 影响因子:
    0
  • 作者:
    石岡 恒憲;中村 治;Shingu Kazushige;新宮一成;石岡 恒憲;中村 治
  • 通讯作者:
    中村 治
Processingのプログラミング学習と教育のための学生間相互閲覧コメントシステムの開発
学生间互看评论系统的开发,用于编程学习和Processing教育
  • DOI:
  • 发表时间:
    2014
  • 期刊:
  • 影响因子:
    0
  • 作者:
    松山由美子;堀田博史;佐藤朝美;奥林泰一郎;松河秀哉;中村恵;森田健宏;深見俊崇;金寺 登;Shin Higashi;伊藤和行;藤村達弘,工藤憲昌,田所嘉昭;川瀨基寛・森田健宏・笠井正隆・堀田博史;石岡 恒憲;淀優介,宮嵜敬,堀内泰輔,田中則幸
  • 通讯作者:
    淀優介,宮嵜敬,堀内泰輔,田中則幸
公園等に関して寄せられた苦情報告の自動分類
自动分类收到的有关公园等的投诉报告
  • DOI:
  • 发表时间:
    2015
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Shaymaa E. Sorour;Tsunenori Mine;佐野 優太,峯 恒憲;石岡 恒憲;佐野優太,山口晃平,峯 恒憲;佐野優太,山口晃平,峯 恒憲
  • 通讯作者:
    佐野優太,山口晃平,峯 恒憲

石岡 恒憲的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('石岡 恒憲', 18)}}的其他基金

手書き文字認識を組み込んだ記述式自動採点システムの開発と改良
结合手写字符识别的描述性自动评分系统的开发和改进
  • 批准号:
    23K28201
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Development and improvement of a descriptive automatic scoring system incorporating handwritten character recognition
结合手写字符识别的描述性自动评分系统的开发和改进
  • 批准号:
    23H03511
  • 财政年份:
    2023
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Development and evaluation of equating methods for heterogeneous test scores
异质测试分数等值方法的开发和评估
  • 批准号:
    22K18641
  • 财政年份:
    2022
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Challenging Research (Exploratory)

相似海外基金

ナラティブはどのようにして生じるのか?-自然言語処理技術を用いた検討-
叙事是如何出现的?
  • 批准号:
    24K16786
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
言語流暢性課題の定性的分析方法の構築:語彙特性と自然言語処理の応用
构建语言流畅性任务的定性分析方法:词汇特征和自然语言处理的应用
  • 批准号:
    24K10484
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
自然言語処理に最適な語彙と分割の仕方を自動で獲得する人工知能の創出
创建自动获取自然语言处理最佳词汇和切分方法的人工智能
  • 批准号:
    24K20852
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
能動学習を用いた、放射線科所見文重要度推定用自然言語処理システムの開発
开发自然语言处理系统,使用主动学习来评估放射学结果的重要性
  • 批准号:
    24K18797
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
自然言語処理を用いた重粒子線治療の適応判定のための自動チャットシステムの開発
开发自动聊天系统,利用自然语言处理确定重离子放射治疗的适用性
  • 批准号:
    24K18821
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
自然言語処理技術を用いた食物アレルゲン性予測システム構築
利用自然语言处理技术构建食物过敏性预测系统
  • 批准号:
    24K01707
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
自然言語処理を活用した皮質脳波解析による長文読解の神経ネットワーク基盤の解明
通过自然语言处理的皮层脑电图分析阐明长句阅读的神经网络基础
  • 批准号:
    24K18686
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
自然言語処理技術を用いた教授学習支援システムの開発
利用自然语言处理技术开发教学支持系统
  • 批准号:
    24K16768
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
自然言語処理を利用した1910-30年代の日本文芸批評の研究
利用自然语言处理研究 1910 年代至 1930 年代的日本文学批评
  • 批准号:
    24K15991
  • 财政年份:
    2024
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
教師が客観的に授業を自己評価するための自然言語処理による新しい発話分析法の開発
使用自然语言处理开发一种新的语音分析方法,供教师客观地自我评估他们的课程
  • 批准号:
    23K12785
  • 财政年份:
    2023
  • 资助金额:
    $ 10.32万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了