Development of AI-based False Information Discrimination Education System and Improvement of the Quality of Media Literacy Education

开发基于人工智能的虚假信息辨别教育系统并提高媒介素养教育质量

• 批准号: 22K02821
• 负责人: 長岡 健一
• 金额: $ 2.58万
• 依托单位: Ishikawa National College of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2026-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K02821/
• 关键词: SNS; 教育工学; 偽情報; メディアリテラシー; AI

本研究の目的は，偽情報を判別する能力を向上させる教育用システムを開発し，これを活用した教育実践を行いながらその教育効果を検証し，高専・大学等の我が国若年層のメディアリテラシー能力を向上させることである．そこで，全体で4年間の研究計画のうち，2022年度はAIによる真偽過程を可視化する「偽情報判別スキルトレーニングシステム」の開発に着手した．具体的には，Twitter上のツイートをAPIを用いて取得し，リツイート数，デマなどを指摘するリプライ，そのツイートのユーザのフォロワー数などの特徴量を抽出し，ランダムフォレストによる機械学習を用いて，その内容の真偽について判定するシステムの開発を行った．次に開発したシステムの判定精度に関する検証を行った．特定のキーワードに関する約1,500ツイートを8:2の割合で訓練データとテストデータに分類したデータセットをまず作成し，訓練データによって機械学習モデルを訓練した．なお，これらデータセットにおける各ツイートは，あらかじめ我々の主観によって真偽の分類を行っている．訓練終了時にはツイートの特徴量の重要度を導出し，可視化できるようにした．この特徴量の重要度はのちに真偽過程を可視化する上で重要な情報となる．続いて，訓練済みモデルにテストデータを適用し，真偽判定の正解率を算出しシステムの評価を行ったところ，およその正解率は71パーセント程度となった．検証結果は一つのキーワードに対する評価値であり，より一般的な正解率を得るため，他のキーワード，取得するツイート数を拡張するなどして検証を進めた．しかしながら，Twitterの仕様が2023年に変更され従来までのAPIを用いたツイートの取得が不可能となった．現在，その対策としてWebスクレイピング等による取得を行うようシステムの改善を行っているところである．

The purpose of this study is to develop the ability to discriminate false information in education, and to demonstrate the educational effects of using false information in education practice. In 2022, the development of "false information discrimination" was started to visualize the process of AI detection and authenticity. For details, the API on Twitter is used to obtain the number of tweets, and the number of tweets. The accuracy of the determination of the next development stage is related to the identification of the next stage. About 1,500 pieces of paper are cut off from the training paper.なお，これらデータセットにおける各ツイートは，あらかじめ我々の主観によって真伪の分类を行っている. At the end of training, the importance of the feature quantity is derived and visualized. The importance of these features and the process of authenticity are important information. In the middle of the training, the correct solution rate of the authenticity judgment is calculated. The result of the test is that the correct solution rate is obtained. Twitter's official website will be updated in 2023, and the API will be available in the future. Now, we have a strategy for improving the Web site, and we're going to make it better.