Development of a sketch-based plant identification tool using deep learning for image retrieval and its utilization in science learning

利用深度学习进行图像检索的基于草图的植物识别工具的开发及其在科学学习中的应用

• 批准号: 22K02981
• 负责人: 谷 友和
• 金额: $ 0.83万
• 依托单位: Joetsu University of Education
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K02981/
• 关键词: 植物検索教材; AI; 花のスケッチ; 機械学習; 中学校理科; AI教材; 花スケッチ

本研究の目的は、中学校理科「生物の観察と分類の仕方」の単元で活用可能なＡＩ型植物検索教材を開発すること、及び開発教材を活用して中学校理科の授業モデルを提案することである。当初の計画では、令和4－6年度に身近な草本植物20種程度の判別能力を持たせることを目標としていた。令和4年度には、以前作成したプロトタイプ（初期型）の判別器で使用した4種（タンポポ、ハルジオン、シロツメクサ、オオイヌノフグリ）に加えて、カタバミ、ヒメオドリコソウ、ヒルガオ、スミレ、カラスノエンドウ、ヘビイチゴ、タネツケバナ、キュウリグサ、ムラサキケマンの9種の花の学習用画像を判別器で扱えるようにした（計13種）。新たに加えた9種については計2600枚の学習用データを作成した。機械学習後には、性能評価用のスケッチ画が必要となる。これについては、11名の作業補助者を募り、計138枚の手書きスケッチ画を集めた。これをスキャナーでPCに取り込み、電子データ化して使用した。機械学習アルゴリズムに関しては、プロトタイプのものに修正を加え、コードを再構築した。判別器の判別能力は、プロトタイプでは最大85％に達していたが、新たに9種を加えた13種全体では47.1％に低下した。また、新たに加えた9種のみで判別を行うと、正答率は34.7％とさらに低下した。令和4年度は種数の増加を急いだため、1種当たりの学習用データ数が少なくなってしまったことが判別能力低下の原因と考えられる。今後、学習用データ数を増やして判別精度を上げていきたい。この他、令和４年度には、国立大学法人J附属中学校第1学年の1学級（36名）を対象に，理科第2分野「いろいろな生物とその共通点」の学習において，植物と動物のスケッチを紙とタブレットに描く授業実践を行い、対象学級の全生徒にアンケート調査を実施した。現在、アンケート調査結果を論文にまとめている。

The purpose of this study is to develop and utilize the AI plant search teaching materials for science teaching in middle schools. The original plan was to maintain the discrimination ability of 20 kinds of herbaceous plants in 4-6 years. 4 types of discriminators used in the previous year 9 kinds of flower learning pictures are identified (13 kinds in total) by adding color, color. 9 new types of cookies are added, totaling 2600 for learning. After mechanical learning, performance evaluation is necessary. 11 of them were recruited, and 138 of them were collected. This is the first time I've ever seen a computer. Mechanical learning is a process of re-construction, modification and re-construction. The discriminant ability of the classifier is 85% higher than that of the original classifier, and 47.1% lower than that of the original classifier. 9 kinds of discrimination, the correct answer rate is 34.7%. In the fourth year, the number of students increased rapidly, and the number of students used for learning decreased. In the future, the number of learning methods will be increased. In 2004, the National University of Science and Technology J-affiliated High School conducted a survey on the study of common ground in biology, plants and animals. Now, the results of the survey are available.

项目成果

AIに多様な花のスケッチを判別させる試みと教材化に関する検討

尝试利用AI识别各种花卉素描并制作成教材的研究

• 发表时间: 2023
• 作者: 根本栞;谷友和
• 通讯作者: 谷友和