自然言語インタフェースのための文字遷移情報量に対する新しい視点と応用

自然语言界面字符转换信息量的新视角及应用

• 批准号: 16650015
• 负责人: 中川 正樹
• 金额: $ 1.86万
• 依托单位: Tokyo University of Agriculture and Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Exploratory Research
• 财政年份: 2004
• 资助国家: 日本
• 起止时间: 2004 至 2006
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-16650015/
• 关键词: ヒューマンインタフェース; 自然言語; 情報量

申請者は,日本語文章を文字列として捉え,文字遷移の情報量として順方向と逆方向を考えた場合に,それぞれについて情報量を遷移確率上位の有限個だけ加算した情報量(これを加算限定m位までの累加情報量と呼ぶ)に順方向と逆方向で顕著な差異があり,逆方向のほうが順方向より大きい情報量を持つ可能性を見出した.上位有限個までの累加情報量を考える理由は,現実の文字認識後処理などへの文字遷移確率の利用において,ほとんどの場合に文字認識の有限個の上位候補に対してしか文字遷移確率を考えないことによる.これまで,日本経済新聞5年分のCD-ROM,および,中国人民日報新聞15年分のCD-ROMを購入し,それらのCD-ROMから記事をテキストに変換して,順方向と逆方向の累加情報量を調査した.その結果,中国と英語には日本語のような順方向と逆方向の差異はないことを確認した.中国語を解析して比較することで,日本語における平仮名の存在が順方向と逆方向の差異の理由になっていることが判明した.別の観点から,加算する有限個の遷移確率の総和が1になるように正規化した場合の正規化累加情報量についても検討した.これは,確率の総和が1になるようにしないと,情報量としての意味を持たない可能性があるためである.調査の結果,正規化した累加情報量でも同様のことを確認した.今後は,さらに上記の理由を深く研究したい.これらについては,近々に学会発表を予定している.

Applicants は, Japanese article を text columns と し て catch え, text migration amount の intelligence と し て along the direction と inverse direction を exam え に た situations, そ れ ぞ れ に つ い て intelligence を migration of probabilistic upper の a limited amount of だ け addition し た information quantity (こ れ を addition qualified m bit ま で の accumulative intelligence と shout ぶ) に along the direction と inverse direction で 顕 な difference between が あ り, inverse direction In the direction of ほうが, a large amount of <s:1> ほうが, a large amount of intelligence を, and the possibility of を showing を will be observed. Upper limited a ま で の accumulative amount of intelligence を exam え る reason は, now be の text after knowing 処 Richard な ど へ の text migration of probabilistic の using に お い て, ほ と ん ど の occasions に text understanding の limited の upper alternate に し seaborne て し か text migration of probabilistic を exam え な い こ と に よ る. こ れ ま で, Japan 経 済 news 5 years の cd-rom, お よ び, Peoples daily news 15 years buys し の cd-rom を そ れ ら の cd-rom か ら chronicle を テ キ ス ト に variations in し て, along the direction と inverse direction の accumulative amount of intelligence を survey し た. そ の as a result, Chinese English と に は Japanese の よ う な shun と の differences in reverse direction は な い こ と を confirm し た. Chinese language を parsing し て compare す る こ と で, Japanese に お け る flat 仮 name の が suitable direction と inverse direction の differences の reason に な っ て い る こ と が.at し た. Don't の 観 point か ら, add す る finite の migration of probabilistic の 総 and 1 に が な る よ う に regularized し た occasions の regularized accumulative amount of intelligence に つ い て も beg し 検 た. こ れ は, probabilistic の 総 and 1 に が な る よ う に し な い と, amount of intelligence と し て の mean を hold た な い possibility が あ る た め で あ る. Survey の as a result, the regularized し た accumulative amount of intelligence で も with others の こ と を confirm し た. Henceforth は, さ ら に written の reason を deep く research し た い. こ れ ら に つ い て は, nearly 々 に learn 発 table を designated し て い る.

项目成果

日本語文字遷移における順方向・逆方向の情報量差異

日语字符转换中前后方向信息量的差异

• 发表时间: 2007
• 期刊: 電子情報通信学会2007年総合大会講演論文集 2
• 作者: 朱碧蘭;中川正樹
• 通讯作者: 中川正樹

線形時間学習及び定数時間識別の一パターン識別手法

一种线性时间学习和常数时间识别的模式识别方法

• 发表时间: 2006
• 期刊: 電子通信学会技術報告 106, 97
• 作者: 小林卓夫;中川正樹
• 通讯作者: 中川正樹