既存知能を利用した小規模コーパスからの知識獲得
既存知能を利用した小規模コーパスからの知識獲得
批准号:
09780308
负责人:
新納 浩幸
金额:
$1.41万
依托单位:
依托单位国家:
日本
项目类别:
Grant-in-Aid for Encouragement of Young Scientists (A)
财政年份:
1997
资助国家:
日本
项目状态:
已结题
起止时间:
1997 至 1998
中文摘要
本研究の目的は,小規模コーパスから言語処理に有用な知識を獲得することである.大規摸コーパスから有用な知識が得られることは解明されてきたが,実際に大規模コーパスを準備することは困難であり,小規模コーパスからどのように知識を抽出するかが現実的な問題としてある.本研究ではこの問題に対し,既存にある知識を併用することを試みている.基本的には既存の辞書やシソーラスが有用である.ただし,それらは人間が利用するために作られたものであり,機械処理には向いていない.そこでまず既存のシソーラス補強することを検討し,成果を論文誌に発表した.また研究を進めるにあたり,自然言語処理の様々な問題は語義選択問題に帰着されることがわかってきた.そこで,語義選択問題の中でも特に,応用が明確な文書校正に着目した研究を開始した.具体的には,同音異義語の誤り検出に対して決定リストの手法,平仮名列の誤り検出に対してN-gram手法といった統計的な手法を試みた.その結果,これらの誤り検出にもコーパスを利用した統計的な手法が効果的であることを確認した.さらに情報抽出で必要となる人名などの固有名詞抽出や複合語の単語分割にもコーパスからの規則抽出が有効であるので,既存知識として従来手法の規則ベースの手法を想定し,規則ベースの手法の誤りをコーパスから得られた知識を利用して修正することを試み,その有効性を確認した.
英文摘要
本研究の目的は,小規模コーパスから言語処理に有用な知識を獲得することである.大規摸コーパスから有用な知識が得られることは解明されてきたが,実際に大規模コーパスを準備することは困難であり,小規模コーパスからどのように知識を抽出するかが現実的な問題としてある.本研究ではこの問題に対し,既存にある知識を併用することを試みている.基本的には既存の辞書やシソーラスが有用である.ただし,それらは人間が利用するために作られたものであり,機械処理には向いていない.そこでまず既存のシソーラス補強することを検討し,成果を論文誌に発表した.また研究を進めるにあたり,自然言語処理の様々な問題は語義選択問題に帰着されることがわかってきた.そこで,語義選択問題の中でも特に,応用が明確な文書校正に着目した研究を開始した.具体的には,同音異義語の誤り検出に対して決定リストの手法,平仮名列の誤り検出に対してN-gram手法といった統計的な手法を試みた.その結果,これらの誤り検出にもコーパスを利用した統計的な手法が効果的であることを確認した.さらに情報抽出で必要となる人名などの固有名詞抽出や複合語の単語分割にもコーパスからの規則抽出が有効であるので,既存知識として従来手法の規則ベースの手法を想定し,規則ベースの手法の誤りをコーパスから得られた知識を利用して修正することを試み,その有効性を確認した.
期刊论文(12)
专著(0)
科研奖励(0)
会议论文
登录
查看更多内容
Hiroyuki Shinnou: "Revision of Morphological Analysis Errors Through the Person Name Construction Model" ANLP-98. 399-407 (1998)
Hiroyuki Shinnou:“通过人名构建模型修正形态分析错误”ANLP-98。
DOI:
--
发表时间:
期刊:
影响因子:
--
作者:
[]
通讯作者:
新納浩幸: "複合語からの証拠に重みをつけた決定リストによる同音異義語判別" 情報処理学会論文誌. 39.12. 3200-3205 (1998)
Hiroyuki Niino:“使用对复合词证据进行加权的决策列表进行同音词歧视”,《日本信息处理学会汇刊》39.12 3200-3205(1998)。
DOI:
--
发表时间:
期刊:
影响因子:
--
作者:
[]
通讯作者:
新納浩幸: "コーパスを利用した分類語彙表の未登録語義の発見" 情報処理学会論文誌. 38.5. 965-961 (1997)
Hiroyuki Niino:“使用语料库发现分类词汇表中未注册的单词含义”,日本信息处理学会杂志 38.5(1997 年)。
DOI:
--
发表时间:
期刊:
影响因子:
--
作者:
[]
通讯作者:
新納浩幸: "平仮名N-gramによる平仮名の誤り検出とその修正" 言語処理学会第4回年次大会. C4-1(発表予定). (1998)
Hiroyuki Niino:“使用平假名 N-gram 进行平假名错误检测和纠正”,语言处理协会第四届年会 C4-1(待提交)。
DOI:
--
发表时间:
期刊:
影响因子:
--
作者:
[]
通讯作者:
池谷昌紀,新納浩幸: "文字ベースのHMMによる複合語単語分割の誤り修正" 言語処理学会第5回年次大会. C4-1, 発表予定. (1999)
Masanori Ikeya、Hiroyuki Niino:“使用基于字符的 HMM 进行复合分词中的错误校正”,语言处理协会第五届年会 C4-1,即将发表(1999 年)。
DOI:
--
发表时间:
期刊:
影响因子:
--
作者:
[]
通讯作者:
共 6 条
常識推論タスク CommonGen のための文の非常識度合いの推定と常識的文への再生成
-
批准号:23K11212
-
项目类别:Grant-in-Aid for Scientific Research (C)
-
资助金额:$3.0万
-
财政年份:2023
-
负责人:新納 浩幸
-
依托单位:
半教師有りクラスタリング手法を用いた語義別用例の収集
-
批准号:19011001
-
项目类别:Grant-in-Aid for Scientific Research on Priority Areas
-
资助金额:$2.82万
-
财政年份:2007
-
负责人:新納 浩幸
-
依托单位:
情報抽出を目的とした定型パターンの自動構築に関する研究
-
批准号:11780247
-
项目类别:Grant-in-Aid for Encouragement of Young Scientists (A)
-
资助金额:$1.34万
-
财政年份:1999
-
负责人:新納 浩幸
-
依托单位:
多義語を考慮した単語間の共起性の測定
-
批准号:08780327
-
项目类别:Grant-in-Aid for Encouragement of Young Scientists (A)
-
资助金额:$0.58万
-
财政年份:1996
-
负责人:新納 浩幸
-
依托单位:
コーパスからの動詞句型慣用表現の自動抽出
-
批准号:07780302
-
项目类别:Grant-in-Aid for Encouragement of Young Scientists (A)
-
资助金额:$0.51万
-
财政年份:1995
-
负责人:新納 浩幸
-
依托单位:
海外基金