1998 Fiscal Year Annual Research Report
| Project/Area Number |
09780308
|
|---|
| Research Institution | Ibaraki University |
|---|
Principal Investigator |
新納 浩幸 茨城大学, 工学部, 講師 (10250987)
|
|---|
| Keywords | コーパス / 辞書 / シソーラス / 文書校正 / 同音異義語 / N-gram / 決定リスト |
|---|
| Research Abstract |
本研究の目的は,小規模コーパスから言語処理に有用な知識を獲得することである.大規摸コーパスから有用な知識が得られることは解明されてきたが,実際に大規模コーパスを準備することは困難であり,小規模コーパスからどのように知識を抽出するかが現実的な問題としてある.本研究ではこの問題に対し,既存にある知識を併用することを試みている.基本的には既存の辞書やシソーラスが有用である.ただし,それらは人間が利用するために作られたものであり,機械処理には向いていない.そこでまず既存のシソーラス補強することを検討し,成果を論文誌に発表した.
また研究を進めるにあたり,自然言語処理の様々な問題は語義選択問題に帰着されることがわかってきた.そこで,語義選択問題の中でも特に,応用が明確な文書校正に着目した研究を開始した.具体的には,同音異義語の誤り検出に対して決定リストの手法,平仮名列の誤り検出に対してN-gram手法といった統計的な手法を試みた.その結果,これらの誤り検出にもコーパスを利用した統計的な手法が効果的であることを確認した.
さらに情報抽出で必要となる人名などの固有名詞抽出や複合語の単語分割にもコーパスからの規則抽出が有効であるので,既存知識として従来手法の規則ベースの手法を想定し,規則ベースの手法の誤りをコーパスから得られた知識を利用して修正することを試み,その有効性を確認した.
|
-
[Publications] 新納浩幸: "複合語からの証拠に重みをつけた決定リストによる同音異義語判別" 情報処理学会論文誌. 39.12. 3200-3205 (1998)
-
[Publications] Hiroyuki Shinnou: "Revision of Morphological Analysis Errors Through the Person Name Construction Model" ANLP-98. 399-407 (1998)
-
[Publications] 池谷昌紀,新納浩幸: "文字ベースのHMMによる複合語単語分割の誤り修正" 言語処理学会第5回年次大会. C4-1, 発表予定. (1999)
