(57)【要約】【課題】新語を精度良く抽出することのできる電子機器装置を提供する。【解決手段】区切り記号や感嘆符などの記号によって区切られた形態素列の中で、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素における個々の形態素の少なくとも品詞に基づき新語候補としての連結形態素を抽出する。より具体的には、先頭の文字が小文字および記号以外であり、かつ最初と最後の形態素が共に名詞である連結形態素を最終的な新語候補として抽出する。これにより「ｉアプリ」「着メロ」といった２つの名詞が組み合わさった連結形態素など、新語である可能性の高い連結形態素を漏れなく抽出することが可能になる。【選択図】    図３
2004318480.tif 000002
【特許請求の範囲】
【請求項１】
文章データを入力する文章入力手段と、
前記文章入力手段により入力された文章データの形態素解析を行う形態素解析手段と、
前記形態素解析手段の形態素解析結果について、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素の中から、当該連結形態素を構成する個々の形態素の少なくとも品詞に基づいて新語候補を抽出する新語候補抽出手段と、
前記新語候補抽出手段により抽出された新語候補の出現頻度に基づいて新語を絞り込む新語絞り込み手段と
を具備することを特徴とする電子機器装置。
【請求項２】
前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ最初と最後の形態素が共に名詞である連結形態素を前記新語候補として抽出することを特徴とする請求項１に記載の電子機器装置。
【請求項３】
前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ名詞の形態素が含まれている連結形態素であって、かつ最初と最後の形態素が助詞および助動詞以外である連結形態素を前記新語候補として抽出することを特徴とする請求項１に記載の電子機器装置。
【請求項４】
前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ２つ目以降の形態素が人物および姓の名詞以外の連結形態素であって、かつ最初と最後の形態素が共に名詞である連結形態素を前記新語候補として抽出することを特徴とする請求項１に記載の電子機器装置。
【請求項５】
前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ２つ目以降の形態素が人物および姓の名詞以外の連結形態素であって、かつ最初と最後の形態素が助詞および助動詞以外である連結形態素を前記新語候補として抽出することを特徴とする請求項１に記載の電子機器装置。
【請求項６】
前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上の新語候補を真の新語として判定することを特徴とする請求項１に記載の電子機器装置。
【請求項７】
前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上である新語候補から、他の新語候補の一部で構成された新語候補を少なくとも除いたものを真の新語として判定することを特徴とする請求項１に記載の電子機器装置。
【請求項８】
前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上である新語候補から、「の」で終わる文字列で、かつ形態素に名詞：姓が含まれていない新語候補を少なくとも除いたものを真の新語として判定することを特徴とする請求項１に記載の電子機器装置。
【請求項９】
前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上である新語候補から、時間を示す文字を含む新語候補、通貨を表す文字を含む新語候補、および数字の組み合わせで構成された新語候補を少なくとも除いたものを真の新語として判定することを特徴とする請求項１に記載の電子機器装置。
【請求項１０】
前記新語絞り込み手段によって絞り込まれた新語を辞書に登録する辞書登録手段をさらに有することを特徴とする請求項１に記載の電子機器装置。
【請求項１１】
前記文章入力手段は、ウェブから前記第１の文章データおよび前記第２の文章データをそれぞれ取り込むことを特徴とする請求項６に記載の電子機器装置。
【請求項１２】
処理演算部を備えた電子機器装置において、文章データから新語を抽出する方法であって、
前記文章データを入力するステップと、
前記入力された文章データの形態素解析を前記処理演算部にて行うステップと、
前記処理演算部により、前記形態素解析の結果について、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素の中から、当該連結形態素を構成する個々の形態素の少なくとも品詞に基づいて新語候補を抽出するステップと、
前記処理演算部により、前記抽出された新語候補の出現頻度に基づいて新語を絞り込むステップと
を有することを特徴とする新語抽出方法。
【請求項１３】
コンピュータを、
文章データを入力する文章入力手段と、
前記文章入力手段により入力された文章データの形態素解析を行う形態素解析手段と、
前記形態素解析手段の形態素解析結果について、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素の中から、当該連結形態素を構成する個々の形態素の少なくとも品詞に基づいて新語候補を抽出する新語候補抽出手段と、
前記新語候補抽出手段により抽出された新語候補の出現頻度に基づいて新語を絞り込む新語絞り込み手段と
として機能させることを特徴とするプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ＰＤＡ、携帯電話、テレビジョンセット、ディスク搭載型ビデオレコーダなどのプログラム組み込み型の電子機器装置、新語抽出方法、およびプログラムに関する。
【０００２】
【従来の技術】
形態素解析において辞書に登録されていない言葉を「未知語」、新しく世に出てきた言葉を「新語」と呼ぶこととする。入力テキストから新語を抽出する方法を言及した技術には、たとえば、形態素解析によって判定された未知語の中から新語を選別する方法（たとえば特許文献１を参照）、形態素解析によって得られた２形態素以上の文字列からなる長単位語を新語候補として抽出し、その中から新語を選別する方法（たとえば特許文献２を参照）などがある。
【０００３】
【特許文献１】
特開２００２−２６９７５８９号公報
【０００４】
【特許文献２】
特開平６−３０１７１７号公報
【０００５】
【発明が解決しようとする課題】
特許文献１の技術では、辞書にある単語を一部でも用いた言葉、たとえば「着メロ」を例として挙げた場合、形態素解析によって「着：名詞」と「メロ：名詞」の２つの単語として判定されるので、「着メロ」という一つの新語を抽出できないという問題がある。
【０００６】
また、特許文献２の技術では、機能語（助詞、助動詞等）や区切り記号（句読点）によって挟まれた形態素の連結を長単位語として扱うため、「着メロに」から「着メロ」を抽出することは可能であるが、たとえば、「着メロ検索時に」からは「着メロ検索時」や「着メロ検索」を抽出することになり、やはり「着メロ」という新語を抽出できない。
【０００７】
また、インターネットや地上波放送などにより提供されるテレビ番組表の電子データであるＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ  Ｐｒｏｇｒａｍ  Ｇｕｉｄｅ）などでは複数の人名などの固有名詞がつながって書かれている場合があるが、このように複数の固有名詞がつながった文字列から個々の固有名詞を切り出すことは、前記いずれの技術をもってしても不可であった。
【０００８】
さらに、形態素解析によって新語候補として抽出された言葉の中には形態素解析の誤りによって、意味をなさない言葉が含まれる場合がある。そこで、このような意味をなさない言葉を新語候補から削除して、新語の絞り込みを行う必要がある。
【０００９】
新語の絞り込み方法としては出現頻度に基づくものが知られている。この方法では、入力テキストの長さが出現頻度に大きく影響するので、入力テキストの長さに応じて、新語絞り込みのための出現頻度のしきい値を調整することが精度向上に不可欠である。しかし、言葉によってはその表記に様々なものがある。たとえば「着メロ」の場合、「ちゃくメロ」「チャクメロ」といった別の表記が存在する。このため、入力テキストの長さに応じてしきい値を変更しても、表記が様々なものの場合には、出現頻度が分散し、新語絞り込みの精度向上は一概には望めないという現実がある。
【００１０】
本発明は、このような事情を鑑みて、新語を精度良く抽出することのできる電子機器装置、新語抽出方法およびプログラムを提供することを目的としている。
また、本発明は、新語による辞書の更新を効率的に行うことのできる電子機器装置、辞書更新方法およびプログラムを提供することを目的としている。
【００１１】
【課題を解決するための手段】
本発明の主たる観点に係る電子機器装置は、上記課題を解決するための手段として、文章データを入力する文章入力手段と、前記文章入力手段により入力された文章データの形態素解析を行う形態素解析手段と、前記形態素解析手段の形態素解析結果について、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素の中から、当該連結形態素を構成する個々の形態素の少なくとも品詞に基づいて新語候補を抽出する新語候補抽出手段と、前記新語候補抽出手段により抽出された新語候補の出現頻度に基づいて新語を絞り込む新語絞り込み手段とを具備するものである。
【００１２】
これにより、新語である可能性の高い連結形態素を漏れなく抽出することが可能になる。また、形態素の連結数を２以上かつｎ以下の範囲で適宜選択することによって、新語候補の抽出数の制御、入力テキストに含まれている新語の構成（形態素数）応じた最適な新語候補抽出を行うことが可能となる。
【００１３】
より具体的には、前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ最初と最後の形態素が共に名詞である連結形態素を前記新語候補として抽出する。これにより、「ｉアプリ」「着メロ」といった２つの名詞が組み合わさった連結形態素を新語候補として正しく抽出することができる。
【００１４】
また、好ましくは、前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ名詞の形態素が含まれている連結形態素であって、かつ最初と最後の形態素が助詞および助動詞以外である連結形態素を前記新語候補として抽出するようにしてもよい。これにより、たとえば「大魔人」などの、接頭辞（語）「大」、接尾辞（語）「人」を含む連結形態素も新語候補として抽出でき、また、ひらがなの人物名など、最後の形態素が助詞、助動詞以外である連結形態素を新語候補として漏らさず抽出できる。
【００１５】
さらに、好ましくは、前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ２つ目以降の形態素が人物および姓の名詞以外の連結形態素であって、かつ最初と最後の形態素が共に名詞である連結形態素を前記新語候補として抽出してもよい。これにより、「○○太郎」「○○花子」（但し、○○は姓）といった姓名を新語候補として抽出することが可能になる。
【００１６】
さらに、前記新語候補抽出手段は、前記生成した連結形態素の中から、先頭の文字が小文字および記号以外であり、かつ２つ目以降の形態素が人物および姓の名詞以外の連結形態素であって、かつ最初と最後の形態素が助詞および助動詞以外である連結形態素を前記新語候補として抽出するものであってよい。これによっても、姓名の新語候補を正しく抽出することができる。
【００１７】
また、前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上の新語候補を真の新語として判定するものであってよい。この発明によれば、複数の文章データに共に存在することを条件とする新語の絞り込み、すなわち、汎用性の高い新語の絞り込みが可能になる。
【００１８】
さらに、前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上である新語候補から、他の新語候補の一部で構成された新語候補を少なくとも除いたものを真の新語として判定するものであってよい。これにより、他の新語候補の一部で構成された新語候補が抽出されることがなくなり、新語抽出の精度向上を図れる。
【００１９】
さらに、前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上である新語候補から、「の」で終わる文字列で、かつ形態素に名詞：姓が含まれていない新語候補を少なくとも除いたものを真の新語として判定してもよい。これにより、たとえば「懐かしの」のような言葉が新語として抽出されるのを防止でき、新語抽出の精度向上を図れる。
【００２０】
また、前記新語絞り込み手段は、前記新語候補抽出手段により新語候補の抽出が行われた第１の文章データとは別の第２の文章データから、前記新語候補抽出手段によって抽出された新語候補を検索し、出現頻度がしきい値以上である新語候補から、時間を示す文字を含む新語候補、通貨を表す文字を含む新語候補、および数字の組み合わせで構成された新語候補を少なくとも除いたものを真の新語として判定するものであってよい。これにより、時間を示す文字を含む新語候補、通貨を表す文字を含む新語候補、および数字の組み合わせで構成された新語候補が新語として抽出されることを防止でき、新語抽出の精度向上を図れる。
【００２１】
さらに好ましくは、この発明は、前記新語絞り込み手段によって絞り込まれた新語を辞書に登録する辞書登録手段をさらに有するものであってよい。これによって、辞書の内容が最新状態に保たれ、形態素解析の精度向上を図ることができる。
【００２２】
また、あるテキストから抽出した言葉を別のテキストから検索する技術は、あるテキストからキーワードとして抽出した既知語を別のテキストから検索することによって出現頻度の高いキーワードを特定する場合にも応用できる。
【００２３】
すなわち、この方式は、第１の文章データの形態素解析を行う形態素解析手段と、この形態素解析手段によって得られた形態素からキーワードの候補を抽出するキーワード候補抽出手段と、前記第１の文章データとは別の第２の文章データから、前記形態素解析手段によって得られたキーワードの候補を検索し、出現頻度がしきい値以上のキーワード候補を真のキーワードとして判定するキーワード絞り込み手段とで構成することができる。
【００２４】
この場合は、キーワードであることを決定するためのしきい値の設定次第で、重要なキーワードを適当な数に絞り込むことができ、ユーザにとって実用的な情報として提供することが可能となる。また、一つの入力テキストに含まれているキーワードの数は新語に比べて概して多くなるので、キーワードの絞り込み数を定めておき、その上限に絞り込み数が達したところで絞り込みを中断するようにしてもよい。
【００２５】
さらに、この発明において、前記文章入力手段は、ウェブから前記第１の文章データおよび前記第２の文章データをそれぞれ取り込むことによって、たとえば、テレビ放送の番組表の情報として知られるＥＰＧから新語候補を抽出し、ゲーム情報、スポーツ情報、芸能情報、ニュース、ＩＴ情報などから新語の絞り込みを行うといった効率的な運用が可能となる。
【００２６】
本発明の別の観点に係る新語抽出方法は、上記課題を解決するために、処理演算部を備えた電子機器装置において、文章データから新語を抽出する方法であって、前記文章データを入力するステップと、前記入力された文章データの形態素解析を前記処理演算部にて行うステップと、前記処理演算部により、前記形態素解析の結果について、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素の中から、当該連結形態素を構成する個々の形態素の少なくとも品詞に基づいて新語候補を抽出するステップと、前記処理演算部により、前記抽出された新語候補の出現頻度に基づいて新語を絞り込むステップとを有するものである。
【００２７】
これにより、「ｉアプリ」「着メロ」といった２つの名詞が組み合わさった連結形態素を新語候補として正しく抽出することができるなど、新語である可能性の高い連結形態素を漏れなく抽出することが可能になる。また、形態素の連結数を２以上かつｎ以下の範囲で適宜選択することによって、新語候補の抽出数の制御、入力テキストに含まれている新語の構成（形態素数）応じた最適な新語候補抽出を行うことが可能となる。
【００２８】
さらに、本発明の別の観点に係るプログラムは、上記課題を解決するために、コンピュータを、文章データを入力する文章入力手段と、前記文章入力手段により入力された文章データの形態素解析を行う形態素解析手段と、前記形態素解析手段の形態素解析結果について、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素の中から、当該連結形態素を構成する個々の形態素の少なくとも品詞に基づいて新語候補を抽出する新語候補抽出手段と、前記新語候補抽出手段により抽出された新語候補の出現頻度に基づいて新語を絞り込む新語絞り込み手段ととして機能させるものである。
【００２９】
この発明により、コンピュータを用いて、「ｉアプリ」「着メロ」といった２つの名詞が組み合わさった連結形態素を新語候補として正しく抽出することができるなど、新語である可能性の高い連結形態素を漏れなく抽出することが可能になる。また、形態素の連結数を２以上かつｎ以下の範囲で適宜選択することによって、新語候補の抽出数の制御、入力テキストに含まれている新語の構成（形態素数）応じた最適な新語候補抽出を行うことが可能となる。
【００３０】
【発明の実施の形態】
以下、本発明の実施の形態を図面に基づいて説明する。
【００３１】
図１は、本発明を適用した実施の一形態である電子機器装置の電気的な構成を示すブロック図である。
【００３２】
同図に示すように、この電子機器装置１００は、処理演算部としてのＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１、メインメモリ２、プログラム／データ記憶部３、インターネットなどのネットワーク４との接続を処理するネットワークインタフェース部５、ユーザに情報を視覚的に提供する表示デバイス６、ＶＲＡＭ（Ｖｉｄｅｏ  Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）７を用いて表示デバイス６の画面への描画処理を行うグラフィックコントローラ８、ユーザに聴覚的に情報を提供するスピーカ９、ユーザの操作入力部１３からの入力を処理するユーザインタフェースコントローラ１４、そして以上の各部の間で信号を伝達するためのバス１５を備える。
【００３３】
ＣＰＵ１は、たとえばプログラム／データ記憶部３に記憶されたプログラムやデータ、ユーザによる操作入力部１３からの入力などに基づき、メインメモリ２をワークエリアとして用いて各種の演算処理や制御を実行する。
【００３４】
メインメモリ２は、たとえば、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などの、ランダムに読み取りと書き込みが可能な高速なメモリからなる。
【００３５】
プログラム／データ記憶部３は、読み取り専用あるいは読み書き可能な不揮発性の記憶装置であり、たとえばＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、フラッシュＲＯＭ、ディスクドライブなどである。
【００３６】
表示デバイス６は、具体的には、ＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）、ＰＤＰ（Ｐｌａｓｍａ  Ｄｉｓｐｌａｙ  Ｐａｎｅｌ）、ＯＥＬ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）などである。
【００３７】
ユーザの操作入力部１３は、具体的には、簡易キーボード、ＩＲ（Ｉｎｆｒａｒｅｄ）リモートコントローラ、ジョグダイヤル、プッシュボタンなどである。
【００３８】
ネットワークインタフェース部５は、たとえばアナログモデム、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、ＩＳＤＮ（Ｉｎｔｅｇｒａｔｅｄ  Ｓｅｒｖｉｃｅｓ  Ｄｉｇｉｔａｌ  Ｎｅｔｗｏｒｋ）、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ  Ｄｉｇｉｔａｌ  Ｓｕｂｓｃｒｉｂｅｒ  Ｌｉｎｅ）、ＦＴＴＨ（Ｆｉｂｅｒ−Ｔｏ−Ｔｈｅ−Ｈｏｍｅ）、Ｂｌｕｅｔｏｏｔｈ、ＦＯＭＡ（Ｗ−ＣＤＭＡ）などである。
【００３９】
図２は、この電子機器装置１００にテキストデータを入力し、この入力したテキストデータから新語の抽出を行うときにメインメモリ２に設けられる領域の構成を示すものである。
【００４０】
同図に示すように、新語抽出時、メインメモリ２には、基本プログラム領域２１、新語抽出プログラム格納領域２２、辞書格納領域２３、新語候補格納領域２４、新語格納領域２５などが設けられる。
【００４１】
基本プログラム領域２１は、この電子機器装置１００を動作させるための基本プログラムが格納される領域である。
【００４２】
新語抽出プログラム格納領域２２は、基本プログラムの下で、入力されたテキストデータから形態素解析を行って新語の候補を抽出し、抽出した新語候補から真の新語を絞り込み、たとえば辞書への自動登録を行う処理手順である新語抽出プログラムが格納される領域である。
【００４３】
辞書格納領域２３は、新語抽出プログラムによる形態素解析や日本語入力時のかな漢字変換などで使用される辞書が格納される領域である。この辞書は単語の新規登録が可能な辞書である。
【００４４】
新語候補格納領域２４は、新語抽出プログラムによる形態素解析の結果得られた新語の候補を一時的に格納しておくための領域である。
【００４５】
新語格納領域２５は、新語抽出プログラムによって得られた新語候補の中から絞り込まれた真の新語を一時的に格納しておくための領域である。
【００４６】
図３は、新語抽出プログラムの全体的な処理手順を示すフローチャートである。同図に示すように、新語抽出プログラムは、まず文章データであるテキストデータを入力し（ステップ３０１）、入力したテキストデータに対して、辞書格納領域２３に格納された辞書を使って形態素解析を行い（ステップ３０２）、この形態素解析の結果から新語候補を抽出してメインメモリ２の新語候補格納領域２４に格納し（ステップ３０３）、この新語候補格納領域２４に格納された新語候補から新語を絞り込んでメインメモリ２の新語格納領域２５に格納する（ステップ３０４）、といった処理手順である。
【００４７】
次に、ステップ３０３の形態素解析結果から新語候補を抽出する手段について説明する。
【００４８】
この新語候補抽出手段は、区切り記号（句読点、スペース、括弧、：、；など）や感嘆符（！、？など）などの記号によって区切られた形態素列の中で、形態素を一つずつずらしながら隣り合う２以上かつｎ（但し、ｎ≧２）以下の形態素を連結して一つ以上の連結形態素を生成し、この生成した連結形態素における個々の形態素の少なくとも品詞に基づき新語候補としての連結形態素を抽出する。
以下に、具体的な新語候補抽出手順を説明する。
【００４９】
図４は入力テキストの例、図５は図４の入力テキストに対する形態素解析結果、図６は第１の新語候補抽出の処理手順を示すフローチャートである。
【００５０】
この第１の新語候補抽出手順では、まず、連結数を２以上かつｎ（但し、ｎ≧２）以下として連結形態素の抽出を行う（ステップ６０１）。ｎは任意に決められた２以上の整数である。仮にｎ＝２とした場合、たとえば、図５に示す形態素解析結果から、図７に示すような連結形態素が暫定新語候補として得られる。そして、これら暫定新語候補である連結形態素から、先頭の文字が小文字および記号以外であり、かつ最初と最後の形態素が共に名詞である連結形態素を最終的な新語候補として抽出する。
【００５１】
すなわち、最初の文字が”ぁ”などの小文字あるいは記号である連結形態素を暫定新語候補から削除する（ステップ６０２）。続いて、最初と最後の形態素が名詞（未知語含む）以外である連結形態素を暫定新語候補から削除する（ステップ６０３）。なお、ここでは形態素解析で未知語は名詞の一部として扱っているので名詞としている。これにより残された連結形態素が最終的な新語候補として抽出される。具体的には、図８に示すような最終的な新語候補の抽出結果が得られる。このように「ｉアプリ」「着メロ」といった新語が正しく抽出することができる。
【００５２】
図９は第２の新語候補抽出の処理手順を示すフローチャートである。この第２の新語候補抽出手順では、まず、連結数を２以上かつｎ以下として、暫定的新語候補である連結形態素の抽出を行う（ステップ９０１）。そして、これら暫定新語候補である連結形態素から、先頭の文字が小文字および記号以外であり、かつ名詞の形態素が含まれている連結形態素であって、かつ最初と最後の形態素が助詞および助動詞以外である連結形態素を最終的な新語候補として抽出する。
【００５３】
すなわち、最初の文字が”ぁ”などの小文字１あるいは記号である連結形態素を上記暫定的な新語候補から削除する（ステップ９０２）。続いて、名詞の形態素が含まれていない連結形態素を暫定的新語候補から削除する（ステップ９０３）。そして、最初もしくは最後の形態素が助詞または助動詞である連結形態素を上記暫定的な新語候補から削除する（ステップ９０４）。これにより残された連結形態素が最終的な新語候補として抽出される。この結果、仮にｎ＝２とした場合、たとえば、図４に示した入力テキストに対して図１０に示すような最終的な新語候補が得られる。
【００５４】
図１０の例には示されていないが、この第２の新語候補抽出手順の特徴は、たとえば、「大魔人」などの、接頭辞（語）「大」、接尾辞（語）「人」を含む連結形態素も最終的な新語候補として抽出できることにあり、また、ひらがなの人物名など、最後の形態素が助詞、助動詞以外である連結形態素を新語候補として漏らさず抽出できることにある。
【００５５】
図１１は第３の新語候補抽出の処理手順を示すフローチャートである。
【００５６】
この第３の新語候補抽出の処理手順では、まず、連結数を２以上かつｎ以下として暫定新語候補である連結形態素の抽出を行う（ステップ１１０１）。そして、これら暫定新語候補である連結形態素から、先頭の文字が小文字および記号以外であり、かつ２つ目以降の形態素が人物および姓の名詞以外の連結形態素であって、かつ最初と最後の形態素が共に名詞である連結形態素を最終的な新語候補として抽出する。
【００５７】
すなわち、最初の文字が”ぁ”などの小文字あるいは記号である連結形態素を暫定新語候補から削除する（ステップ１１０２）。続いて、２つ目以降の形態素として人物または姓の名詞が存在する連結形態素を暫定新語候補から削除する（ステップ１１０３）。そして、最初と最後の形態素が名詞（未知語含む）以外である連結形態素を暫定新語候補から削除する（ステップ１１０４）。これにより残された連結形態素が新語候補として抽出される。
【００５８】
具体的には、図１２に示す入力テキストに対し、形態素解析によって図１３に示すような形態素解析結果が得られ、仮にｎ＝４とした場合でも、図１４に示すような「○○太郎」「○○花子」（但し、○○は姓）といった姓名の新語候補が正しく得られる。なお、図１２に示したような形態の入力テキストは、ＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ  Ｐｒｏｇｒａｍ  Ｇｕｉｄｅ）などで採用されている。
【００５９】
同じ入力テキストに対し、前述の第１の処理手順あるいは第２の処理手順で新語候補の抽出を行った場合、ｎ＝４とした場合、「○○太郎○○花子」、「○○太郎○○」「太郎○○花子」、「太郎○○」といった余計な連結形態素までも最終的な新語候補として抽出されてしまうが、当該第３の処理手順によれば、このような余計な連結形態素が最終的な新語候補として抽出されることなく、姓名の連結形態素のみを新語候補として抽出できるという利点がある。なお、図４の入力テキストに対しては第１の処理手順と同じ最終的な新語候補が抽出される。
【００６０】
図１５は第４の新語候補抽出の処理手順を示すフローチャートである。この第４の新語候補抽出の処理手順は、前述の第２の処理手順に、前述の第３の処理手順のステップ１１０３の処理を付加したものである。
【００６１】
すなわち、まず、連結数を２以上かつｎ以下として連結形態素の抽出を行う（ステップ１５０１）。そして暫定新語候補である連結形態素から、先頭の文字が小文字および記号以外であり、かつ２つ目以降の形態素が人物および姓の名詞以外の連結形態素であって、かつ最初と最後の形態素が助詞および助動詞以外である連結形態素を新語候補として抽出する。
【００６２】
すなわち、最初の文字が”ぁ”などの小文字あるいは記号である連結形態素を暫定新語候補から削除する（ステップ１５０２）。続いて、２つ目以降の形態素として人物または姓の名詞が存在する連結形態素を暫定新語候補から削除する（ステップ１５０３）。そして、最初もしくは最後の形態素が助詞または助動詞である連結形態素を暫定新語候補から削除する（ステップ１５０４）。これにより残された連結形態素が最終的な新語候補として抽出される。この第４の新語候補抽出の処理手順によっても、第３の処理手順と同様に姓名の新語候補を正しく抽出することができる。なお、図４の入力テキストに対しては第２の処理手順と同じ新語候補が抽出される。
【００６３】
以上説明した新語候補抽出手順によって、新語である可能性の高い連結形態素を漏れなく抽出することが可能になる。また、形態素の連結数を２以上かつｎ以下の範囲で適宜選択することによって、新語候補の抽出数の制御、入力テキストに含まれている新語の構成（形態素数）応じた最適な新語候補抽出を行うことが可能となる。
【００６４】
次に、以上のようにして抽出された新語候補から新語を絞り込む方法について説明する。
【００６５】
図１６は、第１の新語絞り込みの処理手順を示すフローチャートである。
【００６６】
この新語絞り込みの処理手順では、新語候補抽出に用いた入力テキストとは別のテキストを入力し、この別のテキストの中で、前述の新語候補抽出処理で抽出した新語候補と同一のものを検索し（ステップ１６０１）、この別のテキストの中での出現頻度がしきい値（ｍ）以上である新語候補を真の新語として絞り込む（ステップ１６０２）。
【００６７】
すなわち、この新語絞り込み手順の有用性を容易に理解できる具体的として、Ａ社のニュースを対象に新語候補を抽出し、Ｂ社のニュースを用いて新語を絞り込むというものがある。ニュースではたびたび新語が使われるが、ある一つの新語について各ニュースが最初から一斉に共通の表記を使うことなく、時が経つにつれて表記が各ニュース間で次第に統一されて行くことの方が普通である。したがって、あるニュースを対象に新語候補の抽出を行い、別のニュースを用いて新語を絞り込むことによって、少なくとも新語候補抽出に用いたニュースと別のニュースの両方に存在することを条件とする新語の絞り込み、すなわち、汎用性を考慮した新語の絞り込みが実現される。
【００６８】
図１７は、インターネットなどのネットワークから新語候補抽出用と新語絞り込み用の各テキストを取り込んで新語抽出を行う場合のシステム構成を示している。ここで、電子機器装置１００としては、ＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）でもよく、あるいは、Ｗｅｂへの接続機能を持つソフトウェア組み込み機器たとえばＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ（Ｄａｔａ）  Ａｓｓｉｓｔａｎｔｓ）、携帯電話、テレビジョンセット、ディスク搭載型ビデオレコーダなどでもよい。
【００６９】
新語候補抽出用と新語絞り込み用の各テキストの入手元としては、ネットワーク３０上の情報提供者、たとえばテレビ放送の番組表の情報として知られるＥＰＧや、ゲーム情報、スポーツ情報、芸能情報、ニュース、ＩＴ情報などの各種情報をＨＴＭＬ形式で提供するサイト３１〜３８などがある。
【００７０】
このようなシステムの好適な運用形態の一つとしては、図１８に示すように，ＥＰＧから新語候補を抽出し、Ｗｅｂ上のゲーム情報、スポーツ情報、芸能情報、ニュース、ＩＴ情報などから新語の絞り込みを行う形態を挙げることができる。
【００７１】
このような運用形態において、新語候補の抽出方法として図６に示した第１の新語候補抽出手順を採用し、形態素の連結数の設定値（ｎ）を１０とし、さらに出現頻度のしきい値（ｍ）を１として、新語の絞り込みを行った結果の例を図１９に示す。この結果から分かるように、新語として絞り込まれた言葉は、出現頻度に依存しなくても、一部たとえば「懐かしの」「５時」「朝青」「青龍」を除いて妥当なものであった。形態素の連結数の設定値（ｎ）は大きい程、より多くの形態素で構成される新語も絞り込みの対象とすることが可能となるが、この場合は処理時間が長く掛かることになる。一つの言葉を構成する形態素の数はせいぜい５程度であるから、形態素の連結数の設定値（ｎ）も５程度が妥当であることが推測される。もちろん、この形態素の連結数の設定値（ｎ）は、多くの形態素で構成される新語が存在することが予め分かっているような場合には大きな値に設定すればよく、逆の場合には小さい値に設定すればよい。
【００７２】
ここで、「懐かしの」という新語絞り込み結果の出現は、形態素解析において、「懐かしの○○」という部分から「の」を誤って名詞（未知語）と解釈したこと、すなわち形態素解析のルールに起因するものである。また、「朝青」と「青龍」という言葉は、「朝青龍」という言葉の最初の二文字と最後の二文字を新語候補抽出において誤って抽出してしまったことに拠るものである。
【００７３】
図２０は、上記のような新語絞り込みの誤りを防止可能な第２の新語絞り込みの処理手順を示すフローチャートである。
【００７４】
新語候補抽出に用いた入力テキストとは別のテキストを入力し、この別のテキストの中で、前述の新語候補抽出処理で抽出した新語候補と同一のものを検索する（ステップ２００１）。次に、出現頻度がしきい値（ｍ）未満の新語候補を削除する（ステップ２００２）。続いて、「の」で終わる文字列で、形態素に名詞：姓が含まれていない新語候補を削除する（ステップ２００３）。これにより「懐かしの」という言葉が新語として抽出されるのを防止できる。なお、形態素に名詞：姓が含まれないことを削除の条件に加えたのは、「の」で終わる文字列で、形態素に名詞：姓が含まれる場合としては「しの」という名詞：名を含む女性の名前が考えられるからである。
【００７５】
続いて、他の新語候補の一部で構成された新語候補を削除する（ステップ２００４）。これによって、たとえば「朝青龍」という新語候補の一部で構成される、たとえば「朝青」や「青龍」といった別の新語候補が新語として絞り込まれるのを回避できる。
【００７６】
さらに、時間を示す文字（時、分、秒など）を含む新語候補、通貨を表す文字（円、ドル、￥、＄など）を含む新語候補、数字の組み合わせで構成された新語候補を削除する（ステップ２００５）。これにより「５時」が新語候補から排除できる。
【００７７】
図２１は、以上の新語絞り込み手順によって最終的に絞り込まれた新語の一例である。
【００７８】
なお、以上説明した第１または第２の新語絞り込み手順は、本実施形態で採用した前述の第１〜第４の新語候補抽出手順と組み合わせて採用することに限定されるものではなく、既存の新語候補抽出手順と組み合わせても、その特有の効果を奏し得るものである。
【００７９】
以上のようにして抽出された新語は、辞書に新規登録することによって、以後の形態素解析にはもちろん、日本語入力時のかな漢字変換処理に利用することができる。なお、かな漢字変換用の辞書への新語登録時にはその新語の読みなどの登録も同時に必要となる。この場合の読みは手入力となる。形態素解析用の辞書では、読みの情報が不可欠であるいう訳ではないので、図２２に示すように、ステップ２２０４の新語の抽出に続いて、辞書への単語登録（ステップ２２０５）を自動で行うことが可能である。
【００８０】
図２３は、図２２のステップ２２０５の新語の辞書登録の処理手順を示すフローチャートである。
【００８１】
まず、図２１に示したような新語抽出結果のリストを読み込み（ステップ２３０１）、そこから新語を一つ抽出する（ステップ２３０２）。続いて、単語を登録するために必要な容量を辞書内に確保する（ステップ２３０３）。今回辞書に登録する新語に対して、たとえば”あ”という読みを一律に設定し、当該新語を辞書に固有名詞としてその読みとともに登録する（ステップ２３０４）。続いて上記のリストから次の新語を抽出して同様にその新語と読みを辞書に自動登録する。辞書に容量制限がある場合で、ステップ２３０３にて単語を新規登録するための容量が確保できなかった場合には、たとえば、最も長い期間使用されなかった登録語を辞書から削除し（ステップ２３０６）、ステップ２３０３をリトライする。辞書内の最も長い期間使用されなかった登録語を検索できるようにするために、辞書内の個々の登録語に最終アクセスの日時を付けておく仕組みが考えられる。これにより、新語の登録時にその読みの情報の登録を必須としている辞書への、新語の自動登録が実現される。
【００８２】
したがって、前述した新語候補の抽出、新語の絞り込み、辞書登録の手順が、定期的にかつ自動的に実行されることで、辞書の内容が最新状態に保たれ、形態素解析の精度向上を図ることができ、形態素解析を利用した他のアプリケーション（たとえば入力テキストからキーワードを生成するアプリケーションなど）の処理品位も高めることができる。
【００８３】
ところで、上記実施形態では、新語の抽出を目的として、あるテキストから抽出した言葉を別のテキストから検索することを行っているが、この手法は、あるテキストからキーワードとして抽出した既知語を別のテキストから検索することによって出現頻度の高いキーワードを特定する場合にも応用できる。この場合は、キーワードであることを決定するためのしきい値（ｍ）の設定次第で、重要なキーワードを適当な数に絞り込むことができ、ユーザにとって実用的な情報として提供することが可能となる。また、一つの入力テキストに含まれているキーワードの数は新語に比べて概して多くなるので、キーワードの絞り込み数を定めておき、その上限に絞り込み数が達したところで絞り込みを中断するようにしてもよい。
【００８４】
このようなキーワードの絞り込み機能は、たとえば、Ｗｅｂ上のポータルサイトに、たとえば「本日の気になる言葉」という題名で、そのキーワードを掲載するといった場合に有効である。もちろん、Ｗｅｂブラウザに上記の機能をアドオンなどにより組み込んで、個人的に利用するキーワードとして利用するようにしてもよい。
【００８５】
次に、Ｗｅｂ上のサーチエンジンを利用してユーザの嗜好に応じた辞書の更新を行う仕組みについて説明する。図２４は、かかる仕組みの手順を示すフローチャートである。
【００８６】
電子機器装置１００のユーザは、Ｗｅｂ上のサーチエンジンにアクセスし、このサーチエンジンに任意のキーワードを入力して検索を依頼する（ステップ２４０１）。サーチエンジンは、この検索依頼に応じてユーザから与えられたキーワードに基づいてＷｅｂ検索を行い（ステップ２４０２）、その検索結果であるＷｅｂページのリンク情報を応答する。
【００８７】
電子機器装置１００にて起動している新語抽出プログラムは、サーチエンジンからの応答として受け取った、たとえば上位ｘ個のＷｅｂページへのリンク情報により、それぞれのリンク先のＷｅｂページを入力テキストとして取得する（ステップ２４０３）。
【００８８】
続いて、新語抽出プログラムは、取得した個々の入力テキストに対して形態素解析を行い（ステップ２４０４）、この形態素解析の結果から新語候補を抽出する（ステップ２４０５）。続いて新語候補から新語を絞り込み（ステップ２４０６）、絞り込んだ新語を辞書に登録する（ステップ２２０５）。
【００８９】
このときの新語の絞り込みには、取得したすべての入力テキストの中での出現頻度がしきい値（ｍ）以上である新語候補を真の新語として絞り込む方法を採用することができる。
【００９０】
このようにして、Ｗｅｂ上のサーチエンジンを利用してユーザの嗜好に応じた辞書の自動更新を行うことが可能になる。
【００９１】
以上本発明の実施形態を説明したが、本発明は、上述の実施形態にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【００９２】
【発明の効果】
以上説明したように、本発明によれば、新語を精度良く抽出することができる。また、新語による辞書の更新を効率的に行うことが可能になる。
【図面の簡単な説明】
【図１】本発明を適用した実施の一形態である電子機器装置の構成を示すブロック図である。
【図２】図１の電子機器装置にて新語抽出を行うときにメインメモリに設けられる領域の構成を示す図である。
【図３】新語抽出プログラムの全体的な処理手順を示すフローチャートである。
【図４】入力テキストの例を示す図である。
【図５】図４の入力テキストに対する形態素解析結果を示す図である。
【図６】第１の新語候補抽出の処理手順を示すフローチャートである。
【図７】図５に示す形態素解析結果から生成された暫定新語候補を示す図である。
【図８】図７の暫定新語候補に対して得られた最終的な新語候補を示す図である。
【図９】第２の新語候補抽出の処理手順を示すフローチャートである。
【図１０】第２の新語候補抽出の処理手順によって得られた最終的な新語候補を示す図である。
【図１１】第３の新語候補抽出の処理手順を示すフローチャートである。
【図１２】ＥＰＧの入力テキストの例を示す図である。
【図１３】図１２のＥＰＧの入力テキストに対する形態素解析結果を示す図である。
【図１４】図１３の形態素解析結果に対して得られた新語候補を示す図である。
【図１５】第４の新語候補抽出の処理手順を示すフローチャートである。
【図１６】第１の新語絞り込みの処理手順を示すフローチャートである。
【図１７】ネットワークから新語候補抽出用と新語絞り込み用の各テキストを取り込んで新語抽出を行う場合のシステム構成を示す図である。
【図１８】図１７のシステムの好適な運用形態を示す図である。
【図１９】新語の絞り込み結果の例を示す図である。
【図２０】第２の新語絞り込みの処理手順を示すフローチャートである。
【図２１】図２０の新語絞り込み手順によって最終的に絞り込まれた新語の一例を示す図である。
【図２２】新語の辞書登録を含む新語抽出プログラムの全体的な処理手順を示すフローチャートである。
【図２３】図２２における新語の辞書登録の処理手順を示すフローチャートである。
【図２４】Ｗｅｂ上のサーチエンジンを利用してユーザの嗜好に応じた辞書の更新を行う仕組みの手順を示すフローチャートである。
【符号の説明】
１      ＣＰＵ
２      メインメモリ
３      プログラム／データ記憶部
４      ネットワーク
２１      基本プログラム領域
２２      新語抽出プログラム格納領域
２３      辞書格納領域
２４      新語候補格納領域
２５      新語格納領域
３０      ネットワーク
１００      電子機器装置
【図１】
2004318480.tif 000003
【図２】
2004318480.tif 000004
【図３】
2004318480.tif 000005
【図４】
2004318480.tif 000006
【図５】
2004318480.tif 000007
【図６】
2004318480.tif 000008
【図７】
2004318480.tif 000009
【図８】
2004318480.tif 000010
【図９】
2004318480.tif 000011
【図１０】
2004318480.tif 000012
【図１１】
2004318480.tif 000013
【図１２】
2004318480.tif 000014
【図１３】
2004318480.tif 000015
【図１４】
2004318480.tif 000016
【図１５】
2004318480.tif 000017
【図１６】
2004318480.tif 000018
【図１７】
2004318480.tif 000019
【図１８】
2004318480.tif 000020
【図１９】
2004318480.tif 000021
【図２０】
2004318480.tif 000022
【図２１】
2004318480.tif 000023
【図２２】
2004318480.tif 000024
【図２３】
2004318480.tif 000025
【図２４】
2004318480.tif 000026