(57)【要約】文章評価装置１４は、利用者の作成した解答文と、当該解答文に対応した正解文データベース１８の各正解文とをそれぞれ対比し、これら正解文毎に、後述する基準による減点法での採点を行い、そのうちの最高得点を前記解答文の得点とする採点部２１を備えている。この採点部２１は、正解文及び解答文の中の語群の相違に着目して採点する語群評価手段２５と、前記正解文及び前記解答文の中の単語の品詞に着目して採点する品詞評価手段２７と、これら各評価手段２５〜２８による採点を行った後で最終的な採点を行う最終評価手段２９とを備えている。【特許請求の範囲】
【請求項１】
原文となる問題文に対して所定言語で翻訳された解答文の評価を行う文章評価装置において、
前記問題文に対する正解の翻訳文となる正解文が記憶された正解文データベースと、前記正解文と前記解答文との対比により、当該解答文に対する採点処理を行う採点部とを備え、
前記採点部は、前記正解文及び前記解答文の中の語群の相違に着目して採点する語群評価手段を備え、
前記語群評価手段は、前記正解文及び解答文の間で同一若しくは近似の語群を抽出して当該同一若しくは近似の語群を評価対象語とし、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付けることを特徴とする文章評価装置。
【請求項２】
前記語群評価手段は、前記同一の語群と近似の語群とで点数に差を付けることを特徴とする請求項１記載の文章評価装置。
【請求項３】
前記語群評価手段は、正解文及び解答文の間での語群の相違が、当該語群を構成する単語の間での活用形の相違及び／又はスペルミスにすぎない場合に、近似の語群とすることを特徴とする請求項１又は２記載の文章評価装置。
【請求項４】
所定の単語がその活用形とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文及び前記解答文の中の単語の活用形の相違に着目して採点する活用形評価手段を備え、
前記活用形評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び解答文の間で活用形が相違する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付けることを特徴とする請求項１記載の文章評価装置。
【請求項５】
前記採点部は、前記解答文の中の単語のスペルミスに着目して採点するスペル評価手段を備え、
前記スペル評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び前記解答文の間で綴りが近似する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付けることを特徴とする請求項１又は４記載の文章評価装置。
【請求項６】
所定の単語がその品詞の種類とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文及び前記解答文の中の単語の品詞の同一性に着目して採点する品詞評価手段を備え、
前記品詞評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び解答文の間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付けることを特徴とする請求項１〜５の何れかに記載の文章評価装置。
【請求項７】
前記採点部は、前記正解文及び前記解答文の中で、前記評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価手段を備えたことを特徴とする請求項１〜６の何れかに記載の文章評価装置。
【請求項８】
前記最終評価手段は、前記残りの単語が、前記正解文及び前記解答文の間で対応する位置に存在するか否かにより点数に差を付けることを特徴とする請求項７記載の文章評価装置。
【請求項９】
前記最終評価手段は、前記残りの単語の品詞の種類に応じて点数に差を付けることを特徴とする請求項７記載の文章評価装置。
【請求項１０】
前記正解文データベースには、前記正解文が複数記憶され、
前記採点部では、前記各正解文に対し、前記各評価手段による前記解答文の採点処理がそれぞれ行われ、正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価とすることを特徴とする請求項１〜９の何れかに記載の文章評価装置。
【請求項１１】
原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
前記正解文及び解答文の間で同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける処理を前記コンピュータに実行させることを特徴とする文章評価プログラム。
【請求項１２】
原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
前記正解文及び解答文の間で同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける語群評価ステップと、
前記語群評価ステップでの評価対象語を除く単語の中から、前記正解文と前記解答文との間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付ける品詞評価ステップと、
前記各ステップでの評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価ステップとを、
順に前記コンピュータに実行させることを特徴とする文章評価プログラム。
【請求項１３】
前記各ステップは、複数の正解文それぞれに対して実行され、これら正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価と決定するように、前記コンピュータに実行させることを特徴とする請求項１２記載の文章評価プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は文章評価装置及び文章評価プログラムに係り、更に詳しくは、原文となる問題文に対して所定言語で翻訳された解答文の評価を客観的且つ簡易に行うことのできる文章評価装置及び文章評価プログラムに関する。
【背景技術】
【０００２】
中学校や高等学校等の英語教育現場において、生徒に出題された英作文のテスト問題の採点は、教師の独自の採点基準で行われることが多い。すなわち、生徒の作成した解答文を教師が採点する際には、当該解答文と正解文を見比べ、それらの相違の程度に応じ、主観的な判断で行われる。ところが、問題文の正解となる英文は、幾通りも存在することから、それら正解文を全て生徒の解答文と見比べることは莫大な時間がかかり、実際の教育現場では実行不可能である。従って、採点教師は、一文若しくは数文の正解文を模範解答とし、限られた模範解答を生徒の解答文と見比べて採点することが一般的で、難易度の高い問題文になる程、多数の生徒の解答文の中で、模範解答と完全に一致するものが少なくなる。また、模範解答文と解答文との相違は、単語の相違、単語の位置の違い、単語のスペル違い、単語の抜け、単語の活用形の相違、時制の相違等、多岐に渡るものであり、パターン化することが困難である。以上のことから、複数の教師でテスト問題の採点を分担するような場合、模範解答と解答文の相違点に関する評価は、各教師の主観に任されることになり、各教師間で採点基準が完全に一致しなくなり易い。また、一人の教師が全生徒の採点を行った場合でも、採点の当初と終わりでは採点基準が変わる場合も多々ある。このため、総じて、人間による英作文の採点では、客観性を担保することが難しいのが現状である。【０００３】
ところで、所定の翻訳者や自動翻訳装置が作成した翻訳文に対する評価を行う翻訳能力評価システムが知られており（特許文献１参照）、このシステムを英作文の採点に応用して適用することも考えられる。この翻訳能力評価システムは、日本語テスト文に対する正解候補となる英文（正解文）が多数記憶されており、当該各正解文と、前記日本語テスト文に対応して作成された翻訳文とがそれぞれ対比され、各正解文それぞれについて、翻訳正解率と呼ばれる指標が求められ、そのうち最高の翻訳正解率が採択される。この翻訳正解率は、翻訳文を構成する単語と同一の単語が、正解文と同一の位置に存在するか否かを基準に算出される。
【特許文献１】特開２００２−１４０３２６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、前記翻訳能力評価システムにあっては、正解文と翻訳文との間で、相互に相対する単語の同一性のみで翻訳文の評価が行われるため、実情に合わない翻訳文の評価がなされる虞がある。例えば、正解文と翻訳文との間で、相互に同一となる語群が存在するものの、それら語群の位置が相互に異なっている場合、同一の語群を導出したという能力が全く考慮されず、全く違う語群を配置した場合と同等に扱われてしまうという不都合がある。【０００５】
本発明は、このような不都合に着目して案出されたものであり、その目的は、原文となる問題文に対して所定言語で翻訳された解答文の評価を実情に沿って客観的に行うことができる文章評価装置及び文章評価プログラムを提供することにある。
【課題を解決するための手段】
【０００６】
（１）前記目的を達成するため、原文となる問題文に対して所定言語で翻訳された解答文の評価を行う文章評価装置において、
前記問題文に対する正解の翻訳文となる正解文が記憶された正解文データベースと、前記正解文と前記解答文との対比により、当該解答文に対する採点処理を行う採点部とを備え、
前記採点部は、前記正解文及び前記解答文の中の語群の相違に着目して採点する語群評価手段を備え、
前記語群評価手段は、前記正解文及び解答文の間で同一若しくは近似の語群を抽出して当該同一若しくは近似の語群を評価対象語とし、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付けること、という構成を採っている。【０００７】
（２）また、前記語群評価手段は、前記同一の語群と近似の語群とで点数に差を付ける、という構成を採っている。【０００８】
（３）更に、前記語群評価手段は、正解文及び解答文の間での語群の相違が、当該語群を構成する単語の間での活用形の相違及び／又はスペルミスにすぎない場合に、近似の語群とする、という構成を採っている。【０００９】
（４）また、所定の単語がその活用形とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文及び前記解答文の中の単語の活用形の相違に着目して採点する活用形評価手段を備え、
前記活用形評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び解答文の間で活用形が相違する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付ける、という構成を併せて採ることができる。【００１０】
（５）更に、前記採点部は、前記解答文の中の単語のスペルミスに着目して採点するスペル評価手段を備え、
前記スペル評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び前記解答文の間で綴りが近似する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付けるという構成を併せて採ることができる。【００１１】
（６）また、所定の単語がその品詞の種類とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文及び前記解答文の中の単語の品詞の同一性に着目して採点する品詞評価手段を備え、
前記品詞評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び解答文の間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付ける、という構成を併せて採ることができる。【００１２】
（７）更に、前記採点部は、前記正解文及び前記解答文の中で、前記評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価手段を備える、という構成を併せて採ることができる。【００１３】
（８）ここで、前記最終評価手段は、前記残りの単語が、前記正解文及び前記解答文の間で対応する位置に存在するか否かにより点数に差を付ける、という構成を採ることが好ましい。【００１４】
（９）また、前記最終評価手段は、前記残りの単語の品詞の種類に応じて点数に差を付ける、という構成を採用することもできる。【００１５】
（１０）以上において、前記正解文データベースには、前記正解文が複数記憶され、
前記採点部では、前記各正解文に対し、前記各評価手段による前記解答文の採点処理がそれぞれ行われ、正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価とする、という構成を採用するとよい。【００１６】
（１１）また、本発明は、原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
前記正解文及び解答文の間で同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける処理を前記コンピュータに実行させる、という構成を採用している。【００１７】
（１２）更に、本発明は、原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
前記正解文及び解答文の間で同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける語群評価ステップと、
前記語群評価ステップでの評価対象語を除く単語の中から、前記正解文と前記解答文との間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付ける品詞評価ステップと、
前記各ステップでの評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価ステップとを、
順に前記コンピュータに実行させる、という構成を採っている。【００１８】
（１３）ここで、前記各ステップは、複数の正解文それぞれに対して実行され、これら正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価と決定するように、前記コンピュータに実行させる、という構成を採用するとよい。【００１９】
なお、「語群」とは、チャンク（ｃｈｕｎｋ）と呼ばれ、一つの単語、若しくは所定の文中において、連続する複数の単語の集合を総称した意味として用いる。
また、「同一の語群」とは、比較対象文の間で相互に一致する語群のうち、当該語群に隣り合う前及び後の単語が比較対象文の間で相違するものを指す。例えば、図５を参照すると、解答文と正解文の間で、相互に一致する語群として、図５中枠内の３つの語群の他に、「ｅａｔｉｎｇ」、「ａｎｄ」、「ｍｏｒｅ」、「ｔｈａｎ」、「ｔｗｏ」、「ｍｏｒｅ  ｔｈａｎ」、「ｔｈａｎ  ｔｗｏ」の７つの語群の組み合わせが挙げられる。そのうち、図５中枠内の語群が、当該語群の前後の単語が比較対象文の間で相違するものとして「同一の語群」となる。
更に、「近似の語群」とは、同一の語群に隣り合う前若しくは後の単語が、所定の条件下で相違する場合、当該単語を同一の語群に含めたものを指す。
【発明の効果】
【００２０】
以上（１）〜（１３）の発明によれば、正解文と解答文との間で、同一位置における単語の同一性の判断以外の要素を含めた多様な評価がなされることになり、解答文の評価を実情に沿って客観的に行うことができる。
【発明を実施するための最良の形態】
【００２１】
以下、本発明の一実施例について図面を参照しながら説明する。
【実施例１】
【００２２】
図１には、本実施例に係る英作文学習システムの概略システム構成図が示されている。この図において、英作文学習システム１０は、日本語による所定の問題文（原文）に対して利用者が作成した英作文を評価するシステムである。当該英作文学習システム１０は、予め登録を済ませた利用者が所有する端末１１と、当該端末１１に対し、インターネット等のコンピュータ・ネットワーク１３を介して各種情報の授受を行い、前記英作文の評価を行う文章評価装置としてのサーバ１４とを備えて構成されている。【００２３】
この英作文学習システム１０は、問題文がサーバ１４から利用者の各端末１１に配信され、利用者により作成された英語の解答文が端末１１からサーバ１４側に送信されると、当該サーバ１４で、前記解答文の採点、添削並びに学習レベルの判定等がコンピュータにより自動的に行われ、これら結果が利用者の端末１１に送信されるようになっている。【００２４】
前記端末１１は、特に限定されるものではなく、パーソナルコンピュータ、携帯情報端末、携帯電話機等、本発明に必要となる情報の授受が可能となる限りにおいて、種々の機器を採用することができる。【００２５】
前記サーバ１４は、ソフトウェア及び／又はハードウェアによって構成され、プロセッサ等、複数のプログラムモジュール及び／又は処理回路より成り立っている。このサーバ１４は、端末１１に対して各種情報の送受信を行う送受信部１６と、多数の問題文が記憶された問題文データベース１７と、問題文データベース１７の各問題文に対して正解となる英文の正解文が記憶された正解文データベース１８と、所定の単語が各活用形及び品詞の種類とともに記憶された辞書データベース１９と、送受信部１６から端末１１に送信される任意の問題文を問題文データベース１７から抽出する出題部２０と、送受信部１６で受信した利用者の解答文に対して採点処理をする採点部２１と、当該採点部２１で採点された結果を記憶、集計し、正解文等の関連情報を採点結果とともに送受信部１６から端末１１に送信する採点結果処理部２２とを備えている。なお、サーバ１４は、その他、種々のコンテンツを提供する機能等も備えているが、本発明の要旨でないため、ここでは、図示並びに説明を省略する。【００２６】
前記正解文データベース１８には、問題文データベース１７に記憶された各問題文それぞれに対して、考えられる全ての正解文が記憶されている。【００２７】
前記採点部２１は、利用者の作成した解答文と、当該解答文に対応した正解文データベース１８の各正解文とをそれぞれ対比し、これら正解文毎に、後述する基準による減点法での採点を行い、そのうちの最高得点を前記解答文の得点とするように機能する。【００２８】
この採点部２１は、前記正解文及び前記解答文の中の語群の相違に着目して採点する語群評価手段２５と、前記正解文及び前記解答文の中の単語の活用形の相違に着目して採点する活用形評価手段２６と、前記正解文及び前記解答文の中の単語の品詞の同一性に着目して採点する品詞評価手段２７と、前記正解文及び前記解答文の中の単語のスペルミスに着目して採点するスペル評価手段２８と、これら各評価手段２５〜２８による採点を行った後で最終的な採点を行う最終評価手段２９とを備えている。【００２９】
次に、以上の構成の英作文学習システム１０の採点プロセスにつき、実例を挙げながら説明する。【００３０】
先ず、利用者が端末１１からサーバ１４に要求すると、出題部２０から所定の問題文が出題され、当該問題文が送受信部１６から端末１１に送信される。そして、利用者は、当該問題文に対して英作文を行い、その解答文を端末１１からサーバ１４に送信する。ここで、以下、実例による説明については、図２に示された問題文が出題され、それに対し、利用者によって、同図に示された解答文が作成されたものとする。【００３１】
そして、サーバ１４の採点部２１では、利用者が作成した解答文の採点が行われる。ここでの採点は、利用者の解答文が、正解文データベース１８に記憶された多数の正解文とそれぞれ対比され、各正解文それぞれにつき、解答文の得点が後述するように求められる。そして、正解文毎に求められた得点のうち最高得点が利用者の得点となり、当該得点の基準となった正解文とともに採点結果処理部２２に送られ、利用者の学習レベルの判定がなされ、当該レベルとともに、添削や正解文の説明等の各種コンテンツが端末１１に送られることになる。【００３２】
ここで、採点部２１での採点は、図３のフローチャートに示される手順で行われる。【００３３】
先ず、利用者の解答文が採点部２１に取り込まれる（Ｓ１０１）。そして、出題された問題文に対応する各正解文の中から、一つの正解文が正解文データベース１８から抽出される。ここで、正解文データベース１８には、例えば、図４に示されるように、複数の正解文が記憶されている。以下においては、これら正解文のうち、図４中「Ｎｏ．１」の正解文との対比による採点を例に説明する。【００３４】
第１に、語群評価手段２５で、一つの単語若しくは連続する複数の単語の集合体である語群の相違に着目した採点が行われる（語群評価ステップ：Ｓ１０３）。すなわち、ここでは、解答文及び正解文の対比により、解答文と正解文との間で同一の語群が抽出され、当該語群が語群評価手段２５での評価対象語とされる。前述の例では、図５に示されるように、各文中に枠で囲まれた語群が、解答文と正解文との間で同一の語群であり、これら語群が評価対象語となる。【００３５】
次に、これら評価対象語に対し、文頭からの単語の位置が解答文と正解文との間で一致するか否かが判定される。前述の例において、評価対象語「Ｊａｃｋ」は、位置が一致しているが、他の評価対象語「ｅａｔｉｎｇ  ａｎｄ」と「ｍｏｒｅ  ｔｈａｎ  ｔｗｏ」は、位置が不一致である。【００３６】
そして、解答文と正解文との間で位置が相違している同一の語群一組につき、各１点の減点ポイントが与えられ、それらを合算することで、語群評価手段２５での減点ポイントが求められる。前述の例では、二組の語群「ｅａｔｉｎｇ  ａｎｄ」と「ｍｏｒｅ  ｔｈａｎ  ｔｗｏ」が、解答文と正解文との間で相互に位置が一致しないため、各１点の減点ポイントが与えられ、語群評価手段２５での減点ポイントは合計２点となる。【００３７】
次に、活用形評価手段２６で、語群評価手段２５で評価対象語とされた語群を除く各単語について、それらの活用形に着目した採点が行われる（活用形評価ステップ：Ｓ１０４）。すなわち、ここでは、語群評価手段２５で評価対象とされなかった残りの単語につき、解答文及び正解文の対比により、辞書データベース１９を基に、解答文と正解文との間で活用形の相違に過ぎない単語が抽出され、当該単語が活用形評価手段２６での評価対象語とされる。前述の例では、図６に示されるように、枠で囲まれた単語「ｈａｖｅ」と単語「ｈａｓ」が、解答文と正解文との間で活用形の相違に過ぎない単語であり、これら単語がここでの評価対象語となる。なお、以降の各図中、「×」印が付された単語は、その前に既に評価済みの評価対象語を意味する。ここでの活用形の相違は、前述した動詞の場合の他、例えば、名詞の場合には、単数形、複数形の相違、形容詞や副詞の場合には、原級、比較級、最上級の相違等が挙げられる。【００３８】
更に、これら評価対象語に対し、文頭からの位置が、解答文と正解文との間で相互に一致するか否かが判定される。前述の例では、解答文中の単語「ｈａｖｅ」と正解文中の単語「ｈａｓ」は、それら位置が一致している。【００３９】
ここで、この活用形評価に対する減点ポイントとして、解答文と正解文との間で位置が相違していなければ、活用形の相違のみに対する１点が与えられる一方、解答文と正解文との間で位置が相違していれば、活用形及び位置の相違に対する２点が与えられる。それら減点ポイントを合算することで、活用形評価手段２６での減点ポイントが求められる。前述の例では、解答文中の単語「ｈａｖｅ」と正解文中の単語「ｈａｓ」は、活用形が相違するものの位置が一致しているため、１点の減点ポイントが与えられ、活用形評価手段２６での減点ポイントは合計１点となる。【００４０】
次に、品詞評価手段２７で、語群評価手段２５及び活用形評価手段２６での評価対象語を除く各単語につき、品詞の同一性に着目した採点が行われる（品詞評価ステップ：Ｓ１０５）。すなわち、ここでは、各評価手段２５，２６で評価対象とされなかった残りの単語につき、辞書データベース１９のデータを基に、品詞の判別が行われ、解答文及び正解文の対比により、それらの間で品詞が同一となる単語が抽出され、当該単語が品詞評価手段２７での評価対象とされる。
ここでの品詞の同一は、予め設定された品詞体系に基づいて判断される。この品詞体系は、特に限定されるものではなく、「品詞」や「形容詞」等の大分類によるものや、「普通名詞」や「固有名詞」等、大分類を更に細分化した分類によるものが使用される。本実施例では、後者の分類に基づく品詞体系が用いられる。
前述の例では、図７に示されるように、枠で囲まれた単語「ｉｎ」及び「ｆｏｒ」の組と単語「ｍｉｎｕｔｅｓ」及び「ｈｏｕｒｓ」の組が、解答文と正解文との間で品詞がそれぞれ同一となる単語の組であり、これら各単語が、ここでの評価対象語となる。
なお、前述の例にはないが、一方の文の品詞に対して、同一となる品詞が他方の文に複数ある場合には、当該他方の文の文頭に近い単語が選ばれる。【００４１】
更に、これら評価対象語とされた各単語の組に対し、文頭からの位置が、解答文と正解文との間で相互に一致するか否かが判定される。前述の例では、解答文中の単語「ｉｎ」と正解文中の単語「ｆｏｒ」の組は、それらの位置が不一致であり、また、解答文中の単語「ｍｉｎｕｔｅｓ」と正解文中の単語「ｈｏｕｒｓ」の組も、それらの位置が不一致である。【００４２】
ここで、この品詞評価に対する減点ポイントとして、解答文と正解文との間で位置が相違していなければ、単語の相違に対する１点が与えられる一方、解答文と正解文との間で位置が相違していれば、単語及び位置の相違に対する２点が与えられる。それら減点ポイントを合算することで、品詞評価手段２７での減点ポイントが求められる。前述の例では、解答文中の単語「ｉｎ」と正解文中の単語「ｆｏｒ」の組は、品詞が同一であるが、単語が相違し、且つ、位置が一致していないため、２点の減点ポイントが与えられる。また、解答文中の単語「ｍｉｎｕｔｅｓ」と正解文中の単語「ｈｏｕｒｓ」の組も同じく２点の減点ポイントが与えられ、品詞評価手段２７での減点ポイントは合計４点となる。【００４３】
次に、スペル評価手段２８で、語群評価手段２５、活用形評価手段２６及び品詞評価手段２７での各評価対象語を除く各単語につき、解答文の単語のスペルミスに着目した採点が行われる（スペル評価ステップ：Ｓ１０６）。すなわち、ここでは、各評価手段２５〜２７で評価対象とされなかった残りの単語につき、解答文及び正解文の対比により、それらの間で綴りが近似する単語が抽出され、当該単語が、ここでの評価対象語とされる。【００４４】
ここで、解答文及び正解文の各単語間で綴りが近似するか否かの判断は、公知のレーベンシュタイン距離（Ｌｅｖｅｎｓｈｔｅｉｎ  ｄｉｓｔａｎｃｅ）を用いて行われる。このレーベンシュタイン距離は、相互に比較対象となる単語に対し、文字の抜け、文字の間違い、文字の挿入を考慮して、正解に合致させる手順のうち最小となる手順の数（コスト）によって定まる。
例えば、「ｐｕｚｚｌｅ」という正解文の単語に対し、スペルミスにより、解答文では「ｐｚｚｅｌ」という単語が用いられた場合、
解答文の「ｐｚｚｅｌ」に対して、正解文の「ｐｕｚｚｌｅ」に変えるには、
（１）文字「ｐ」と文字「ｚ」の間に文字「ｕ」を挿入し、
（２）文字「ｚ」と文字「ｅ」の間に文字「ｌ」を挿入し、
（３）最後の文字「ｌ」を削除することにより、
の三工程が必要となり、ここでの「コスト３」が、「ｐｕｚｚｌｅ」及び「ｐｚｚｅｌ」間のレーベンシュタイン距離となる。【００４５】
そして、解答文及び正解文の間で、評価対象語となる各単語を対比したときに、レーベンシュタイン距離が所定の閾値以下となる単語の組が、相互に近似する単語と判断され、その解答文の単語がスペルミスされた単語であると判定される。【００４６】
前述の例では、図８に示されるように、枠で囲まれた解答文中の単語「ｄｌｉｎｋｉｎｇ」と、同正解文中の単語「ｄｒｉｎｋｉｎｇ」が、解答文と正解文との間でスペルが近似する単語であり、これら単語がここでの評価対象語となり、解答文中の単語「ｄｌｉｎｋｉｎｇ」がスペルミスの単語であると判断される。【００４７】
更に、これら評価対象語に対し、文頭からの位置が、解答文と正解文との間で相互に一致するか否かが判定される。前述の例では、解答文中の単語「ｄｌｉｎｋｉｎｇ」、正解文中の単語「ｄｒｉｎｋｉｎｇ」は、それらの位置が不一致である。【００４８】
ここでの減点ポイントとして、解答文と正解文との間で位置が同一であれば、スペルミスに対する１点が与えられる一方、解答文と正解文との間で位置が相違していれば、スペルミス及び位置の相違に対する２点が与えられる。それら減点ポイントを合算することで、スペル評価手段２８での減点ポイントが求められる。前述の例では、解答文中の単語「ｄｌｉｎｋｉｎｇ」と、正解文中の単語「ｄｒｉｎｋｉｎｇ」とは、位置が一致していないため、２点の減点ポイントが与えられ、スペル評価手段２８での減点ポイントは合計２点となる。【００４９】
次に、最終評価手段２９で、前述した各評価手段２５〜２８で、評価対象語とされなかった残りの単語をにつき採点が行われる（最終評価ステップ：Ｓ１０７）。すなわち、ここでは、残りの単語につき、次のように、減点ポイントが求められる。【００５０】
先ず、未だ評価対象とされていない単語の中で、解答文と正解文との間で、同一位置に単語が存在するか否かが判定される。前述の例では、図９に示されるように、同一位置に存在する単語がなく、ここでの減点ポイントは０点である。【００５１】
そして、更に残った単語の中で、解答文と正解文との間で、一語ずつの組を作成出来るか否かが判別され、組に出来れば、減点ポイントとして、単語及び位置の相違に対する２点が一組毎に与えられる。前述の例では、図１０に示されるように、解答文中の単語「ｔｈｉｔｙ」と、正解文中の単語「ｂｅｅｎ」とが評価対象となり、一組なので、減点ポイントとして、２点が与えられる。【００５２】
最後に、解答文及び正解文のどちらか一方のみに残された単語に対し、単語一語につき減点ポイント１点が与えられる。前述の例では、図１１に示されるように、正解文中の単語「ａｎｄ」と単語「ａ」と単語「ｈａｌｆ」とが残っており、減点ポイントとして、三語分の３点が与えられる。【００５３】
次に、以上の各手段で求められた減点ポイントが合算され、次式（１）により、正解文に対する解答文の近似度が求められる（Ｓ１０８）。
ここで、近似度をＮとし、減点ポイントの合計をＰとし、解答文の語数をＷ１とし、正解文の語数をＷ２とすると、
Ｎ＝１−（Ｐ／（Ｗ１＋Ｗ２））  （１）【００５４】
前述の例では、図５〜図１１の結果、減点ポイントの総合計は１４点となり、解答文の語数は１１語、正解文の語数は１４語であるから、近似度Ｐは、
１−（１４／（１１＋１４））＝０．４４  と求められる。【００５５】
以上の採点処理を各正解文に対して行い（Ｓ１０９）、そのうち最も高い近似度がその解答文の点数とされ（Ｓ１１０）、当該近似度に対応する正解文が解答文の添削対象となる。【００５６】
なお、以上において、各手段での減点ポイントを１点若しくは２点としているが、各評価項目に応じて、与えられる減点ポイントの点数を変えて、各項目の重み付けを行うこともできる。【００５７】
従って、このような実施例によれば、解答文に対して、種々の項目で採点することができ、実情に沿う客観的な採点を簡単に行うことができるという効果を得る。【００５８】
次に、本発明の他の実施例について説明する。なお、以下の説明において、前記実施例１と同一若しくは同等の構成部分については同一符号を用いるものとし、説明を省略若しくは簡略にする。
【実施例２】
【００５９】
実施例２は、実施例１に対して採点部２１の構成を変え、解答文の採点方法つまり前記減点ポイント及び近似度Ｎの算出方法を変えたところに特徴を有する。【００６０】
すなわち、本実施例の採点部２１は、図１２に示されるように、前記正解文及び前記解答文の中の語群の相違に着目して採点する語群評価手段２５と、前記正解文及び前記解答文の中の単語の品詞の同一性に着目して採点する品詞評価手段２７と、これら各評価手段２５，２７による採点を行った後で最終的な採点を行う最終評価手段２９とを備えており、語群評価手段２５、品詞評価手段２７、最終評価手段２９の順で採点処理が行われる。【００６１】
本実施例の採点部２１での採点方法につき、実例を挙げて以下に説明する。【００６２】
本実施例でも、実施例１と同一の問題文、正解文、解答文を使い、当該解答文に対する採点プロセスを説明する。【００６３】
先ず、語群評価手段２５で、一つの単語若しくは連続する複数の単語の集合体である語群の相違に着目した採点が行われる（語群評価ステップ）。すなわち、ここでは、解答文及び正解文の対比により、解答文と正解文との間で同一若しくは近似の語群が抽出され、当該語群が語群評価手段２５での評価対象語とされる。具体的には、正解文及び解答文の間で同一の語群が相互マッチング等によって決定される。そして、当該同一の語群に隣り合う前若しくは後の単語について、正解文及び解答文の間で、活用形の相違若しくはスペルミスか否かが判断され、活用形の相違若しくはスペルミスと判断された場合に、これら前若しくは後の単語を前記同一の語群に含めて近似の語群とされる。一方、同一の語群に隣り合う前若しくは後の単語が活用形の相違若しくはスペルミスと判断されなかった場合は、当該単語を含ますにそのまま同一の語群とされる。【００６４】
前述の例では、図１３の各文中に枠で囲まれた語群が、解答文と正解文との間で同一若しくは近似するものであり、これら語群が評価対象語となる。【００６５】
つまり、解答文中の語群Ａ「Ｊａｃｋ  ｈａｖｅ」及び正解文中の語群Ａ「Ｊａｃｋ  ｈａｓ」は、「Ｊａｃｋ」部分が同一であり、その後の単語である解答文の「ｈａｖｅ」が正解文の「ｈａｓ」に対して活用形が誤っていると判断され、近似の語群とされる。
また、解答文中の語群Ｂ「ｅａｔｉｎｇ  ａｎｄ  ｄｌｉｎｋｉｎｇ」及び正解文中の語群Ｂ「ｅａｔｉｎｇ  ａｎｄ  ｄｒｉｎｋｉｎｇ」は、「ｅａｔｉｎｇ  ａｎｄ」部分が同一であり、その後の単語である解答文の「ｄｌｉｎｋｉｎｇ」が正解文の「ｄｒｉｎｋｉｎｇ」に対してスペルミスと判断され、近似の語群とされる。
更に、解答文中及び正解文中の語群Ｃ「ｍｏｒｅ  ｔｈａｎ  ｔｗｏ」は、相互に完全に一致しているため、同一の語群とされる。【００６６】
なお、ここでの活用形の誤り及びスペルミスの判断は、実施例１で説明した活用形評価手段２６及びスペル評価手段２８と同様の方法にて行われる。【００６７】
次に、これらの同一若しくは近似の語群からなる評価対象語について、正解文に対し活用形の誤った単語、スペルミスの単語それぞれ一語に付き１点の減点ポイントが付与される。前述の例において、解答文の語群Ａ「Ｊａｃｋ  ｈａｖｅ」は、正解文の語群Ａに対して活用形が誤っている単語「ｈａｖｅ」を一語含み、また、解答文の語群Ｂ「ｅａｔｉｎｇ  ａｎｄ  ｄｌｉｎｋｉｎｇ」は、正解文の語群Ｂに対して綴りが誤っている単語「ｄｌｉｎｋｉｎｇ」を一語含んでいるため、これら語群Ａ及び語群Ｂに対する減点ポイントは、それぞれ１点となる。更に、解答文の語群Ｃ「ｍｏｒｅ  ｔｈａｎ  ｔｗｏ」は、正解文の語群Ｃに対して活用形の相違やスペルミスがないため、減点ポイントは０点となる。【００６８】
次に、同一若しくは近似の語群に対し、その並び順の相違に着目し、減点ポイントを付与するか否かが決定される。前述の例において、解答文は、語群Ａ、語群Ｂ、語群Ｃの順で並んでおり、正解文も、語群Ａ、語群Ｂ、語群Ｃの順で並んでいる。このような場合は、並び順が同一となって減点なし、つまり減点ポイント０点となる。
一方、仮に、正解文が、語群Ａ、語群Ｂ、語群Ｃの順に対し、解答文が、語群Ｃ、語群Ａ、語群Ｂの順で並んでいるとすると、正解文の語群の並びと同一にするには、解答文の語群Ｃを語群Ｂの後に移動するという１工程が必要となる。この必要工程数に減点ポイント５点を乗じて、語群の並び順に着目した減点ポイントが算出される。このように必要工程数が１工程の場合は、減点ポイントが５点となる。【００６９】
次に、品詞評価手段２７で、語群評価手段２５での評価対象語を除く各単語につき、品詞の同一性に着目した採点が行われる（品詞評価ステップ）。すなわち、ここでは、実施例１と同様に、語群評価手段２５で評価対象とされなかった残りの単語につき、辞書データベース１９のデータを基に、品詞の判別が行われ、解答文及び正解文の対比により、それらの間で品詞が同一となる単語が抽出され、当該単語が品詞評価手段２７での評価対象とされる。前述の例では、図１４に示されるように、枠で囲まれた単語「ｉｎ」及び「ｆｏｒ」並びに単語「ｍｉｎｕｔｅｓ」及び「ｈｏｕｒｓ」が、それぞれ解答文と正解文との間で品詞が同一となる単語であり、これら単語が、ここでの評価対象語となる。【００７０】
ここで、この品詞評価に対する減点ポイントは、解答文と正解文との間で同一とされた品詞の種類に応じて定まる。具体的に、同一とされた品詞が冠詞であれば、減点ポイント３点、前置詞であれば、減点ポイント７点、その他の品詞であれば、減点ポイント１０点それぞれ付与される。前述の例では、解答文中の単語「ｉｎ」と正解文中の単語「ｆｏｒ」は、品詞が前置詞であるため、減点ポイントが７点となる。一方、解答文中の単語「ｍｉｎｕｔｅｓ」と正解文中の単語「ｈｏｕｒｓ」は、前置詞以外のその他の品詞（名詞）であるため、減点ポイントが１０点となり、品詞評価手段２７での減点ポイントが１７点となる。【００７１】
なお、実施例１のように、評価対象語に対し、文頭からの位置が、解答文と正解文との間で相互に一致するか否かも判定し、その一致・不一致によって、付与される減点ポイントの点数を変えてもよい。【００７２】
次に、最終評価手段２９で、前述した各評価手段２５、２７で、評価対象語とされなかった残りの単語につき採点が行われ（最終評価ステップ）、次のように、減点ポイントが求められる。【００７３】
すなわち、未だ評価対象とされていない解答文及び正解文の各単語に対し、それらの品詞別に減点ポイントが算出され、それらを総合計して、最終評価手段２９での減点ポイントが求められる。具体的には、本実施例の品詞評価手段２７と同様に、冠詞であれば、減点ポイント３点、前置詞であれば、減点ポイント７点、その他の品詞であれば、減点ポイント１０点とされる。ここでも、品詞種別の判定には、前述した辞書データベース１９が使われる。【００７４】
前述の例では、図１５に示されるように、解答文の中の単語「ｔｈｉｒｔｙ」と、正解文中の単語「ｂｅｅｎ」と単語「ａｎｄ」と単語「ａ」と単語「ｈａｌｆ」との合計５語につき、それぞれ、品詞による減点ポイントが付与される。ここでは、単語「ａ」は冠詞なので減点ポイントは３点で、それ以外の４語は、冠詞及び前置詞ではないため、減点ポイントが各１０点となり、最終評価手段２９での減点ポイントは、合計４３点となる。【００７５】
なお、以上各手段での減点ポイントは、特に限定されるものではなく、種々の点数を任意に採用することが可能である。【００７６】
次に、以上の各手段で求められた減点ポイントが合算され、次式（２）により、正解文に対する解答文の近似度が求められる。
ここで、近似度をＮとし、減点ポイントの合計をＰとし、解答文の語数と正解文の語数との間で多い方の語数をＷｍａｘとし、設定されている最大減点ポイントＰｍａｘ（本実施例では１０点）とすると、
Ｎ＝１−（Ｐ／（Ｗｍａｘ×Ｐｍａｘ））  （２）【００７７】
なお、上式（２）で、近似度Ｐがマイナス値となった場合には、近似度Ｐを０とする。【００７８】
前述の例では、図１３〜図１５の結果、減点ポイントの総合計は６２点となり、解答文の語数は１１語、正解文の語数は１４語であるから、Ｗｍａｘは１４となり、
近似度Ｐは、
１−（６２／（１４×１０））＝０．５６  と求められる。【００７９】
以降は、実施例１と同様に、以上の採点処理を各正解文それぞれについて行い、そのうち最も高い近似度Ｐがその解答文の点数とされ、当該近似度Ｐに対応する正解文が解答文の添削対象となる。【００８０】
従って、このような実施例２によっても、実施例１と同様の効果を得ることができる。【００８１】
ここで、実施例２の変形例として、次の態様がある。すなわち、解答文中の単語のスペルミスにより、近似の語群とされた語群に対し、スペルミスと判断された単語を正解文中の正しい単語に置換した上で、前述した品詞評価手段２７による品詞評価ステップを行うようにすることも可能である。図１３に示される前述の例によれば、スペルミスにより金近似の語群と判断された語群Ｂに対し、解答文中の単語「ｄｌｉｎｋｉｎｇ」を該当する正解文中の単語「ｄｒｉｎｋｉｎｇ」に置換した上で、語群評価手段２５で評価対象とされなかった残りの単語につき、辞書データベース１９のデータを基に、単語の前後の単語の品詞を考慮して品詞の判別が行われる。【００８２】
このような変形例によれば、品詞の判別を行う際の精度を高めることができる。具体的に、複数種類の品詞の機能を有する単語に対して品詞の判別をする場合に、当該単語の前後の単語の品詞を考慮して品詞を特定する。ところが、スペルミスした単語（図１３の例では、単語「ｄｌｉｎｋｉｎｇ」）の後の単語（同図中の単語「ｉｎ」）の品詞の判別を行おうとする場合は、スペルミスした単語が現存しないことが多いため、当該スペルミスした単語の品詞を判別できず、その単語の品詞を考慮した後の単語の品詞特定ができない。この場合は、使用頻度等に基づく統計的な観点から、一の品詞に限定せざるを得ず、これでは、使用態様に即した正確な品詞の判別を行うことができない。その点、本変形例によれば、スペルミスした単語を正しい単語に置き換えることで、スペルミスした単語に連なる単語の品詞を特定する際、当該単語が複数種類の品詞機能を有する場合でも、解答文作成者（利用者）の使用意図に沿った品詞の種別をより正確に特定することができる。【００８３】
なお、前記各実施例では、コンピュータ・ネットワークを使った遠隔教育型の英作文学習システムを図示説明したが、本発明の文章評価装置は、これに限らず、本発明の処理を実行可能なプログラムがインストールされたコンピュータとしてもよい。また、本発明の処理を実行可能なプログラムを各端末１１にインターネット等によって配信したり、当該プログラムが記憶されたＣＤ−ＲＯＭ等の記録媒体を利用者に頒布することで、利用者の所有する端末１１内で、前述の全ての処理を実行させることも可能である。【００８４】
また、前記各実施例では、日本語の問題文に対して英語で作成された解答文の評価を行っているが、本発明はこれに限らず、日本語若しくは他の言語の問題文に対して別の言語で作成された解答文の評価を行うようにしてもよい。【００８５】
更に、本発明は、翻訳者や自動翻訳機が作成した翻訳文に対する評価に適用することも可能である。自動翻訳機の翻訳能力の評価には、本発明が適用されたシステムを自動翻訳機と連動させることで、一連のシステム化も可能である。【００８６】
その他、本発明における装置各部の構成は図示構成例に限定されるものではなく、実質的に同様の作用を奏する限りにおいて、種々の変更が可能である。
【図面の簡単な説明】
【００８７】
【図１】実施例１に係る英作文学習システムの概略システム構成図。
【図２】説明例に用いる問題文及び解答文を記した図
【図３】採点プロセスを示すフローチャート。
【図４】正解文データベースの記憶内容の説明図。
【図５】語群評価ステップでの採点を説明するための図表。
【図６】活用形評価ステップでの採点を説明するための図表。
【図７】品詞評価ステップでの採点を説明するための図表。
【図８】スペル評価ステップでの採点を説明するための図表。
【図９】最終評価ステップでの採点を説明するための図表。
【図１０】最終評価ステップでの採点を説明するための図表。
【図１１】最終評価ステップでの採点を説明するための図表。
【図１２】実施例２に係る英作文学習システムの概略システム構成図。
【図１３】語群評価ステップでの採点を説明するための図表。
【図１４】品詞評価ステップでの採点を説明するための図表。
【図１５】最終評価ステップでの採点を説明するための図表。
【図１】
2006134759.tif 000002
【図２】
2006134759.tif 000003
【図３】
2006134759.tif 000004
【図４】
2006134759.tif 000005
【図５】
2006134759.tif 000006
【図６】
2006134759.tif 000007
【図７】
2006134759.tif 000008
【図８】
2006134759.tif 000009
【図９】
2006134759.tif 000010
【図１０】
2006134759.tif 000011
【図１１】
2006134759.tif 000012
【図１２】
2006134759.tif 000013
【図１３】
2006134759.tif 000014
【図１４】
2006134759.tif 000015
【図１５】
2006134759.tif 000016
【手続補正書】
【提出日】平成19年11月7日(2007.11.7)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
原文となる問題文に対して所定言語で翻訳された解答文の評価を行う文章評価装置において、
前記問題文に対する正解の翻訳文となる正解文が記憶された正解文データベースと、前記正解文データベースに記憶された正解文と利用者により作成された前記解答文との対比により、当該解答文に対する採点処理を行う採点部とを備え、
前記採点部は、前記正解文データベースに記憶された正解文及び利用者により作成された解答文の中の語群の相違に着目して採点する語群評価手段を備え、
前記語群評価手段は、前記正解文データベースに記憶された正解文と利用者により作成された解答文の対比により、相互に同一となる語群を決定し、又は、当該同一の語群に隣り合う前若しくは後の単語について、単語の活用形が記憶された辞書データベースに基づき活用形が相違するか否かを判断し、若しくは予め記憶された手法に基づきスペルミスか否かを判断し、当該単語が活用形の相違若しくはスペルミスの場合に当該単語を前記同一の語群に含めた近似の語群を決定した上で、前記同一若しくは近似の語群を評価対象語とし、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付けることを特徴とする文章評価装置。
【請求項２】
前記語群評価手段は、前記同一の語群と近似の語群とで点数に差を付けることを特徴とする請求項１記載の文章評価装置。
【請求項３】
所定の単語がその活用形とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文データベースに記憶された正解文及び前記解答文の中の単語の活用形の相違に着目して採点する活用形評価手段を備え、
前記活用形評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び前記解答文の対比により、前記辞書データベースを基に活用形の相違に過ぎない単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付けることを特徴とする請求項１記載の文章評価装置。
【請求項４】
前記採点部は、前記解答文の中の単語のスペルミスに着目して採点するスペル評価手段を備え、
前記スペル評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文データベースに記憶された正解文及び前記解答文の間で、予め記憶された手法に基づき綴りが近似する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付けることを特徴とする請求項１又は３記載の文章評価装置。
【請求項５】
所定の単語がその品詞の種類とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文データベースに記憶された正解文及び前記解答文の中の単語の品詞の同一性に着目して採点する品詞評価手段を備え、
前記品詞評価手段は、既に評価済みの評価対象語を除く単語につき、前記辞書データベースに記憶された品詞の種類を基に品詞の判別を行い、前記正解文及び前記解答文の対比により、それらの間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付けることを特徴とする請求項１〜４の何れかに記載の文章評価装置。
【請求項６】
前記採点部は、前記正解文データベースに記憶された正解文及び前記解答文の中で、前記評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価手段を備えたことを特徴とする請求項１〜５の何れかに記載の文章評価装置。
【請求項７】
前記最終評価手段は、前記残りの単語が、前記正解文データベースに記憶された正解文及び前記解答文の間で対応する位置に存在するか否かにより点数に差を付けることを特徴とする請求項６記載の文章評価装置。
【請求項８】
所定の単語がその品詞の種類とともに記憶された辞書データベースを備え、
前記最終評価手段は、前記残りの単語につき、前記辞書データベースを基に品詞の判別を行い、判別された品詞の種類に応じて点数に差を付けることを特徴とする請求項６記載の文章評価装置。
【請求項９】
前記正解文データベースには、前記正解文が複数記憶され、
前記採点部では、前記各正解文に対し、前記各評価手段による前記解答文の採点処理がそれぞれ行われ、正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価とすることを特徴とする請求項１〜８の何れかに記載の文章評価装置。
【請求項１０】
原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
予め正解文データベースに記憶された前記正解文と利用者により作成された解答文の対比により、相互に同一となる語群を決定し、又は、当該同一の語群に隣り合う前若しくは後の単語について、単語の活用形が記憶された辞書データベースに基づき活用形が相違するか否かを判断し、若しくは予め記憶された手法に基づきスペルミスか否かを判断し、当該単語が活用形の相違若しくはスペルミスの場合に当該単語を前記同一の語群に含めた近似の語群を決定した上で、これら同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける語群評価手段として前記コンピュータを機能させるための文章評価プログラム。
【請求項１１】
原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
予め正解文データベースに記憶された前記正解文と利用者により作成された解答文の対比により、相互に同一となる語群を決定し、又は、当該同一の語群に隣り合う前若しくは後の単語について、単語の活用形が記憶された辞書データベースに基づき活用形が相違するか否かを判断し、若しくは予め記憶された手法に基づきスペルミスか否かを判断し、当該単語が活用形の相違若しくはスペルミスの場合に当該単語を前記同一の語群に含めた近似の語群を決定した上で、これら同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける語群評価手段と、
前記語群評価手段で評価された評価対象語を除く単語につき、所定の単語がその品詞の種類とともに記憶された辞書データベースを基に品詞の判別を行い、前記正解文と前記解答文の対比により、それらの間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付ける品詞評価手段と、
前記各手段での評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価手段として、
前記コンピュータを機能させるための文章評価プログラム。
【請求項１２】
前記各手段を、前記正解文データベースに記憶された複数の正解文それぞれに対して実行し、これら正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価と決定する手段として、前記コンピュータを機能させるための請求項１１記載の文章評価プログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
（１）前記目的を達成するため、原文となる問題文に対して所定言語で翻訳された解答文の評価を行う文章評価装置において、
前記問題文に対する正解の翻訳文となる正解文が記憶された正解文データベースと、前記正解文データベースに記憶された正解文と利用者により作成された前記解答文との対比により、当該解答文に対する採点処理を行う採点部とを備え、
前記採点部は、前記正解文データベースに記憶された正解文及び利用者により作成された解答文の中の語群の相違に着目して採点する語群評価手段を備え、
前記語群評価手段は、前記正解文データベースに記憶された正解文と利用者により作成された解答文の対比により、相互に同一となる語群を決定し、又は、当該同一の語群に隣り合う前若しくは後の単語について、単語の活用形が記憶された辞書データベースに基づき活用形が相違するか否かを判断し、若しくは予め記憶された手法に基づきスペルミスか否かを判断し、当該単語が活用形の相違若しくはスペルミスの場合に当該単語を前記同一の語群に含めた近似の語群を決定した上で、前記同一若しくは近似の語群を評価対象語とし、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける、という構成を採っている。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
（３）また、所定の単語がその活用形とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文データベースに記憶された正解文及び前記解答文の中の単語の活用形の相違に着目して採点する活用形評価手段を備え、
前記活用形評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文及び前記解答文の対比により、前記辞書データベースを基に活用形の相違に過ぎない単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付ける、という構成を併せて採ることができる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
（４）前記採点部は、前記解答文の中の単語のスペルミスに着目して採点するスペル評価手段を備え、
前記スペル評価手段は、既に評価済みの評価対象語を除く単語の中から、前記正解文データベースに記憶された正解文及び前記解答文の間で、予め記憶された手法に基づき綴りが近似する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違に応じて点数に差を付けるという構成を併せて採ることができる。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
（５）また、所定の単語がその品詞の種類とともに記憶された辞書データベースを備え、
前記採点部は、前記辞書データベースを基に、前記正解文データベースに記憶された正解文及び前記解答文の中の単語の品詞の同一性に着目して採点する品詞評価手段を備え、
前記品詞評価手段は、既に評価済みの評価対象語を除く単語につき、前記辞書データベースに記憶された品詞の種類を基に品詞の判別を行い、前記正解文及び前記解答文の対比により、それらの間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付ける、という構成を併せて採ることができる。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
（６）更に、前記採点部は、前記正解文データベースに記憶された正解文及び前記解答文の中で、前記評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価手段を備える、という構成を併せて採ることができる。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【００１３】
（７）ここで、前記最終評価手段は、前記残りの単語が、前記正解文データベースに記憶された正解文及び前記解答文の間で対応する位置に存在するか否かにより点数に差を付ける、という構成を採ることが好ましい。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【００１４】
（８）また、所定の単語がその品詞の種類とともに記憶された辞書データベースを備え、
前記最終評価手段は、前記残りの単語につき、前記辞書データベースを基に品詞の判別を行い、判別された品詞の種類に応じて点数に差を付ける、という構成を採用することもできる。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
（９）以上において、前記正解文データベースには、前記正解文が複数記憶され、
前記採点部では、前記各正解文に対し、前記各評価手段による前記解答文の採点処理がそれぞれ行われ、正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価とする、という構成を採用するとよい。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１６
【補正方法】変更
【補正の内容】
【００１６】
（１０）また、本発明は、原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
予め正解文データベースに記憶された前記正解文と利用者により作成された解答文の対比により、相互に同一となる語群を決定し、又は、当該同一の語群に隣り合う前若しくは後の単語について、単語の活用形が記憶された辞書データベースに基づき活用形が相違するか否かを判断し、若しくは予め記憶された手法に基づきスペルミスか否かを判断し、当該単語が活用形の相違若しくはスペルミスの場合に当該単語を前記同一の語群に含めた近似の語群を決定した上で、これら同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける語群評価手段として前記コンピュータを機能させる、という構成を採用している。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００１７
【補正方法】変更
【補正の内容】
【００１７】
（１１）更に、本発明は、原文となる問題文に対する正解の翻訳文となる正解文と、前記問題文に対して所定言語で翻訳された解答文とを対比することにより、当該解答文の評価をコンピュータに実行させる文章評価プログラムであって、
予め正解文データベースに記憶された前記正解文と利用者により作成された解答文の対比により、相互に同一となる語群を決定し、又は、当該同一の語群に隣り合う前若しくは後の単語について、単語の活用形が記憶された辞書データベースに基づき活用形が相違するか否かを判断し、若しくは予め記憶された手法に基づきスペルミスか否かを判断し、当該単語が活用形の相違若しくはスペルミスの場合に当該単語を前記同一の語群に含めた近似の語群を決定した上で、これら同一若しくは近似の語群を評価対象語として抽出し、前記正解文及び前記解答文の間での各評価対象語の位置の相違若しくは前記評価対象語の並び順の相違に応じて点数に差を付ける語群評価手段と、
前記語群評価手段で評価された評価対象語を除く単語につき、所定の単語がその品詞の種類とともに記憶された辞書データベースを基に品詞の判別を行い、前記正解文と前記解答文の対比により、それらの間で品詞の種類が一致する単語を新たな評価対象語として抽出し、当該新たな評価対象語について、前記正解文及び前記解答文の間での位置の相違及び／又は品詞の種類に応じて点数に差を付ける品詞評価手段と、
前記各手段での評価対象語を除く残りの単語の数に応じて点数に差を付ける最終評価手段として、
前記コンピュータを機能させる、という構成を採っている。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
（１２）ここで、前記各手段を、前記正解文データベースに記憶された複数の正解文それぞれに対して実行し、これら正解文毎に求められた採点結果の中から最も良い評価を前記解答文の評価と決定する手段として、前記コンピュータを機能させる、という構成を採用するとよい。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
以上（１）〜（１２）の発明によれば、正解文と解答文との間で、同一位置における単語の同一性の判断以外の要素を含めた多様な評価がなされることになり、解答文の評価を実情に沿って客観的に行うことができる。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００４９
【補正方法】変更
【補正の内容】
【００４９】
次に、最終評価手段２９で、前述した各評価手段２５〜２８で、評価対象語とされなかった残りの単語につき採点が行われる（最終評価ステップ：Ｓ１０７）。すなわち、ここでは、残りの単語につき、次のように、減点ポイントが求められる。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００５１
【補正方法】変更
【補正の内容】
【００５１】
そして、更に残った単語の中で、解答文と正解文との間で、一語ずつの組を作成出来るか否かが判別され、組に出来れば、減点ポイントとして、単語及び位置の相違に対する２点が一組毎に与えられる。前述の例では、図１０に示されるように、解答文中の単語「ｔｈｉｒｔｙ」と、正解文中の単語「ｂｅｅｎ」とが評価対象となり、一組なので、減点ポイントとして、２点が与えられる。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００５４
【補正方法】変更
【補正の内容】
【００５４】
前述の例では、図５〜図１１の結果、減点ポイントの総合計は１４点となり、解答文の語数は１１語、正解文の語数は１４語であるから、近似度Ｎは、
１−（１４／（１１＋１４））＝０．４４  と求められる。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００７７
【補正方法】変更
【補正の内容】
【００７７】
なお、上式（２）で、近似度Ｎがマイナス値となった場合には、近似度Ｎを０とする。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００７８
【補正方法】変更
【補正の内容】
【００７８】
前述の例では、図１３〜図１５の結果、減点ポイントの総合計は６２点となり、解答文の語数は１１語、正解文の語数は１４語であるから、Ｗｍａｘは１４となり、
近似度Ｎは、
１−（６２／（１４×１０））＝０．５６  と求められる。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００７９
【補正方法】変更
【補正の内容】
【００７９】
以降は、実施例１と同様に、以上の採点処理を各正解文それぞれについて行い、そのうち最も高い近似度Ｎがその解答文の点数とされ、当該近似度Ｎに対応する正解文が解答文の添削対象となる。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００８１
【補正方法】変更
【補正の内容】
【００８１】
ここで、実施例２の変形例として、次の態様がある。すなわち、解答文中の単語のスペルミスにより、近似の語群とされた語群に対し、スペルミスと判断された単語を正解文中の正しい単語に置換した上で、前述した品詞評価手段２７による品詞評価ステップを行うようにすることも可能である。図１３に示される前述の例によれば、スペルミスにより近似の語群と判断された語群Ｂに対し、解答文中の単語「ｄｌｉｎｋｉｎｇ」を該当する正解文中の単語「ｄｒｉｎｋｉｎｇ」に置換した上で、語群評価手段２５で評価対象とされなかった残りの単語につき、辞書データベース１９のデータを基に、単語の前後の単語の品詞を考慮して品詞の判別が行われる。
【国際調査報告】
2006134759.tif 000017
2006134759.tif 000018
2006134759.tif 000019
2006134759.tif 000020