(57)【特許請求の範囲】
【請求項１】
学習者により装着される透過型のヘッドマウントディスプレイ装置と、
前記ヘッドマウントディスプレイ装置に通信可能に接続されるとともに、手本文字の画像を記憶する情報処理装置と、を備え、
前記ヘッドマウントディスプレイ装置は、前記情報処理装置から送信される前記手本文字の画像を取得し、前記手本文字を表示し、
前記情報処理装置は、前記学習者により手書きされた手書き文字の画像を入力するための入力部を含み、前記手本文字の画像を前記ヘッドマウントディスプレイ装置に送信した後、前記手書き文字の画像が前記入力部を介して入力されると、前記手書き文字の画像と前記手本文字の画像とを比較することによって、前記手書き文字が正しく書かれているか否かを評価する文字評価を行い、前記文字評価の評価結果を前記学習者に報知するための報知処理を行い、
前記情報処理装置は、前記手書き文字の画像と前記手本文字の画像とがどの程度類似しているかを示す類似度を前記評価結果として求め、
前記情報処理装置は、前記文字評価を行った後、前記手本文字の画像を前記ヘッドマウントディスプレイ装置に再送信するとき、前記文字評価において求めた前記類似度に応じて、前記ヘッドマウントディスプレイ装置に再送信する前記手本文字の画像の濃度または色を変化させ、
前記情報処理装置は、前記文字評価において求めた前記類似度が高いほど、前記ヘッドマウントディスプレイ装置に送信する前記手本文字の画像の濃度を薄くすることを特徴とする文字学習システム。
【請求項２】
学習者により装着される透過型のヘッドマウントディスプレイ装置と、
前記ヘッドマウントディスプレイ装置に通信可能に接続されるとともに、手本文字の画像を記憶する情報処理装置と、を備え、
前記ヘッドマウントディスプレイ装置は、前記情報処理装置から送信される前記手本文字の画像を取得し、前記手本文字を表示し、
前記情報処理装置は、前記学習者により手書きされた手書き文字の画像を入力するための入力部を含み、前記手本文字の画像を前記ヘッドマウントディスプレイ装置に送信した後、前記手書き文字の画像が前記入力部を介して入力されると、前記手書き文字の画像と前記手本文字の画像とを比較することによって、前記手書き文字が正しく書かれているか否かを評価する文字評価を行い、前記文字評価の評価結果を前記学習者に報知するための報知処理を行い、
前記情報処理装置は、前記手書き文字の画像と前記手本文字の画像とがどの程度類似しているかを示す類似度を前記評価結果として求め、
前記情報処理装置は、前記文字評価を行った後、前記手本文字の画像を前記ヘッドマウントディスプレイ装置に再送信するとき、前記手本文字の画像から前記手書き文字の画像と一致する部分を消去した画像を新たな前記手本文字の画像として生成し、新たな前記手本文字の画像を前記ヘッドマウントディスプレイ装置に再送信することを特徴とする文字学習システム。
【請求項３】
学習者により装着される透過型のヘッドマウントディスプレイ装置と、
前記ヘッドマウントディスプレイ装置に通信可能に接続されるとともに、手本文字の画像を記憶する情報処理装置と、を備え、
前記ヘッドマウントディスプレイ装置は、前記情報処理装置から送信される前記手本文字の画像を取得し、前記手本文字を表示し、
前記情報処理装置は、前記学習者により手書きされた手書き文字の画像を入力するための入力部を含み、前記手本文字の画像を前記ヘッドマウントディスプレイ装置に送信した後、前記手書き文字の画像が前記入力部を介して入力されると、前記手書き文字の画像と前記手本文字の画像とを比較することによって、前記手書き文字が正しく書かれているか否かを評価する文字評価を行い、前記文字評価の評価結果を前記学習者に報知するための報知処理を行い、
前記情報処理装置は、前記手書き文字の画像と前記手本文字の画像とがどの程度類似しているかを示す類似度を前記評価結果として求め、
前記情報処理装置は、前記文字評価を行った後、前記手本文字の画像を前記ヘッドマウントディスプレイ装置に再送信するとき、前記文字評価において求めた前記類似度が予め定められた閾値以上であるか否かを判断し、前記類似度が前記閾値以上であれば、前記手本文字の画像から、書き始め部分および書き終わり部分以外の部分を消去した画像を新たな前記手本文字の画像として生成し、新たな前記手本文字の画像を前記ヘッドマウントディスプレイ装置に再送信することを特徴とする文字学習システム
【請求項４】
前記情報処理装置は、前記手書き文字の画像を読み取る画像読取部を前記入力部として含む画像形成装置であることを特徴とする請求項１〜３のいずれか１項に記載の文字学習システム。
【請求項５】
前記情報処理装置は、用紙に画像を印刷する印刷部を含む画像形成装置であり、
前記画像形成装置は、前記報知処理として、前記評価結果を用紙に印刷して出力する処理を行うことを特徴とする請求項１〜４のいずれか１項に記載の文字学習システム。
【請求項６】
学習者により装着される透過型のヘッドマウントディスプレイ装置と、
前記ヘッドマウントディスプレイ装置に通信可能に接続されるとともに、手本文字の画像を記憶する情報処理装置と、を備え、
前記ヘッドマウントディスプレイ装置は、前記情報処理装置から送信される前記手本文字の画像を取得し、前記手本文字を表示し、
前記情報処理装置は、前記手本文字に沿った文字を前記学習者に書かせるための補助画像を前記手本文字の画像に付加して前記ヘッドマウントディスプレイ装置に送信し、
前記情報処理装置または前記ヘッドマウントディスプレイ装置は、前記補助画像のサイズおよび前記補助画像の形状の少なくとも一方の変更を前記学習者から受け付けることを特徴とする文字学習システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、文字の書き方を学習する学習者の支援を行う文字学習システムに関する。
【背景技術】
【０００２】
従来、文字の書き方を学習する学習者を支援するための文字学習システムが知られている。このような文字学習システムは、たとえば、特許文献１に開示されている。特許文献１の文字学習システム（卓上平置型液晶表示装置付き習字絵画自己学習システム）は、液晶表示装置とパーソナルコンピューターとを備える。なお、液晶表示装置は、卓上に平置き可能に構成される。
【０００３】
特許文献１では、液晶表示装置の表示面に手本文字が表示される。ここで、手本文字を表示する液晶表示装置は卓上に平置きされる。このため、液晶表示装置の表示面上に学習用紙（学習対象の文字を手書きするための用紙）を載置することができる。そして、液晶表示装置の表示面上に学習用紙を載置すると、液晶表示装置の表示面に表示された手本文字が学習用紙に写り込む（手本文字が透けて見える）。これにより、手本文字をなぞる（手本文字に沿った文字を学習用紙に手書きする）ことができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００１−１００６２９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１では、文字の書き方を学習する（手本文字をなぞる）とき、液晶表示装置の表示面上に載置された学習用紙に対して、学習対象の文字を手書きしなければならない。したがって、手本文字に沿って文字を手書きする（手本文字をなぞる）ときに文字が書き難いという不都合がある。
【０００６】
また、特許文献１では、液晶表示装置の表示面に表示される手本文字が透けて見える用紙を学習用紙として別途準備しなければならず、学習者が白紙用紙を持っていても、その用紙を学習用紙として使用できない場合がある。このため、学習者にとっては利便性が悪い。
【０００７】
本発明は、上記課題を解決するためになされたものであり、学習対象の文字を手書きする（手本文字をなぞる）ときの文字の書き易さを向上させつつ、学習者の利便性を向上させることが可能な文字学習システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明の文字学習システムは、学習者により装着される透過型のヘッドマウントディスプレイ装置と、ヘッドマウントディスプレイ装置に通信可能に接続されるとともに、手本文字の画像を記憶する情報処理装置と、を備える。そして、ヘッドマウントディスプレイ装置は、情報処理装置から送信される手本文字の画像を取得し、手本文字を表示する。
【０００９】
本発明の構成では、学習者により装着される透過型のヘッドマウントディスプレイ装置に手本文字を表示するので、液晶表示装置などの表示装置の表示面上に学習用紙（学習対象の文字を手書きするための用紙）を載置する必要がない。すなわち、学習用紙を載置する載置台（机など）を任意に選択することができる。これにより、学習対象の文字を手書きする（手本文字をなぞる）ときの文字の書き易さが向上する。また、厚紙や裏紙などの用紙を学習用紙として使用することができる（学習用紙を任意に選択することができる）ので、専用の用紙を別途準備する必要がなくなり、学習者の利便性が向上する。
【発明の効果】
【００１０】
本発明によれば、学習対象の文字を手書きする（手本文字をなぞる）ときの文字の書き易さを向上させつつ、学習者の利便性を向上させることができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の一実施形態による文字学習システムの構成を示す図
【図２】本発明の一実施形態による文字学習システムのヘッドマウント装置に手本文字を表示するときの処理の流れを説明するためのフローチャート
【図３】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置を装着した学習者の視界を示す図
【図４】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置を装着した学習者の視界の一例を示す図（学習者が頭部を動かしたときの図）
【図５】本発明の一実施形態による文字学習システムの複合機にて文字評価を行うときの処理の流れを説明するためのフローチャート
【図６】本発明の一実施形態による文字学習システムの複合機から出力される評価結果レポートを示す図
【図７】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置に表示される手本文字の遷移を示す図（第１の形態）
【図８】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置に表示される手本文字の遷移を示す図（第２の形態）
【図９】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置に表示される手本文字の遷移を示す図（第３の形態）
【図１０】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置に表示される補助画像（枠画像）を示す図
【図１１】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置に表示される補助画像（中心線画像）を示す図
【図１２】本発明の一実施形態による文字学習システムのヘッドマウントディスプレイ装置に表示される補助画像（罫線画像）を示す図
【発明を実施するための形態】
【００１２】
＜文字学習システムの全体構成＞
図１に示すように、本実施形態の文字学習システム１００は、文字の書き方を学習する学習者やその学習者を指導する指導者を支援するためのものであって、複合機（ＭＦＰ）２００と、ヘッドマウントディスプレイ装置３００とを備える。たとえば、この文字学習システム１００では、漢字、ひらがな、カタカナ、および、外国語（アルファベット、簡体字およびハングルなど）が学習対象の文字となり得る。なお、複合機３００は、「情報処理装置」に相当する。
【００１３】
複合機２００およびヘッドマウントディスプレイ装置３００は、互いに通信可能に接続される。たとえば、複合機２００とヘッドマウントディスプレイ装置３００との間では、近距離無線通信や無線ＬＡＮ通信などの通信規格に準拠した無線通信が行われる。あるいは、複合機２００とヘッドマウントディスプレイ装置３００との間で有線通信が行われてもよい。
【００１４】
＜複合機の構成＞
複合機２００は、印刷機能やスキャン機能など複数種の機能を搭載する画像形成装置である。この複合機２００には、学習者が模範とすべき文字である手本文字の画像が記憶される。そして、複合機２００は、学習者が手本文字を手本にして手書きした文字である手書き文字（文字評価の評価対象となる評価対象文字）の画像を取得し、手書き文字が正しく書かれているか否かを評価する文字評価を行う。詳細は後述する。
【００１５】
複合機２００は、画像読取部２１０、印刷部２２０、操作パネル２３０、複合機メモリー２４０、複合機制御部２５０および複合機通信部２６０を備える。
【００１６】
画像読取部２１０は、原稿を読み取って画像データを生成する。印刷部２２０は、用紙に画像を印刷して出力する。操作パネル２３０は、タッチパネルディスプレイおよびハードウェアキーを含み、ソフトウェアキーなどを配した画面をタッチパネルディスプレイに表示し、各種設定を行うための操作（ソフトウェアキーに対するタッチ操作やハードウェアキーに対する押下操作）を受け付ける。
【００１７】
複合機メモリー２４０は、複合機２００を制御するためのプログラムおよびデータを記憶する。また、複合機メモリー２４０は、文字学習アプリケーション（学習アプリ）ＡＰを記憶する。
【００１８】
複合機制御部２５０は、ＣＰＵ２５１や画像処理部２５２を含む。ＣＰＵ２５１は、複合機メモリー２４０に記憶されたプログラムおよびデータに基づき動作し、複合機２００の各部を制御する。すなわち、ＣＰＵ２５１は、画像読取部２１０の読取動作や印刷部２２０の印刷動作を制御する。さらに、ＣＰＵ２５１は、操作パネル２３０の表示動作を制御したり、操作パネル２３０に対する操作を検知したりする。また、ＣＰＵ２５１は、学習アプリＡＰに基づき動作し、文字学習を支援するための各種処理を行う。
【００１９】
画像処理部２５２は、画像処理回路や画像処理メモリーなどを含む。そして、画像処理部２５２は、画像データに対して、拡大／縮小や濃度変換などの画像処理を行う。また、画像処理部２５２は、画像データに含まれる文字を認識する処理である文字認識処理を行う。なお、画像処理部２５２による文字認識処理では、たとえば、ＯＣＲ（Ｏｐｔｉｃａｌ  Ｃｈａｒａｃｔｅｒ  Ｒｅａｄｅｒ）技術が用いられる。
【００２０】
画像処理部２５２に文字認識処理を行わせるため、たとえば、パターンマッチング用の文字パターン（標準パターン）を格納する文字データベースが複合機メモリー２４０に記憶される。そして、画像処理部２５２は、文字認識処理を行うとき、文字認識処理の対象となる画像データから文字画像を抽出する。このとき、画像処理部２５２は、画像データに対してレイアウト解析などを行って文字領域を特定し、当該文字領域から１文字ずつ文字画像を切り出す（抽出する）。その後、画像処理部２５２は、文字データベースに格納された文字パターンと抽出文字画像とを比較する処理（マッチング処理）を行い、その比較結果に基づき文字を認識する。
【００２１】
複合機通信部２６０は、外部機器との間で通信を行うための通信インターフェースである。複合機通信部２６０は、ヘッドマウントディスプレイ装置３００と通信可能に接続され、ヘッドマウントディスプレイ装置３００との間でデータを送受信する。また、複合機通信部２６０は、学習者や指導者により使用されるパーソナルコンピューター（ＰＣ）４００と通信可能に接続され、ＰＣ４００との間でデータを送受信する。
【００２２】
＜ヘッドマウントディスプレイ装置の構成＞
ヘッドマウントディスプレイ装置３００は、ウェアラブルデバイスなどと称されるものであり、学習者により装着される。このヘッドマウントディスプレイ装置３００は、眼鏡型であって、眼鏡のレンズ部分に相当する部分に画像を表示する（学習者の眼前に画像を表示する）。
【００２３】
ヘッドマウントディスプレイ装置３００は、表示部３１０、撮像部３２０、操作部３３０、ディスプレイメモリー３４０、ディスプレイ制御部３５０およびディスプレイ通信部３６０を備える。
【００２４】
表示部３１０は、ヘッドマウントディスプレイ装置３００を学習者が装着したときに、学習者の眼と対向する位置に配置される。そして、表示部３１０は、種々の画像を表示する。ここで、表示部３１０は、外光を透過させることが可能な透過型（シースルー型）である。たとえば、表示部３１０は、ハーフミラーなどを含み、表示画像をハーフミラーによって学習者の目に向けて反射する。このとき、外光はハーフミラーを透過して学習者の目に入射する。すなわち、ヘッドマウントディスプレイ装置３００を学習者が装着した場合（学習者の眼前がヘッドマウントディスプレイ装置３００によって塞がれた場合）であっても、学習者は外側の景色を視認することができる。
【００２５】
撮像部３２０は、ＣＣＤカメラなどを含み、ヘッドマウントディスプレイ装置３００を装着した学習者の視界方向の撮像が可能な位置に配置される。操作部３３０は、ハードウェアキーなどを含み、各種設定を行うための操作（ハードウェアキーに対する押下操作）を受け付ける。
【００２６】
ディスプレイメモリー３４０は、ヘッドマウントディスプレイ装置３００を制御するためのプログラムおよびデータを記憶する。ディスプレイ制御部３５０は、ＣＰＵなどを含み、ディスプレイメモリー３４０に記憶されたプログラムおよびデータに基づき、表示部３１０の表示動作や撮像部３２０の撮像動作を制御する。
【００２７】
ディスプレイ通信部３６０は、外部機器との間で通信を行うための通信インターフェースである。ディスプレイ通信部３６０は、複合機２００（複合機通信部２６０）と通信可能に接続され、複合機２００との間でデータを送受信する。なお、ディスプレイ通信部３６０を介して、学習者や指導者が所有する携帯端末（携帯電話、スマートフォンおよびタブレット端末など）とヘッドマウントディスプレイ装置３００との間で通信が行われてもよい。この場合、学習者や指導者が所有する携帯端末を用いて、ヘッドマウントディスプレイ装置３００に関する設定を行うことができる。
【００２８】
＜手本文字の画像の登録＞
文字学習システム１００を用いて文字の書き方を学習する場合には、複合機２００に手本文字の画像を予め登録しておく必要がある。たとえば、複合機制御部２５０は、登録すべき手本文字の画像を含む登録情報を複合機通信部２６０がＰＣ４００から受信すると、登録情報に含まれる手本文字の画像を登録する。なお、登録対象の手本文字の画像は複合機メモリー２４０に記憶される。
【００２９】
あるいは、複合機制御部２５０は、操作パネル２３０に対して登録モード移行操作が行われたことを検知すると、複合機２００を登録モード（手本文字の画像を登録するためのモード）に移行させる。たとえば、操作パネル２３０は、登録モード移行キー（図示せず）を表示することにより、登録モード移行操作の受け付けを行う。なお、ヘッドマウントディスプレイ装置３００（操作部３３０）に対する操作によっても、複合機２００を登録モードに移行させることができる。
【００３０】
登録モードに移行すると、複合機制御部２５０は、手本文字の画像のスキャンを促すメッセージを操作パネル２３０に表示させる。これにより、学習者や指導者によって、手本文字の画像を原稿画像として含む手本文字原稿が複合機２００にセットされ、スキャンの実行を指示するためのスキャンスタート操作が操作パネル２３０に対して行われる。
【００３１】
操作パネル２３０に対してスキャンスタート操作が行われたことを検知すると、複合機制御部２５０は、手本文字原稿の読み取りを画像読取部２１０に行わせる。すなわち、画像読取部２１０は、手本文字原稿の画像データを生成する。この後、複合機制御部２５０（画像処理部２５２）は、手本文字原稿の画像データに対して文字認識処理を行うことによって文字を認識し、当該認識した文字の画像を手本文字の画像として登録する（複合機メモリー２４０に記憶させる）。
【００３２】
なお、学習アプリＡＰの提供者が管理するサーバーから、手本文字の画像が複合機２００にダウンロードされてもよい。
【００３３】
＜手本文字の表示＞
以下、図２に示すフローチャートを参照し、手本文字を表示するときの処理の流れについて説明する。図２に示すフローチャートは、複合機２００にインストールされた学習アプリＡＰが起動したときにスタートする。なお、学習アプリＡＰは、操作パネル２３０に対してアプリ起動操作を行うことによって起動することができる。あるいは、学習アプリＡＰの起動命令をヘッドマウントディスプレイ装置３００から複合機２００に送信することによっても学習アプリＡＰを起動することができる。
【００３４】
ステップＳ１において、複合機制御部２５０は、手本文字の選択受付を操作パネル２３０に行わせる。たとえば、操作パネル２３０は、登録済みの手本文字を示す情報を選択肢として表示し、手本文字の選択を受け付ける。
【００３５】
その後、ステップＳ２において、複合機制御部２５０は、複合機通信部２６０を介し、選択された手本文字の画像をヘッドマウントディスプレイ装置３００に送信する。すなわち、ヘッドマウントディスプレイ装置３００は、選択された手本文字の画像を複合機２００から取得する（選択された手本文字の画像をディスプレイ通信部３６０が受信する）。
【００３６】
選択された手本文字の画像をディスプレイ通信部３６０が受信すると、ステップＳ３において、ディスプレイ制御部３５０は、選択された手本文字の画像をディスプレイメモリー３４０に記憶させる。そして、ステップＳ４において、ディスプレイ制御部３５０は、選択された手本文字を表示部３１０に表示させる。
【００３７】
ヘッドマウントディスプレイ装置３００に手本文字が表示されると、ヘッドマウントディスプレイ装置３００を装着した学習者により手本文字が視認される。このときの学習者の視界の一例を図３に示す。図３では、「Ａ」という文字を手本文字とした場合を図示する（以下の説明で参照する図面についても同様とする）。
【００３８】
図３に示すように、ヘッドマウントディスプレイ装置３００は透過型であるので、ヘッドマウントディスプレイ装置３００を学習者が装着した状態であっても、学習者は学習用紙５００（学習対象の文字を手本文字に沿って手書きするための用紙）を視認することができる。すなわち、学習者からすると、学習用紙５００の表面に手本文字が写っているように見える。これにより、手本文字に対応する文字の書き方を練習することができる（手本文字をなぞることができる）。なお、図３では、ヘッドマウントディスプレイ装置３００の表示領域（表示部３１０）を破線で示す。
【００３９】
ここで、ディスプレイ制御部３５０は、手本文字を表示部３１０に表示させるとき、撮像部３２０による撮像を行う。なお、撮像部３２０による撮像は、表示部３１０による手本文字の表示開始をトリガーとして開始される。あるいは、操作部３２０に対して撮像開始操作が行われたことを受けて、撮像部３２０による撮像が開始される。そして、ディスプレイ制御部３５０は、撮像部３２０が撮像した撮像画像に基づき、学習用紙５００の縁を認識し、学習用紙５００の縁に対して手本文字の位置が移動しないように手本文字を表示部３１０に表示させる。これにより、図４に示すように、ヘッドマウントディスプレイ装置３００を装着した学習者が頭部を動かしても（学習用紙５００の縁に対して表示部３１０の位置が移動しても）、学習用紙５００の縁に対する手本文字の位置は移動しない。
【００４０】
＜手書き文字の文字評価＞
以下に、図５に示すフローチャートを参照し、手書き文字が正しく書かれているか否かを評価する文字評価を行うときの処理の流れについて説明する。図５に示すフローチャートは、複合機２００が評価モード（手書き文字を評価するためのモード）に移行したときにスタートする。
【００４１】
なお、複合機制御部２５０は、操作パネル２３０に対して評価モード移行操作が行われたことを検知すると、複合機２００を評価モードに移行させる。たとえば、操作パネル２３０は、評価モード移行キー（図示せず）を表示することにより、評価モード移行操作の受け付けを行う。あるいは、ヘッドマウントディスプレイ装置３００（操作部３３０）に対する操作によっても、複合機２００を評価モードに移行させることができる。
【００４２】
評価モードに移行すると、ステップＳ１１において、複合機制御部２５０は、学習用紙５００（手書き文字の画像）の読み取りを画像読取部２１０に行わせる。すなわち、画像読取部２１０は、学習用紙５００の画像データを生成する。
【００４３】
たとえば、複合機制御部２５０は、学習用紙５００のスキャンを促すメッセージを操作パネル２３０に表示させる。これにより、学習者や指導者によって、学習用紙５００が複合機２００にセットされ、スキャンの実行を指示するためのスキャンスタート操作が操作パネル２３０に対して行われる。
【００４４】
そして、複合機制御部２５０は、操作パネル２３０に対してスキャンスタート操作が行われたことを検知すると、学習用紙５００の読み取りを画像読取部２１０に開始させる。これにより、画像読取部２１０によって学習用紙５００の読み取りが行われ、学習用紙５００に手書きされた手書き文字の画像が複合機２００に入力される。この構成では、画像読取部２１０が「入力部」に相当する。なお、学習用紙５００に手書きされた手書き文字の画像をヘッドマウントディスプレイ装置３００の撮像部３２０により撮像し、それによって得られた撮像画像（手書き文字の画像）を複合機２００に送信（入力）してもよい。
【００４５】
続いて、ステップＳ１２において、複合機制御部２５０（画像処理部２５２）は、学習用紙５００の画像データに対して文字認識処理を行うことによって、学習用紙５００に手書きされた手書き文字を認識する。なお、当該認識された手書き文字は文字評価の評価対象文字となる。
【００４６】
そして、ステップＳ１３において、複合機制御部２５０（画像処理部２５２）は、手書き文字の画像と手本文字の画像とを比較する比較処理を行う。この比較処理では、たとえば、手書き文字の画像と手本文字の画像とがどの程度類似しているかを示す類似度が求められる。
【００４７】
その後、ステップＳ１４において、複合機制御部２５０は、文字評価の評価結果を学習者や指導者に報知するための報知処理を行う。たとえば、複合機制御部２５０は、報知処理として、評価結果を示すレポート用紙６００（図６参照）の印刷出力を印刷部２２０に行わせる。
【００４８】
図６に示すように、レポート用紙６００には、評価結果として、手本文字の画像に対する手書き文字の画像の類似度を点数として示した点数情報６１が印刷される。また、図示しないが、手書き文字の画像に手本文字の画像を重ね合わせた画像（添削結果を示す情報）がレポート用紙６００に印刷されてもよい。
【００４９】
さらに、学習者の氏名、学校名および学年などを示す情報６２がレポート用紙６００に印刷されてもよい。たとえば、学習者の氏名などの個人情報は、複合機２００に予め登録される。そして、学習用紙５００の読み取りに先立って、複合機２００に登録された個人情報のうちから対象者の選択受付が行われる。また、学習日（評価日）を示す情報６３がレポート用紙６００に印刷されてもよい。
【００５０】
なお、報知処理として、操作パネル２３０に評価結果を表示するための処理が行われてもよい（操作パネル２３０に評価結果を表示してもよい）。また、ヘッドマウントディスプレイ装置３００に評価結果を送信し、ヘッドマウントディスプレイ装置３００にて評価結果の表示を行ってもよい。さらに、ＰＣ４００に評価結果を送信し、ＰＣ４００にて評価結果の表示を行ってもよい。
【００５１】
＜手本文字の画像の再送信＞
複合機制御部２５０は、手書き文字の文字評価を行った後（学習者に評価結果を報知するための報知処理を行った後）、評価済みの文字と同一文字の学習を続行するか否かの設定受付を操作パネル２３０に行わせる。そして、複合機制御部２５０は、同一文字の学習を続行する旨を操作パネル２３０が受け付けると、当該文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信する。なお、ヘッドマウントディスプレイ装置３００（操作部３３０）を操作することによっても、評価済みの文字と同一文字の学習を続行するか否かの設定を行える。
【００５２】
ここで、複合機制御部２５０は、文字評価を行った後、評価済みの文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、評価済みの文字の文字評価を行ったときに求めた類似度に応じて、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像を変化させる。すなわち、ヘッドマウントディスプレイ装置３００に表示される手本文字の表示形態は、文字評価の評価結果（類似度）に応じて変化する。
【００５３】
第１の形態として、複合機制御部２５０は、文字評価において求めた類似度に応じて、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像の濃度（色）を変化させる。
【００５４】
たとえば、複合機制御部２５０は、文字評価において求めた類似度が予め定められた閾値以上であるか否かを判断する。その結果、類似度が閾値以上であると判断した場合、複合機制御部２５０は、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像の濃度を前回の濃度（ヘッドマウントディスプレイ装置３００に前回送信した手本文字の画像の濃度）よりも薄くする。これにより、図７に示すように、文字評価の評価結果が比較的良かった場合（類似度が閾値以上であった場合）には、ヘッドマウントディスプレイ装置３００に今回表示される手本文字の濃度が前回表示された手本文字の濃度よりも薄くなる。
【００５５】
一方で、類似度が閾値未満であると判断した場合、複合機制御部２５０は、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像の濃度を前回の濃度よりも濃くする（または、前回の濃度と同じ濃度にしてもよい）。これにより、図示しないが、文字評価の評価結果が比較的悪かった場合（類似度が閾値未満であった場合）には、ヘッドマウントディスプレイ装置３００に今回表示される手本文字の濃度が前回表示された手本文字の濃度よりも濃くなる。
【００５６】
また、たとえば、文字の類似度は複数レベルに分類される。さらに、文字の類似度が高いほど、対応する濃度が薄くなるように、各レベルの類似度にそれぞれ対応する濃度が予め定められる。そして、複合機制御部２５０は、評価済みの文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、評価済みの文字の文字評価を行ったときに求めた類似度に対応する濃度を対象濃度として判別し、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像の濃度を対象濃度とする。
【００５７】
なお、評価済みの文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するときに、評価済みの文字の文字評価を行ったときに求めた類似度に応じて、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像の色を変化させてもよい。この場合には、たとえば、文字の類似度が複数レベルに分類され、各レベルの類似度にそれぞれ対応する色が予め定められる。そして、複合機制御部２５０は、評価済みの文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、評価済みの文字の文字評価を行ったときに求めた類似度に対応する色を対象色として判別し、ヘッドマウントディスプレイ装置３００に再送信する手本文字の画像の色を対象色とする。
【００５８】
第２の形態として、複合機制御部２５０は、評価済みの文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、手書き文字（評価対象文字）の画像と手本文字の画像とを比較し、手書き文字の画像と手本文字の画像とが一致する一致部分を判別する。その後、複合機制御部２５０は、手本文字の画像から手書き文字の画像と一致する部分を消去した画像を新たな手本文字の画像として生成する。
【００５９】
そして、複合機制御部２５０は、複合機通信部２６０を介し、新たな手本文字の画像をヘッドマウントディスプレイ装置３００に送信する。これにより、図８に示すように、ヘッドマウントディスプレイ装置３００に今回表示される手本文字からは、一致部分が省略される。図８（右側の図）では、一致部分を破線で示す（当該破線は実際には表示されない）。
【００６０】
第３の形態として、複合機制御部２５０は、評価済みの文字に対応する手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、文字評価において求めた類似度が予め定められた閾値以上であるか否かを判断する。その結果、類似度が閾値以上であると判断した場合、複合機制御部２５０は、手本文字の画像から、書き始め部分および書き終わり部分以外の部分を消去した画像を新たな手本文字の画像として生成する。
【００６１】
そして、複合機制御部２５０は、複合機通信部２６０を介し、新たな手本文字の画像をヘッドマウントディスプレイ装置３００に送信する。これにより、図９に示すように、ヘッドマウントディスプレイ装置３００に今回表示される手本文字からは、書き始め部分および書き終わり部分以外の部分が省略される。なお、類似度が閾値未満であれば、書き始め部分および書き終わり部分以外の部分は省略されない。図１０（右側の図）では、書き始め部分および書き終わり部分以外の部分を破線で示す（当該破線は実際には表示されない）。
【００６２】
＜補助画像の付加＞
複合機制御部２５０は、手本文字の画像（新たな手本文字の画像も含む）をヘッドマウントディスプレイ装置３００に送信するとき、手本文字に沿った文字を学習者に書かせるための補助画像７０（図１０〜図１２参照）を付加する。すなわち、ヘッドマウントディスプレイ装置３００には、補助画像７０を付加した手本文字が表示される。
【００６３】
たとえば、図１０に示すように、ディスプレイ制御部３５０は、補助画像７０として枠画像７１を付加した手本文字を表示部３１０に表示させる。この枠画像７１は、枠内に文字を書かせるための画像である。図１０では、一例として、四角形状の枠画像７１を図示するが、枠画像７１の形状は特に限定されない。すなわち、枠画像７１の形状が円形状であってもよいし、他の形状であってもよい。
【００６４】
なお、図１１に示すように、補助画像７０として中心線画像７２を付加した手本文字を表示部３１０に表示させてもよい。この中心線画像７２は、手本文字の中心を示す画像である。図１１では、一例として、縦線と横線とを含む中心線画像７２を図示するが、縦線および横線のうち一方のみからなる画像を中心線画像７２としてもよい。あるいは、図１２に示すように、補助画像７０として罫線画像７３を付加した手本文字を表示部３１０に表示させてもよい。
【００６５】
さらに、図示しないが、枠画像７１、中心線画像７２および罫線画像７３のうち、２つ以上を組み合わせた画像を補助画像７０として手本文字に付加してもよい。また、図示しないが、枠画像７１、中心線画像７２および罫線画像７３とは異なる画像を補助画像７０として手本文字に付加してもよい。
【００６６】
ここで、複合機制御部２５０は、補助画像７０の表示サイズの受け付けを操作パネル２３０に行わせる。すなわち、補助画像７０の表示サイズは変更可能である。たとえば、図１０に示した枠画像７１については、操作パネル２３０に対してサイズ設定操作（補助画像７０のサイズを設定するための操作）を行うことにより、枠画像７１の外形サイズを変更することができる。図１１に示した中心線画像７２については、操作パネル２３０に対してサイズ設定操作を行うことにより、中心線を成す線の長さを変更することができる。図１２に示した罫線画像７３については、操作パネル２３０に対してサイズ設定操作を行うことにより、罫線の長さや、罫線間の間隔を変更することができる。
【００６７】
本実施形態の文字学習システム１００は、上記のように、文字の書き方を学習する学習者により装着される透過型のヘッドマウントディスプレイ装置３００と、ヘッドマウントディスプレイ装置３００に通信可能に接続されるとともに、手本文字の画像を記憶する複合機２００（情報処理装置）と、を備える。そして、ヘッドマウントディスプレイ装置３００は、複合機２００から送信される手本文字の画像を取得し、手本文字を表示する。
【００６８】
本実施形態の構成では、学習者により装着される透過型のヘッドマウントディスプレイ装置３００に手本文字を表示するので、液晶表示装置などの表示装置の表示面上に学習用紙５００を載置する必要がない。すなわち、学習用紙５００を載置する載置台（机など）を任意に選択することができる。これにより、学習対象の文字を手書きする（手本文字をなぞる）ときの文字の書き易さが向上する。また、厚紙や裏紙などの用紙を学習用紙５００として使用することができる（学習用紙５００を任意に選択することができる）ので、専用の用紙を別途準備する必要がなくなり、学習者の利便性が向上する。
【００６９】
また、本実施形態では、上記のように、複合機２００は、学習者により手書きされた手書き文字の画像を入力するための画像読取部２１０（入力部）を含み、手本文字の画像をヘッドマウントディスプレイ装置３００に送信した後、手書き文字の画像が画像読取部２１０を介して入力されると、手書き文字の画像と手本文字の画像とを比較することによって、手書き文字が正しく書かれているか否かを評価する文字評価を行い、その文字評価の評価結果を学習者に報知するための報知処理を行う（レポート用紙６００の印刷出力を印刷部２２０に行わせる）。これにより、手書き文字に対する文字評価の評価結果（学習対象の文字を正しく書けたか否か）を容易に知ることができるので、学習者の利便性が向上する。
【００７０】
また、本実施形態では、上記のように、複合機２００は、手書き文字の画像と手本文字の画像とがどの程度類似しているかを示す類似度を評価結果として求める。これにより、手書き文字と手本文字との違い（ズレ）を知ることができるので、学習者の利便性が向上する。
【００７１】
また、本実施形態では、上記のように、複合機２００は、文字評価を行った後、手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、文字評価において求めた類似度が高いほど、ヘッドマウントディスプレイ装置３００に送信する手本文字の画像の濃度を薄くする（第１の形態）。
【００７２】
あるいは、複合機２００は、文字評価を行った後、手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、手本文字の画像から手書き文字の画像と一致する部分を消去した画像を新たな手本文字の画像として生成し、新たな手本文字の画像をヘッドマウントディスプレイ装置３００に送信する（第２の形態）。
【００７３】
あるいは、複合機２００は、文字評価を行った後、手本文字の画像をヘッドマウントディスプレイ装置３００に再送信するとき、文字評価において求めた類似度が予め定められた閾値以上であるか否かを判断し、類似度が閾値以上であれば、手本文字の画像から、書き始め部分および書き終わり部分以外の部分を消去した画像を新たな手本文字の画像として生成し、新たな手本文字の画像をヘッドマウントディスプレイ装置３００に送信する（第３の形態）。
【００７４】
上記第１〜第３の形態では、ヘッドマウントディスプレイ装置３００に表示される手本文字の表示形態を学習者の学習レベルに応じたものにすることができる。すなわち、学習レベルが低い場合（類似度が低い場合）には、手本文字を確実になぞらせるため、手本文字の視認性を高める。そして、学習レベルが高くなると（類似度が高くなると）、手本文字が無くても正しい文字が書けるような練習を学習者に行わせるため、手本文字の濃度を薄くするなどの処理を行う。
【００７５】
また、本実施形態では、上記のように、複合機２００は、手本文字に沿った文字を学習者に書かせるための補助画像７０を手本文字の画像に付加してヘッドマウントディスプレイ装置３００に送信する。すなわち、ヘッドマウントディスプレイ装置３００は、補助画像７０を付加した手本文字を表示する。また、補助画像７０のサイズは変更可能となっている。このような補助画像７０が手本文字に付加されると、手本文字に沿って文字を書くときの書き易さを向上させることができる。また、補助画像７０のサイズを任意に変更することができるので、学習者にとっては利便性が良い。
【００７６】
今回開示された実施形態は、すべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記実施形態の説明ではなく特許請求の範囲によって示され、さらに、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれる。
【符号の説明】
【００７７】
１００  文字学習システム
２００  複合機（情報処理装置）
２１０  画像読取部（入力部）
２２０  印刷部
３００  ヘッドマウントディスプレイ装置
【図１】
0006477558.tif 000002
【図２】
0006477558.tif 000003
【図３】
0006477558.tif 000004
【図４】
0006477558.tif 000005
【図５】
0006477558.tif 000006
【図６】
0006477558.tif 000007
【図７】
0006477558.tif 000008
【図８】
0006477558.tif 000009
【図９】
0006477558.tif 000010
【図１０】
0006477558.tif 000011
【図１１】
0006477558.tif 000012
【図１２】
0006477558.tif 000013