(57)【特許請求の範囲】
【請求項１】
文書の所定部分を強調して画像出力することが指示された文書データをもとに当該文書の出力用画像データを作成する画像処理装置における画像処理方法であって、
画面ごとに異なる強調方法を用いて各強調度判定用画像を生成し、ディスプレイに表示する判定用画像表示工程と、
前記判定用画像表示処理工程で表示された各強調度判定用画像に対し正しい視認結果で応えるユーザの応答時間をそれぞれ測定する応答時間測定工程と、
前記応答時間測定工程で測定された応答時間の中の最も短い測定結果を得た強調度判定用画像に対応する強調方法を実行方法として決定する強調方法決定工程と、
前記強調方法決定工程で決定された方法により文書の前記所定部分に強調処理を施し、当該文書の出力用画像データを生成する出力用画像生成工程と、
を有することを特徴とする画像処理方法。
【請求項２】
文書の所定部分を強調して画像出力することが指示された文書データをもとに当該文書の出力用画像データを作成する画像処理装置における画像処理方法であって、
同一画面に領域を分けて異なる強調方法を用いて各強調度判定用画像を生成し、ディスプレイに表示する判定用画像表示工程と、
前記判定用画像表示工程で表示された各強調度判定用画像に対するユーザの視線の移動状態をそれぞれ表示開始時から測定する視線移動測定工程と、
前記視線移動測定工程で測定された視線の移動状態から各強調度判定用画像に対する視線の移動順序を解析することにより強調度を求め、求めた中の最も高い強調度を得た強調度判定用画像に対応する強調方法を実行方法として決定する強調方法決定工程と、
前記強調方法決定工程で決定された方法により文書の前記所定部分に強調処理を施し、当該文書の出力用画像データを生成する出力用画像生成工程と、
を有することを特徴とする画像処理方法。
【請求項３】
文書の所定部分を強調して画像出力することが指示された文書データをもとに当該文書の出力用画像データを作成する画像処理装置における画像処理方法であって、
同一画面に領域を分けて異なる強調方法を用いて各強調度判定用画像を生成し、ディスプレイに表示する判定用画像表示工程と、
前記判定用画像表示工程で表示された各強調度判定用画像に対するユーザの視線の移動状態をそれぞれ表示開始時から測定する視線移動測定工程と、
前記視線移動測定工程で測定された視線の移動状態から各強調度判定用画像に対する注視時間を解析することにより強調度を求め、求めた中の最も高い強調度を得た強調度判定用画像に対応する強調方法を実行方法として決定する強調方法決定工程と、
前記強調方法決定工程で決定された方法により文書の前記所定部分に強調処理を施し、当該文書の出力用画像データを生成する出力用画像生成工程と、
を有することを特徴とする画像処理方法。
【請求項４】
請求項１乃至３のいずれかに記載された画像処理方法において、
前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、色の違いによることを特徴とする画像処理方法。
【請求項５】
請求項４に記載された画像処理方法において、
前記強調度判定用画像は、強調方法として用いる色以外の要素を同一とすることを特徴とする画像処理方法。
【請求項６】
請求項１乃至３のいずれかに記載された画像処理方法において、
前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、文字の大きさの違いによることを特徴とする画像処理方法。
【請求項７】
請求項６に記載された画像処理方法において、
前記強調度判定用画像は、強調方法として用いる文字の大きさ以外の要素を同一とすることを特徴とする画像処理方法。
【請求項８】
請求項１乃至３のいずれかに記載された画像処理方法において、
前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、文字・線分の太さの違いによることを特徴とする画像処理方法。
【請求項９】
請求項８に記載された画像処理方法において、
前記強調度判定用画像は、強調方法として用いる文字・線分の太さ以外の要素を同一とすることを特徴とする画像処理方法。
【請求項１０】
請求項１乃至３のいずれかに記載された画像処理方法において、
前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、フォントの違いによることを特徴とする画像処理方法。
【請求項１１】
請求項１０に記載された画像処理方法において、
前記強調度判定用画像は、強調方法として用いるフォント以外の要素を同一とすることを特徴とする画像処理方法。
【請求項１２】
請求項１乃至１１のいずれかに記載された画像処理方法の各工程をコンピュータに行わせるためのプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像処理方法及びプログラムに関し、詳細には、文書の所定部分を強調して画像出力することが指示された入力文書情報をもとに当該文書の出力用画像として、強調部分が利用者（ユーザ）にとって認知しやすい画像を作成する画像処理方法及び該画像処理方法をコンピュータに実行させるためのプログラムに関する。
【０００２】
【従来の技術】
文書画像中でタイトルや書き手が読み手に強く伝えたい部分等については、他の部分と異なる文字の大きさや色、フォントを用いたり、アンダーライン等の文字以外の記号を付与して強調する場合が多い。
【０００３】
このような文書強調方法としては、従来、例えば、文字の情報と色の情報を対で保存し、書き手が必要部分を強調した文書を容易に作成することのできる技術が提案されている（特開平９−１２０３９８号公報、特開平１０−２４０７２７号公報及び特開平１１−２１９３５５号公報等参照）。また、特開平６−３２４６５９では、書き手が異なる色を用いて強調した情報を容易に表示するためのカラーパレットの工夫について述べられている。すなわち、これらの技術は、文書の書き手が意図的に強調するものである。
【０００４】
また、従来、書き手が意図的に強調処理を行うのではなく、文書の必要な部分に対して自動的に強調処理を行う方法として、ひらがなとカタカナの同形文字等のように読み手で判断のつき難い文字についてフォントを変えて表示する方法が提案されており（特公平２−２６２５６号公報参照）、また、文書を読み上げるコンピュータ等のシステムにおいて、文書の読み上げている部分の色を変えて表示する方法が提案されている（特公平９−２６５４６６号公報参照）。
【０００５】
【発明が解決しようとする課題】
しかしながら、このように従来の技術において、文書を適宜強調する方法が種々提案されているが、書き手（作成者）が付加した、あるいは、必要に応じて適宜付与された強調のための情報が、必ずしも正しく読み手（利用者）側に伝わるとは限らない。例えば、作成者が強調部分を通常の文章部分と異なる色で文書を作成したとしても、利用者が色盲／色弱の場合には、色の違いを判別することができず、強調部分も他の文章部分と同じように受け取られる可能性があり、また、作成者が通常の文章部分を明朝体で、強調部分をゴチック体で文書を作成した場合であっても、利用者が高齢の場合、明朝体とゴチック体の細かい違いを見分けることができない場合もあり、読み手に適切に強調を伝える上で、改良の必要があった。
【０００６】
そこで、本発明は、文書の所定部分を強調して出力する際に、適用可能な異なる強調方法の中から当該利用者にとってより高い強調度が得られる方法として利用者毎に決定した強調方法で文書の所定部分を強調する処理を出力用画像に施すことにより、文書の作成者が強調したい部分を利用者に適切に伝えることを目的としている。
【００２３】
【課題を解決するための手段】
請求項１の発明は、文書の所定部分を強調して画像出力することが指示された文書データをもとに当該文書の出力用画像データを作成する画像処理装置における画像処理方法であって、画面ごとに異なる強調方法を用いて各強調度判定用画像を生成し、ディスプレイに表示する判定用画像表示工程と、前記判定用画像表示処理工程で表示された各強調度判定用画像に対し正しい視認結果で応えるユーザの応答時間をそれぞれ測定する応答時間測定工程と、前記応答時間測定工程で測定された応答時間の中の最も短い測定結果を得た強調度判定用画像に対応する強調方法を実行方法として決定する強調方法決定工程と、前記強調方法決定工程で決定された方法により文書の前記所定部分に強調処理を施し、当該文書の出力用画像データを生成する出力用画像生成工程と、を有することを特徴とする。
請求項２の発明は、文書の所定部分を強調して画像出力することが指示された文書データをもとに当該文書の出力用画像データを作成する画像処理装置における画像処理方法であって、同一画面に領域を分けて異なる強調方法を用いて各強調度判定用画像を生成し、ディスプレイに表示する判定用画像表示工程と、前記判定用画像表示工程で表示された各強調度判定用画像に対するユーザの視線の移動状態をそれぞれ表示開始時から測定する視線移動測定工程と、前記視線移動測定工程で測定された視線の移動状態から各強調度判定用画像に対する視線の移動順序を解析することにより強調度を求め、求めた中の最も高い強調度を得た強調度判定用画像に対応する強調方法を実行方法として決定する強調方法決定工程と、前記強調方法決定工程で決定された方法により文書の前記所定部分に強調処理を施し、当該文書の出力用画像データを生成する出力用画像生成工程と、を有することを特徴とする。
請求項３の発明は、文書の所定部分を強調して画像出力することが指示された文書データをもとに当該文書の出力用画像データを作成する画像処理装置における画像処理方法であって、同一画面に領域を分けて異なる強調方法を用いて各強調度判定用画像を生成し、ディスプレイに表示する判定用画像表示工程と、前記判定用画像表示工程で表示された各強調度判定用画像に対するユーザの視線の移動状態をそれぞれ表示開始時から測定する視線移動測定工程と、前記視線移動測定工程で測定された視線の移動状態から各強調度判定用画像に対する注視時間を解析することにより強調度を求め、求めた中の最も高い強調度を得た強調度判定用画像に対応する強調方法を実行方法として決定する強調方法決定工程と、前記強調方法決定工程で決定された方法により文書の前記所定部分に強調処理を施し、当該文書の出力用画像データを生成する出力用画像生成工程と、を有することを特徴とする。
請求項４の発明は、請求項１乃至３のいずれかに記載された画像処理方法において、前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、色の違いによることを特徴とする。
請求項５の発明は、請求項４に記載された画像処理方法において、前記強調度判定用画像は、強調方法として用いる色以外の要素を同一とすることを特徴とする。
請求項６の発明は、請求項１乃至３のいずれかに記載された画像処理方法において、前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、文字の大きさの違いによることを特徴とする。
請求項７の発明は、請求項６に記載された画像処理方法において、前記強調度判定用画像は、強調方法として用いる文字の大きさ以外の要素を同一とすることを特徴とする。
請求項８の発明は、請求項１乃至３のいずれかに記載された画像処理方法において、前記判定用画像表示工程で強調度判定用画像に用いる異なる強調方法が、文字・線分の太さの違いによることを特徴とする。
請求項９の発明は、請求項８に記載された画像処理方法において、前記強調度判定用画像は、強調方法として用いる文字・線分の太さ以外の要素を同一とすることを特徴とする。
請求項１０の発明は、請求項１乃至３のいずれかに記載された画像処理方法において、前記判定用画像表示理工程で強調度判定用画像に用いる異なる強調方法が、フォントの違いによることを特徴とする。
請求項１１の発明は、請求項１０に記載された画像処理方法において、前記強調度判定用画像は、強調方法として用いるフォント以外の要素を同一とすることを特徴とする。
請求項１２の発明は、請求項１乃至１１のいずれかに記載された画像処理方法の各工程をコンピュータに行わせるためのプログラムである。
【００５７】
【発明の実施の形態】
以下、本発明の好適な実施の形態を添付図面に基づいて詳細に説明する。なお、以下に述べる実施の形態は、本発明の好適な実施の形態であるから、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの態様に限られるものではない。
【００５８】
図１〜図５は、本発明の画像処理方法に係る第１の実施の形態を説明する図である。
【００５９】
図１は、出力画像文書の所定部分に強調処理を施す本発明の画像処理方法の第１の実施の形態に係る画像処理装置の要部ブロック構成図である。なお、以下に説明する画像処理は、画像文書の所定部分に施す強調処理が要部であるから、この画像処理装置を文書強調装置１と称する。
【００６０】
図１において、文書強調装置１は、判定用画像生成部２、文書入力部３、強調処理部４、画像表示部５及びディスプレイ６等を備えており、コンピュータ等に後述する図５の画像処理プロセスを実行させるためのプログラムを搭載することで構築される。
【００６１】
判定用画像生成部２は、利用者に例示する画像を作成して、画像表示部５に出力し、画像表示部５は、判定用画像生成部２からの画像を利用者が見ることのできるディスプレイ６上に表示する。ディスプレイ６としては、例えば、ＣＲＴ（陰極線管：Cathode Ray Tube）やＬＣＤ（Liquid Crystal Display）等が用いられ、画像表示部５により駆動されて各種画像を表示する。
【００６２】
文書入力部３は、強調対象の文書の入力を行い、強調処理部４は、判定用画像生成部２からの情報に基づいて強調方法を決定し、文書入力部４から入力された文書の強調部分を、当該決定した強調手法で強調して、画像表示部５を通じてディスプレイ６上に表示する。
【００６３】
次に、図１に示す文書強調装置１の動作を説明する。まず、判定用画像作成部２で、色の異なる同一形状の画像を判定用画像として作成する。この判定用画像は、例えば、図２に示すように、通常の部分の表示に用いる色を黒とし、強調部分の表示に用いる候補の色を赤／緑／青とした場合、黒及び赤／緑／青の色で同じ大きさの円を例示画像上に複数配置する。また、判定用画像では、表示位置の影響を排除するために、強調部分の表示に用いる候補の色の円の位置と個数を変えた画像を用意する。図２では、赤／緑／青の円の個数を、２個と３個の画像をそれぞれの色について１枚ずつ、計６枚の画像を用意しており、また、分かりやすくするために、画像数をかなり少なくしているが、実際には円の個数や位置のバラエティを増やして、より多くの判定用画像を生成してもよい。このようにすると、利用者が識別しやすいと感じる色の判定精度を高めることができる。
【００６４】
そして、文書強調装置１は、利用者に対して、各判定用画像中の赤／緑／青の個数を数えるというタスクを与え、このタスクが高速に行えるほど、赤／緑／青が、黒に対して強調されていると判断する。
【００６５】
そこで、画像表示部５は、図２に示す６画像をディスプレイ６の画面の左上から右下に順次表示する。
【００６６】
強調処理部４は、この画像表示部５の画像表示と平行して、各画像を表示してからユーザが個数を応えるまでの反応時間を測定し、各色毎の平均応答時間の最も短い色を強調色と定める。なお、いま、赤の円を表示した画像の応答時間が最も短かったものとする。
【００６７】
そして、文書入力部３から図３に示すような文書が入力されるものとする。図３に示す文書では、タグが付与されており、＜強調＞というタグと＜／強調＞というタグの間の部分の文書が、文書の作成者が強調表示を望む部分である。
【００６８】
画像表示部５は、例示画像（判定用画像）のディスプレイ６への表示が終了すると、強調処理部４に対して、文書入力部３から入力された図３の入力文書の強調処理を依頼する。
【００６９】
強調処理部４は、図３の文書に対して、強調部分を赤とした文書画像データを生成し、画像表示部５に送る。画像表示部５は、受け取った画像を、図４に示すように、ディスプレイ６に表示する。なお、図４では、赤で強調表示される部分を「」で示しており、実際は、「」が無く、文字が赤色で表示され、他の部分の文字が黒で表示される。
【００７０】
上記処理を図５に示すフローチャートに基づいて、詳細に説明すると、文書強調装置１は、判定用画像作成部２で、図２に示したような、通常の部分の表示に用いる色を黒とし、強調部分の表示に用いる候補の色を赤／緑／青とした場合、黒及び赤／緑／青の色で同一形状で同じ大きさの円を例示画像上に複数配置した画像を判定用画像（例示画像）として作成し（ステップＳ１０１）、画像表示部５が、この６つの例示画像をディスプレイ６の画面の左上から右下に順次表示する（ステップＳ１０２）。
【００７１】
例示画像の画像表示部５への表示を行うと、強調処理部４は、この画像表示部５によるディスプレイ６への画像表示と平行して、各画像を表示してからユーザが個数を応えるまでの反応時間を測定する処理を各例示画像について行う（ステップＳ１０２、Ｓ１０３）。
【００７２】
文書強調装置１は、６つの例示画像について、ユーザが個数を答えるまでの応答時間の測定を完了すると、各色毎の平均応答時間を算出し（ステップＳ１０４）、各色毎の平均応答時間の最も短い色を強調色と決定する（ステップＳ１０５）。
【００７３】
文書強調装置１は、強調色を決定すると、文書入力部３から入力される文書に対して、強調処理部４で、当該文書の強調部分、例えば、上記タグ＜強調＞と＜／強調＞で挟まれた部分を、上記決定した色を強調色とした表示用文書画像を作成し（ステップＳ１０６）、強調処理部４の作成した表示用文書画像を画像表示部５がディスプレイ６に表示する処理を、文書入力部３から入力される文書に対して順次行って、全ての入力文書に対して、強調部分を強調色とした表示用文書画像を作成して画像表示部５がディスプレイ６に表示すると、処理を終了する（ステップＳ１０７）。
【００７４】
このように、本実施の形態の文書強調装置１は、文書の所定部分を強調して出力するに際して、文書を強調する方法として、利用者毎に当該利用者にとって強調度の強い強調方法を設定して、当該決定した強調方法で文書の所定部分を強調している。
【００７５】
したがって、文書の作成者が強調したい部分を、当該文書の利用者にとって強調を理解しやすい形態で強調することができ、利用者に適切に強調を伝えることができる。
【００７６】
また、本実施の形態の文書強調装置１は、利用者に強調度の度合いを判定する判定用画像を提示して、当該判定用画像に対する所定のタスクを当該利用者に与え、当該利用者の当該タスクに対する応答を解析して、当該利用者に対する強調度を判定して、強調方法を設定している。
【００７７】
したがって、利用者に与えたタスクを解析することで利用者の視覚特性をより適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【００７８】
さらに、本実施の形態の文書強調装置１は、判定用画像として、所定の画像が複数の色で描かれている画像を用いている。
【００７９】
したがって、利用者の色に対する視覚特性を取得して、色別で強調する場合に利用者にとって強調度の強い色を取得することができ、利用者により一層適切に強調を伝えることができる。
【００８０】
また、本実施の形態の文書強調装置１は、判定用画像として、当該判定用画像に含まれる各色の画像領域の大きさ、形状等の色以外の画像要素については、利用者に対する強調度に作用しない画像を用いている。
【００８１】
したがって、利用者の色に対する視覚特性をより一層適切に取得して、色別で強調する場合に利用者にとって強調度の強い色をより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【００８２】
なお、上記説明では、判定用画像として、同一形状で同じ大きさの円を用いているが、判定用画像に用いる画像としては、円に限るものではなく、利用者（ユーザ）の視覚特性を適切に判定することのできる形状であれば、どのような形状の画像であってもよい。
【００８３】
図６及び図７は、本発明の画像処理方法に係る第２の実施の形態を説明する図である。
【００８４】
なお、本実施の形態は、上記第１の実施の形態の文書強調装置と同様の装置構成により実施したものであり、本実施の形態の説明においては、上記第１の実施の形態の説明で用いた符号をそのまま用いて説明する。
【００８５】
本実施の形態の文書強調装置１は、入力文書の強調部分を色／大きさ／線の太さを異ならせて、強調表示するものである。
【００８６】
そこで、本実施の形態の文書強調装置１は、その判定用画像生成部２が、色／大きさ／線の太さの異なる画像を判定用画像として作成する。
【００８７】
画像の大きさとしては、ディスプレイ６の画面の大きさによる制限もあるため、入力文書がディスプレイ６の表示画面上で表示できる範囲内で最も大きい大きさで判定画面を作成する。
【００８８】
また、線の太さとしては、あまり線が太いと文字間の線分がつぶれて文字として読めなくなるため、入力文書がディスプレイ６の表示画面上で文字として適切に表示できる範囲内で最も太い太さで判定画面を作成する。
【００８９】
そして、判定用画像生成部２は、次の組み合わせの判定用画像を作成する。すなわち、判定用画像生成部２は、黒い円と赤い円、最大文字サイズと同等の大きさの円と本文を表示する文字の大きさと同等の大きさの円、最も太い線の円と本文を表示する文字の太さの線の円の組み合わせの判定画像を作成する。
【００９０】
そして、判定用画像生成部２は、これらの色／大きさ／線の太さの異なる円の位置と個数を変えた画像を、例えば、図６に示すように、赤の円／最大サイズの円／最大太さの円の個数２と個数３の画像をそれぞれについて、１枚ずつ、計６枚の画像を判定画像として作成する。なお、図６において、左上の画像と右下の画像で、赤色と記載されている部分の円が赤色の円である。
【００９１】
文書強調装置１は、図５に示した処理と同様に、判定用画像作成部２で、図６に示したような、通常の部分の表示に用いる色を黒で通常の太さの円とし、強調部分の表示に用いる候補の円を赤／最大サイズ／最大太さの円を例示画像上に複数配置した画像を判定用画像として作成し、画像表示部５が、この６つの例示画像をディスプレイ６の画面の左上から右下に順次表示する。例示画像の画像表示部５によるディスプレイ６への表示を行うと、強調処理部４は、この画像表示部５の画像表示と平行して、各画像を表示してからユーザが個数を応えるまでの反応時間を測定する処理を各例示画像について行う。
【００９２】
文書強調装置１は、６つの例示画像について、ユーザが個数を答えるまでの応答時間の測定を完了すると、各例示画像毎の平均応答時間を算出し、各例示画像毎の平均応答時間の最も短い例示画像を強調画像と定める。
【００９３】
文書強調装置１は、強調画像を決定すると、強調処理部４で、文書入力部３から入力される文書に対して、当該文書の強調部分、例えば、タグ＜強調＞と＜／強調＞で挟まれた部分を、上記決定した強調画像とした表示用文書画像を作成し、強調処理部４の作成した表示用文書画像を画像表示部５がディスプレイ６に表示する処理を、文書入力部３から入力される文書に対して順次行って、全ての入力文書に対して、強調部分を強調画像とした表示用文書画像を作成して画像表示部５がディスプレイ６に表示すると、処理を終了する。
【００９４】
例えば、最大サイズの円を表示した画像の応答時間が最も短かったものとすると、強調処理部４が、図３の文書に対して、タグ＜強調＞と＜／強調＞で挟まれた部分強調部分を最大サイズとした文書画像データを生成し、画像表示部５に送る。画像表示部５は、受け取った画像を、図７に示すように、ディスプレイ６に表示する。
【００９５】
このように、本実施の形態の文書強調装置１は、判定用画像として、複数の大きさの円を含んでいる画像を用いている。
【００９６】
したがって、利用者の文字の大きさに対する視覚特性を取得して、文字の大きさで強調する場合に利用者にとって強調度の強い大きさを取得することができ、利用者により一層適切に強調を伝えることができる。
【００９７】
また、本実施の形態の文書強調装置１は、判定用画像として、当該判定用画像に含まれる文字がその色、形状等の大きさ以外の画像要素については、利用者に対する強調度に作用しない画像を用いている。
【００９８】
したがって、利用者の文字の大きさに対する視覚特性をより一層適切に取得して、文字の大きさで強調する場合に利用者にとって強調度の強い文字の大きさをより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【００９９】
さらに、本実施の形態の文書強調装置１は、判定用画像として、複数の太さの線分または複数の太さの線の文字を含んでいる画像を用いている。
【０１００】
したがって、利用者の線の太さに対する視覚特性を取得して、線の太さで強調する場合に利用者にとって強調度の強い線の太さを取得することができ、利用者により一層適切に強調を伝えることができる。
【０１０１】
また、本実施の形態の文書強調装置１は、判定用画像として、当該判定用画像に含まれる線分または文字がその色、長さ、形状等の線の太さ以外の画像要素については、利用者に対する強調度に作用しない画像を用いている。
【０１０２】
したがって、利用者の線の太さに対する視覚特性をより一層適切に取得して、線の太さで強調する場合に利用者にとって強調度の強い線の太さをより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【０１０３】
さらに、本実施の形態の文書強調装置１は、判定用画像の色、大きさ、太さ等の情報に対する利用者の特性を取得し、当該利用者の特性に基づいて強調方法を設定している。
【０１０４】
したがって、色、大きさ、太さ等の情報に対する利用者の特性を総合的に取得することができ、利用者により一層適切に強調を伝えることができる。
【０１０５】
図８〜図１０は、本発明の画像処理方法に係る第３の実施の形態を説明する図である。
【０１０６】
なお、本実施の形態は、上記第１の実施の形態の文書強調装置と同様の装置構成により実施したものであり、本実施の形態の説明においては、上記第１の実施の形態の説明で用いた符号をそのまま用いて説明する。
【０１０７】
本実施の形態の文書強調装置１は、入力文書の強調部分をフォントを異ならせて、強調表示するものである。
【０１０８】
そこで、本実施の形態の文書強調装置１は、その判定用画像生成部２が、フォントの異なる画像を判定用画像として作成する。
【０１０９】
例えば、入力文書の強調部分以外の本文をＣｅｎｔｕｒｙフォントで書く場合、強調部分を、例えば、Ｃｏｕｒｉｅｒ／Ｉｍｐａｃｔ／Ｔａｈｏｍａフォントのいずれかのフォントで表示する。
【０１１０】
判定用画像生成部２は、次の組み合わせの判定用画像を作成する。すなわち、判定用画像生成部２は、１種類の文字、例えば、図８に示すように、「Ａ」の本文のフォントであるＣｅｎｔｕｒｙフォントで描いた画像の中に、フォントを変えた同じ文字「Ａ」を、位置と個数を変えた画像を、例えば、図８に示すように、Ｃｏｕｒｉｅｒ／Ｉｍｐａｃｔ／Ｔａｈｏｍａの文字の個数２と個数３の画像をそれぞれについて、１枚ずつ、計６枚の画像を判定画像として作成する。
【０１１１】
そして、文書強調装置１は、図５に示した処理と同様に、判定用画像作成部２で、図８に示したような、通常の部分の表示に用いる文字をＣｅｎｔｕｒｙフォントとし、強調部分の表示に用いる候補の文字「Ａ」をＣｏｕｒｉｅｒ／Ｉｍｐａｃｔ／Ｔａｈｏｍａとして、複数配置した画像を判定用画像（例示画像）として作成し、画像表示部５が、この６つの例示画像を画面の左上から右下に順次ディスプレイ６に表示する。例示画像のディスプレイ６への表示を行うと、強調処理部４は、この画像表示部５によるディスプレイ６への画像表示と平行して、各画像を表示してからユーザが個数を応えるまでの反応時間を測定する処理を各例示画像について行う。
【０１１２】
文書強調装置１は、６つの例示画像について、ユーザが個数を答えるまでの応答時間の測定を完了すると、各例示画像毎の平均応答時間を算出し、各例示画像毎の平均応答時間の最も短い例示画像「Ａ」を強調画像と定める。
【０１１３】
文書強調装置１は、強調画像を決定すると、強調処理部４で、文書入力部３から、図９に示すような文書の強調部分に＜強調＞タグと＜／強調＞タグが付与された入力文書に対して、当該入力文書の＜強調＞タグと＜／強調＞タグで挟まれた部分を、上記決定した強調画像フォントとした表示用文書画像を作成し、強調処理部４の作成した表示用文書画像を画像表示部５で表示する処理を、文書入力部３から入力される文書に対して順次行って、全ての入力文書に対して、強調部分を強調画像とした表示用文書画像を作成して画像表示部５がディスプレイ６に表示すると、処理を終了する。
【０１１４】
例えば、Ｉｍｐａｃｔのフォントで表示した画像の応答時間が最も短かったものとすると、強調処理部４が、図９の文書に対して、タグ＜強調＞と＜／強調＞で挟まれた部分強調部分をＩｍｐａｃｔフォントとした文書画像データを生成し、画像表示部５に送る。画像表示部５は、受け取った画像を、図１０に示すように、ディスプレイ６に表示する。
【０１１５】
このように、本実施の形態の文書強調装置１は、判定用画像として、複数のフォントの文字を含んでいる画像を用いている。
【０１１６】
したがって、利用者の文字のフォントに対する視覚特性を取得して、文字のフォントで強調する場合に利用者にとって強調度の強いフォントを取得することができ、利用者により一層適切に強調を伝えることができる。
【０１１７】
また、本実施の形態の文書強調装置１は、判定用画像として、当該判定用画像に含まれる文字がその色、大きさ等のフォント以外の画像要素については、利用者に対する強調度に作用しない画像を用いている。
【０１１８】
したがって、利用者の文字のフォントに対する視覚特性をより一層適切に取得して、文字のフォントで強調する場合に利用者にとって強調度の強いフォントをより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【０１１９】
図１１〜図１３は、本発明の画像処理方法に係る第４の実施の形態を説明する図であり、図１１は、出力画像文書の所定部分に強調処理を施す本発明の画像処理方法の第４の実施の形態に係る画像処理装置の要部ブロック構成図である。なお、以下に説明する画像処理は、画像文書の所定部分に施す強調処理が要部であるから、この画像処理装置を文書強調装置１０と称する。
【０１２０】
なお、本実施の形態は、上記第１の実施の形態の文書強調装置と同様の装置構成により実施したものであり、本実施の形態の説明においては、上記第１の実施の形態の文書強調装置１と同様の構成部分には、同一の符号を付して、その詳細な説明を省略する。
【０１２１】
本実施の形態の文書強調装置１０は、上記第１の実施の形態の文書強調装置１と同様の判定用画像生成部２、文書入力部３、強調処理部４、画像表示部５及びディスプレイ６等を備えているとともに、視線検知部１１を備えており、コンピュータ等に文書強調処理プログラムを搭載することで構築される。
【０１２２】
視線検知部１１は、利用者がディスプレイ６のどの位置を見ているかを検知する。
【０１２３】
本実施の形態の文書強調装置１０は、判定用画像生成部２が、色の異なる同一形状の画像を判定用画像として作成する。例えば、判定用画像生成部２は、文書の強調部分の表示に用いる候補の色を赤／緑／青としたとき、図１２に示すように、各色の組み合わせで同じ大きさの円を例示画像上に２つづつ配置する。このとき、表示位置の影響を排除するために、それぞれ配置位置を変えた画像を用意して、図１２に示すような計６枚の画像を用意する。なお、図１２に示す画像のうち、上段は、判定用画像に対する利用者の注視点を安定させるための画像であり、また、図１２では、分かりやすくするために、画像数をかなり少なくしているが、実際には円の位置のバラエティを増やして、より多くの判定用画像を生成することで利用者が識別しやすいと感じる色の判断精度を向上させたものとする。そして、画像表示部５が、この判定用画像を、ディスプレイ６の画面の左から右に向かって表示する。
【０１２４】
そして、本実施の形態の文書強調装置１０は、図１３に示すように、判定用画像生成部２が、上記判定用画像である例示画像を生成すると（ステップＳ２０１）、まず、上段の黒の例示画像（判定用画像）を画像表示部５がディスプレイ６に表示する（ステップＳ２０２）。
【０１２５】
利用者に対しては、各判定用画像を眺めてもらって、図１２の上段の画像表示中は黒円に注目してもらう。
【０１２６】
そして、まず、画像表示部５は、図１２の左上の画像を表示して、同時に、視線検知部１１により、利用者が画面上のどの部分を注視しているかを測定して、利用者が黒円を注視しているかどうかチェックする（ステップＳ２０３）。
【０１２７】
この利用者の視線検知の手法としては、種々の方法を用いることができるが、例えば、はいくつか提案されているが、例えば、特許第２５０５８５４号公報に記載されている方法を用いることができる。
【０１２８】
視線検知部１１は、利用者が黒円を注視していることを検出すると、画像表示部５に確認信号を送り、画像表示部５は確認信号を受け取ると、図１２の下段の画像を１秒間だけディスプレイ６に表示する（ステップＳ２０４）。その間、視線検知部１１は、利用者が画面上のどの位置を見ているかを検知し、それぞれの円上を注視している時間を測定して、強調処理部４に通知する。文書強調装置１０は、この処理を、図１２の各例示画像に対して行い（ステップＳ２０２〜Ｓ２０４）、全ての例示画像についての処理を完了すると、強調処理部４に処理終了を通知する。
【０１２９】
強調処理部４は、判定用画像の表示処理終了の通知を受け取ると、各色毎の注視時間合計を算出し（ステップＳ２０５）、最も注視時間の長い色を強調色として決定する（ステップＳ２０６）。
【０１３０】
そして、入力文書として、例えば、図３に示した第１の実施の形態の実施例１と同じ入力文書が文書入力部３から入力されると、この入力文書にはタグが付与されており、＜強調＞と＜／強調＞の間の部分が文書の作成者が強調表示を望む部分であるので、強調処理部４が、入力された文書画像に対して、強調部分を強調色として決定した色、例えば、赤とした文書画像データを生成し（ステップＳ２０７）、画像表示部５に送る。画像表示部５は、受け取った強調処理された文書画像を、例えば、図４に示したように、ディスプレイ６に表示して、処理を終了する（ステップＳ２０８）。
【０１３１】
このように、本実施の形態の文書強調装置１０は、利用者に強調度の度合いを判定する判定用画像を提示し、当該判定用画像に対する当該利用者の視線の移動を解析して、強調度を判定し、強調方法を設定している。
【０１３２】
したがって、利用者の視線の移動を解析することで利用者の視覚特性をより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【０１３３】
また、本実施の形態の文書強調装置１０は、利用者に強調度の度合いを判定する判定用画像を提示し、当該判定用画像に対する当該利用者の視線の移動を取得して、当該視線の移動順序に基づいて強調度を判定し、強調方法を設定している。
【０１３４】
したがって、利用者の視線の移動順序を解析することで利用者の視覚特性をより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【０１３５】
さらに、本実施の形態の文書強調装置１０は、利用者に強調度の度合いを判定する判定用画像を提示し、当該判定用画像に対する当該利用者の視線の移動を取得して、当該視線の判定用画像上での存在時間（注視時間）に基づいて強調度を判定し、強調方法を設定している。
【０１３６】
したがって、利用者の視線の判定用画像上での注視時間を解析することで利用者の視覚特性をより一層適切に取得することができ、利用者により一層適切に強調を伝えることができる。
【０１３７】
なお、本実施の形態の説明においては、色の違いで強調するものとして、判定用画像として、色を異ならせた画像を用いているが、大きさ、太さ、または、フォント等の違いで強調する場合にも同様に適用することができ、この場合には、判定用画像として、大きさ、線の太さ、または、フォント等を異ならせた画像を用いる。
【０１３８】
以上、本発明者によってなされた発明を好適な実施の形態に基づき具体的に説明したが、本発明は上記のものに限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。
【０１３９】
なお、上記各実施の形態において、文書強調装置１、１０の各部をネットワークで接続された端末装置に分散して配置したり、強調対象の文書をネットワークで接続された端末装置から当該ネットワークを介して入力する等のように、ネットワーク環境で構築してもよい。
【０１４０】
このようにすると、ネットワーク環境を利用して、文書の作成者が強調したい部分を、利用者に適切に強調して伝えることができる。
【０１４１】
【発明の効果】
本発明によると、画面ごとに異なる強調方法（色，文字の大きさ，文字・線分の太さ，フォントの違い）を用いて生成された各強調度判定用画像を視認するユーザの応答性（応答時間，視線の移動順序，注視時間）に従ってユーザ（利用者）ごとに最も有効な強調方法を判定し、得られる強調方法を当該ユーザへの出力画像に用いることで、文書の所定部分を強調して出力することが指示された出力画像の強調度を最適化することができる。
【図面の簡単な説明】
【図１】本発明の文書強調方法、文書強調処理プログラム及び文書強調装置の第１の実施の形態を適用した文書強調装置の要部ブロック構成図。
【図２】図１の判定用画像生成部が作成して画像表示部によりディスプレイに表示される判定用画像（例示画像）の一例を示す図。
【図３】図１の文書強調装置の文書入力部から入力される入力文書の一例を示す図。
【図４】図１の文書強調装置で図３の入力文書の強調部分を強調処理した文書の一例を示す図。
【図５】図１の文書強調装置による文書強調処理を示すフローチャート。
【図６】本発明の文書強調方法、文書強調処理プログラム及び文書強調装置の第２の実施の形態を適用した文書強調装置の判定用画像生成部が作成して画像表示部によりディスプレイに表示される判定用画像（例示画像）の一例を示す図
【図７】図６の判定画像で決定した強調方法で入力文書の強調部分を強調処理した文書の一例を示す図。
【図８】本発明の文書強調方法、文書強調処理プログラム及び文書強調装置の第３の実施の形態を適用した文書強調装置の判定用画像生成部が作成して画像表示部によりディスプレイに表示される判定用画像（例示画像）の一例を示す図
【図９】本発明の文書強調方法、文書強調処理プログラム及び文書強調装置の第３の実施の形態を適用した文書強調装置の文書入力部から入力される入力文書の一例を示す図。
【図１０】図９の判定画像で決定した強調フォントで図９の入力文書の強調部分を強調処理した文書の一例を示す図。
【図１１】本発明の文書強調方法、文書強調処理プログラム及び文書強調装置の第４の実施の形態を適用した文書強調装置の要部ブロック構成図。
【図１２】図１１の判定用画像生成部が作成して画像表示部によりディスプレイに表示される判定用画像（例示画像）の一例を示す図。
【図１３】図１１の文書強調装置による文書強調処理を示すフローチャート。
【符号の説明】
１  文書強調装置
２  判定用画像生成部
３  文書入力部
４  強調処理部
５  画像表示部
６  ディスプレイ
１０  文書強調装置
１１  視線検知部
【図１】
0004301774.tif 000002
【図２】
0004301774.tif 000003
【図３】
0004301774.tif 000004
【図４】
0004301774.tif 000005
【図５】
0004301774.tif 000006
【図６】
0004301774.tif 000007
【図７】
0004301774.tif 000008
【図８】
0004301774.tif 000009
【図９】
0004301774.tif 000010
【図１０】
0004301774.tif 000011
【図１１】
0004301774.tif 000012
【図１２】
0004301774.tif 000013
【図１３】
0004301774.tif 000014