(57)【要約】【課題】ユーザへの認識度によって特徴領域の加工を動的に行う。【解決手段】画像加工装置(101)は、入力された画像信号をデジタルデータ化し、特徴領域を抽出するオブジェクト抽出部(103)と、抽出されたオブジェクトの認識難易度を算出する認識難易度算出部(104)と、算出した認識難易度に応じて加工係数を算出する加工制御部(105)と、加工係数を使用して、特徴領域を加工し、入力の画像信号と重畳して出力する加工部(106)とを備えている。【選択図】図１
2008283338.tif 000002
【特許請求の範囲】
【請求項１】
画像信号を入力する画像入力部と、
前記画像信号入力部に入力された画像信号から特徴領域を抽出するオブジェクト抽出部と、
前記オブジェクト抽出部によって抽出された特徴領域の認識難易度を算出する認識難易度算出部と、
前記認識難易度に基づいて加工係数を算出する加工制御部と、
前記加工係数に基づいて前記特徴領域を加工して出力する加工部とを備える、
ことを特徴とする画像加工装置。
【請求項２】
請求項１において、
前記加工係数は、前記特徴領域に対する拡大率を含む、
ことを特徴とする画像加工装置。
【請求項３】
請求項１において、
前記加工係数は、前記特徴領域を表示する期間を含む、
ことを特徴とする画像加工装置。
【請求項４】
請求項１〜３のいずれか１つにおいて、
前記認識難易度算出部は、
前記オブジェクト抽出部によって抽出された特徴領域の画素数に基づいて前記認識難易度を算出する、
ことを特徴とする画像加工装置。
【請求項５】
請求項１〜３のいずれか１つにおいて、
前記認識難易度算出部は、
前後フレームの画像間における特徴領域の移動速度に基づいて前記認識難易度を算出する、
ことを特徴とする画像加工装置。
【請求項６】
画像信号を入力する画像入力ステップと、
前記画像信号入力ステップで入力された画像信号から特徴領域を抽出するオブジェクト抽出ステップと、
前記オブジェクト抽出ステップによって抽出された特徴領域の認識難易度を算出する認識難易度算出ステップと、
前記認識難易度に基づいて加工係数を算出する加工制御ステップと、
前記加工係数に基づいて前記特徴領域を加工して出力する加工ステップとを備える、
ことを特徴とする画像加工方法。
【請求項７】
コンピュータを、
画像信号を入力する画像入力部、
前記画像信号入力部に入力された画像信号から特徴領域を抽出するオブジェクト抽出部、
前記オブジェクト抽出部によって抽出された特徴領域の認識難易度を算出する認識難易度算出部、
前記認識難易度に基づいて加工係数を算出する加工制御部、
前記加工係数に基づいて前記特徴領域を加工して出力する加工部、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、特徴領域の拡大などを行う、画面加工装置に関するものである。
【背景技術】
【０００２】
現在、携帯電話やモバイルテレビなど、表示画面の小さな携帯型端末装置で動画像コンテンツを見るということが広く行われている。こういった表示画面が小さな端末でコンテンツを視聴する場合、顔や文字など、小さなオブジェクトは、そのままでは細部を確認することが困難である。
【０００３】
こういった問題を解決するため、画面中の所定領域を特定し、拡大して表示するという発明が提案されている（例えば、特許文献１参照）。
【特許文献１】特開2006-211207号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１の方法では、領域の大きさにかかわらず、一律に拡大表示されてしまうため、不必要な領域までを拡大して表示し、動画像の視認性を損なうという問題がある。
【０００５】
上記の問題を鑑み、本発明では、ユーザによっての認識難易度に応じて領域を加工し、表示することによって、動画像の視認性を損なうことを低減することができる画像拡大装置を提供する。
【課題を解決するための手段】
【０００６】
上記の問題を解決するために本発明が講じた手段は、画像信号を入力する画像入力部と、前記画像信号入力部に入力された画像信号から特徴領域を抽出するオブジェクト抽出部と、前記オブジェクト抽出部によって抽出された特徴領域の認識難易度を算出する認識難易度算出部と、前記認識難易度に基づいて加工係数を算出する加工制御部と、前記加工係数に基づいて前記特徴領域を加工して出力する加工部とを備えた画像拡大装置とする。
【発明の効果】
【０００７】
本発明によると、画面中のオブジェクトをユーザが認識することの困難度に応じて拡大など、画像への加工を施して表示するため、拡大画像が動画像にオーバレイして表示されることによって、動画像の視認性が低下することを低減できる。
【発明を実施するための最良の形態】
【０００８】
以下、本発明を実施するための最良の形態について、図面を参照しながら説明する。図１は、本発明による画像加工装置の一実施形態を示す。ここでは携帯電話やモバイルテレビなど表示画面の比較的小さな携帯型端末装置１００への適用例を示す。画像加工装置１０１は、画像入力部１０２、オブジェクト抽出部１０３、認識難易度算出部１０４、加工制御部１０５、加工部１０６を備えている。
【０００９】
画像入力部１０２は、画像加工装置１０１に入力された画像信号からデジタル画像データを生成する。この時、画像入力部１０２へ入力される画像信号は、静止画像でも、動画像でもどちらでもよい。
【００１０】
オブジェクト抽出部１０３は、画像入力部１０２で生成したデジタル画像データを解析し、画像中の文字や顔、人や動物など、特徴のある領域をオブジェクトとして抽出する。オブジェクト抽出部１０３で抽出するオブジェクトは、画像加工装置１０１を使用する目的によって、任意に変更することが可能である。
【００１１】
認識難易度算出部１０４は、オブジェクト抽出部１０３で抽出したオブジェクトの種別と大きさを判定し、そのオブジェクトがユーザにとって確認しやすいものかどうかを数値化した認識難易度を算出する。認識難易度は、オブジェクトの種別と大きさ、移動する速度などを基にして算出することができる。
【００１２】
加工制御部１０５は、認識難易度算出部１０４で算出した認識難易度に基づいて、オブジェクトの加工方法と、加工で使用するパラメータである加工係数を算出する。
【００１３】
加工部１０６は、オブジェクト抽出部１０３で抽出したオブジェクトを加工制御部１０５で算出した加工係数に基づいて加工し、画像入力部１０２に入力された画像信号に重畳し、画像出力として出力する。ここでの加工方法は、拡大や着色、提示時間の変更などが考えられる。加工部１０６からの画像出力はディスプレイ１０７に表示される。
【００１４】
次に、図２の概略図と、図３のフローチャートを参照しながら画像加工装置１０１の動作について説明する。
【００１５】
画像入力部１０２に入力された画像信号は、画像入力部１０２でデジタルデータ化され、オブジェクト抽出部１０３において特徴のある領域がオブジェクトとして抽出される（Ｓ１１）。
【００１６】
抽出したオブジェクトは、認識難易度算出部１０４において解析を行い、オブジェクトの種別を判定する（Ｓ１２）。
【００１７】
オブジェクトの種別が文字の場合（Ｓ１３のＹＥＳ肢）、ユーザにとって細部を確認したいオブジェクトであるため、拡大と提示時間の変更を行う。加工制御部１０５において、オブジェクトを構成する画素数から文字のサイズを判定し、オブジェクトの標準サイズとしてあらかじめ定義されている基準画素数と、抽出したオブジェクトの画素数が近似の値となるように拡大率を算出し、加工係数とする（Ｓ１８）。この時、拡大率だけでなく、文字色やフォントの種類も加工係数とすることも可能である。
【００１８】
また、オブジェクトの種別が、顔の場合（Ｓ１４のＹＥＳ肢）、ユーザにとっては細部を確認したいオブジェクトであるため、オブジェクトの種類が文字の時と同様に、オブジェクトを構成する画素数から拡大率を算出し提示時間を決定し、加工係数とする。
【００１９】
オブジェクトの種別が文字や顔で無い場合（Ｓ１４のＮＯ肢）は、オブジェクトを構成する画素数を算出し（Ｓ１５）、画素数があらかじめ定義されている閾値よりも小さいかを判定する（Ｓ１６）。
【００２０】
オブジェクトの画素数が閾値よりも小さい場合（Ｓ１６のＹＥＳ肢）は、ユーザにとっては小さすぎるために認識しづらいオブジェクトであるため、オブジェクトの種類が文字の時と同様に、オブジェクトを構成する画素数から拡大率を算出し、提示時間を決定し、加工係数とする（Ｓ１８）。
【００２１】
オブジェクトを構成する画素数が閾値以上の時（Ｓ１６のＮＯ肢）は、ユーザにとっては認識が楽にできるオブジェクトであるため加工係数の算出は行わない（Ｓ１７）。
【００２２】
また、認識難易度検出部１０４において、１つ前のデジタル画像データをバッファリングしておき、前後のデジタル画像データ間での、同一オブジェクトを比較することによって、移動しているオブジェクトかどうかを判定し、移動しているオブジェクトに対して拡大率を加工係数として設定することも考えられる。
【００２３】
加工部１０６では、加工制御部１０５において算出された加工係数を用いて、オブジェクトに対して拡大や、着色、提示時間の変更などの加工を行う（Ｓ１９）。
【００２４】
Ｓ１９において加工を行ったオブジェクトは、画像入力部１０２で生成したデジタル画像データに対して、重畳を行い（Ｓ２０）、画像出力として出力する。
【００２５】
例えば、図２の画像データ２０１には、オブジェクト２０２と、オブジェクト２０３と、オブジェクト２０４と、オブジェクト２０５と、オブジェクト２０６が存在する。
【００２６】
オブジェクト２０６は、認識難易度算出部１０４において、文字と判定される。このオブジェクトは、加工制御部１０５において解析され、オブジェクト２０６を構成する画素数は、基準画素数と比べて少ないため、拡大率は２倍と決定される。また、拡大率が大きいため、提示時間は２秒として、加工係数が決定される。
【００２７】
また、オブジェクト２０２は、認識難易度算出部１０４において、閾値よりも小さいオブジェクトとして判定される。このオブジェクトは、ユーザにとっては小さく認識しづらいオブジェクトであるため、加工制御部１０５において、加工率が２.５倍と算出され、提示時間は２秒として、加工係数が決定される。
【００２８】
さらに、オブジェクト２０４は、認識難易度算出部１０４において、閾値よりも大きいオブジェクトと検出され、ユーザにとって認識が容易なオブジェクトであると判定され、加工制御部においては加工係数が設定されない。
【００２９】
以上、本実施の形態によると、ユーザの認識のしづらさに応じて特徴領域に対して拡大などの加工を行うため、入力画像の視認性を損なうことを減少させ、ユーザがコンテンツの内容を楽に認識できる画像加工装置を提供できる。
【００３０】
なお、オブジェクト抽出部１０３におけるオブジェクトを抽出する手法は、輪郭検出や、パターンマッチングなど、公知の手法であっても、その他の手法であってもよく、その実現方法は問わない。また、認識難易度算出部１０４における、加工係数の算出方法は、記載の方法だけでなく、オブジェクトの面積を利用したりなど、その方法は問わない。
【００３１】
なお、画像加工装置１０１は、コンピュータプログラムによってコンピュータに上記の各構成部を機能させることにより実現可能である。
【産業上の利用可能性】
【００３２】
本発明に係る画像加工装置は、ユーザが必要としない画像加工処理が行われることが低減されるため、表示画面の小さなモバイルデジタルテレビなどに搭載する拡大表示機能として有用である。
【図面の簡単な説明】
【００３３】
【図１】本発明の実施形態に係る画像加工装置の構成図である。
【図２】図１に示した画像加工装置の動作例を説明するための図である。
【図３】図１に示した画像加工装置のフローチャートである。
【符号の説明】
【００３４】
１０１  画像加工装置
１０２  画像入力部
１０３  オブジェクト抽出部
１０４  認識難易度算出部
１０５  加工制御部
１０６  加工部
【図１】
2008283338.tif 000003
【図３】
2008283338.tif 000004
【図２】
2008283338.tif 000005