(57)【要約】【課題】映像画像データと文字画像データとが混在した画像中の文字画像データを、任意の大きさに拡大・縮小して表示する場合、文字領域と映像領域とで拡大縮小率をそれぞれ任意に変更して個別処理を行ってから合成して表示すると、処理が複雑で時間がかかる。【解決手段】  画像分割部１２は、映像画像データと文字画像データとが混在した画像信号による画像を任意の数の格子に分割する。画像識別部１３は、文字画像データで構成される格子である文字領域格子と、映像画像データで構成される格子である画像領域格子とに識別する。格子点処理部１４は、画像分割部１２により分割された格子のうち、文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、画像領域格子の各格子点を、文字領域格子の各格子点の移動量に応じて移動制御し、それらを表示画像作成部１５により表示画像として作成させる。【選択図】図１
2007094806.tif 000002
【特許請求の範囲】
【請求項１】
入力画像信号から映像画像データと文字画像データとを分離し、前記文字画像データを任意の大きさに拡大又は縮小して前記映像画像データと再合成した再合成画像信号を出力する画像表示方法であって、
前記入力画像信号による画像を任意の数の格子に分割する第１のステップと、
前記分割したそれぞれの格子が、前記文字画像データで構成される格子である文字領域格子であるか、前記映像画像データで構成される格子である画像領域格子であるかを識別する第２のステップと、
前記文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、前記画像領域格子の各格子点を、前記文字領域格子の各格子点の移動量に応じて移動制御する第３のステップと、
前記第３のステップにより各格子点が移動制御された後の前記文字領域格子による文字画像と、各格子点が移動制御された後の前記画像領域格子による映像画像とからなる画像データを前記再合成画像信号として生成する第４のステップと
を含むことを特徴とする画像表示方法。
【請求項２】
入力画像信号から映像画像データと文字画像データとを分離し、前記文字画像データを任意の大きさに拡大又は縮小して前記映像画像データと再合成した再合成画像信号を出力する画像表示装置であって、
前記入力画像信号による画像を任意の数の格子に分割する画像分割手段と、
前記分割したそれぞれの格子が、前記文字画像データで構成される格子である文字領域格子であるか、前記映像画像データで構成される格子である画像領域格子であるかを識別する画像識別手段と、
前記文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、前記画像領域格子の各格子点を、前記文字領域格子の各格子点の移動量に応じて移動制御する格子点処理手段と、
前記格子点処理手段により各格子点が移動制御された後の前記文字領域格子による文字画像と、各格子点が移動制御された後の前記画像領域格子による映像画像とからなる画像データを前記再合成画像信号として生成する表示画像作成手段と
を有することを特徴とする画像表示装置。
【請求項３】
入力画像信号から映像画像データと文字画像データとを分離し、前記文字画像データを任意の大きさに拡大又は縮小して前記映像画像データと再合成した再合成画像信号を出力する画像表示方法を、コンピュータにより実行させるプログラムであって、
前記コンピュータに、
前記入力画像信号による画像を任意の数の格子に分割する第１のステップと、
前記分割したそれぞれの格子が、前記文字画像データで構成される格子である文字領域格子であるか、前記映像画像データで構成される格子である画像領域格子であるかを識別する第２のステップと、
前記文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、前記画像領域格子の各格子点を、前記文字領域格子の各格子点の移動量に応じて移動制御する第３のステップと、
前記第３のステップにより各格子点が移動制御された後の前記文字領域格子による文字画像と、各格子点が移動制御された後の前記画像領域格子による映像画像とからなる画像データを前記再合成画像信号として生成する第４のステップと
を実行させることを特徴とする画像表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像表示方法、画像表示装置及び画像表示プログラムに係り、特に映像画像データと文字画像データとが混在した画像中の文字画像データを、任意の大きさに拡大・縮小して表示する画像表示方法、画像表示装置及び画像表示プログラムに関する。
【背景技術】
【０００２】
以前より、テレビジョン映像、ビデオ映像等に代表される映像コンテンツにおいて、表示される画像中に、映画の字幕、ニュース番組の解説等などの文字がしばしば挿入される。しかし、このような画像中の文字の大きさは受信側で任意の大きさに拡大、縮小することができないため、文字の大きさを任意の大きさにできないといった課題があった。
【０００３】
そこで、このような課題を解決する発明として、画像として表示される文字画像データを拡大処理する際に、表示パネルの解像度・操作方法等によって拡大率を切り替えて処理を行い、処理後の文字画像データを、その文字画像データが含まれていた元の映像画像データに合成して表示する画像表示方法が開示されている（例えば、特許文献１参照）。
【０００４】
また、一つの画像を構成する映像画像データと文字画像データ（表示データ）とが分離した形式で入力された場合に、文字領域と映像領域とで拡大縮小率をそれぞれ任意に変更して拡大縮小処理を行い、その後でそれぞれのデータを合成して表示する画像表示方法も従来、開示されている（例えば、特許文献２参照）。
【０００５】
また、この特許文献２には、映像画像データと文字画像データとが分離された形式で入力されない場合でも、入力後の画像を映像画像データと文字画像データとに分離して、映像画像データと文字画像データとで拡大縮小率をそれぞれ任意に変更して拡大縮小処理を行い、その後でそれぞれのデータを合成する方法も開示されている。
【０００６】
更に、映像画像データと文字画像データとが混在するテレビジョン信号が入力される場合に、映像画像データと文字画像データとを確実に分離して、それぞれの拡大縮小を行った後、それらのデータを合成出力することで文字画像を読み易い大きさで表示する画像表示方法も従来、開示されている（例えば、特許文献３参照）。
【０００７】
【特許文献１】特開平８−９２８１号公報
【特許文献２】特開２００１−１３４２６２号公報
【特許文献３】特開２００３−１９８９７５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、特許文献１記載の従来の画像表示方法は、ブランク部分に字幕の表示されるレターボックスタイプの映像を入力した場合における画像表示方法であり、そのため映像内の文字を拡大／縮小できるわけではなく、結果として適応範囲が狭いという課題がある。
【０００９】
また、特許文献２及び特許文献３記載の従来の画像表示方法では、それぞれ映像画像データと文字画像データとを個別のデータとして別々に処理した後、それら個別処理後の２つのデータの合成を行うため、処理が複雑で処理時間がかかり、装置全体も大規模になり易いという課題がある。また、映像画像データと文字画像データの識別が曖昧な場合は処理することができないという課題もある。
【００１０】
本発明は、以上の点に鑑みてなされたものであり、映像画像データと文字画像データとを個別に処理せず、高速に処理できる画像表示方法、画像表示装置及び画像表示プログラムを提供することを目的とする。
【００１１】
また、本発明の他の目的は、映像画像データと文字画像データの識別が曖昧な場合でも、処理が可能な画像表示方法、画像表示装置及び画像表示プログラムを提供することにある。
【課題を解決するための手段】
【００１２】
上記の目的を達成するため、本発明の画像表示方法は、入力画像信号から映像画像データと文字画像データとを分離し、文字画像データを任意の大きさに拡大又は縮小して映像画像データと再合成した再合成画像信号を出力する画像表示方法であって、
入力画像信号による画像を任意の数の格子に分割する第１のステップと、分割したそれぞれの格子が、文字画像データで構成される格子である文字領域格子であるか、映像画像データで構成される格子である画像領域格子であるかを識別する第２のステップと、文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、画像領域格子の各格子点を、文字領域格子の各格子点の移動量に応じて移動制御する第３のステップと、第３のステップにより各格子点が移動制御された後の文字領域格子による文字画像と、各格子点が移動制御された後の画像領域格子による映像画像とからなる画像データを再合成画像信号として生成する第４のステップとを含むことを特徴とする。
【００１３】
また、上記の目的を達成するため、本発明の画像表示装置は、入力画像信号から映像画像データと文字画像データとを分離し、文字画像データを任意の大きさに拡大又は縮小して映像画像データと再合成した再合成画像信号を出力する画像表示装置であって、
入力画像信号による画像を任意の数の格子に分割する画像分割手段と、分割したそれぞれの格子が、文字画像データで構成される格子である文字領域格子であるか、映像画像データで構成される格子である画像領域格子であるかを識別する画像識別手段と、文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、画像領域格子の各格子点を、文字領域格子の各格子点の移動量に応じて移動制御する格子点処理手段と、格子点処理手段により各格子点が移動制御された後の文字領域格子による文字画像と、各格子点が移動制御された後の画像領域格子による映像画像とからなる画像データを再合成画像信号として生成する表示画像作成手段とを有することを特徴とする。
【００１４】
また、上記の目的を達成するため、本発明の画像表示プログラムは、上記の本発明の画像表示方法の各ステップをコンピュータにより実行させることを特徴とする。
【００１５】
上記の本発明の画像表示方法、画像表示装置及び画像表示プログラムでは、入力画像信号から映像画像データと文字画像データとを分離し、文字画像データを任意の大きさに拡大又は縮小して映像画像データと再合成した再合成画像信号を出力するに際し、入力画像信号による画像を任意の数の格子に分割すると共に、分割したそれぞれの格子が、文字画像データで構成される格子である文字領域格子であるか、映像画像データで構成される格子である画像領域格子であるかを識別し、文字領域格子の各格子点を、任意の大きさの格子に拡大又は縮小する方向に所定距離移動すると共に、画像領域格子の各格子点を、文字領域格子の各格子点の移動量に応じて移動制御することにより、文字画像データの文字の識別の処理や映像画像データの映像情報の識別処理を個別に行うのではなく（換言すると、文字画像データと映像画像データとを個別のデータとして処理するのではなく）、単に文字を含んでいる文字領域のデータと文字を含んでいない画像領域のデータとして扱う。
【発明の効果】
【００１６】
本発明によれば、映像画像データと文字画像データとが混在した入力画像信号中の文字画像データによる画像を任意の大きさに拡大又は縮小して表示するに際し、文字画像データと映像画像データとを個別のデータとして処理するのではなく、単に文字を含んでいる文字領域のデータであるか、文字を含んでいない画像領域のデータであるかに応じて、任意の格子の大きさとなるような格子点の移動処理を行うようにしたため、従来に比べて高速な処理を行うことができる。
【発明を実施するための最良の形態】
【００１７】
次に、本発明の一実施の形態について、図面と共に説明する。図１は本発明になる画像表示装置の第１の実施の形態の概略ブロック図を示す。同図において、画像入力部１０は、映像画像データと文字画像データとが混在した画像信号を入力する。画像入力部１０は、入力画像信号がＮＴＳＣ方式やＰＡＬ方式などのインターレース方式のテレビジョン信号の場合は、インターレース方式画像信号をプログレッシブ化し、ディジタルデータとする処理を行って、記憶部１１に入力画像データ１１１として記録する。また、インターレース方式画像信号をインターレース方式のままディジタルデータに変換し、記憶部１１に入力画像データ１１１として記録してもよい。
【００１８】
入力画像信号がディジタルデータの場合は、画像入力部１０は、入力されたディジタルデータをそのまま記憶部１１に入力画像データ１１１として記録する。その際、入力ディジタルデータが、データ圧縮が行われたデータであれば、伸張して復元した画像データを記憶部１１に入力画像データ１１１として記録する。
【００１９】
記憶部１１は、前述した入力画像データ１１１を記録する画像データ記憶部分、後述する画像分割部１２で記憶部１１に記憶した画像データを分割するために必要な分割数１１２の記憶部分、後述する画像識別部１３で識別した文字領域を、後述する格子点処理部１４でどの程度拡大・縮小するかを決定するための拡大縮小率１１３の記憶部分、格子点処理部１４で処理した文字領域格子点の移動に対して他の領域の格子点をどのように移動するかを設定するパラメータなどの初期パラメータ１１４の記憶部分、画像分割部１２により分割した画像格子の格子点座標情報１１５を記憶する記憶部分、画像識別部１３により識別した格子毎の識別情報である画像文字識別情報１１６の記憶部分、出力用画像データ１１７の記憶部分を有している。上記の分割数１１２、拡大縮小率１１３、初期パラメータ１１４は、図示しないデータの入力部によりユーザの任意の値に記憶部１１に予め記憶される。
【００２０】
画像分割部１２は、記憶部１１に記憶されている入力画像データ１１１の中の１枚の画像データを読み出し、その画像データを記憶部１１から読み出した画像分割数１１２に応じて格子状に分割し、それにより得られた格子点座標情報１１５を記憶部１１に記録する。
【００２１】
画像識別部１３は、記憶部１１から読み出した入力画像データ１１１と格子点座標情報１１５とに基づき、画像データにおける格子点座標情報１１５が示すそれぞれの格子部分が文字領域であるか、画像領域であるかを識別する。その識別方法は、例えば、特開昭６０−１１６０８１号公報に開示されているように、格子をさらに小さくした領域を作成し、前記各領域における画像データの水平方向および垂直方向に濃度勾配を検出してヒストグラムを算出し、算出されたヒストグラムの度数の分布を算出して所定のしきい値と比較することによって文字候補領域を抽出し、抽出した文字候補領域の配置関係によって文字領域であるか、画像領域であるかを識別し、得られた画像文字識別情報１１６を記憶部１１に記録する。
【００２２】
格子点処理部１４は、記憶部１１に記憶されている入力画像データ１１１、格子点座標情報１１５、画像文字識別情報１１６、文字領域の拡大縮小率１１３、画像領域格子点制御パラメータ等の初期パラメータ１１４を読み出し、読み出した入力画像データ１１１中の文字領域格子（すなわち、入力画像データ１１１の画像を格子に区切った際の画像識別部１３による画像識別により文字情報が含まれていると判断された格子）における格子点を、初期パラメータ１１４にて決定された移動量だけ移動し、移動量に応じて画像領域格子（すなわち、入力画像データ１１１の画像を格子に区切った際の画像識別部１３による画像識別により画像情報が含まれていると判断された格子）の格子点を移動し、移動後の格子点座標情報１１５を記憶部１１に記録する。
【００２３】
表示画像作成部１５は、記憶部１１から読み出した格子点座標情報１１５と入力画像データ１１１とに基づいて、出力用画像データを作成し、記憶部１１に記録する。画像出力部１６は、記憶部１１に記憶した出力用画像データ１１７を外部へ出力する。
【００２４】
次に、本発明の画像表示装置及び画像表示方法の第１の実施の形態により画像データがどのように処理されるかについて、具体的に図１〜図３を併せ参照して説明する。図２は本発明になる画像表示方法の第１の実施の形態のフローチャート、図３は図２のフローチャートに従って画像データがどのように処理されているかを示す画像データ遷移図である。
【００２５】
まず、図１の画像入力部１０から入力されて記憶部１１に記憶された入力画像データ１１１が入力された映像画像として読み出され、図１の画像分割部１２によって任意の格子数の格子に分割される（図２のステップＳ１１）。ここで、入力画像データ１１１による入力映像画像の一例が図３（Ａ）に示され、これが画像分割部１２によって、図３（Ｂ）に示すように、例えば、水平方向に１６個、垂直方向に１２個の格子に分割される。
【００２６】
続いて、ステップＳ１１において分割して得られた、水平方向に１６個、垂直方向に１２個の各格子の映像画像のそれぞれについて、図１の画像識別部１３で映像画像データによる画像領域と文字画像データによる文字領域のいずれであるかを識別し、その識別結果を格子の位置座標と対応付けて記憶部１１に画像文字識別情報１１６として記憶する（図２のステップＳ１２）。図３（Ｃ）は、入力画像データ中の全ての文字画像データが、正しく文字領域２１〜２３として識別された場合を示す。なお、画像領域と文字領域との識別方法は、特開昭６０−１１６０８１号公報などに開示されている公知の方法で行われ、また、その識別方法自体は本発明の要旨ではないので、その詳細な説明は省略する。
【００２７】
次に、図１の格子点処理部１４は、ステップＳ１２において識別した文字領域の格子の各格子点を、初期パラメータ１１４に基づいて格子が任意の大きさの格子となるように拡大又は縮小する位置へと移動させる（図２のステップＳ１３）。図３（Ｄ）がステップＳ１３により格子点が移動された状態を示す。図３（Ｄ）は、文字領域２４〜２６の各格子サイズが、同図（Ｃ）の元の文字領域２１〜２３の各格子サイズの１．２倍になるように拡大した移動例を示す。
【００２８】
ここで、各格子サイズの移動例について具体的に説明する。一例として、説明の簡単のために、図４に示すように、縦横それぞれ３つずつの３×３の計９個の格子について説明すると、格子点は黒丸３３０１〜３３１６で示すように全部で１６個となる。なお、白丸は後述する移動後の格子点を示す。これら１６個の格子点の座標を、一番左上の格子点３３０１が（０，０）、その一つ右の格子点３３０２が（１，０）、更に一つ右の格子点３３０３が（２，０）、更に一つ右の格子点３３０４が（３，０）、次の行の左から右方向に順に格子点３３０５が（０，１）、格子点３３０６が（１，１）、格子点３３０７が（２，１）、格子点３３０８が（３，１）であるものとする。
【００２９】
同様に、次の行の格子点の座標を、左から右方向に順に格子点３３０９が（０，２）、格子点３３１０が（１，２）、格子点３３１１が（２，２）、格子点３３１２が（３，２）とし、最後の行の格子点の座標を、左から右方向に順に格子点３３１３が（０，３）、格子点３３１４が（１，３）、格子点３３１５が（２，３）、格子点３３１６が（３，３）であるものとする。
【００３０】
ここで、左上の一つの格子を１.２倍に拡大するものとすると、格子点３３０１の座標は（０，０）で移動しないが、格子点３３０２は座標（１.２，０）に、格子点３３０５は座標（０，１.２）に、格子点３３０６は座標（１.２，１.２）に移動する。これ以外の１２個の格子点をどのように移動させるかのアルゴリズムは様々であるが、均等に分散させる場合は
（３.０−１.２）／２＝０.９
であるので、格子点３３０３は座標（２.１，０）に移動し、格子点３３０４は座標（３，０）のままである。また、
（１.２−１.０）／２＝０.１
であるので、格子点３３０７は座標（２.１，１.１）に移動し、格子点３３０８は（３，１）のままである。同様に、格子点３３０９は座標（０，２.１）、格子点３３１０は座標（１.１，２.１）に移動する。それ以外の格子点３３１１は（２，２）、格子点３３１２は（３，２）、格子点３３１３は（０，３）、格子点３３１４は（１，３）、格子点３３１５は（２，３）、格子点３３１６は（３，３）のままで移動しない。
【００３１】
また、アルゴリズムを均等ではなく、次の格子で全て吸収するようにすれば、格子点３３０２が座標（１.２，０）、格子点３３０５が座標（０，１.２）、格子点３３０６が座標（１.２，１.２）へ移動するが、それ以外の格子点は移動しない。
【００３２】
なお、文字領域の拡大／縮小の中心は格子が文字領域の４辺に接していない限り格子点座標位置を平均した座標とする。また、格子が文字領域の４辺に接している場合は、２辺に接している場合と１辺のみに接している場合とに区別し、２辺に接している場合は、２辺の交点を中心とし、１辺のみ接している場合は接している辺上の格子点座標位置を平均した座標を中心としている。
【００３３】
続いて、図１の格子点処理部１４は、図２のステップＳ１３において処理した文字領域格子の格子点移動量に応じて、文字領域２４〜２６内の格子点以外の画像領域格子の各格子点を移動させる（図２のステップＳ１４）。図３（Ｅ）はステップＳ１４により同図（Ｄ）に示す状態から、文字領域２４〜２６内の格子点以外の画像領域格子の各格子点を移動させた例を示す。図３（Ｅ）では、文字領域２４〜２６内の格子点以外の画像領域格子の各格子点のうち、水平位置で近しい格子点座標を平均化すると共に、垂直位置で近しい格子点座標を平均化した場合を示す。
【００３４】
すなわち、画像領域格子の各格子点において、文字領域格子の格子点と同じ列の格子点は同じｘ座標の値として揃え、同じ行の格子点は同じｙ座標の値として揃える。ただし、複数の異なるｘ位置文字領域格子点がある列に関しては、挟まれた区間を平均化する。例えば、ｘ＝３.２とｘ＝４.１とに挟まれた２点の画像領域格子の格子点があるとすると、それは０.３（＝（４.１−３.２）／３）となり、それぞれのｘ座標は３.５、３.８となる。挟まれていない区間の格子点に関しては最も近い格子点と同じｘ座標とする。ｙ座標も同様に行う。
【００３５】
なお、格子点の移動の仕方はこの限りではなく、全ての格子が正方形に近づくよう移動させてもよいし、画像領域の格子点は全く移動させなくてもよい。ただし、全く移動させない場合でも、画像領域と文字領域の両方に接する格子点は文字領域の移動に伴い移動している。
【００３６】
続いて、図１の画像生成部１５は、図２のステップＳ１３およびステップＳ１４において移動した格子点の最終位置に基づいて、図３（Ｆ）に示す如き画像の画像データを作成する（図２のステップＳ１５）。すなわち、Ｓ１４までの処理において、文字領域格子及び画像領域格子のそれぞれの格子点座標が求まっているので、後は入力画像データと格子点座標の移動量に基づき、バイリニアフィルタ、バイキュービックフィルタなどの画像補間処理を行い、文字領域格子が拡大された画像として生成する。
【００３７】
ここで、文字領域の画像だけについて、図３（Ａ）に示した入力画像と、同図（Ｆ）に示した生成された画像とを比較すると、同図（Ｇ）に示すように、それぞれ上の文字が生成された画像の文字、下の文字が入力画像の文字であり、ここでは入力画像の文字に比べて生成された画像の文字が拡大されている。このようにして生成された画像データは、記憶部１１に一旦記憶された後、図１の画像出力部１６により、表示されるべき画像データとして出力される（図２のステップＳ１６）。
【００３８】
このように、映像画像データと文字画像データとが混在した映像画像における、文字画像データを任意の大きさに拡大又は縮小できる画像表示装置において、従来は映像画像データと文字画像データとを個別のデータとして別々に処理し、文字画像データについてはその文字がどのような文字であるかまでを記憶・記録して処理した後、処理後の映像画像データと合成していたのに対し、本実施の形態では、文字領域格子の格子点を移動すると共に、それに伴い画像領域格子の格子点の移動を制御するだけであり、文字画像データはあくまでも文字を含んでいる文字領域のデータとしての判断しか行わず、余分な記憶媒体容量を使わず、扱う情報量も少ないので、高速な処理ができる。
【００３９】
次に、本発明における画像表示方法及び画像表示装置の第２の実施の形態について説明する。本実施の形態の画像表示装置の構成は、図１に示した第１の実施の形態と同様であるが、本実施の形態では、記憶部１１に記憶されている画像文字識別情報１１６に識別コードを付加することで、文字領域と画像領域との識別が曖昧な場合でも文字領域の拡大又は縮小を行えるようにしたものである。ここで、上記の識別コードとしては、例えば、文字領域の場合は”１”、文字領域可能性大である場合は”２”、文字領域可能性小である場合は”３”、画像領域の場合は”４”である。
【００４０】
次に、本発明の画像表示装置及び画像表示方法の第２の実施の形態により画像データがどのように処理されるかについて、具体的に図１、図５〜図７を併せ参照して説明する。図５は本発明になる画像表示方法の第２の実施の形態のフローチャート、図６及び図７は図５のフローチャートに従って画像データがどのように処理されているかを示す画像データ遷移図である。
【００４１】
まず、図１の画像入力部１０から入力されて記憶部１１に記憶された入力画像データ１１１が入力された映像画像として読み出され、図１の画像分割部１２によって任意の格子状に分割される（図５のステップＳ２１）。ここで、入力画像データ１１１による入力映像画像の一例が図６（Ａ）に示され、これが画像分割部１２によって、図６（Ｂ）に示すように、例えば、水平方向に１６個、垂直方向に１２個の格子に分割される。
【００４２】
続いて、ステップＳ２１において格子状に分割して得られた、水平方向に１６個、垂直方向に１２個の格子のそれぞれについて、図１の画像識別部１３で文字領域、文字領域可能性大、文字領域可能性小、画像領域の４つの何れであるか識別し、識別した内容に応じた識別コードを、識別した格子の位置座標に対応付けて記憶部１１に画像文字識別情報１１６として記憶する（図５のステップＳ２２）。
【００４３】
ここで、上記の４つの領域の識別方法は、例えば特開昭６０−１１６０８１号公報記載の公知の方法を用いることができる。この公知の方法は、画像を小領域に分割して、各小領域で水平方向及び垂直方向に濃度勾配を検出してヒストグラムを算出し、算出されたヒストグラムの度数の分散を算出して所定のしきい値と比較することによって文字候補領域を抽出し、抽出された文字候補領域の配置関係によって文字領域及び文字画像データ中に含まれる文字画像の文字数を抽出する方法である。なお、前述したように、上記の識別コードは識別対象の格子が、文字領域の場合は”１”、文字領域可能性大である場合は”２”、文字領域可能性小である場合は”３”、画像領域の場合は”４”である。
【００４４】
図６（Ｃ）はステップＳ２２による識別結果を格子状に分割された入力画像と共に示す。同図（Ｃ）に示す例では、時刻を表す「８：１５」の画像を含む格子を文字領域（識別コード：１）３１として識別し、「３−Ｂ」の画像を含む格子を文字領域可能性大の領域（識別コード：２）３２として識別し、「あいさつしっかり」の画像を含む格子を文字領域可能性小の領域（識別コード：３）３３として識別し、その他の画像における格子を画像領域（識別コード：４）として識別されており、入力された文字画像データの文字画像が正しく文字領域として識別した場合を示す。
【００４５】
続いて、図１の格子点処理部１４は、記憶部１１に予め任意に設定されて記憶されている初期パラメータ１１４と、ステップＳ２２で記憶された画像文字識別情報１１６とを再生し、画像文字識別情報１１６に付加されている上記の識別コードのうちのどの値の識別コードに対して拡大／縮小処理を行うかを、初期パラメータに基づいて決定する（図５のステップＳ２３）。
【００４６】
図７は識別コードの値が”１”と”２”である格子（すなわち、文字領域にある格子と、文字領域可能性大の領域にある格子）に対して、元の格子サイズの１.１倍になるように拡大処理を行うと決定した場合の図を示す。続いて、格子点処理部１４は、ステップＳ２３において決定した拡大／縮小処理対象の格子の各格子点を格子が拡大／縮小する位置へと、第１の実施の形態と同様の方法で移動させる（図５のステップＳ２４）。これにより、図７（Ａ）に示す画像中の拡大対象の文字領域３４にある格子の各格子点と、文字領域可能性大の領域３５にある格子の各格子点とが、同図（Ｂ）に示すように、１.１倍に拡大された位置にそれぞれ移動して領域３６、３７を形成する。
【００４７】
なお、拡大／縮小の中心は格子が対象の領域の４辺に接していない限り格子点座標位置を平均した座標とする。格子が対象の領域の４辺に接している場合は２辺に接している場合と１辺のみに接している場合とに区別し、２辺に接している場合は、２辺の交点を中心とし、１辺のみ接している場合は接している辺上の格子点座標位置を平均した座標を中心としている。
【００４８】
続いて、格子点処理部１４は、ステップＳ２４において処理した拡大／縮小処理対象格子の格子点移動量に応じて、前記拡大／縮小処理対象格子以外の格子（ここでは、文字領域可能性小領域と画像領域）の各格子点を移動させる（図５のステップＳ２５）。これにより、図７の例では、図７（Ｃ）に示すように、同図（Ｂ）に示した文字領域３６及び文字領域可能性大の領域３７にある格子以外の格子が、１.１倍の拡大処理による格子移動量に対応した移動量だけ移動する。図７では拡大／縮小処理対象格子以外の格子の格子点を水平位置で近しい格子点座標を平均化し、垂直位置で近しい格子点座標を平均化した場合を示す。
【００４９】
なお、格子点の移動の仕方はこの限りではなく、全ての格子が正方形に近づくよう移動させてもよいし、拡大／縮小処理対象格子以外の格子の格子点を全く移動させなくてもよい。ただし、全く移動させない場合でも、拡大／縮小処理対象格子と拡大／縮小処理対象格子以外の格子の両方に接する格子点は文字領域の移動に伴い移動する。
【００５０】
続いて、図１の画像生成部１５は、図５のステップＳ２４及びステップＳ２５において移動した格子点の最終位置に基づいて、図７（Ｄ）に示す如き画像の画像データを作成する（図５のステップＳ２６）。このようにして生成された画像データは、記憶部１１に一旦記憶された後、図１の画像出力部１６により、表示されるべき出力用画像データ１１７として出力される（図５のステップＳ２７）。
【００５１】
このように、本実施の形態によれば、映像画像データと文字画像データとが混在した映像画像における、文字画像データを任意の大きさに拡大又は縮小できる画像表示装置において、入力映像画像における文字領域と画像領域との識別が曖昧な場合でも、文字領域可能性大と文字領域可能性小の領域をそれぞれ識別し、文字領域可能性大の領域も文字領域として判断するようにしているため、文字領域の拡大を行うことが可能となる。なお、縮小の場合も上記の拡大の場合と同様の手順で行われる。
【００５２】
なお、本発明は以上の実施の形態に限定されるものではなく、例えば、以上の実施の形態では１枚の画像についての説明を行ったが、同じ処理を連続して行うことで動画映像への対応も可能である。さらに、以上の実施の形態では画像表示装置及び画像表示方法について説明したが、本発明は上記の実施の形態の画像表示装置を動作させるべく当該画像表示装置と持続された装置、またはシステム内のコンピュータに、上記の実施の形態の画像表示方法を実現させるコンピュータプログラムや、そのコンピュータプログラムを記録したＣＤ（Compact Disc）、ＤＶＤ(Digital Versatile Disc)などの情報記憶媒体も包含するものである。
【００５３】
なお、上記のコンピュータプログラムは、情報記録媒体からコンピュータに取り込まれてもよいし、通信ネットワークを介して配信されてコンピュータに取り込まれてもよく、更にはコンピュータ内に組み込まれていてもよい。また、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内のものである。
【産業上の利用可能性】
【００５４】
画像データと文字データとが混在した映像画像における、文字データを任意の大きさに拡大・縮小できる画像表示装置、画像表示方法、情報記憶媒体、および画像表示プログラムに幅広く使用することが可能である。
【図面の簡単な説明】
【００５５】
【図１】本発明画像表示装置の一実施の形態の概略ブロック図である。
【図２】本発明画像表示方法の第１の実施の形態のフローチャートである。
【図３】図２のフローチャートに従った画像データ遷移の一例を示す図である。
【図４】格子点の移動の一例の説明図である。
【図５】本発明画像表示方法の第２の実施の形態のフローチャートである。
【図６】図５のフローチャートに従った画像データ遷移の一例を示す図（その１）である。
【図７】図５のフローチャートに従った画像データ遷移の一例を示す図（その２）である。
【符号の説明】
【００５６】
１０  画像入力部
１１  記憶部
１２  画像分割部
１３  画像識別部
１４  格子点処理部
１５  表示画像作成部
１６  画像出力部
１１１  入力画像データ
１１２  分割数
１１３  拡大縮小率
１１４  初期パラメータ
１１５  格子点情報
１１６  画像文字識別情報
１１７  出力用画像データ
【図１】
2007094806.tif 000003
【図２】
2007094806.tif 000004
【図３】
2007094806.tif 000005
【図４】
2007094806.tif 000006
【図５】
2007094806.tif 000007
【図６】
2007094806.tif 000008
【図７】
2007094806.tif 000009