(57)【要約】【課題】表示画像の一部を自動で抽出して、携帯電話の分割表示画面において拡大表示する機能を備えた、画面拡大表示機能付携帯電話、画面拡大表示方法、及び、画面拡大表示プログラムとその記録媒体を提供する。【解決手段】携帯電話１において、予め設定された条件を基に、表示画像の一部を抽出して、携帯電話１の分割表示画面において拡大表示する画像拡大表示処理手段（処理部４）を設ける。【選択図】図１
2007180914.tif 000002
【特許請求の範囲】
【請求項１】
予め設定された条件を基に、表示画像の一部を抽出して、携帯電話の分割表示画面において拡大表示する画像拡大表示処理手段を備えたことを特徴とする画面拡大表示機能付携帯電話。
【請求項２】
前記画像拡大表示処理手段は、画像自動拡大表示の設定がされている場合にのみ、予め入力されているユーザの拡大表示条件に基づいて表示画像の一部を抽出し、該抽出した表示画像の一部の座標値情報と、携帯電話が有する分割表示可能領域の座標値情報との間で所定の関係式が成立するように、前記抽出した表示画像の一部の座標値を変換して画像表示領域を決定し、該画像表示領域を前記分割表示可能領域のサイズに調整して表示することを特徴とする請求項１記載の画面拡大表示機能付携帯電話。
【請求項３】
前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における人物の顔であることを特徴とする請求項１又は２に記載の画面拡大表示機能付携帯電話。
【請求項４】
前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における所定の文字であることを特徴とする請求項１又は２に記載の画面拡大表示機能付携帯電話。
【請求項５】
前記表示画像は、テレビ放映の受信画像、インターネットから取得された画像、又は、携帯電話が有するカメラから取得された画像であることを特徴とする請求項１から４のいずれか１項に記載の画面拡大表示機能付携帯電話。
【請求項６】
画面拡大表示機能付携帯電話の画面拡大表示方法であって、画像拡大表示処理手段により、予め設定された条件を基に、表示画像の一部を抽出して、携帯電話の分割表示画面において拡大表示する工程を有することを特徴とする画面拡大表示方法。
【請求項７】
画面拡大表示機能付携帯電話において画像自動拡大表示の設定がされている場合にのみ、
前記画像拡大表示処理手段が、予め入力されているユーザの拡大表示条件に基づいて表示画像の一部を抽出する工程と、
前記画像拡大表示処理手段が、前記抽出した表示画像の一部の座標値情報と、携帯電話が有する分割表示可能領域の座標値情報との間で所定の関係式が成立するように、前記抽出した表示画像の一部の座標値を変換して画像表示領域を決定する工程と、
前記画像拡大表示処理手段が、前記決定された画像表示領域を前記分割表示可能領域のサイズに調整して表示する工程と、
を有することを特徴とする請求項６記載の画面拡大表示方法。
【請求項８】
前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における人物の顔であることを特徴とする請求項６又は７に記載の画面拡大表示方法。
【請求項９】
前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における所定の文字であることを特徴とする請求項６又は７に記載の画面拡大表示方法。
【請求項１０】
前記表示画像は、テレビ放映の受信画像、インターネットから取得された画像、又は、携帯電話が有するカメラから取得された画像であることを特徴とする請求項６から９のいずれか１項に記載の画面拡大表示方法。
【請求項１１】
請求項６から１０のいずれか１項に記載の画面拡大表示方法を、コンピュータに実行させるための画面拡大表示プログラム。
【請求項１２】
請求項１１記載の画面拡大表示プログラムを記録した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示画像の一部を自動で抽出して、携帯電話の分割表示画面において拡大表示する機能を備えた、画面拡大表示機能付携帯電話、画面拡大表示方法、及び、画面拡大表示プログラムとその記録媒体に関する。
【背景技術】
【０００２】
携帯電話の機能向上により、携帯電話でもパーソナルコンピュータのように様々な処理を同時に行うことができるようになっている。テレビ電話での通信中に携帯電話の他の機能を使用したい場合、画面を分割表示する方法がある。
【０００３】
しかし、携帯電話はその用途により小型化が必要であり、パーソナルコンピュータ、テレビ、据え置き型のテレビ電話などと比較して、画面が小さい。そのため、画面を分割し表示すると、表示画像が小さくなってしまう。
【０００４】
上述したように、携帯電話は小型である必要があり、そのため画像を表示させる画面サイズは限られる。一方で、処理能力の向上により、様々な機能を並列で使用することが可能となり、この場合は、画面を分割表示する。しかし、携帯電話の画面を分割した場合、表示する画像が非常に小さく、テレビ電話などで相手の表情を見ることができない。
【０００５】
また、テレビ放送を携帯電話で視聴する場合、画面内の人物、文字など認識が難しくなる。これを解決するため、拡大位置と拡大の倍率をユーザが設定し、表示する機能は既に製品となり普及している。ところで、特許文献１では、受信するデータに拡大、縮小を行うための設定データが付加され、受信側で付加データに応じて自動拡大、縮小を行う発明が開示されている。また、特許文献２では、カメラで撮影された人物の画像を、携帯端末のような小さな画面上でも鮮明に表示する発明が開示されている。さらに、特許文献３では、認証対象となる文字や画像近傍を選択して、別ウインドウに拡大表示する発明が開示されている。
【特許文献１】特開２００４−３５７２３９号公報
【特許文献２】特開２００３−２１９３９６号公報
【特許文献３】特開２００５−０５５９６８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかし、上述したように、拡大位置と拡大の倍率をユーザが設定し、表示する機能は既に製品となり普及しているが、この場合ユーザが設定を行う必要があるという問題があった。また、動画の場合、拡大位置と倍率は刻々と変化するため、それをユーザが捕捉しながら設定を行うことは容易ではないという問題があった。
【０００７】
また、特許文献１や特許文献２に開示された技術では、送信側で拡大、縮小の設定を送信データに付加する必要があり、送信側の構成も変更の必要があるという問題があった。
【０００８】
また、特許文献２に開示された技術では、画像の拡大に係る動作において、現在表示のフレームと過去のフレームとを比較しなければならず、過去のフレームの補正領域情報を記憶する必要がある。
【０００９】
さらに、特許文献３に開示された技術では、文字や画像の抽出位置を手動で、すなわちカーソルで選択する必要がある。また、このカーソル位置から上下左右の決められた領域内のみの抽出となり、抽出画像の縦横比に収まらない場合には一部しか抽出できない。
【００１０】
本発明は、上記のような問題点に鑑み、表示画像の一部を自動で抽出して、携帯電話の分割表示画面において拡大表示する機能を備えた、画面拡大表示機能付携帯電話、画面拡大表示方法、及び、画面拡大表示プログラムとその記録媒体を提供することを目的とする。
【課題を解決するための手段】
【００１１】
請求項１記載の発明は、予め設定された条件を基に、表示画像の一部を抽出して、携帯電話の分割表示画面において拡大表示する画像拡大表示処理手段を備えた画面拡大表示機能付携帯電話としたことを特徴とする。
【００１２】
請求項２記載の発明は、前記画像拡大表示処理手段は、画像自動拡大表示の設定がされている場合にのみ、予め入力されているユーザの拡大表示条件に基づいて表示画像の一部を抽出し、該抽出した表示画像の一部の座標値情報と、携帯電話が有する分割表示可能領域の座標値情報との間で所定の関係式が成立するように、前記抽出した表示画像の一部の座標値を変換して画像表示領域を決定し、該画像表示領域を前記分割表示可能領域のサイズに調整して表示する請求項１記載の画面拡大表示機能付携帯電話としたことを特徴とする。
【００１３】
請求項３記載の発明は、前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における人物の顔である請求項１又は２に記載の画面拡大表示機能付携帯電話としたことを特徴とする。
【００１４】
請求項４記載の発明は、前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における所定の文字である請求項１又は２に記載の画面拡大表示機能付携帯電話としたことを特徴とする。
【００１５】
請求項５記載の発明は、前記表示画像は、テレビ放映の受信画像、インターネットから取得された画像、又は、携帯電話が有するカメラから取得された画像である請求項１から４のいずれか１項に記載の画面拡大表示機能付携帯電話としたことを特徴とする。
【００１６】
請求項６記載の発明は、画面拡大表示機能付携帯電話の画面拡大表示方法であって、画像拡大表示処理手段により、予め設定された条件を基に、表示画像の一部を抽出して、携帯電話の分割表示画面において拡大表示する工程を有する画面拡大表示方法としたことを特徴とする。
【００１７】
請求項７記載の発明は、画面拡大表示機能付携帯電話において画像自動拡大表示の設定がされている場合にのみ、前記画像拡大表示処理手段が、予め入力されているユーザの拡大表示条件に基づいて表示画像の一部を抽出する工程と、前記画像拡大表示処理手段が、前記抽出した表示画像の一部の座標値情報と、携帯電話が有する分割表示可能領域の座標値情報との間で所定の関係式が成立するように、前記抽出した表示画像の一部の座標値を変換して画像表示領域を決定する工程と、前記画像拡大表示処理手段が、前記決定された画像表示領域を前記分割表示可能領域のサイズに調整して表示する工程とを有する請求項６記載の画面拡大表示方法としたことを特徴とする。
【００１８】
請求項８記載の発明は、前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における人物の顔である請求項６又は７に記載の画面拡大表示方法としたことを特徴とする。
【００１９】
請求項９記載の発明は、前記拡大表示条件は、拡大表示のために抽出する前記表示画像の一部が、該表示画像における所定の文字である請求項６又は７に記載の画面拡大表示方法としたことを特徴とする。
【００２０】
請求項１０記載の発明は、前記表示画像は、テレビ放映の受信画像、インターネットから取得された画像、又は、携帯電話が有するカメラから取得された画像である請求項６から９のいずれか１項に記載の画面拡大表示方法としたことを特徴とする。
【００２１】
請求項１１記載の発明は、請求項６から１０のいずれか１項に記載の画面拡大表示方法を、コンピュータに実行させるための画面拡大表示プログラムとしたことを特徴とする。
【００２２】
請求項１２記載の発明は、請求項１１記載の画面拡大表示プログラムを記録した記録媒体としたことを特徴とする。
【発明の効果】
【００２３】
本発明によれば、表示画像の一部を自動で抽出して、携帯電話の分割表示画面において拡大表示する機能を備えた、画面拡大表示機能付携帯電話、画面拡大表示方法、及び、画面拡大表示プログラムとその記録媒体を実現することができる。
【発明を実施するための最良の形態】
【００２４】
本発明を実施するための最良の形態は、携帯電話において、予め設定された条件を基に、表示画像の一部を抽出して、携帯電話の分割表示画面において拡大表示する画像拡大表示処理手段を設ける。
【００２５】
以下に、本発明の好適な実施形態を添付図面に基づいて詳細に説明する。尚、以下に述べる実施形態は本発明の好適な具体例であるから、技術的に好ましい種々の限定が付されているが、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの実施形態に限られるものではない。
【００２６】
（実施形態１）
まず、図１を用いて、本実施形態の携帯電話の構成及び各部の機能について説明する。図１は、本実施形態の携帯電話の構成ブロック図である。図１に示すように、本実施形態の携帯電話１は、無線部２、デコーダ３、処理部４、表示部５、スピーカ６、制御部７、及び、記憶部８を備えている。
【００２７】
本実施形態の携帯電話１は、無線部２を使用して基地局との間でデータの送受信を行うことが可能であり、基地局を介して、ネットワークに接続する他の携帯電話やサーバと通信をすることが可能である。
【００２８】
また、無線部２にて基地局から受信したデータは、デコーダ３にてデコードされ、処理部４で、表示画像の調整や音量音質調整などの処理を行い、表示部５、スピーカ６に出力される。制御部７は、携帯電話１の各部の制御を行う。また、携帯電話１を動作させるためのソフトウェアや、各種設定値などを記憶部８に記憶する。
【００２９】
次に、本実施形態の携帯電話１の画像拡大表示方法について、図３を用いて以下に説明する。携帯電話１は、受信した画像データの中から、目、鼻、口、輪郭などの顔の各パーツの検索処理を実行する。この検索処理の方法に関しては様々な手法があるが、ここでは個人認証のように個人を厳密に特定する必要はなく、画像中の顔の位置を示す座標を求めるだけでよい。
【００３０】
例えば、図３（ａ）に示すように、画像データ中で、右目、左目、口に該当する濃点で形成される三角形を画像データ中から検索し、その外部にある輪郭を求め、頭頂部Ａ（Ｘ１，Ｙ１）、顎Ｂ（Ｘ２，Ｙ２）、右耳Ｃ（Ｘ３，Ｙ３）、左耳Ｄ（Ｘ４，Ｙ４）の座標を求める。
【００３１】
次に、図３（ｂ）に示すように、上記のように求めた輪郭の座標データの中で、Ｘ座標の最小値Ｘｍｉｎ、最大値Ｘｍａｘ、及びＹ座標の最小値Ｙｍｉｎ、最大値Ｙｍａｘを求め、これらで囲む領域Ｐに対し、図３（ｃ）に示すように、固定値αだけ外側に広げた領域を選択領域Ｅに設定する。
選択領域のＸ座標範囲・・・Ｘｍｉｎ−αからＸｍａｘ＋α
選択領域のＹ座標範囲・・・Ｙｍｉｎ−αからＹｍａｘ＋α
【００３２】
ここで、画像を実際に表示する表示可能領域Ｆは、携帯電話の表示部全領域ではなく、画面を分割して表示する場合はその分割した画面領域を示す。
表示可能領域ＦのＸ：Ｙ比率が１：βの場合、選択領域ＥのＸ：Ｙ比率について、（Ｙｍａｘ−Ｙｍｉｎ＋２α）＜（Ｘｍａｘ−Ｘｍｉｎ＋２α）βの場合、Ｙ座標範囲を以下に示すように再設定し、Ｘ：Ｙ比率が１：βとする。この領域を画像表示領域Ｇとする。
【００３３】
画像表示領域ＧのＹ座標範囲は、（Ｙｍｉｎ−α）−（Ｘｍａｘ−Ｘｍｉｎ＋２α）β／２から（Ｙｍｉｎ＋α）＋（Ｘｍａｘ−Ｘｍｉｎ＋２α）β/２とする。
この様にして求めた画像表示領域Ｇを表示可能領域Ｆのサイズに拡大または縮小し表示する。
【００３４】
次に、添付図面（主に図２）を用いて、本実施形態の携帯電話１の画像拡大表示動作について以下に説明する。図２は、本実施形態の携帯電話１の画像拡大表示動作について説明するためのフローチャートである。まず、図１に示す携帯電話１の無線部２にて受信したデータは、デコーダ３にて画像データ、音声データ、文字データにデコードされる。
【００３５】
続いて、図１に示す処理部４は、音声データに関しては、音質制御や音量調節などの処理を行い、スピーカ６に出力する。文字データや、画像データに関しては、表示サイズや表示形式などの設定処理を行い、表示部５に表示する。
【００３６】
ここで、処理部４が行う画像データの処理（本実施形態の携帯電話１の特徴である画像拡大表示処理）について図２を用いて以下に説明する。まず、図２に示すように、処理部４は、記憶部８に記憶している設定を確認し、受信画像の自動拡大を有効にする設定となっていることを確認する（ステップ１０１）。
【００３７】
このとき、自動拡大が有効になっていない場合は、自動拡大の処理は行わない。自動拡大を有効にする設定となっている場合、受信した画像データの中から、目、鼻、口、輪郭などの顔の各パーツの検索処理を実行する（ステップ１０２：図３（ａ）参照。）。
【００３８】
続いて、検索された領域Ｐに対し、固定値αだけ外側に広げた選択領域Ｅを決定する。（ステップ１０３：図３（ｂ）参照。）このとき、固定値αはあらかじめ記憶部８に設定しておく。次に、処理部４は、記憶部８より画像を表示可能な領域のサイズ（表示可能領域Ｆ）を読み出す。
【００３９】
（図４に示す）この表示可能領域Ｆは、分割設定を行わない場合は、携帯電話１の表示部、画面を分割して表示する場合はその分割した画面領域を示す。表示領域については、あらかじめ用途に合わせて画面分割の割合を設定し、記憶部８に記憶されている。
【００４０】
続いて、表示可能領域ＦのＸ：Ｙ比率と同じになるよう、Ｘ方向またはＹ方向に選択領域Ｅを拡大する。この領域を画像表示領域Ｇとする（ステップ１０４：図５参照。）。ここで求めた画像表示領域Ｇを表示可能領域Ｆのサイズに拡大、または縮小し（ステップ１０５）携帯電話１の表示部５に表示する（ステップ１０６）。
【００４１】
以上説明した、自動拡大設定の確認（ステップ１０１）から表示範囲の選択、拡大・縮小（ステップ１０６）を、繰り返し実行することで、常に同じサイズで相手の画像を拡大して表示することが可能となる。尚、本実施形態の携帯電話１は、以上説明した画面拡大表示処理を、単独で実行するよう制御されるか、又は、携帯電話１に組み込まれている画面拡大表示プログラムの動作により、若しくは、該プログラムを記録した記録媒体を用いることにより実行される。
【００４２】
本実施形態によれば、テレビ電話接続時、分割画面での縮小表示で、人物の顔部分のみを（ユーザの操作を必要とせず）自動で抽出し拡大表示することができるという効果を得ることができる。また、本実施形態によれば、データ送信側での設定が不要であり、受信側（携帯電話）のみの対応で画像の自動拡大が可能であるという効果を得ることができる。
【００４３】
（実施形態２）
本実施形態は、実施形態１の応用例である。従って、共通する部分は、説明を省略し、本実施形態の特徴部分のみ添付図面を用いて以下に説明する。図６は、本実施形態における携帯電話の画像拡大表示動作について説明するためのフローチャートである。実施形態１では、受信画像データ全てについて、検索、拡大を行うよう記載しているが、図６に示すように行うことも可能である。
【００４４】
受信データの処理について、処理回数又は時間を規定する。規定回数の場合、実施形態１と同様の処理を行う。そして、まず、記憶部８に記憶している設定を確認し（ステップ２０２）、拡大表示設定となっている場合、受信画像データから、拡大部分の検索を実行する（ステップ２０３）。拡大部分の検索が完了すると、選択領域Ｅを確定し（ステップ２０４）、画像表示領域Ｇを確定する（ステップ２０５）。
【００４５】
ここで画像表示領域Ｇの座標データを記憶部８に記憶する（ステップ２０６）。画像表示領域Ｇと表示可能領域Ｆのサイズより、拡大率を確定し（ステップ２０７）、記憶部８に記憶する（ステップ２０８）。続いて、確定した拡大率に画像を拡大し（ステップ２０９）、画像表示する（ステップ２１０）。
【００４６】
一方、処理が規定回数でない場合は、検索は実行せず、記憶部８に記憶している画像表示領域Ｇの座標データに該当する画像を選択する（ステップ２１１）。表示する画像を選択すると、記憶部８に記憶している拡大率に拡大し（ステップ２１２）、表示可能領域Ｆに表示する（ステップ２１３）。こうすることで、全データに対して検索を行う必要はなく、自動拡大表示を行うことが可能となる。
【００４７】
以上説明した実施形態１、２では、テレビ電話での受信データを自動で拡大する方法を示したが、受信する画像はテレビ電話の画像に限定するものではなく、カメラから入力される画像データに関しても、同様に自動で拡大することは可能である。また、テレビ放映の受信画像や、インターネット上の画像データに関しても、同様に受信データ中の人物を拡大表示することが可能である。
【００４８】
但し、テレビ電話以外の場合は、通常は受信画像全体を見ることが主であるため、通常は拡大しないように設定し、必要なときにユーザの操作で人物を抽出し拡大表示することで、不用意に拡大することがなく、必要な場合のみ拡大表示することができる。
【００４９】
尚、実施形態１、２では受信データ中の人物が一人の場合を示したが、受信データ中に複数の人物を確認した場合も、同様に抽出、拡大を実施することができる。また、実施形態１、２では、人物の顔を拡大する方法を示したが、検索対象を文字に設定すると、テレビ画面の文字列を自動的に拡大することも可能である。
【００５０】
また、実施形態１において、検索対象を人物の特徴点（目、口など）と設定したが、その部分を文字に設定することができる。文字を検索する場合も、厳密に文字を読み出し、携帯電話内蔵の文字表示手段で表示する必要はなく、文字が表示されている部分の領域を拡大し画像として表示することができる。
【００５１】
この場合、テレビ電話や、テレビ視聴画面とは別の子画面を起動し、その部分の文字の部分を拡大し表示することで、テレビ画面中の文字列を抽出するようにする。文字を携帯電話の制御部で判別すると、処理が多く、また誤認識、誤表示が発生する。しかし、本発明では、文字列の表示部分を拡大するだけであるため、文字の認識はユーザー自身が行う。そのため、誤認識や、処理量の増加を防ぐことができる。
【図面の簡単な説明】
【００５２】
【図１】第１、第２の実施形態における携帯電話の構成ブロック図である。
【図２】第１の実施形態における携帯電話の画像拡大表示動作について説明するためのフローチャートである。
【図３】（ａ）は、第１の実施形態における携帯電話の画像拡大表示方法を説明するための図である。（ｂ）は、第１の実施形態における携帯電話の画像拡大表示方法を説明するための図である。（ｃ）は、第１の実施形態における携帯電話の画像拡大表示方法を説明するための図である。
【図４】第１の実施形態の携帯電話表示画面における表示可能領域Ｆを示した図である。
【図５】第１の実施形態の携帯電話表示画面における画像表示領域Ｇを示した図である。
【図６】第２の実施形態における携帯電話の画像拡大表示動作について説明するためのフローチャートである。
【符号の説明】
【００５３】
１    携帯電話
２    無線部
３    デコーダ
４    処理部
５    表示部
６    スピーカ
７    制御部
８    記憶部
Ｅ    選択領域
Ｆ    表示可能領域
Ｇ    画像表示領域
Ｐ    領域
【図１】
2007180914.tif 000003
【図２】
2007180914.tif 000004
【図３】
2007180914.tif 000005
【図４】
2007180914.tif 000006
【図５】
2007180914.tif 000007
【図６】
2007180914.tif 000008