(57)【要約】【課題】携帯通信端末に人の顔を含んだ画像を配信する際に、人物の顔を明確に確認することができるようにする。【解決手段】携帯電話器に画像を配信する際に、画像サーバ１００の判定部１５２は、配信する画像Ｄに人物が存在するか否かを判定する。抽出部１５４は、人物が存在すると判定された画像Ｄから、顔領域画像Ｆを抽出する。縮小処理部１５６は、人物が存在すると判断された画像Ｄの場合、画像Ｄおよび画像Ｄの顔領域画像Ｆに対してその大きさが平均的な携帯電話器の表示画面の大きさと略同になるように夫々縮小処理を行って配信用画像Ｄ’とＦ’を得、人物が存在しないと判定された画像Ｄの場合、画像Ｄに対してその大きさが平均的な携帯電話器の表示画面の大きさに略同となるように縮小処理を行って配信用画像Ｄ’を得る。【選択図】　　　　　図２
2004120404.tif 000002
【特許請求の範囲】
【請求項１】
携帯通信端末に画像を配信する画像配信装置であって、
前記画像に人物が存在するか否かを判定する判定手段と、
前記判定手段により人物が存在することを判定したとき、前記画像から前記人物の顔を含む所定の大きさの領域の部分を抽出して顔領域画像を取得する顔領域抽出手段と、
前記顔領域画像に対して、該顔領域画像の大きさを前記携帯通信端末の画像表示能力に適応する大きさとする必要な縮小処理を施す縮小処理手段とを備えたことを特徴とする画像配信装置。
【請求項２】
人物画像を表示装置に表示させるための画像処理装置であって、
前記人物画像から人物の顔を検出する顔検出手段と、
前記顔検出手段により検出された前記人物の顔を含む所定の大きさの領域を抽出して顔領域画像を取得する顔領域抽出手段と、
前記顔領域画像に対して、該顔領域画像の大きさを前記表示装置の画像表示能力に適応する大きさとする必要な拡縮処理を施す拡縮手段とを備えたことを特徴とする画像処理装置。
【請求項３】
携帯通信端末に画像を配信する処理をコンピュータに実行させるプログラムであって、
前記画像に人物が存在するか否かを判定する判定処理と、
前記判定処理により人物が存在することを判定したとき、前記画像から前記人物の顔を含む所定の大きさの領域の部分を抽出して顔領域画像を取得する顔領域抽出処理と、
前記顔領域画像に対して、該顔領域画像の大きさを前記携帯通信端末の画像表示能力に適応する大きさとする必要な縮小処理とをコンピュータに実行させることを特徴とするプログラム。
【請求項４】
人物画像を表示装置に表示させるための処理をコンピュータに実行させるプログラムであって、
前記人物画像から人物の顔を検出する顔検出処理と、
前記顔検出処理により検出された前記人物の顔を含む所定の大きさの領域を抽出して顔領域画像を取得する顔領域抽出処理と、
前記顔領域画像に対して、該顔領域画像の大きさを前記表示装置の画像表示能力に適応する大きさとする必要な拡縮処理とをコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、携帯電話などの携帯通信端末に画像を配信する配信装置および人物画像を表示装置に表示させるための画像処理装置並びにプログラムに関するものである。
【０００２】
【従来の技術】
近年、携帯電話や、電子メール送受信用携帯ツールなどの携帯通信端末が急激に普及しつつある。これらの携帯通信端末は、機能が充実し、本来の通話や、電子メールの送受信などは勿論、インターネットにアクセスしたり、ネットショッピングをしたりするなど、様々な形態で利用されるようになっている。
【０００３】
また、近年、デジタル画像データ（以下略して画像データという）に対してサービスを提供する様々なシステムが出現している。例えば、ネガフィルムをスキャナでスキャンして得たもの、デジタルカメラにより撮影して得たものなどの画像データの保存、管理を行うシステムや、画像データに対して、望ましい画質になるように画質補正処理を行ってプリントするプリントサービスシステムなどがある。
【０００４】
一方、コンピュータなどの端末装置の低価格化およびネットワーク技術の進歩に伴って、インターネットが急激に普及する背景において、上述した様々なシステムの殆どはネットワークを介してサービスを提供している。中では、移動通信の分野において、上述した携帯電話などの携帯通信端末の普及および携帯通信端末の機能の充実という背景において、携帯通信端末を対象とする画像サービスも盛んに行われている。例えば、保存、管理した画像データを携帯通信端末に配信するシステムや、携帯通信端末同士間の電子メールを中継する際に、送信側の携帯通信端末から送信された電子メールに添付された画像データ（また、添付された画像データに対して、階調補正や、ホワイトバランス補正、濃度補正、シャープネス処理などの画質補正処理を行って得た画像データ）を受信側の携帯通信端末に送信したり、受信側の携帯通信端末が添付ファイルを受信できない場合、画像データを保持して、該画像データの保持場所を示すＵＲＬなどのアドレスだけを受信側の携帯通信端末に送信して、後に受信側の携帯通信端末からのアクセスを受け付けたときダウンロードさせたりするなどのことを行う通信中継サーバ装置がある（例えば特許文献１）。
【０００５】
一方、携帯電話などの携帯通信端末は、携帯されるという特性ゆえに、画像を表示する画面のサイズが小さく、低解像度の画像しか表示できないものが殆どである。これらの携帯通信端末に画像を配信するとき、元の画像のままで配信すると、携帯通信端末の表示画面において、画像を正常に表示できなかったり、表示し切れなかったりなどの問題が生じるため、携帯通信端末に画像を配信する際に画像を縮小して配信することが行われている。
【０００６】
【特許文献１】
特開２００１−３４５９８５号公報
【０００７】
【発明が解決しようとする課題】
しかしながら、写真画像など人物が含まれた画像（以下人物画像という）を携帯通信端末に配信する際に、背景を含む画像全体を携帯通信端末の表示画素数に合わせて縮小処理したのでは、人物が非常に小さくなってしまい、携帯通信端末の表示画面においては、その人物を判明することができないという問題が生じる可能性がある。
【０００８】
これに類似した問題は、携帯通信端末に配信するシステムに限らず、人物の顔を表示することを目的とする装置にも存在する。例えばドアホンの場合、サイズの小さい表示部に撮像部により取得した人物画像を表示させ、人物の顔を判明することが目的であることに対して、人物の立場所がドアホンの撮像部の撮像範囲内にあるものの、撮像部から遠く離れると、撮像部により撮像して得た画像には人物以外に様々な周辺景色も入り、画像全体をそのまま表示部に表示させたのでは、人物が小さく人物の顔を判別することができないという問題が生じてしまう。
【０００９】
本発明は、上記事情に鑑みなされたものであり、携帯通信端末に画像を配信する際に画像中の人物を確認することができる画像配信装置および人物画像中の人物を確認することができるように画像処理を行う画像処理装置並びにプログラムに関するものである。
【００１０】
【課題を解決するための手段】
本発明の画像配信装置は、携帯通信端末に画像を配信する画像配信装置であって、
前記画像に人物が存在するか否かを判定する判定手段と、
前記判定手段により人物が存在することを判定したとき、前記画像から前記人物の顔を含む所定の大きさの領域の部分を抽出して顔領域画像を取得する顔領域抽出手段と、
前記顔領域画像に対して、該顔領域画像の大きさを前記携帯通信端末の画像表示能力に適応する大きさとする必要な縮小処理を施す縮小処理手段とを備えたことを特徴とするものである。
【００１１】
ここで、「人物の顔を含む所定の大きさの領域の部分」とは、人物を確認することができる適切な大きさの領域を意味し、顔の部分だけでもよいが、人物の上半身部分（例えば顔の部分を囲む矩形を中心とした、縦横長さは夫々該矩形の縦横長さの２倍となる矩形の部分）など、見た目の良さ、画像のバランスを図るようにした領域でもよい。
【００１２】
また、画像に複数の人物が存在する場合、夫々の人物の顔を含む所定の大きさの領域の部分を夫々の人物の顔領域画像としてもよく（この場合、１つの画像に対して複数の顔領域画像が生成される）、夫々の人物の顔の領域の部分を合成して１つの顔領域画像としたり、夫々の人物の顔の領域の部分を任意の組合せで合成して得た１つまたは複数の画像を顔領域画像としたりする様にしてもよい。
【００１３】
本発明の画像配信装置における判定手段および顔領域抽出手段は、夫々画像に人物が存在するか否かを判定するものと、人物が存在するとき画像から顔領域画像を抽出するものであり、その判定および抽出に使用される手法としては、夫々人物の在否を判定できるもの、顔領域画像を抽出できるものであればいかなるものであってもよく、例えば、特開２０００−４８１８４号に提案される手法を用いることができる。具体的には、人物の顔に当たる部分が存在するか否かを判定し、顔に当たる部分があれば人物が存在すると判定する。まず、画像に対して画素削減や、輝度調整などの前処理を行い、前処理された画像から肌色画素を検出する。次に肌色画素の検出結果から肌色画素の射影分布を求めて、肌色画素の射影分布の形状を基に顔部分の特徴となる肌色塊領域の検索を行って顔部分の候補を見つける。最後にニューラルネットワークなどにより予め決定した方法に基づいて顔部分候補が顔部分であるか否かの判定を行う。顔領域抽出手段は、顔部分と判定された領域を含む所定の大きさの領域の画像を抽出して顔領域画像とする。
【００１４】
また、本発明の画像配信装置は、表示サイズが一般的には小さい携帯通信端末に画像を配信するものであるので、その縮小手段としては、前記顔領域抽出手段により抽出した顔領域画像の大きさが配信先の携帯通信端末の表示能力に適応した大きさになるように前記顔領域画像に対して必要な縮小処理を施すものであり、顔領域画像の大きさが携帯通信端末の表示能力に適応した大きさよりも大きいときに顔画像に対して縮小処理を行い、顔領域画像の大きさが既に携帯通信端末の表示能力に適応した大きさとなっている場合など縮小処理を「必要」としないとき、縮小処理を行わなくてもよい。
【００１５】
また、顔領域画像を「携帯通信端末の表示能力に適応した大きさ」にするとは、例えば、配信先となる各々の携帯通信端末の表示能力（表示画面のサイズ、解像度など）を取得し、この表示能力に応じて顔領域画像に対して必要な縮小処理を行うようにしてもよいし、個々の携帯通信端末の表示能力を取得せず、平均的な携帯通信端末の表示能力に基づいて顔領域画像に対して必要な縮小処理を行うようにしてもよい。
【００１６】
本発明の画像処理装置は、人物画像を表示装置に表示させるための画像処理装置であって、
前記人物画像から人物の顔を検出する顔検出手段と、
前記顔検出手段により検出された前記人物の顔を含む所定の大きさの領域を抽出して顔領域画像を取得する顔領域抽出手段と、
前記顔領域画像に対して、該顔領域画像の大きさを前記表示装置の画像表示能力に適応する大きさとする必要な拡縮処理を施す拡縮手段とを備えたことを特徴とするものである。
【００１７】
ここで、顔検出手段により顔の検出に用いる手法としては、人物画像から顔を検出することができればいかなる手法であってもよく、例えば、前述した特開２０００−４８１８４号に提案された手法でもよい。
【００１８】
本発明の第１のプログラムは、携帯通信端末に画像を配信する処理をコンピュータに実行させるプログラムであって、
前記画像に人物が存在するか否かを判定する判定処理と、
前記判定処理により人物が存在することを判定したとき、前記画像から前記人物の顔を含む所定の大きさの領域の部分を抽出して顔領域画像を取得する顔領域抽出処理と、
前記顔領域画像に対して、該顔領域画像の大きさを前記携帯通信端末の画像表示能力に適応する大きさとする必要な縮小処理とをコンピュータに実行させることを特徴とするものである。
【００１９】
本発明の第２のプログラムは、人物画像を表示装置に表示させるための処理をコンピュータに実行させるプログラムであって、
前記人物画像から人物の顔を検出する顔検出処理と、
前記顔検出処理により検出された前記人物の顔を含む所定の大きさの領域を抽出して顔領域画像を取得する顔領域抽出処理と、
前記顔領域画像に対して、該顔領域画像の大きさを前記表示装置の画像表示能力に適応する大きさとする必要な拡縮処理とをコンピュータに実行させることを特徴とするものである。
【００２０】
【発明の効果】
本発明の画像配信装置によれば、携帯通信端末に画像を配信する際に、画像に人物の在否を判定し、人物が存在するとき、画像から顔領域画像を抽出して、顔領域画像の大きさが配信先の携帯通信端末の表示能力に適応した大きさとなるように必要な縮小処理を施すようにしているので、携帯通信端末において表示される画像は、携帯通信端末の表示能力に適応し、人物の顔を確実に確認することができる。
【００２１】
本発明の画像処理装置によれば、人物画像を表示装置に表示させる際に、人物画像から顔領域画像を抽出して、表示装置の表示能力に適応した大きさとなるように拡縮処理を行うようにしているので、いかなる人物画像でも、顔を確認することができる。
【００２２】
【発明の実施の形態】
以下、図面を参照して、本発明の実施形態について説明する。
【００２３】
図１は、本発明の画像配信装置の実施形態となる携帯電話システムの構成を示すブロック図である。図１に示すように、本実施形態の携帯電話システムは、携帯電話器１、携帯通信網５０と、携帯通信網５０を介して携帯電話器１と接続される基地局９０とからなり、基地局９０は、携帯電話器１同士間の通信を中継する、図示しない中継部と共に、携帯電話器１に画像データを配信するための画像サーバ１００を備えている。
【００２４】
図２（ａ）は、基地局９０に備えられた画像サーバ１００の構成を示すブロック図である。図示のように、画像サーバ１００は、配信用の画像データを記憶する記憶部１０５と、携帯電話器１から、記憶部１０５に記憶された画像データの配信要求を受け付けるアクセス受付部１１０と、配信要求により指定された画像データＤを記憶部１１０から読み出す読出部１１５と、画像データＤから携帯電話器１に配信する配信画像を取得する配信画像取得部１５０とからなるものである。
【００２５】
図２（ｂ）は、画像サーバ１００の配信画像取得部１５０の構成を示すブロック図である。図示のように、画像サーバ１００は、読出部１１５により読み出された画像データＤに対して、人物が存在するか否かを判定する判定部１５２と、判定部１５２により人物が存在すると判定されたとき画像データＤから人物の顔部分を囲む矩形を中心とした、縦横長さは夫々該矩形の縦横長さの２倍となる矩形の領域を抽出して顔領域画像Ｆを取得する抽出部１５４と、画像データＤに対して、その大きさが平均的な携帯電話器の画面表示サイズの大きさとなるように縮小処理を行って縮小画像データＤ’を得ると共に、抽出部１５４から画像データＤの顔領域画像Ｆが出力されれば（すなわち画像データＤが人物画像であれば）、顔領域画像Ｆに対しても同様の縮小処理、すなわち顔領域画像Ｆの大きさが平均的な携帯電話器の画面表示サイズとなる縮小処理を行って縮小画像データＦ’を得る縮小処理部１５６と、配信画像Ｄ’またはＤ’とＦ’を基地局９０の図示しない送信部に出力し、送信部を介して携帯電話器１に配信する出力部１５８とを有してなるものである。なお、ここで、説明上の便宜のため、記憶部１１０に記憶された画像データのうちの人物画像の画像データは、１つの人物しか存在しないことを仮定して説明を行う。なお、本発明の主旨が分かりやすいように、基地局９０の中継部などの動作を省略して、画像サーバ１００に重点を置いて説明を行う。
【００２６】
図３は、本実施形態の携帯電話システムにおける画像サーバ１００の動作を示すフローチャートである。図示のように、画像サーバ１００は、アクセス受付部１１０が携帯電話器１から画像配信を要求するアクセスを受け付けた（Ｓ１０）時から動作する。画像読出部１１５は、携帯電話器１のアクセスにより指定された画像データＤを記憶部１０５から読み出して（Ｓ１２）判定部１５２に出力する（Ｓ１２）。判定部１５２は、画像データＤに対して人物の顔の検出を行い（Ｓ１４）、顔の部分があれば（Ｓ１６：Ｙｅｓ）この画像データＤにより表される画像が人物画像であると判定し、顔の部分がなければ（Ｓ１６：ＮＯ）この画像データＤにより表される画像が人物画像ではないと判定する。抽出部１５４は、判定部１５２により人物画像を現す画像データに判定された画像データＤから顔領域画像のデータ（画像データＦ）を抽出する（Ｓ１８）。縮小処理部１５６は、判定部１５２により人物画像を現す画像データに判定された画像データＤおよび抽出部１５４によりこの画像データＤから抽出された画像データＦに対して夫々縮小処理を行って縮小画像データＤ’と縮小画像データＦ’とを得る一方、判定部１５２により人物画像を現す画像データではないと判定された画像データＤに対してはこの画像データのみを縮小して縮小画像データＤ’を得る（Ｓ２０）。画像サーバ１００の出力部１５８は、縮小処理部１５６により取得した縮小画像データＤ’（縮小画像データＦ’があるときは縮小画像データＤ’と縮小画像データＦ’）を配信する画像データとして基地局９０の図示しない送信部に出力し、送信部を介して携帯電話器１に配信する（Ｓ２２）。
【００２７】
このように本実施形態の携帯電話システムによれば、携帯電話器１に画像（この画像を表す画像データ）を配信する際に、人物画像、例えば図４に示すような画像の場合、人物の顔を検出し、領域Ａのような顔領域の画像を抽出し、縮小処理を行って配信することによって、携帯電話器１の表示画面には、図５（ａ）に示す画像が表示されるので、従来のように画像全体の縮小画像を配信するときに携帯電話器に表示される画像（図５（ｂ））と比較すれば分かるように、人物の顔を確実に確認することができる。
【００２８】
以上、本発明の携帯通信端末用画像配信装置の望ましい実施形態について説明したが、本発明の画像配信装置は、上述した実施形態に限られるものではなく、本発明の主旨を変えない限り、様々な変更を加えることができる。
【００２９】
例えば、図１に示す実施形態の携帯電話システムにおいて、画像サーバ１００は、人物画像を配信する際に、顔領域画像を縮小して得た縮小画像と共に、元の人物画像を縮小して得た縮小画像も配信するようにし、人物の顔を確認することができるようにすると共に、元の画像のイメージも分かるようにしているが、顔領域画像の縮小画像だけを配信してもよいし、携帯通信端末のユーザに元の画像を配信するか否かを指定させ、元の画像も配信するようにしてされたときにのみ、元の画像を送信するようにしてもよい。
【００３０】
また、図１に示す実施形態の携帯電話システムにおいて、説明上の便宜のため、人物画像として、人物が１人しかいない画像を例にしたが、本発明の画像配信装置は、複数の人物が存在する画像の配信にも適用することができ、例えば、各々の人物の顔部分を抽出して得た複数の顔領域画像を夫々縮小して配信したり、各々の人物の顔部分を抽出した上で合成して得た画像を顔領域画像として縮小して配信したりなどしてもよい。
【００３１】
図６は、本発明の画像処理装置の実施形態となるドアホン２００の構成を示すブロック図である。図示のように、本実施形態のドアホン２００は、前方の所定の範囲の被写体に対して撮像を行って画像データＰを得る撮像部２０５と、画像データＰから人物の顔の部分を検出する顔検出部２１０と、顔検出部２１０により検出された顔の部分に基づいて顔領域画像データＰ１（ここでも、例として、人物の顔部を囲む矩形を中心とした、縦横長さは夫々該矩形の縦横長さの２倍となる矩形の領域の画像を顔領域画像とする）を抽出する抽出部２１５と、顔領域画像データＰ１が後述する表示部２２５の画面サイズと略同になるように必要な拡大縮小処理を施す拡縮部２２０と、拡縮部２２０により得られた画像データＰ２を表示する表示部２２５とを備えてなるものである。
【００３２】
図７は、図６に示すドアホン２００の動作を示すフローチャートである。図示のように、ドアホン２００は、まず、撮像部２０５により前方の被写体を撮像して画像データＰを得（Ｓ５０）、顔検出部２１０は、画像データＰから人物の顔に当たる部分を検出する（Ｓ５２）。抽出部２１５は、顔検出部２１０により検出された顔の部分に基づいて顔領域画像の抽出を行って、顔領域画像データＰ１を取得する（Ｓ５４）。拡縮部２２０は、顔領域画像データＰ１に対してその大きさが表示部２２５の表示画面の大きさと略同となるように必要な拡大縮小処理（例えば、顔領域画像データＰ１により表される画像の大きさが表示部２２５の画面の大きさより大きいとき縮小処理、顔領域画像データＰ１により表される画像の大きさが表示部２２５の画面の大きさより小さいとき拡大処理、顔領域画像データＰ１により表される画像の大きさが表示部２２５の画面の大きさと略同であるときは無処理）を施して表示用の画像データＰ２を得（Ｓ５６）、表示部２２５は、この画像データＰ２を表示する（Ｓ５８）。
【００３３】
このように、本実施形態のドアホンによれば、ドアホン２００の撮像部２０５の撮像範囲内のいかなる位置にいても、表示部２２５に表示される画像からはこの人物の顔を確認することができる。
【００３４】
図６に示す実施形態のドアホン２００において、拡縮部２２０は、表示部２２５の画面の大きさを拡大縮小（無処理を含む）の閾値にしているが、例えば、表示部２２５の画面の大きさを中心とする適切な大きさの範囲を決め、この範囲内の大きさを有する顔画像に対して拡大縮小を行わず、この範囲の上限より大きい大きさと下限より小さい大きさを有する顔領域画像に対して夫々縮小処理と拡大処理を行うようにしてもよい。
【図面の簡単な説明】
【図１】本発明の画像配信装置の実施形態となる携帯電話システムの構成を示すブロック図
【図２】図１に示す携帯電話システムにおける画像サーバ１００の構成を示すブロック図
【図３】図２に示す画像サーバ１００の動作を示すフローチャート
【図４】人物画像の例を示す図
【図５】携帯電話器１に表示される画像を示す図
【図６】本発明の画像処理装置の実施形態となるドアホン２００の構成を示すブロック図
【図７】図６に示すドアホン２００の動作を示すフローチャート
【符号の説明】
１　　携帯電話器
５０　　携帯通信網
９０　　基地局
１００　　画像サーバ
１１０　　アクセス受付部
１０５　　記憶部
１１５　　読出部
１５０　　配信画像取得部
１５２　　判定部
１５４　　抽出部
１５６　　縮小処理部
１５８　　出力部
２００　　ドアホン
２０５　　撮像部
２１０　　顔検出部
２１５　　抽出部
２２０　　拡縮部
２２５　　表示部
【図１】
2004120404.tif 000003
【図２】
2004120404.tif 000004
【図３】
2004120404.tif 000005
【図４】
2004120404.tif 000006
【図５】
2004120404.tif 000007
【図６】
2004120404.tif 000008
【図７】
2004120404.tif 000009