(57)【要約】【課題】画面内の特定領域を検出して追従しながら表示可能な動画像再生装置において、無駄な電力を消費しないようにすること。【解決手段】コマーシャル検出部１０６は、復号音響データを用いて、番組中または番組間に挿入されるコマーシャル部分を検出することによりシーンの連続性を検出し、判定部１０７は、コマーシャル検出結果に基づき、特定領域検出部１０８での特定領域検出処理を実行するか否かを判定し、特定領域検出部１０８は、判定部１０７での判定結果に基づき、画面内の特定領域を検出する特定領域検出処理を行う。【選択図】図１
2010206413.tif 000002
【特許請求の範囲】
【請求項１】
画面内の特定領域の追従表示を行う動画像再生装置であって、
前記特定領域を検出する特定領域検出手段と、
シーンの連続性を検出する連続性検出手段と、
前記連続性検出手段の検出結果に応じて前記特定領域検出手段における特定領域検出処理を実行するか否かを判定する判定手段と、
を備える動画像再生装置。
【請求項２】
前記連続性検出手段は、コマーシャル部分を検出することにより前記連続性を検出し、
前記判定手段は、前記連続性検出手段がコマーシャル部分を検出している期間は、前記特定領域検出処理を実行しないと判定する、
請求項１記載の動画像再生装置。
【請求項３】
前記連続性検出手段は、シーンの切替わりを検出することにより前記連続性を検出し、
前記判定手段は、前記連続性検出手段がシーンの切替わりを検出した場合に所定期間前記特定領域検出処理を実行すると判定し、前記所定期間に前記特定領域検出手段が前記特定領域を検出できた場合は前記特定領域検出処理を継続すると判定し、前記所定期間に前記特定領域検出手段が前記特定領域を検出できなかった場合は前記特定領域検出処理を停止すると判定する、
請求項１記載の動画像再生装置。
【請求項４】
前記連続性検出手段は、特殊再生を検出することにより前記連続性を検出し、
前記判定手段は、前記連続性検出手段が特殊再生を検出している期間は、前記特定領域検出処理を実行しないと判定する、
請求項１記載の動画像再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像再生装置に関し、特に、画面内の特定領域を検出して追従しながら表示可能な動画像再生装置に関する。
【背景技術】
【０００２】
動画像の再生において、画面内の特定領域を検出して、その領域を追従しながら表示を行う技術がある。例えば、従来技術１として、指定されたオブジェクトまたは自動で検出されたオブジェクトの位置と動きベクトルとから特定領域を移動させつつオブジェクトを拡大しながら表示するものがある（特許文献１参照）。また、従来技術２として、１フレームの画像の中から顔領域を検出し、検出された画像と、その領域に対して予め用意された特定の人物の顔画像情報（抽出用テンプレート）とを比較し、特定人物と判定された場合は、その人物を中心として表示を行うものがある（特許文献２参照）。
【特許文献１】特開２００６−９９４０４号公報
【特許文献２】特開２００５−１８４５１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
テレビ番組等の視聴では、視聴者は、その視聴者の関心のある人物に着目して視聴ができると便利である。テレビ番組では、カメラワーク等によりシーンが切替わり、視聴者の関心のある人物が一時的に画面に映らなくなった後、再度画面に映るようになることがしばしばある。また、テレビ番組の視聴では、コマーシャルにより番組が一時中断しても、番組が再開したら、再度その人物が画面に映るようになることも頻繁に発生する。
【０００４】
上記従来技術１では、ユーザの指定または自動で検出されたオブジェクトの動きを検出して特定領域の追従を行っている。一般的に動き検出は、現フレームと過去のフレームとの差分情報を用いて行われる。よって、上記従来技術１では、一旦オブジェクトが画面から消失してしまった場合、それ以降は追従ができなくなるか、または、再度オブジェクトの指定を行わなければならない。よって、上記従来技術１をテレビ番組の視聴に適用した場合、シーンの切替わりまたはコマーシャルの直後に、視聴者がその都度、オブジェクトの指定をし直さなければならないという煩雑さがあった。
【０００５】
また、上記従来技術２では、顔の検出と、抽出用テンプレートでのマッチングとにより特定人物の検出を行うため、過去のフレームを必要とせず、単独のフレームから検出が可能である。しかしながら、上記従来技術２では、オブジェクトが一旦消失した場合、次にオブジェクトが現れるまでの間、無駄な検出処理が継続されるため、無駄な電力が消費されてしまう。例えば、上記従来技術２をテレビ番組の視聴に適用した場合、コマーシャル期間中に無駄な検出処理が行われてしまう。
【０００６】
本発明は、かかる点に鑑みてなされたものであり、無駄な電力を消費しない動画像再生装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の動画像再生装置は、画面内の特定領域の表示を行う動画像再生装置であって、前記特定領域を検出する特定領域検出手段と、シーンの連続性を検出する連続性検出手段と、前記連続性検出手段の検出結果に応じて前記特定領域検出手段における特定領域検出処理を実行するか否かを判定する判定手段と、を備える構成を採る。
【発明の効果】
【０００８】
本発明によれば、動画像再生装置において無駄な電力を消費しないようにすることができる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明の実施の形態について、添付図面を参照して詳細に説明する。
【００１０】
（実施の形態１）
図１に、本実施の形態に係る動画像再生装置１００の構成を示す。
【００１１】
図１において、多重分離部１０２は、記録部１０１から動画像データを読み出し、読み出した動画像データから画像データと音響データを分離して出力する。
【００１２】
画像復号部１０３は、画像データに復号処理を施し、復号画像データをフレーム単位でメモリ１０４に格納する。
【００１３】
音響復号部１０５は、音響データに復号処理を施し、復号音響データを出力する。この復号音響データによりスピーカ１１２が鳴動されることにより音がスピーカ１１２から出力される。
【００１４】
コマーシャル検出部１０６は、復号音響データを用いて、番組中または番組間に挿入されるコマーシャル部分を検出することによりシーンの連続性を検出し、検出結果を出力する。この検出処理は、例えば特許第２８５８７５８号明細書記載の技術を用いて行うことができる。
【００１５】
判定部１０７は、コマーシャル検出結果に基づき、特定領域検出部１０８での特定領域検出処理を実行するか否かを判定し、判定結果を出力する。この判定処理の詳細については後述する。
【００１６】
特定領域検出部１０８は、判定部１０７での判定結果に基づき、画面内の特定領域を検出する特定領域検出処理を行い、検出した特定領域を出力する。この特定領域検出処理は、例えば上記特許文献２記載の技術を用いて、フレーム間差分ではなくフレーム単独で行うことが好ましい。
【００１７】
領域読出制御部１０９は、検出された特定領域に該当する復号画像データがメモリ１０４から特定領域検出部１０８に読み出されるように、メモリ１０４の読出制御を行う。メモリ１０４から読み出された、特定領域に該当する復号画像データは、特定領域検出部１０８および領域読出制御部１０９を介して合成処理部１１０に出力される。
【００１８】
合成処理部１１０は、特定領域の復号画像データの画像サイズを等倍または等倍以上のサイズに拡大し、拡大した画像を、メモリ１０４から読み出した元の復号画像データの一部または全体に合成してモニタ１１１の画面上に表示する。
【００１９】
次いで、判定部１０７での判定処理について図２を用いて説明する。
【００２０】
図２に示すように、シーン内容は、放送番組中または放送番組間に挿入されるコマーシャル（ＣＭ）により連続性が失われて不連続となる。
【００２１】
そこで、判定部１０７は、シーン内容が放送番組あるためコマーシャル検出部１０６によりコマーシャル部分が検出されていない期間（ＣＭ未検出期間）は、特定領域検出部１０８での特定領域検出処理を実行すると判定する。一方、シーン内容がコマーシャル（ＣＭ）であるためコマーシャル検出部１０６によりコマーシャル部分が検出されている期間（ＣＭ検出期間）は、判定部１０７は、特定領域検出部１０８での特定領域検出処理を実行しない（未実行）と判定する。
【００２２】
このように、本実施の形態によれば、テレビ番組の視聴時に、シーンの連続性に応じて特定領域検出処理を実行するか否かを判定するため、不要な特定領域検出処理が実行されることを防ぐことができる。よって、本実施の形態によれば、画面内の特定領域を検出して追従しながら表示する動画像再生装置において、無駄な電力を消費しないようにすることができる。
【００２３】
また、本実施の形態によれば、コマーシャル期間終了後すみやかに特定領域検出処理が再開されるため、視聴者が再度オブジェクトの指定を行うことなく特定領域の追従を行うことができる。  
【００２４】
（実施の形態２）
図３に、本実施の形態に係る動画像再生装置２００の構成を示す。なお、図３において図１（実施の形態１）と同一の構成部には同一符号を付し説明を省略する。
【００２５】
図３において、シーンチェンジ検出部２０１は、現在処理しているフレームの復号画像データと過去のフレームの復号画像データとをメモリ１０４から読出し、それら２つのフレームの内容からシーンチェンジ（シーンの切替わり）を検出することによりシーンの連続性を検出し、検出結果を出力する。例えば、シーンチェンジ検出部２０１は、現在のフレームと過去のフレームとの間における同じ位置の画素の値の絶対差分値を算出し、この絶対差分値が閾値を超えた画素数が画面内の総画素数に対して一定割合以上存在すればシーンチェンジが発生したと検出する。なお、本発明において、シーンチェンジの検出方法は限定されず、例えば特開平６−１５３１４６号公報記載の技術を用いてもシーンチェンジを検出することができる。
【００２６】
判定部２０２は、シーンチェンジ検出結果に基づき、特定領域検出部１０８での特定領域検出処理を実行するか否かを判定し、判定結果を出力する。
【００２７】
次いで、判定部２０２での判定処理について図４を用いて説明する。
【００２８】
図４に示すように、シーン内容は、シーン１からシーン５へと順次切り替わることにより連続性が失われて不連続となる。なお、ここでは、シーン１において、特定領域検出部１０８は、対象となるオブジェクトを検出できており、そのオブジェクトを追従中であるとする。
【００２９】
判定部２０２は、シーン内容がシーン１からシーン２に切替わった直後の所定期間Ｔだけ、すなわち、シーンチェンジ検出部２０１がシーンチェンジを検出した直後の所定期間Ｔだけ（例えば５秒間だけ）特定領域検出部１０８での特定領域検出処理を実行すると判定する。そして、特定領域検出部１０８がこの所定期間Ｔに特定領域を検出できない場合（検出失敗）、判定部２０２は特定領域検出部１０８での特定領域検出処理を停止する（未実行）と判定する。よって、シーン２においては、シーン１からシーン２へのシーンチェンジから所定期間Ｔ経過後に特定領域検出部１０８での特定領域検出処理は停止し、シーン１からシーン２へのシーンチェンジから所定期間Ｔ経過後から、シーン２からシーン３へのシーンチェンジまでの間は、特定領域検出部１０８での特定領域検出処理は実行されない。
【００３０】
次いで、判定部２０２は、シーン内容がシーン２からシーン３に切替わった直後の所定期間Ｔだけ、すなわち、シーンチェンジ検出部２０１が再びシーンチェンジを検出した直後の所定期間Ｔだけ（例えば５秒間だけ）、特定領域検出部１０８での特定領域検出処理を実行すると判定する。そして、特定領域検出部１０８がこの所定期間Ｔに特定領域を検出できた場合（検出成功）、判定部２０２は特定領域検出部１０８での特定領域検出処理を継続すると判定する。よって、シーン３においては、シーン２からシーン３へのシーンチェンジから所定期間Ｔ経過後も特定領域検出部１０８での特定領域検出処理が継続して実行される。
【００３１】
以降、シーンチェンジが発生する度に、上記同様にして判定部２０２での判定処理が繰り返される。なお、図４には、シーン４，シーン５においての処理が、シーン２での上記処理と同様になる場合を示す。
【００３２】
このように、本実施の形態によれば、テレビ番組の視聴時に、シーンの連続性に応じて特定領域検出処理を実行するか否かを判定するため、不要な特定領域検出処理が実行されることを防ぐことができる。
【００３３】
すなわち、本実施の形態によれば、シーンの切替わりにおいて特定領域検出処理を実行し、特定領域を検出できた場合は特定領域検出処理を継続し、特定領域を検出できなかった場合は次のシーンチェンジまで特定領域検出処理を行わないため、無駄な電力の消費を防ぐことができる。
【００３４】
よって、本実施の形態によれば、画面内の特定領域を検出して追従しながら表示する動画像再生装置において、無駄な電力を消費しないようにすることができる。
【００３５】
（実施の形態３）
図５に、本実施の形態に係る動画像再生装置３００の構成を示す。なお、図５において図１（実施の形態１）と同一の構成部には同一符号を付し説明を省略する。
【００３６】
図３において、特殊再生検出部３０１は、ユーザ操作等による特殊再生（早送り再生、逆再生等）の実行を検出することによりシーンの連続性を検出し、検出結果を出力する。
【００３７】
判定部３０２は、特殊再生検出部３０１での検出結果に基づき、特定領域検出部１０８での特定領域検出処理を実行するか否かを判定し、判定結果を出力する。
【００３８】
次いで、判定部３０２での判定処理について図６を用いて説明する。
【００３９】
図６に示すように、シーン内容は、特殊再生が行われると連続性が失われて不連続となる。
【００４０】
そこで、判定部３０２は、特殊再生検出部３０１により特殊再生が検出されない期間、すなわち、通常再生期間は、特定領域検出部１０８での特定領域検出処理を実行すると判定する。一方、特殊再生検出部３０１により特殊再生が検出されている期間（特殊再生期間）は、判定部３０２は、特定領域検出部１０８での特定領域検出処理を実行しない（未実行）と判定する。
【００４１】
このように、本実施の形態によれば、テレビ番組の視聴時に、シーンの連続性に応じて特定領域検出処理を実行するか否かを判定するため、不要な特定領域検出処理が実行されることを防ぐことができる。よって、本実施の形態によれば、画面内の特定領域を検出して追従しながら表示する動画像再生装置において、無駄な電力を消費しないようにすることができる。
【産業上の利用可能性】
【００４２】
本発明は、家庭用の据置き型のビデオ再生装置、動画視聴が可能な携帯型のゲーム機および携帯電話端末等に好適である。
【図面の簡単な説明】
【００４３】
【図１】本発明の実施の形態１に係る動画像再生装置の構成を示すブロック図
【図２】本発明の実施の形態１に係る判定処理の説明図
【図３】本発明の実施の形態２に係る動画像再生装置の構成を示すブロック図
【図４】本発明の実施の形態２に係る判定処理の説明図
【図５】本発明の実施の形態３に係る動画像再生装置の構成を示すブロック図
【図６】本発明の実施の形態３に係る判定処理の説明図
【符号の説明】
【００４４】
１０１  記録部
１０２  多重分離部
１０３  画像復号部
１０４  メモリ
１０５  音響復号部
１０６  コマーシャル検出部
１０７，２０２，３０２  判定部
１０８  特定領域検出部
１０９  領域読出制御部
１１０  合成処理部
１１１  モニタ
１１２  スピーカ
２０１  シーンチェンジ検出部
３０１  特殊再生検出部
【図１】
2010206413.tif 000003
【図２】
2010206413.tif 000004
【図３】
2010206413.tif 000005
【図４】
2010206413.tif 000006
【図５】
2010206413.tif 000007
【図６】
2010206413.tif 000008