(57)【要約】重ね書き要素をデジタルビデオの画像内に、該画像の所望の看取領域が上記重ね書き要素により遮蔽されないように配置する方法である。該方法は、各々が１以上の所望の看取領域を有し得るような画像を規定するフレームを上記ビデオから抽出するステップを含む。各フレームに対して重ね書き要素を配置するための領域が上記画像内で選択され、該選択された領域に関して上記重ね書き要素が上記所望の看取領域と重なる割合が決定される。上記の重ね書き要素は、上記割合が最大の許容される所定の重なり率より低い場合に、上記の選択された領域に配置される。そうでない場合は、当該画像における所望の看取領域の遮蔽を最小化するような位置及び／又は大きさ、形状、アスペクト比が見付かるまで、該画像における１以上の他の領域が選択されるか、及び／又は上記重ね書き要素の大きさ、形状、アスペクト比が変更される。更に、重ね書き要素をデジタルビデオの画像内に、該画像の所望の看取領域が上記重ね書き要素により遮蔽されないように配置する、ビデオ受信機及びビデオ送信機のような装置にも関する。斯様な装置において、フレーム抽出器は、各々が少なくとも１つの所望の看取領域を有する画像を規定するようなフレームを上記ビデオから抽出する。画像プロセッサは、上記フレームの画像を解析して、これらフレームの画像内の所望の看取領域を識別する。重ね書き要素配置器は上記重ね書き要素を、所望の看取領域の遮蔽を最小化するような態様で上記フレームの画像内に配置する。
2004521571.tif 000002
【特許請求の範囲】
【請求項１】
重ね書き要素をデジタルビデオの画像内に、前記画像の所望の看取領域が前記重ね書き要素により遮蔽されないように配置する方法において、該方法が、
ａ）前記ビデオから、少なくとも１つの所望の看取領域を有する画像を規定するようなフレームを抽出するステップと、
ｂ）重ね書き要素を配置するための前記画像における領域を選択するステップと、
ｃ）前記選択された領域に関し、前記重ね書き要素がどの程度の割合で前記少なくとも１つの所望の看取領域と重なるかを決定するステップと、
ｄ）前記割合が最大の許容される所定の重なり割合より高い場合に、前記重ね書き要素を配置するための前記画像における他の領域を選択し、前記ステップｃ）からを継続するステップと、
を有していることを特徴とする方法。
【請求項２】
請求項１に記載の方法において、前記割合が最大の許容される所定の重なり割合より低い場合に、前記重ね書き要素を前記選択された領域に配置するステップを更に有していることを特徴とする方法。
【請求項３】
請求項２に記載の方法において、前記ビデオから少なくとも１つの所望の看取領域を有する画像を規定するような他のフレームを抽出し、前記ステップｂ）からを継続するステップを更に有していることを特徴とする方法。
【請求項４】
請求項１に記載の方法において、前記少なくとも１つの所望の看取領域が顔の領域を含むことを特徴とする方法。
【請求項５】
請求項１に記載の方法において、前記少なくとも１つの所望の看取領域がテキスト領域を含むことを特徴とする方法。
【請求項６】
請求項１に記載の方法において、前記少なくとも１つの所望の看取領域が高動き活動領域を含むことを特徴とする方法。
【請求項７】
請求項１に記載の方法において、前記重ね書き要素が、閉じた字幕、画面上のコマンド、チャンネル識別情報、表示された人物の見出し、スコアブック、株式及びニューステロップ、ロゴ及び前記ビデオに元々含まれない他の画像からなる群から選択されることを特徴とする方法。
【請求項８】
請求項１に記載の方法において、前記ステップｂ）と前記ステップｃ）との間に、前記フレームの前記画像における前記少なくとも１つの所望の看取領域についてのロケーションデータを得ると共に、該データを前記ステップｃ）で使用して、前記重ね書き要素が前記少なくとも１つの所望の看取領域と重なる割合を決定するステップを更に有していることを特徴とする方法。
【請求項９】
重ね書き要素をデジタルビデオの画像内に、前記画像の所望の看取領域が前記重ね書き要素により遮蔽されないように配置する装置において、該装置が、
前記ビデオから、各々が少なくとも１つの所望の看取領域を有する画像を規定するようなフレームを抽出する抽出器と、
前記フレームの前記画像を解析して、前記フレームの前記画像における所望の看取領域を識別する画像プロセッサと、
前記重ね書き要素を前記フレームの前記画像内に、前記所望の看取領域の遮蔽を最小化するような態様で配置する重ね書き要素配置器と、
を有していることを特徴とする装置。
【請求項１０】
請求項９に記載の装置において、前記少なくとも１つの所望の看取領域が顔の領域を含むことを特徴とする装置。
【請求項１１】
請求項９に記載の装置において、前記少なくとも１つの所望の看取領域がテキスト領域を含むことを特徴とする装置。
【請求項１２】
請求項９に記載の装置において、前記少なくとも１つの所望の看取領域が高動き活動領域を含むことを特徴とする装置。
【請求項１３】
請求項９に記載の装置において、前記画像プロセッサは前記フレームの異なる領域における動き活動を測定することを特徴とする装置。
【請求項１４】
請求項９に記載の装置において、前記重ね書き要素が、閉じた字幕、画面上のコマンド、チャンネル識別情報、表示された人物の見出し、スコアブック、株式及びニューステロップ、ロゴ及び前記ビデオに元々含まれない他の画像からなる群から選択されることを特徴とする装置。
【請求項１５】
請求項９に記載の装置において、前記配置器は、重ね書き要素を配置するための前記フレームの各々の前記画像における領域を選択する領域選択器と、前記選択された領域に関し、前記重ね書き要素がどの程度の割合で前記少なくとも１つの所望の看取領域と重なるかを決定する遮蔽算出器とを含み、前記配置器は前記割合が最大の許容される所定の重なり割合より低い場合に前記重ね書き要素を前記画像の前記選択された領域に配置し、前記配置器は前記割合が最大の許容される所定の重なり割合より高い場合に前記重ね書き要素を配置するために前記画像における他の領域を選択することを特徴とする装置。
【請求項１６】
請求項１５に記載の装置において、前記遮蔽算出器は、前記選択された領域に関し、前記重ね書き要素がどの程度の割合で前記少なくとも１つの所望の看取領域と重なるかを、
合成遮蔽率＝Ｃ１＊ｆｅａｔｕｒｅ １＿ｏｃｃｌｕｓｉｏｎ ＋ Ｃ２＊ｆｅａｔｕｒｅ ２＿ｏｃｃｌｕｓｉｏｎ ＋ Ｃ３＊ｆｅａｔｕｒｅ ３＿ｍｏｔｉｏｎ ａｃｔｉｖｉｔｙ ｌｅｖｅｌ
なる式を用いて決定し、ここで、
Ｃ１は前記画像の特徴１（顔）領域の重要度に関する係数又は重み係数であり、
ｆｅａｔｕｒｅ １＿ｏｃｃｌｕｓｉｏｎは前記特徴１領域の前記重ね書き要素の現在のロケーションによる重なりの割合であり、
Ｃ２は前記画像の特徴２（テキスト）領域の重要度に関する係数又は重み係数であり、
ｆｅａｔｕｒｅ ２＿ｏｃｃｌｕｓｉｏｎは前記特徴２領域の前記重ね書き要素の現在のロケーションによる重なりの割合であり、
Ｃ３は前記画像の特徴３（高い動き活動）領域の重要度に関する係数又は重み係数である、
ことを特徴とする装置。
【請求項１７】
重ね書き要素をデジタルビデオの画像内に、前記画像の所望の看取領域が前記重ね書き要素により遮蔽されないように配置する方法において、該方法が、
ａ）前記ビデオから、少なくとも１つの所望の看取領域を有する画像を規定するようなフレームを抽出するステップと、
ｂ）前記重ね書き要素に関する前記画像における領域、並びに前記重ね書き要素に関する大きさ、形状及びアスペクト比のうちの少なくとも１つを選択するステップと、
ｃ）前記重ね書き要素の前記選択された領域、並びに前記重ね書き要素の前記大きさ、形状及びアスペクト比のうちの前記少なくとも１つに関し、前記重ね書き要素がどの程度の割合で前記少なくとも１つの所望の看取領域と重なるかを決定するステップと、
ｄ）前記割合が最大の許容される所定の重なり割合より高い場合に、前記画像における前記領域、前記重ね書き要素の前記大きさ、前記重ね書き要素の前記形状及び前記重ね書き要素の前記アスペクト比のうちの少なくとも１つを変更するステップと、
ｅ）前記少なくとも１つの変更に関して、前記重ね書き要素がどの程度の割合で前記少なくとも１つの所望の看取領域と重なるかを決定するステップと、
を有していることを特徴とする方法。
【請求項１８】
重ね書き要素をデジタルビデオの画像内に、前記画像の所望の看取領域が前記重ね書き要素により遮蔽されないように配置する送信装置において、該送信装置が、
デジタルビデオを発生するビデオ発生器と、
前記ビデオから、各々が少なくとも１つの所望の看取領域を有する画像を規定するようなフレームを抽出する抽出器と、
前記フレームの前記画像を解析して、前記フレームの前記画像における所望の看取領域を識別する画像プロセッサと、
重ね書き要素を発生する重ね書き要素発生器と、
前記重ね書き要素を前記フレームの前記画像内に、前記所望の看取領域の遮蔽を最小化するような態様で配置するための位置を決定する重ね書き要素配置器と、
前記ビデオのビデオ信号を、前記重ね書き要素の配置情報と共に送信する送信機と、
を有していることを特徴とする送信装置。
【請求項１９】
請求項１８に記載の送信装置において、前記少なくとも１つの所望の看取領域が顔の領域を含むことを特徴とする送信装置。
【請求項２０】
請求項１８に記載の送信装置において、前記少なくとも１つの所望の看取領域がテキスト領域を含むことを特徴とする送信装置。
【請求項２１】
請求項１８に記載の送信装置において、前記少なくとも１つの所望の看取領域が高動き活動領域を含むことを特徴とする送信装置。
【請求項２２】
請求項１８に記載の送信装置において、前記画像プロセッサは前記フレームの異なる領域における動き活動を測定することを特徴とする送信装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、テレビジョンシステムに関する。特に、本発明は重ね書き要素をビデオ内に適応的に配置する方法及び装置に関する。
【０００２】
【従来の技術】
テレビジョン放送の作成及び表示の間において、ビデオの画像は、これら画像の領域を横切って重ねられる種々の要素を有し得る。斯様な重ね書き要素の典型的な例は、当該画像の通常は下部又は上部に配置される閉じた字幕ウィンドウである。他の重ね書き要素は、表示される人物の見出し、スコアボード、ニューステロップ（ｎｅｗｓ ｔｉｃｋｅｒｓ）及びロゴ等を含み得る。
【０００３】
重ね書き要素の当該画像内における正確な位置は通常はランダムであり、しばしば、テキスト又は人の顔のような看取者により非常に見たいと望まれる画像の領域を妨害する。これは、アナログ領域においては、意味的な特徴を検出し、重ね書き要素の当該画像内での配置を適応的に調整するような実用的な技術が存在しないためである。
【０００４】
従って、閉じた字幕ウィンドウの場合、当該画像の下部又は上部における該ウィンドウの配置は現在のところ手動選択処理によりなされている。結果として、特に生の放送においては、閉じた字幕ウィンドウ又は他の重ね書き題材若しくはオブジェクトは、しばしば、当該画像の所望の領域を横切って重ねられ、これにより斯かる領域を遮蔽（妨害）する。
【０００５】
【発明が解決しようとする課題】
従って、重ね書き要素をビデオの画像内に、該画像の所望の領域が上記要素により遮蔽されないように適応的に配置する方法及び装置が必要とされている。
【０００６】
【課題を解決するための手段】
本発明の一態様によれば、重ね書き要素をビデオの画像内に、該画像の所望の領域が上記要素により遮蔽されないように配置する方法は、前記ビデオから、各々が１以上の所望の看取領域を有し得る画像を規定するようなフレームを抽出するステップを有し、該所望の領域は顔若しくはテキストを検出することにより、又は当該フレームの異なる領域における動き活動を測定することにより識別することができる。各フレームに関し、当該画像内で上記重ね書き要素を配置するための領域が選択され、該選択された領域に関し、該重ね書き要素が上記所望の看取領域と重なる割合が決定される。上記の選択された領域は、複数の所定の位置のうちの１つにおけるランダムに選択された位置とすることができる。上記割合が最大の許容される重なり割合より低い場合、上記重ね書き要素は上記の選択された領域に配置される。もしそうでないなら、上述したように、当該画像における上記所望の看取領域の遮蔽を最小化するような領域が見付かるまで、当該画像における１以上の他の領域が選択され、且つ、評価される。これらの他の領域は、上記他の所定の位置のうちの１つとすることもでき、又は何らかの他の選択方法を用いて選択された位置とすることもできる。他の例として、上記遮蔽は、フレーム内の重ね書き要素の位置を変更する代わりに、該重ね書き要素の大きさ、形状、及び／又はアスペクト比等を変更することにより最小化することもできる。更に、遮蔽は、重ね書き要素の位置を変更すると共に、同時に該重ね書き要素の大きさ、形状、及び／又はアスペクト比等を変更することによっても最小化することができる。
【０００７】
本発明の他の態様によれば、重ね書き要素をデジタルビデオの画像内に、前記画像の所望の看取領域が上記重ね書き要素により遮蔽されないように配置するためのビデオ送信機又はビデオ受信機等の装置は、前記ビデオから、各々が少なくとも１つの所望の看取領域を有し得る画像を規定するようなフレームを抽出する抽出器を有し、上記所望の看取領域は顔若しくはテキストを検出することにより、又は当該フレームの異なる領域における動き活動を測定することにより識別することができる。画像プロセッサは、前記フレームの画像を解析して、前記フレームの画像における所望の看取領域を識別する。重ね書き要素配置器は、前記重ね書き要素を前記フレームの画像内に、前記所望の看取領域の遮蔽を最小化するような態様で配置する。
【０００８】
本発明の利点、性質及び種々の付加的な特徴は、添付図面と関連させて以下に詳細に説明する例示的実施例を考察すれば一層完全に分かるであろう。
【０００９】
【発明の実施の形態】
本発明は、閉じた字幕ウィンドウのような重ね書き要素をビデオの画像内に、看取者にとり相当重要な画像領域が該重ね書き要素により遮蔽されないように適応的に配置する方法及び装置である。本発明の原理を説明する目的で、ここで述べる所望の画像領域とは顔及びテキストを含むものとする。しかしながら、本発明はビデオ画像内の他の重要な画像領域に対しても等しく適用可能であると理解されたい。
【００１０】
閉じた字幕ウインドウに加えて、上記重ね書き要素は、画面上のコマンド、チャンネル識別情報、又はテレビジョン受信機のような表示装置により表示されるビデオ画像を横切って重ねられる如何なる他の要素（典型的には、テキスト的な性質のもの）を含むことができる。また、本発明は、表示される人物の見出し、スコアボード、株式及びニューステロップ（ｎｅｗｓ ｔｉｃｋｅｒｓ）、ロゴ並びに他の画像のような要素を、放送されるべきビデオデータストリームに重ねるテレビジョン放送システムにも適用可能である。
【００１１】
重ね書き要素の適応的配置は、時間的ビデオ区間の代表的フレーム内の顔及びテキスト画像領域（又は他の所望な画像領域）を検出するような従来の顔及びテキスト検出技術を用いて達成することができる。また、重ね書き要素の適応的配置は、時間的ビデオ区間の代表的フレーム内の異なる領域における動き活動を測定するような従来の動き測定技術を用いて達成することもできる。このような技術は、２００１年１月のカリフォルニア州、サン・ホセにおけるマルチメディアデータベースの記憶及び検索に関するＳＰＩＥ会議の会議録における“ビデオ区間における動き活動の強度の自動測定”にＫ． Ｐｅｋｅｒ ａｎｄ Ａ． Ｄｉｖａｋａｒａｎにより、及びＭｏｈａｍｅｄ Ａｂｄｅｌ−Ｍｏｔｔａｌｅｂ他により１９９８年１２月１１日に“デジタル画像における顔を検出する方法”なる名称で出願された米国特許出願第０９／２１０，４１５号に記載されている。これら文献の開示内容は参照することにより本明細書に組み込まれるものとする。この動きに基づく技術によれば、典型的には、動き活動の少ない領域の方が、大きな動き活動を伴う領域よりも重ね書き要素に対して好まれる。動き活動は、圧縮されたＭＰＥＧドメイン又は非圧縮ドメインの何れにおいても計算することができる。圧縮されたビデオの場合、或る領域における動き活動は、該領域における動き補償されたベクトルの大きさの標準偏差として計算することができる。非圧縮ビデオに対しては、或る領域内の動き活動は、オプティカルフローを用いて突き止めることができる。
【００１２】
上述した方法により得られた所望の画像領域のデータは、次いで、本発明において重ね書き要素をフレーム内に配置する最良の態様、即ち当該フレームの所望の画像領域の遮蔽を最小化するような配置の態様を決定するために使用される。
【００１３】
図面の先ず図１のブロック図を参照すると、ビデオにおける重ね書き要素による所望の画像領域の遮蔽を最小化するような、本発明の一実施例による装置１００が示されている。装置１００は、フレーム抽出器１０１、画像プロセッサ１０２及び重ね書き要素ウインドウ配置器１０３を含んでいる。フレーム抽出器１０１は、当該ビデオの時間的ビデオ区間から代表的なフレームを抽出する。画像プロセッサ１０２は、前述した顔及び／又はテキスト検出技術、又は動きに基づく検出技術等の従来の検出技術を用いて、上記フレームを解析し、該フレーム内の重ね書き要素を配置するのに適した領域を識別する。重ね書き要素配置器１０３は該画像領域のデータを使用して、上記重ね書き要素を上記フレーム内に、これらフレーム内の所望の画像領域の遮蔽を最小化するような態様で配置する。図２は、重ね書き要素２０４用の６つの典型的なロケーション又は位置２０３ａ〜２０３ｆを示す例示的なフレーム２００であり、該重ね書き要素は１以上の行の閉じた字幕ウインドウ（１行の閉じた字幕ウインドウが示されている）を有することができる。上部の候補領域２０１における矢印２０３ａないし２０３ｃは、これらロケーションのうちの３つを表し、下部候補領域２０２における矢印２０３ｄないし２０３ｆは、当該フレーム２００のこれらロケーションのうちの他の３つを表している。ロケーション２０３ａないし２０３ｆは、フレーム２００内の所望の画像領域の遮蔽を最小化すべく重ね書き要素２０４を適応的に配置するために使用することができる所定の位置を表している。当該フレーム２００内の他のロケーションも重ね書き要素２０４用に使用することができることに注意されたい。図示のように、重ね書き要素２０４は上部候補領域２０１のロケーション２０３ｂに配置されている。これら６個の位置のうちの最良のものが、本発明の原理に従い、これら位置の各々に関する遮蔽率（ｏｃｃｌｕｓｉｏｎ＿ｒａｔｅ）を計算すると共に各位置を当該位置の遮蔽率に基づいてランク付けすることにより選択される。上記遮蔽率は、閉じた字幕ウインドウ２０４が当該フレーム画像の所望の画像領域又は複数の所望の領域と重なる割合である。最小の可能な遮蔽率を備えると共に上記閉じた字幕ウインドウの目立って急激なフレーム間の移動を防止するような位置が、該閉じた字幕ウインドウを配置するために選択される。当該重ね書き要素のための候補位置は、他の態様として、所定の位置の組を用いずに選択することもできる。例えば、本発明の他の実施例においては、候補位置は、当該画像内の最初の位置から開始して、当該フレーム内の所望の画像領域の遮蔽を最小化するような位置が見付かるまで当該重ね書き要素の位置を或る量だけずらすことにより配置することもできる。候補重ね書き要素位置は当該画像内の何処にでも規定することができることに注意すべきである。例えば、重ね書き要素位置は当該画像の側部上に又は当該画像における話し手の下に配置することもできる。
【００１４】
本発明の他の実施例においては、遮蔽は、当該フレーム内での位置を変える代わりに、当該重ね書き要素の大きさ、形状及び／又はアスペクト比等を変更することにより最小化することもできる。本発明の更に他の実施例においては、遮蔽は、重ね書き要素の位置を変更すると共に、同時に該重ね書き要素の大きさ、形状及び／又はアスペクト比等を変更することにより最小化することもできる。
【００１５】
上記方法は、当該ビデオの各時間的ビデオ区間の代表的フレーム上で実行される。上部又は下部候補領域の各々内でのフレーム間での位置変更は、位置変化を平滑除去することができると共に、これら変化を流動的且つ連続的に見えるようにして、当該重ね書き要素が当該画像内の位置の間で不所望に跳び又は急激に移動するように見えないようにするような何れかの好適なバッファリング技術を用いて漸進的（ｉｎｃｒｅｍｅｎｔａｌｌｙ）に実行することができる。位置、大きさ、形状及び／又はアスペクト比の変化を平滑化するために使用することができる１つの例示的なバッファリング技術は、或る期間にわたる２つの位置、大きさ、形状及び／又はアスペクト比の間の補間を含む。
【００１６】
図３は、図１の装置により実行することができるような、本発明の方法を示すフローチャートである。ステップ３００において、当該ビデオの時間的ビデオ区間に関する代表的フレーム（キーフレーム）が抽出される。所望の領域の検出がステップ３０１において実行され、当該画像における所望の看取領域を含むようなロケーションに関するデータを取得して、当該フレームにおける重ね書き要素を配置するのに適した領域を識別する。顔及び／又はテキスト検出の場合、当該デジタルビデオストリームがＭＰＥＧ４又はＭＰＥＧ７により処理されているなら、顔及び／又はテキストデータは既に利用可能であるので、ステップ３０１は省略することができる。
【００１７】
ステップ３０２において、当該フレームにおける重ね書き要素用の位置、大きさ、形状及び／又はアスペクト比等に関する最初の領域が評価のために選択される。ステップ３０３において、前記所望の画像領域のロケーションに関するデータが使用されて、上記最初の領域の遮蔽率を決定する。例えば顔及びテキスト又は大きな動き活動等の２型式以上の所望の画像特徴からなる画像領域の遮蔽率は、
合成遮蔽率＝Ｃ１＊ｆｅａｔｕｒｅ １＿ｏｃｃｌｕｓｉｏｎ ＋ Ｃ２＊ｆｅａｔｕｒｅ ２＿ｏｃｃｌｕｓｉｏｎ ＋ Ｃ３＊ｆｅａｔｕｒｅ ３＿ｍｏｔｉｏｎ ａｃｔｉｖｉｔｙ ｌｅｖｅｌ
なる式を用いて合成遮蔽率を計算することにより決定することができ、ここで、Ｃ１は当該画像の特徴１（顔）領域の重要度に関する係数又は重み係数であり、ｆｅａｔｕｒｅ １＿ｏｃｃｌｕｓｉｏｎは該特徴１領域の重ね書き要素の現在のロケーションによる重なりの割合であり、Ｃ２は当該画像の特徴２（テキスト）領域の重要度に関する係数又は重み係数であり、ｆｅａｔｕｒｅ ２＿ｏｃｃｌｕｓｉｏｎは該特徴２領域の重ね書き要素の現在のロケーションによる重なりの割合であり、Ｃ３は当該画像の特徴３（高い動き活動）領域の重要度に関する係数又は重み係数である。
【００１８】
上記係数Ｃ１、Ｃ２及びＣ３の使用は、特徴１（顔）、特徴２（テキスト）及び特徴３（動き活動）遮蔽データに対して重要度を割り当てる場合の柔軟性を提供する。例えば、上記所望の画像領域が顔又はテキストのみである場合は、当該重ね書き要素が当該フレーム内の該顔又はテキスト画像と重なる割合だけが計算される必要がある。ステップ３０４において、最初の重ね書き要素領域の遮蔽率が許容可能な所定の閾遮蔽率より大きいかが判定される。もしそうなら、ステップ３０５において、該重ね書き要素の領域が新たな領域に漸進的にシフトされ、ステップ３０３及び３０４が該新たな領域に対して実行される。新たな領域への上記シフトは図２に示すような所定のリストを用いて、又は現在の領域をシフトし、拡縮尺し又は回転することにより実行することができる。この処理は、当該フレームにおける前記所望の画像領域の遮蔽を最小化するような領域が見付かるまで、継続される。上記領域の変化は、前述したように看取者にとり苛立たせるようなフレーム間の急激な変化が防止されるように、なされる。
【００１９】
当該重ね書き要素がフレーム内に、一旦、適切に配置されたなら、ステップ３０６において次の代表的なフレームが処理のために選択される。ステップ３０７においては、当該次のフレームが当該ビデオ内での該重ね書き要素を配置するための最後のフレームであるかが判定される。もしそうなら、当該方法はステップ３０８において停止する。もしそうでないなら、ステップ３０９において、次のフレームにおける最初の領域が選択され、ステップ３０３、３０４等々が実行される。
【００２０】
本発明の原理は、幾つか例を挙げるとテレビジョン受信機、テレビジョンセットトップボックス又はビデオカセットレコーダ等の如何なる型式のビデオ受信装置においても実施化することができる。また、本発明の原理は、例えばテレビジョン放送において使用される装置のようなビデオ送信装置においても実施化することができる。本発明の斯様な実施化は、ソフトウェアにより又はソフトウェア及びハードウェアにより行うことができる。
【００２１】
図４は、本発明の原理により作製された、テレビジョン受信機又はセットトップボックス等の例示的なビデオ受信装置を図示している。該受信装置４１０は、テレビジョン放送信号等の送信されたビデオ信号を受信するように構成されており、該信号の少なくとも１つはテレビジョン放送送信機等の通常のビデオ送信機４０７から送信されたビデオ及び１以上の重ね書き要素を含んでいる。該受信装置は、上記ビデオ信号を受信するためのアンテナ等の何れかの適切な信号受信手段４０６と、当該送信において或るビデオ信号を他のビデオ信号から分離するための、テレビジョン受信機のような同調可能な受信システムを有する信号分離器４０１とを含むことができる。フレーム抽出器４０２は、上記の分離された信号のビデオ部分の時間的ビデオ区間から代表的なフレームを抽出するために設けられている。前述した顔及び／又はテキスト検出技術又は動きに基づく検出技術のような従来の検出技術を用いる画像プロセッサ４０３は、上記フレームを解析し、当該フレーム内の重ね書き情報要素を配置するのに適した領域を識別する。重ね書き要素配置器４０４は、上記画像領域のデータを使用して、重ね書き要素を当該フレーム内に該フレーム内の所望の画像領域の遮蔽を最小化するような態様で配置する。表示装置４０５は、上記重ね書き要素を伴うフレームを表示するために設けられている。該表示装置４０５は、テレビジョン装置の表示スクリーン、コンピュータのモニタ又は液晶表示器等とすることができる。
【００２２】
図５は、本発明の原理により作製された、テレビジョン放送送信機等の例示的な送信装置５００を図示している。該送信装置５００は、ビデオ信号内に１以上の重ね書き要素が、該画像の所望の看取領域が上記１以上の重ね書き要素により遮蔽されないように選択的に配置されたビデオ画像を有するビデオ信号を送信するように構成されている。該送信装置５００は、ビデオ画像を含むビデオを発生するようなビデオ発生器５０１を含んでいる。フレーム抽出器５０２は、ビデオ発生器５０１により発生されたビットストリームの時間的ビデオ区間から代表的フレームを抽出する。前述した顔及び／又はテキスト検出技術又は動きに基づく検出技術のような従来の検出技術を用いる画像プロセッサ５０３は、上記フレームを解析し、当該フレーム内の重ね書き要素を配置するのに適した領域を識別する。重ね書き要素発生器５０５は、当該ビデオの画像内に選択的に配置されるべき１以上の重ね書き要素を発生するために設けられている。重ね書き要素配置器５０４は、上記画像領域のデータを使用して、重ね書き要素を当該フレーム内に配置する位置を、該フレーム内の所望の画像領域の遮蔽を最小化するような態様で決定する。アンテナ、ケーブル分配ネットワーク又は衛星ネットワークのような通常の送信手段５０７に結合された通常の信号送信機５０６は、上記ビデオのビデオ信号を該ビデオの画像内に配置された重ね書き要素（又は複数の要素）と共に、１以上の遠隔配置されたテレビジョン受信装置５０８に送信する。上記重ね書き要素配置器５０４は上記位置を決定し、この情報は実際の画像データと共に送信される。
【００２３】
以上、本発明を上記実施例を参照して説明したが、本発明の趣旨から逸脱すること無しに種々の修正及び変更を実施することができる。従って、斯様な修正及び変更は添付請求項の範囲内に入るものと見なされる。
【００２４】
本発明は以下のように要約することができる。
【００２５】
重ね書き要素をデジタルビデオの画像内に、該画像の所望の看取領域が上記重ね書き要素により遮蔽されないように配置する方法であって、該方法は、各々が１以上の所望の看取領域を有し得る画像を規定するようなフレームを上記ビデオから抽出するステップを含む。各フレームに関し、当該画像において重ね書き要素を配置するのに適した領域が選択され、この選択された領域に関し、該重ね書き要素が上記所望の看取領域と重なる割合が決定される。上記重ね書き要素は、該割合が重なりの最大の許容される所定割合より低ければ上記の選択された領域に配置される。もしそうでないなら、当該画像における１以上の他の領域が選択され、及び／又は当該重ね書き要素の大きさ、形状、アスペクト比が、当該画像における上記所望の看取領域の遮蔽を最小化する位置及び／又は大きさ、形状、アスペクト比が見付かるまで変更される。更に、重ね書き要素をデジタルビデオの画像内に、該画像の所望の看取領域が上記重ね書き要素により遮蔽されないように配置するための、ビデオ受信機又はビデオ送信機のような装置である。斯様な装置において、フレーム抽出器は、各々が少なくとも１つの所望の看取領域を有する画像を規定するようなフレームを上記ビデオから抽出する。画像プロセッサは、上記フレームの画像を解析して、当該フレームの画像における所望の看取領域を識別する。重ね書き要素配置器は、上記重ね書き要素を上記フレームの画像内に、上記所望の看取領域の遮蔽を最小にするような態様で配置する。
【図面の簡単な説明】
【図１】図１は、本発明の一実施例による重ね書き要素配置装置のブロック図である。
【図２】図２は、本発明により処理される時間的ビデオ区間の代表的なフレームである。
【図３】図３は、本発明の一実施例による方法を示すフローチャートである。
【図４】図４は、本発明の一実施例によるビデオ受信装置のブロック図である。
【図５】図５は、本発明の一実施例によるビデオ送信装置のブロック図である。
【図１】
2004521571.tif 000003
【図３】
2004521571.tif 000004
【図４】
2004521571.tif 000005
【図５】
2004521571.tif 000006
【国際公開パンフレット】
2004521571.tif 000007
2004521571.tif 000008
2004521571.tif 000009
2004521571.tif 000010
2004521571.tif 000011
2004521571.tif 000012
2004521571.tif 000013
2004521571.tif 000014
2004521571.tif 000015
2004521571.tif 000016
2004521571.tif 000017
2004521571.tif 000018
2004521571.tif 000019
2004521571.tif 000020
2004521571.tif 000021
2004521571.tif 000022
2004521571.tif 000023
2004521571.tif 000024
【国際調査報告】
2004521571.tif 000025
2004521571.tif 000026
2004521571.tif 000027