(57)【要約】  デジタル・オーディオ／ビデオ・ストリーム内にオーディオ・データが存在するかどうか判定できるようにする装置を含む、方法、装置、およびデバイス。オーディオ・データの存在が判定され、オーディオがミュートされているか、かつ／または決定済みのレベルよりも低い場合、デジタル・オーディオ／ビデオ・ストリーム内のオーディオ・データの存在を示す視覚的表示が生成される。
2019507978.tif 000002
【特許請求の範囲】
【請求項１】
オーディオ／ビデオ受信機デバイス（７）によって実施される、デジタル・オーディオ／ビデオ・ストリームのビデオ・レンダリングに関連付けられたオーディオの状態の視覚的表示を提示する方法であって、
前記デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み（８０１）、オーディオ・データ・レンダリングがミュートされているか（８０２）、または前記デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングの音量が、決定済みのレベルよりも低い場合（８０２）に、前記デジタル・オーディオ／ビデオ・ストリームにおいて前記オーディオ・データの存在の視覚的表示を生成すること（８０３）を含み、前記デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、前記オーディオ・データ・レンダリングがミュートされているか、または前記デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、前記オーディオ・データ・レンダリングの音量が、前記決定済みのレベルよりも低いことを、前記視覚的表示が前記デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する、方法。
【請求項２】
前記デジタル・オーディオ／ビデオ・ストリームの受信と、前記デジタル・オーディオ／ビデオ・ストリーム内でのオーディオの前記存在との間の遅延時間を決定することと、前記視覚的表示を介して前記遅延時間を表示することとをさらに含む、請求項１に記載の方法。
【請求項３】
前記デジタル・オーディオ／ビデオ・ストリーム内での前記オーディオ・データとビデオ・データの同期を検出することと、前記視覚的表示を介して前記同期の検出を表示することとをさらに含む、請求項１または２に記載の方法。
【請求項４】
オーディオ復号が開始した場合、および現在復号されているオーディオ・フレームの再生タイム・スタンプが、前記オーディオ／ビデオ受信機デバイスのシステム・タイム・クロックの現在値を中心とする許容範囲値内にある場合に、前記同期が検出される、請求項３に記載の方法。
【請求項５】
前記視覚的表示はさらに、前記オーディオ・データ・レンダリングがミュートされているとき、前記視覚的表示を介してオーディオ・データ・レンダリングの音量レベルを表示することを含み、前記表示されたオーディオ・データ・レンダリングの音量レベルは、前記オーディオ・データ・レンダリングがミュート解除されると、前記オーディオ・データがレンダリングされることになる音量レベルを、前記デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する、請求項１〜４のいずれか一項に記載の方法。
【請求項６】
オーディオ・デスクランブルがアクセス制御によって許可されているかどうか判定することと、オーディオ・デスクランブルがアクセス制御によって許可されていない場合に、前記視覚的表示を介して表示することとをさらに含む、請求項１〜５のいずれか一項に記載の方法。
【請求項７】
前記許容範囲値が、決定済みの境界内にあるかどうか判定することと、前記許容範囲値が、前記決定済みの境界内にあることを前記視覚的表示を介して表示することとをさらに含む、請求項４〜６のいずれか一項に記載の方法。
【請求項８】
デジタル・オーディオ／ビデオ・ストリームのビデオ・レンダリングに関連するオーディオの状態の視覚的表示を提示する装置であって、
オーディオ・データが前記デジタル・オーディオ／ビデオ・ストリーム内に存在するかどうか判定し、オーディオ・データ・レンダリングがミュートされているかどうか、またはオーディオ・データ・レンダリングの音量が決定済みレベルよりも低いかどうか判定するように構成された制御装置（７０）と、
前記制御装置によって前記判定されるのに従って、前記デジタル・データ・ストリーム内に前記オーディオ・データが存在するという視覚的表示を生成するように構成された視覚的表示生成装置（７３）とを含み、前記デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、前記オーディオ・データ・レンダリングがミュートされているか、または前記デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、前記オーディオ・データ・レンダリングの音量が、前記決定済みのレベルよりも低いことを、前記視覚的表示が前記デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する、装置。
【請求項９】
前記制御装置がさらに、前記デジタル・オーディオ／ビデオ・ストリームの受信と、前記デジタル・オーディオ／ビデオ・ストリーム内でのオーディオの前記存在との間の遅延時間を求めるように構成され、前記視覚的表示生成装置がさらに、前記遅延時間を表示するための視覚的表示を生成するように構成される、請求項８に記載の装置。
【請求項１０】
前記制御装置がさらに、前記デジタル・オーディオ／ビデオ・ストリーム内での前記オーディオ・データとビデオ・データの同期を検出するように構成され、前記視覚的表示生成装置がさらに、前記同期の前記検出を表示するための視覚的表示を生成するように構成される、請求項８または９に記載の装置。
【請求項１１】
オーディオ復号が開始した場合、および現在復号されているオーディオ・フレームの再生タイム・スタンプが、システム・タイム・クロックの現在値を中心とする許容範囲値内にある場合に、前記制御装置がさらに、前記同期を検出するように構成される、請求項１０に記載の装置。
【請求項１２】
前記視覚的表示生成装置はさらに、前記オーディオ・データ・レンダリングがミュートされているとき、前記視覚的表示を介してオーディオ・データ・レンダリングの音量レベルを表示するように構成され、前記表示されたオーディオ・データ・レンダリングの音量レベルは、前記オーディオ・データ・レンダリングがミュート解除されると、前記オーディオ・データがレンダリングされることになる音量レベルを、前記デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する、請求項８〜１１のいずれか一項に記載の装置。
【請求項１３】
前記装置がモバイル・デバイス内に含まれる、請求項８〜１２のいずれか一項に記載の装置。
【請求項１４】
前記装置がセット・トップ・ボックス内に含まれる、請求項８〜１２のいずれか一項に記載の装置。
【請求項１５】
前記装置がデジタル・テレビ内に含まれる、請求項８〜１２のいずれか一項に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
分野
本開示は一般に、ビデオに関連付けられたオーディオを検出する分野に関する。
【背景技術】
【０００２】
背景
セット・トップ・ボックスまたはデジタル・テレビ受信機などのオーディオ／ビデオ受信機の性能をベンチ・テストするときに、テストすべき事柄の１つが、変化する環境下で、また様々なチャネル・ソースおよびオーディオ／ビデオ構成において、チャネル変更を正確に実行することである。たとえば、テスト・ベッド構成用のマルチスクリーン様のセットアップにおいて、多くのオーディオ／ビデオ受信機が同時にテストされる場合、たとえばチャネル変更後に、テストされる全てのオーディオ／ビデオ受信機について、オーディオ・レンダリング機能を１人のテスト・エンジニアが個別に検証するのは困難である。同時に多数のオーディオ・ソースに直面すると、テストされるオーディオ／ビデオ受信機のいずれが、いずれのオーディオを生成するのか特定するのは困難である。オーディオ・スイッチは、テスト・オペレータが、チャネル変更を監視するために、識別されたオーディオ・ソース間で切り替えることができるようにし、また、たとえばチャネル変更後に、オーディオがビデオとともにレンダリングされるかどうか、またいつレンダリングされるかを検証できるようにするのに役立つことがある。しかし、多くの受信機を手動でテストするのは、時間がかかり、冗長である。さらに、テスト・エンジニアは、新規のチャンネルまたは変更されたオーディオ／ビデオ・ソース上で無音が続いている間、チャンネル変更またはオーディオ／ビデオ・ソースの変更が操作されたときに誤って誘導される場合がある。その結果、チャネル変更またはオーディオ／ビデオ・ソース変更プロセスにおいて、オーディオが比較的遅くレンダリングされることになり、テスト・エンジニアは、テストされるオーディオ／ビデオ受信機が適切に機能しないと誤って判断する場合がある。さらに、新規のチャネルのビデオに付随するオーディオ・チャネルを、このビデオ内の動きに直接的かつ視覚的に関係付けることができないとき、テスト・エンジニアは、チャネル変更後のオーディオとビデオの間の同期を検証する（リップする）ことが困難になる場合がある。
【０００３】
動画共有サイトのYouTubeなどで提示されているビデオを視聴する視聴者にとっては、ビデオがオーディオを含んでいるかどうか、またオーディオがどのような音量レベルに設定されているのか知ることは興味深いが、それというのも、かなりの数のビデオがオーディオなしで提示されており、オーディオの音量レベルが標準化されていないからである。
【０００４】
オーディオ／ビデオのレンダリング・デバイスによってレンダリングされたオーディオ／ビデオ・ストリームの視聴者にとって、雑音の多い環境では、またはオーディオがミュートされているときには、オーディオ／ビデオ・ストリーム内のオーディオの存在を検証することが困難である。オーディオがミュート解除されているときに、このオーディオが大音量でレンダリングされることになるとユーザが気づかないとき、ヘッドフォンは、その装着者に深刻な聴力損失を引き起こすことがある。
【０００５】
したがって、ビデオに関連付けられたオーディオの検出を改善する必要がある。
【発明の概要】
【０００６】
概要
本開示は、背景技術のセクションで考察した欠陥のうち少なくともいくつかを軽減することを目的とする。
【課題を解決するための手段】
【０００７】
この目標に向けて、本発明の原理は、オーディオ／ビデオ受信機デバイスによって実施される、デジタル・オーディオ／ビデオ・ストリームのビデオ・レンダリングに関連する、オーディオの状態の視覚的表示を提示する方法を含む。デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングがミュートされているか、またはデジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングの音量が、決定済みのレベルよりも低い場合、デジタル・オーディオ／ビデオ・ストリーム内にオーディオ・データが存在するという視覚的表示が生成される。デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングがミュートされているか、またはデジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングの音量が、決定済みのレベルよりも低いことを、この視覚的表示がデジタル・オーディオ／ビデオ・ストリームの視聴者に通知する。
【０００８】
この方法の一変形実施形態によれば、この方法はさらに、デジタル・オーディオ／ビデオ・ストリームの受信と、デジタル・オーディオ／ビデオ・ストリーム内でのオーディオの存在との間の遅延時間を決定することと、視覚的表示を介してこの遅延時間を表示することとを含む。
【０００９】
この方法の一変形実施形態によれば、この方法はさらに、デジタル・オーディオ／ビデオ・ストリーム内でのオーディオ・データとビデオ・データの同期を検出することと、視覚的表示を介してこの同期の検出を表示することとを含む。
【００１０】
この方法の一変形実施形態によれば、オーディオ復号が開始した場合、および現在復号されているオーディオ・フレームの再生タイム・スタンプが、オーディオ／ビデオ受信機デバイスのシステム・タイム・クロックの現在値を中心とする許容範囲値内にある場合に、同期が検出される。
【００１１】
この方法の一変形実施形態によれば、この方法はさらに、オーディオ・データ・レンダリングがミュートされているとき、視覚的表示を介してオーディオ・データ・レンダリングの音量レベルを表示することを含み、この表示されたオーディオ・データ・レンダリングの音量レベルは、オーディオ・データ・レンダリングがミュート解除されると、オーディオ・データがレンダリングされることになる音量レベルを、デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する。
【００１２】
この方法の一変形実施形態によれば、この方法はさらに、オーディオ・デスクランブルがアクセス制御によって許可されているかどうか判定することと、オーディオ・デスクランブルがアクセス制御によって許可されていない場合に、視覚的表示を介して表示することとを含む。
【００１３】
この方法の一変形実施形態によれば、この方法はさらに、許容範囲値が、決定済みの境界内にあるかどうか判定することと、この許容範囲が、決定済みの境界内にあることを視覚的表示を介して示すこととを含む。
【００１４】
本開示はまた、デジタル・オーディオ／ビデオ・ストリームのビデオ・レンダリングに関連するオーディオの状態の視覚的表示を提示する装置であって、オーディオ・データがデジタル・オーディオ／ビデオ・ストリーム内に存在するかどうか判定し、オーディオがミュートされているかどうか、またはオーディオ・データ・レンダリングの音量がある一定レベルよりも低いかどうか判定するように構成された制御装置を含み、この制御装置によって判定されるのに従って、デジタル・データ・ストリーム内にオーディオ・データが存在するという視覚的表示を生成するように構成された視覚的表示生成装置を含み、デジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングがミュートされているか、またはデジタル・オーディオ／ビデオ・ストリームがオーディオ・データを含み、オーディオ・データ・レンダリングの音量が、決定済みのレベルよりも低いことを、この視覚的表示が前記デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する、装置に関する。
【００１５】
この装置の一変形実施形態によれば、制御装置はさらに、デジタル・オーディオ／ビデオ・ストリームの受信と、デジタル・オーディオ／ビデオ・ストリーム内でのオーディオの存在との間の遅延時間を求めるように構成され、視覚的表示生成装置がさらに、この遅延時間を表示するための視覚的表示を生成するように構成される。
【００１６】
この装置の一変形実施形態によれば、制御装置はさらに、デジタル・オーディオ／ビデオ・ストリーム内でのオーディオ・データとビデオ・データの同期を検出するように構成され、視覚的表示生成装置はさらに、この同期の検出を表示するための視覚的表示を生成するように構成される。
【００１７】
この装置の一変形実施形態によれば、オーディオ復号が開始した場合、および現在復号されているオーディオ・フレームの再生タイム・スタンプが、システム・タイム・クロックの現在値を中心とする許容範囲値内にある場合に、制御装置はさらに、同期を検出するように構成される。
【００１８】
この装置の一変形実施形態によれば、視覚的表示生成装置はさらに、オーディオ・データ・レンダリングがミュートされているとき、視覚的表示を介してオーディオ・データ・レンダリングの音量レベルを表示するように構成され、この表示されたオーディオ・データ・レンダリングの音量レベルは、オーディオ・データ・レンダリングがミュート解除されると、オーディオ・データがレンダリングされることになる音量レベルを、デジタル・オーディオ／ビデオ・ストリームの視聴者に通知する。
【００１９】
この装置の一変形実施形態によれば、制御装置はさらに、オーディオ・デスクランブルがアクセス制御によって許可されているかどうか判定するように構成され、視覚的表示生成装置はさらに、このオーディオ・デスクランブルがアクセス制御によって許可されていない場合に表示するための、視覚的表示を生成するように構成される。
【００２０】
この装置の一変形実施形態によれば、制御装置はさらに、許容範囲値が、決定済みの境界内にあるかどうか判定するように構成され、視覚的表示生成装置はさらに、この許容範囲値が、決定済みの境界内にある場合に表示するための、視覚的表示を生成するように構成される。
【００２１】
この装置の一変形実施形態によれば、この装置はモバイル・デバイス内に含まれる。モバイル・デバイスの例としては、携帯電話、スマートフォン、タブレット、ポータブル・コンピュータ、およびオーディオ／ビデオ受信が可能な任意の携帯デバイスがある。
【００２２】
この装置の一変形実施形態によれば、この装置はセット・トップ・ボックス内に含まれる。
【００２３】
この装置の一変形実施形態によれば、この装置はデジタル・テレビ内に含まれる。
【００２４】
図面の簡単な説明
具体的で非限定的な実施形態の説明を通して、本開示の利点がさらに明らかになろう。本開示の利点を得ることのできる方式を説明するため、添付図面に示してあるこの特定の実施形態を参照することによって、本発明の原理を具体的に説明する。図面は、本開示の例示的な実施形態を示しており、したがって、その範囲を限定するものと考えてはならない。説明してある実施形態を組み合わせて、特定の有利な実施形態を形成することができる。以下の図においては、本開示を不必要に曖昧にしないため、それまでの図において既に説明したアイテムと同じ参照番号を有するアイテムを再度説明することはない。
【００２５】
以下の図を参照して、例示的な実施形態を説明する。
【図面の簡単な説明】
【００２６】
【図１】従来技術のオーディオ／ビデオ受信機である。
【図２】本発明の原理による例示的な視覚的表示である。
【図３】本発明の原理による、さらなる例示的な視覚的表示である。
【図４】本発明の原理による、さらなる例示的な視覚的表示である。
【図５】本発明の原理を実施するピクチャ・イン・ピクチャ（ＰＩＰ）を有する、オーディオ／ビデオ受信機の一実施形態である。
【図６】本発明の原理を実施するオーディオ／ビデオ受信機の一実施形態である。
【図７】本発明の原理を実施するデバイスの一変形実施形態である。
【図８】本発明の原理の特定の実施形態によるフローチャートである。
【発明を実施するための形態】
【００２７】
詳細な説明
図１は、従来技術のオーディオ／ビデオ受信機である。オーディオ／ビデオ受信機１は、たとえば、インターネット・プロトコル（ＩＰ）セットトップ・ボックス（ＳＴＢ）に含まれ、デジタル・テレビ、またはスマートフォンもしくはタブレットなどのモバイル・デバイスに含まれる。オーディオ／ビデオ受信機１は、有線ネットワークまたは無線ネットワーク１００に接続されたネットワーク・インターフェース１０１を介して、ソース（図示せず）からデジタル・データ・ストリーム１０２を受信する。デジタル・データ・ストリーム１０２は、デマルチプレクサ１０３（「ｄｅｍｕｘ」）において多重分離され、このデマルチプレクサは、デジタル・データ・ストリームに含まれるパケットを抽出し、オーディオに関連するパケット１０４およびビデオに関連するパケット１０５を出力する。オーディオ・パケットはオーディオ・バッファ１０６に供給され、ビデオ・パケットはビデオ・バッファ１０８に供給される。ビデオ・バッファの出力において、ビデオ再生タイム・スタンプ（ＰＴＳ）パケットが内部システム・タイム・クロック（ＳＴＣ）１１０に供給される。このＳＴＣは、通常、デジタル・データ・ストリームを符号化するのに使用されるエンコーダ・クロックの周波数に近接した周波数でインクリメントされるカウンタである。ＡＶストリームに含まれるプログラム・クロック・リファレンス（ＰＣＲ）パケットは、フロントエンド、たとえば、衛星テレビまたはデジタル地上波テレビ（ＤＴＴ）の受信用のチューナ・フロントエンドを有するＡＶ受信機での、デコーダ／エンコーダの連続同期用に使用される。オーディオＰＴＳおよびビデオＰＴＳは、ＰＣＲに関連するタイム・スタンプ値を含み、デジタル・データ・ストリーム内のＰＴＳに続くＰＣＲオーディオ・パケットまたはビデオ・パケットのいずれの値で提示（または「レンダリング」）すべきかを示すタイミング・パケットである。しかし、ＩＰ受信機においては、ＰＣＲパケットは、初期のデコーダ／エンコーダ同期には使用されるが、ＩＰ配信ネットワークの非同期特性によってもたらされる移送ジッタによって技術的に実行不可能なので、連続的なデコーダ／エンコーダ同期には使用されない。ＩＰオーディオ／ビデオ受信機１では、デコーダ・クロックとエンコーダ・クロックを同期させるために、受信済みのＰＣＲ１０７の値で一度（たとえばチャネル変更中に）、ＳＴＣを初期化する。ＳＴＣ１１０は、ＳＴＣカウンタ値１１７を出力する。オーディオ・パケット１１２が、オーディオ・バッファ１０６からオーディオ・デコーダ１１９に入力される。ビデオ・パケットが、ビデオ・バッファ１０８からビデオ・デコーダ１２１に入力される。さらに、オーディオＰＴＳ１０９が、オーディオ・バッファ１０６からオーディオ同期比較器１１３に入力される。さらに、ビデオＰＴＳ１１１が、ビデオ・バッファ１０８からビデオ同期比較器１１４に入力される。ＳＴＣ１１０からの値が、オーディオ同期比較器１１３およびビデオ同期比較器１１４に入力される。オーディオ同期比較器１１３は、受信したオーディオＰＴＳ１０９とＳＴＣ値１１７を比較する。受信したオーディオＰＴＳ１０９がＳＴＣ値１１７に等しい場合、オーディオ同期比較器１１３は、制御信号１１６をオーディオ・デコーダ１１９に出力し、このデコーダが復号済みオーディオ１２２を出力する。ビデオの場合にもこれは同じであり、ビデオ同期比較器１１４は、受信したビデオＰＴＳ１１１とＳＴＣ値１１７を比較する。受信したビデオＰＴＳ１１１がＳＴＣ値１１７に等しい場合、オーディオ同期比較器１１３は、制御信号１１８をビデオ・デコーダ１２１に出力し、このデコーダが復号済みビデオ１２３を出力する。最後に、オーディオ／ビデオ・ドライバ１２４が、オーディオ／ビデオを変換し、増幅し、かつ適応させて、オーディオ／ビデオ出力１２４上に出力する。制御装置１２７が、デバイス１の動作を制御する。制御装置１２７は、チャネル変更コマンド、またはオーディオのミュート／ミュート解除／音量制御のコマンドなど、入力制御コマンド１２８を受信する。制御コマンド１２８がチャネル変更コマンドである場合、制御装置は、このチャネルのマルチキャストＩＰアドレスに加わるように、ネットワーク・インターフェース１０１に命令し、オーディオ・ストリームおよびビデオ・ストリームに対応するＰＩＤをフィルタリングするように、デマルチプレクサ１０３に命令する（１２６）。制御コマンド１２８がミュート、ミュート解除、または音量調節のコマンドである場合、制御装置は、オーディオ出力音量をミュート、ミュート解除、または制御するように、ＡＶドライバ１２０に命令する（１２９）。任意選択的に、受信機１は、たとえば、触覚スクリーン、マウス、キーボード、および／または遠隔制御デバイスからのユーザ・コマンドを受信するための、入力インターフェース（図示せず）を含む。
【００２８】
背景技術のセクションで簡潔に考察したように、受信機１などのオーディオ／ビデオ受信機の性能をベンチ・テストするときに、テストすべき事柄の１つは、変化する環境下で、また様々なチャネル・ソースおよびオーディオ／ビデオ構成において、チャネル変更、またはオーディオ／ビデオ・ソースの変更を正確に実行することである。ビデオに付随するオーディオの存在と、ビデオのレンダリングに対するオーディオのレンダリングの遅延と、チャネル変更後またはオーディオ／ビデオ・ソース変更後での、オーディオ・リップ同期とビデオ・レンダリングの間の遅延とを検証することが望ましい場合がある。たとえば、テスト・ベッド構成用のマルチスクリーン様のセットアップにおいて、多くのオーディオ／ビデオ受信機が同時にテストされる場合、テストされる全てのオーディオ／ビデオ受信機について、チャネル変更中またはオーディオ／ビデオ・ソースの変更中に、オーディオ・レンダリング機能を１人のテスト・エンジニアが個別に検証するのは困難である。さらに、テスト・エンジニアは、新規のチャンネルまたは新規のソース上で無音が続いている間、この変更が操作されたときに誤って誘導される場合がある。これにより、変更プロセスにおいて、オーディオは相対的に遅れてレンダリングされる。次いで、テスト・エンジニアは、オーディオのレンダリングがあまりにも遅く、テスト中のオーディオ／ビデオ受信機が誤動作していると、誤って判断する場合がある。さらに、新規のチャネル／ソースのビデオに付随するオーディオを、表示されるビデオに直接的かつ視覚的に関連付けることができない場合、チャネル／ソースを変更した後にオーディオとビデオの間の同期を検証することは困難になる場合がある。YouTubeのようなアプリケーションを用いてビデオ・ソースを変更または選択するとき、かなりの数のビデオ・ソースが、関連付けられたオーディオを含んでおらず、オーディオ・レベルが標準化されていないので、ユーザが、関連付けられたオーディオの存在を判定し、音量レベル調整を訂正することは困難である。オーディオ／ビデオのレンダリング・デバイスによってレンダリングされたオーディオ／ビデオ・ストリームの視聴者にとって、雑音の多い環境では、またはオーディオがミュートされているときには、オーディオ／ビデオ・ストリーム内のオーディオの存在を検証することが困難である。ヘッドフォンは、オーディオがミュート解除されているときに、このオーディオが大音量でレンダリングされることになるとユーザが気づかないとき、その装着者に深刻な聴力損失を引き起こすことがある。オーディオがスピーカ・セットにレンダリングされるときに公衆環境においてオーディオ／ビデオ・ストリームを見るとき、大音量のオーディオをミュート解除することが視聴者にとって当惑するものとなる場合もある。
【００２９】
以下に記載された本発明の原理の実施形態によって、前述の欠点のうち少なくともいくつかを克服できるようになる。
【００３０】
図２は、本発明の原理による例示的な視覚的表示である。アイコン２０は、×印のついたラウドスピーカ２０１を示すことによって、オーディオがミュートされていることを視覚的に示す。アイコン２１は、オーディオがミュートされていることを示しており、×印のついたラウドスピーカのそばに音波２０２を示すことによって、オーディオ・データが存在することをさらに示している。アイコン２２は、オーディオがミュートされておらず、ただし音量がある一定の（決定済みの）レベルよりも低く、たとえば、低すぎて聞き取れないレベルに設定されていることを視覚的に示しており、低い音量指示で音量ゲージを表示する。アイコン２３は、オーディオがミュートされておらず、決定済みのレベルよりも音量が低く設定され、オーディオの存在が検出されたことを視覚的に示す。音量表示は、音量ゲージなしの、音波のみで実現することもでき、たとえば、最大３つのうち１つだけの音波の表示は、低レベルのオーディオを意味し、２つの音波の表示は、平均レベルのオーディオを示し、３つの音波の表示は、高レベルのオーディオを示す。オーディオがミュートされている場合、音波の数の表示は、視聴者がオーディオをミュート解除することになるときにオーディオがレンダリングされる際のオーディオの音量レベルを視聴者に示すものである。これにより、たとえば、視聴者は、オーディオ音量の高いときにミュート解除する前にこのオーディオ音量を下げ、それによって聴覚損傷、聴覚不快感、もしくは公の前で恥をかくのを避けることができ、またはそれとは反対に、ミュート解除する前に低いオーディオ音量を上げて、オーディオがミュート解除されるときに聞こえるようにすることができると、視聴者が予測できるようになる。あるオーディオ／ビデオ・ストリームから別のオーディオ／ビデオ・ストリームに変更するとき、またはある入力ソースから別の入力ソースに変更するとき、この機能が特に有利である。たとえば、デジタル・テレビ受信機のユーザは、自分のスマートフォンをデジタル・テレビ受信機のＵＳＢまたはＨＤＭＩインターフェースに接続し、デジタル・テレビ受信機に接続されたホーム・シネマを介して自分のスマートフォンに記憶されたオーディオを再生してもよい。スマートフォンのオーディオ出力の音量レベルは低くてもよく、ユーザは、ホーム・シネマのオーディオ音量を所望のレベルにまで上げてもよい。ユーザは、かかってきた電話を受信すると、デジタル・テレビ受信機のオーディオをミュートする。電話に応答した後、ユーザは、自分のデジタル・テレビでの放送チャンネルに切り替える。本発明の原理の一実施形態による視覚的表示は、オーディオがミュートされ、高レベルに設定されることをユーザに通知することになる。ユーザは、ここで、オーディオをミュート解除する前に音量レベルを下げることができる。記述された条件（たとえば、オーディオが存在し、かつオーディオがミュートされ、オーディオが存在し、かつオーディオ音量レベルが決定済みのレベルよりも低い）の下で視覚的表示を生成することにより、有利には、記述された条件が適用されないときに視覚的表示でビデオ・レンダリングを邪魔しないようにし、それによって、視覚的表示を通��て視聴者に警告する際の効率を高める。
【００３１】
図３は、本発明の原理による視覚的表示のさらなる例である。アイコン３０は、音声がミュートされ、音声の存在が検出されないことを示し、×印のついたラウドスピーカのみが示してある。アイコン３１は、オーディオがミュートされていること（×印のついたラウドスピーカ）、オーディオの存在が検出されていること（オーディオ波３１１）、およびチャンネル／ソース変更後のデジタル・データ・ストリームの受信と、オーディオ・データとビデオ・データの同期の検出との間の遅延時間３１２を示す。アイコン３２は、オーディオがミュートされていないこと、オーディオの存在が検出されていないこと（ラウドスピーカに×印がついていない）、および、決定済みのレベル（音量ゲージ３２１）よりも低いレベル、たとえば聞き取れないレベルに、音量が設定されていることを示す。アイコン３３は、オーディオがミュートされていないが（ラウドスピーカに×印がついていない）、これまでに述べた決定済みのレベル（音量ゲージ３３２）を下回る低いレベルに設定されていること、オーディオの存在が検出されていること（音波３３１）を示し、チャネルまたはソースの変更後のデジタル・オーディオ／ビデオ・ストリームの受信と、オーディオ・データとビデオ・データの同期の検出との間の遅延時間３３３をさらに示す。
【００３２】
図４は、本発明の原理による、さらなる例示的な視覚的表示である。アイコン４０は、音量がミュートされている間に増幅器の音量が非常に高いレベルに設定されていることを、音量ゲージ４００の高レベルで示している。このアイコンを用いて、本発明の原理を統合するデバイスのユーザは、オーディオがミュート解除されている場合に、非常に高い音量で音がレンダリングされることになると通知される。これが望ましくない場合、たとえば、聴覚損傷を避けるため、ユーザは、オーディオをミュート解除する前にオーディオ増幅器の音量を調整することができる。
【００３３】
図５は、本発明の原理を実施するピクチャ・イン・ピクチャ（ＰＩＰ）を有する、オーディオ／ビデオ受信機の一実施形態である。要素５２は、第１のソース、たとえばオーディオ／ビデオ受信機に含まれるデジタル地上波受信機から受信されるビデオの画像である。要素５０は、第２のソース、たとえばオーディオ／ビデオ受信機の外部入力に接続された衛星受信機から受信されるビデオの画像である。オーディオ／ビデオ受信機は、ソースのいずれかの間でオーディオ対象を切り替えることを可能にする。すなわち、対象が第１のソースに設定される場合、この第１のソースに関連付けられたオーディオがレンダリングされる。対象が第２のソースに設定される場合、この第２のソースに関連付けられたオーディオがレンダリングされる。図５の例では、対象が第２のソースに設定されている。したがって、第１のソースのオーディオの視覚的表示５３は灰色表示され、第２のソースに関連付けられたオーディオの視覚的表示５１は灰色表示されていない。第１のオーディオ・ソースにおいて、視覚的表示５３は、たとえば、対象が別のソースに設定されていることを示すためにこの視覚的表示が灰色表示されている場合でも、オーディオが存在していてもミュートされていることを示す。第２のソースにおいて、アイコン５１は、オーディオが存在していてもミュートされていることを示す。ピクチャ・アサイド・ピクチャ（ＰＡＰ）など、他の複数の画面構成にも同じ原理を適用することができる。
【００３４】
図６は、本発明の原理を実施するオーディオ／ビデオ受信機デバイスの一実施形態である。図１の従来技術のオーディオ／ビデオ受信機について既に考察した要素に加えて、このオーディオ／ビデオ受信機デバイス６は、オーディオ存在監視装置６００を含む。オーディオ存在監視装置６００は、制御装置１２７から第１の入力信号６０１を受信する。この入力信号により、オーディオがミュートされているか、ミュート解除されているか、また音量がどのレベルに設定されているか、オーディオ存在監視装置６００が判定できるようになり、その結果、このオーディオ存在監視装置６００は、オーディオ・レベルが所定のレベル、たとえば聞き取れないレベルよりも低く設定されているかどうか判定することができる。オーディオ存在監視装置６００は、オーディオ同期比較器１１３から第２の入力信号６０２を受信する。これにより、オーディオ存在監視装置は、オーディオ・データが存在し、同期しているかどうか判定することができるようになる。オーディオ存在監視装置６００の出力は、オーディオ／ビデオ・ドライバ１２０に接続されて、本発明の原理による視覚的表示を生成する。一変形実施形態によれば、オーディオ存在監視装置６００は、制御装置１２７からさらなる入力を受信して、チャネル変更をこの制御装置に通知する。さらなる変形実施形態によれば、オーディオ存在監視装置６００は、クロック・ユニット（図示せず）、およびネットワーク・インターフェース１０１からさらなる入力を受信し、これにより、オーディオ存在監視装置６００は、デジタル・データ・ストリームの受信と、関連するオーディオの存在との間の遅延時間を決定できるようになる。さらなる変形実施形態によれば、オーディオ存在監視装置は、ＳＴＣ１１０からの入力をさらに受信し、現在復号済みのオーディオ・フレームの再生タイム・スタンプが、ＳＴＣの現在値を中心とする許容範囲値内にあるかどうか判定できるようにし、それにより、関連付けられたオーディオとビデオとの間の同期を検出できるようにする。許容範囲値は要求条件に依存し、たとえば、Dolby（著作権）の認証においては、この許容範囲値は、−１０〜１５ｍｓの最大範囲に設定され、基本的なリップ同期においては、この許容範囲値は、最大−５０〜＋５０ｍｓの範囲に設定される。さらなる変形実施形態によれば、オーディオ遅延が、ある一定の境界内であるかどうか示すためにさらなる情報が表示される。たとえば、図２〜図４に示すアイコンのうちの１つでは、たとえば、Dolby認証について考察した許容範囲内にあるオーディオ／ビデオ遅延（ＳＴＣ値と比較したオーディオＰＴＳ）について、高品質のオーディオ／ビデオ同期を示す情報がさらに表示される。これまでに考察した変形実施形態のいずれかと組み合わせたさらなる変形形態によれば、オーディオ存在監視装置６００は、アクセス制御機構を用いて保護されているデジタル・ストリームのデスクランブル／暗号解読用の制御アクセス（ＣＡ）モジュールからの入力をさらに受信する。これにより、この装置は、オーディオ・デスクランブルが許可されているかどうか検出し、オーディオをデスクランブルできるときに、ビデオに関連付けられたオーディオの存在を示すことが��きるようになる。あるいは、オーディオの存在を示すことはできるが、デスクランブルがアクセス制御モジュールによって許可されない場合には、デスクランブルが許可されないことを追加表示が示す。この追加表示は、施錠保護、またはロックされたアクセスを示唆する他の任意の記号の形をとることができる。
【００３５】
本発明の原理による装置は、たとえば、モバイル・デバイス、セット・トップ・ボックス、またはデジタル・テレビに実装することができる。
【００３６】
図７は、本発明の原理を実施するデバイス６の一変形実施形態である。このデバイスは、中央処理装置すなわちＣＰＵ７０、ネットワーク・インターフェース７４、入力インターフェース７５、クロック・ユニット７６、不揮発性メモリ７１、揮発性メモリ７２、およびオーディオ／ビデオ・ドライバ・ユニット７３を含む。これらの要素全てが、内部のデータ通信バス７７に接続されている。入力インターフェース７５は、チャネル変更コマンドなどの入力コマンドを受信する。ネットワーク・インターフェース７４は、デジタル・オーディオ／ビデオ・ストリームを受信する。中央処理装置７０は、受信したオーディオ／ビデオ・ストリーム内にオーディオ・データが存在するかどうか判定するように構成され、さらに、オーディオがミュートされているかどうか、かつ／またはある一定レベルよりも低いかどうか判定して、オーディオ／ビデオ・ドライバ７３を使用して適切な視覚的表示を生成するように構成される。任意選択的に、この適切な視覚的表示は、専用プロセッサを備えたグラフィックス・カードなど、特定のグラフィックス・レンダリング・デバイスによって生成される。本発明の原理による方法を実施するコンピュータ・プログラム命令は、たとえば不揮発性メモリ７１に記憶され、現在のボリューム・レベルまたはミュート／ミュート解除の設定など一時的な変数の値は、揮発性メモリ７２に記憶される。
【００３７】
図８は、本発明の原理による方法の特定の実施形態によるフローチャートである。第１のステップ８００は、この方法に使用される変数およびパラメータが初期化される、初期化ステップである。ステップ８０１では、受信したデジタル・オーディオ／ビデオ・ストリーム内にオーディオ・データが存在するかどうか判定される。オーディオ・データが存在する場合、オーディオがミュートされているかどうか、かつ／またはある一定レベルよりも低いかどうか、ステップ８０２において検証される。このレベルは、たとえば決定済みのレベル、たとえば低いオーディオ・レベルである。あるいは、このレベルは、周囲雑音、たとえば、周囲雑音の存在について低いとみなされるオーディオ・レベルに従って決定される。たとえば、ある一定レベルの周囲雑音を考慮すると、オーディオ・レベルが低すぎて明瞭に聞き取れないと考えられる。オーディオがミュートされているか、かつ／または決定済みのレベルよりも低い場合、オーディオ／ビデオ・ストリーム内のオーディオ・データの存在の視覚的表示がステップ８０３で生成され、この方法はステップ８０１に戻る。
【００３８】
当業者には理解されるように、図面内の要素によっては、全ての実施形態では使用されず、または必要でないこともある。動作によっては、並列に実行してもよい。図示および／または説明したもの以外の変形実施形態も実現可能である。
【００３９】
当業者には理解されるように、本発明の原理の態様は、システム、方法、またはコンピュータ読取り可能な媒体として実施することができる。したがって、本発明の原理の態様は、もっぱらハードウェアの実施形態、もっぱらソフトウェアの実施形態（ファームウェア、常駐ソフトウェア、マイクロコードなどを含む）、または、本明細書では全て一般に「回路」、「モジュール」、もしくは「システム」と定義することのできる、ハードウェアとソフトウェアの態様を組み合わせた実施形態の形をとることができる。さらに、本発明の原理の態様は、コンピュータ読取り可能な記憶媒体の形をとることができる。１つまたは複数のコンピュータ読取り可能な記憶媒体の任意の組合せを利用することができる。
【００４０】
したがって、たとえば、本明細書において提示された図は、本開示の原理を実施する例示的なシステム構成要素および／または回路の概念図を表すことが、当業者には理解されよう。同様に、任意のフローチャート、流れ図、状態遷移図、擬似コードなどは、実質上コンピュータ読取り可能な記憶媒体で表すことができ、したがって、コンピュータまたはプロセッサが明瞭に示してあろうとなかろうと、そうしたコンピュータまたはプロセッサによって実行することができる様々なプロセスを表すことが理解されよう。
【００４１】
コンピュータ読取り可能な記憶媒体は、１つまたは複数のコンピュータ読取り可能な媒体に実装され、コンピュータによって実行可能であるコンピュータ読取り可能なプログラム・コードが実装された、コンピュータ読取り可能なプログラム製品の形をとることができる。本明細書で使用されるコンピュータ読取り可能な記憶媒体は、その内部に情報を記憶する固有の能力、ならびにそこから情報を検索する固有の能力を考慮すれば、持続的な記憶媒体とみなされる。コンピュータ読取り可能な記憶媒体は、たとえば、電子、磁気、光学、電磁気、赤外線、もしくは半導体のシステム、機器、もしくはデバイス、またはそれらの任意の適切な組合せとすることができるが、それだけには限定されない。本発明の原理を適用することのできるコンピュータ読取り可能な記憶媒体のより具体的な例を示しているが、当業者には容易に理解されるように、以下は単に例示的なものであり、網羅するものではないことを理解されたい。すなわち、ハード・ディスク、リードオンリ・メモリ（ＲＯＭ）、消去可能プログラマブル・リードオンリ・メモリ（ＥＰＲＯＭまたはフラッシュ・メモリ）、ポータブル・コンパクト・ディスク・リードオンリ・メモリ（ＣＤ−ＲＯＭ）、光記憶デバイス、磁気記憶デバイス、またはそれらの任意の適切な組合せである。
【図１】
2019507978.tif 000003
【図２】
2019507978.tif 000004
【図３】
2019507978.tif 000005
【図４】
2019507978.tif 000006
【図５】
2019507978.tif 000007
【図６】
2019507978.tif 000008
【図７】
2019507978.tif 000009
【図８】
2019507978.tif 000010
【国際調査報告】
2019507978.tif 000011
2019507978.tif 000012
2019507978.tif 000013