(57)【要約】  ビデオセグメントは、ディスプレイ明るさを制御してそれぞれのセグメントディスプレイの間に、電力消費を低減するために使用されることができるディスプレイ調整情報が内蔵されたＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージがあるペイロードユニット別に伝送される。ディスプレイ調整情報は、ピクセル明るさを最大にスケーリングし、それによって液晶ディスプレイ用バックライティングを低減するか、ＯＬＥＤディスプレイのための供給電圧を調整するために使用されることができる最大ピクセル明るさを少なくとも含む。ディスプレイ調整情報は最小ピクセル明るさ、ヒストグラムステップサイズ、及びスケーリング方法のインジケータをオプションとして含み得る。
2015520406.tif 000002
【特許請求の範囲】
【請求項１】
方法であって、
ビデオセグメントのデータを受信するステップと、前記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含み、
前記ビデオセグメントのディスプレイの間に、前記ＳＥＩメッセージからの前記ディスプレイ調整情報に基づいてディスプレイのための少なくとも１つのディスプレイパラメータを調整するステップとを含むことを特徴とする方法。
【請求項２】
バックライティングされる液晶ディスプレイ（ＬＣＤ）上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいてピクセルのピクセル明るさ及びバックライティング明るさをスケーリングするステップをさらに含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記バックライティングされたＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値及び最小ピクセル明るさ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするステップをさらに含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記ＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値、前記最小ピクセル明るさ値、及びピクセルヒストグラムステップサイズ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするステップをさらに含むことを特徴とする請求項３に記載の方法。
【請求項５】
有機発光ダイオード（ＯＬＥＤ）ディスプレイ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいて供給電圧をスケーリングするステップをさらに含むことを特徴とする請求項１に記載の方法。
【請求項６】
システムであって、
ビデオセグメントのデータを受信するように構成された受信器と、前記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含むように構成され、
前記ビデオセグメントのディスプレイの間に、前記ＳＥＩメッセージからの前記ディスプレイ調整情報に基づいてディスプレイのための少なくとも１つのディスプレイパラメータを調整するように構成されたプロセッサとを含むことを特徴とするシステム。
【請求項７】
前記プロセッサは、バックライティングされる液晶ディスプレイ（ＬＣＤ）上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいてピクセルのピクセル明るさ及びバックライティング明るさをスケーリングするように構成されることを特徴とする請求項６に記載のシステム。
【請求項８】
前記プロセッサは、
前記バックライティングされたＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値及び最小ピクセル明るさ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするように構成されることを特徴とする請求項７に記載のシステム。
【請求項９】
前記プロセッサは、
前記バックライティングされたＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値、前記最小ピクセル明るさ値、及びピクセルヒストグラムステップサイズ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするように構成されることを特徴とする請求項８に記載のシステム。
【請求項１０】
前記プロセッサは、
有機発光ダイオード（ＯＬＥＤ）ディスプレイ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいて供給電圧をスケーリングするように構成されることを特徴とする請求項６に記載のシステム。
【請求項１１】
請求項６に記載のシステムを含むモバイル通信装置であって、
前記システムは、基地局から無線通信を通じてビデオセグメントのデータを受信するように構成されることを特徴とするモバイル通信装置。
【請求項１２】
請求項６に記載のシステムを含むタブレットであって、
前記システムは、ネットワークから無線通信を通じてビデオセグメントのデータを受信するように構成されることを特徴とするタブレット。
【請求項１３】
方法であって、
伝送するビデオセグメントのデータをフォーマットするステップを含み、前記フォーマットされたデータは、
ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ及び
前記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含むことを特徴とする方法。
【請求項１４】
システムであって、
伝送するビデオセグメントのデータをフォーマットするように構成されたビデオサーバを含み、前記フォーマットされたデータは、
ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ及び
前記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含むことを特徴とするシステム。
【請求項１５】
方法であって、
伝送するビデオセグメントのデータを受信するステップと、前記データは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ及び前記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含み、
前記ビデオセグメントがディスプレイされるべき装置に前記データを伝送するステップとを含むことを特徴とする方法。
【請求項１６】
前記ディスプレイ調整情報は、
最大ピクセル明るさ値、最小ピクセル明るさ値及びピクセル明るさヒストグラムステップサイズ値のうち１つ以上を含むことを特徴とする請求項１１に記載の方法、請求項６に記載のシステム、請求項１３に記載の方法、請求項１４に記載のシステム、又は請求項１５に記載の方法。
【請求項１７】
前記ディスプレイ調整情報は、
明るさを維持するスケーリング方法、コントラストを維持するスケーリング方法、及び認知的無損失スケーリング方法から選択されたスケーリング方法を示す識別子を含むことを特徴とする請求項１１に記載の方法、請求項６に記載のシステム、請求項１３に記載の方法、請求項１４に記載のシステム、又は請求項１５に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、無線モバイル通信装置のエネルギー消費減少に関し、特に、無線通信装置上にディスプレイされるビデオコンテンツに対するコンテンツベースディスプレイ調整制御に関する。
【背景技術】
【０００２】
最近では、モバイル装置上のディスプレイ解像度は、７２０ｐ又はそれ以上のスーパ液晶ディスプレイ（ｌｉｑｕｉｄ  ｃｒｙｓｔａｌ  ｄｉｓｐｌａｙ：ＬＣＤ）又は有機発光ダイオード（ｏｒｇａｎｉｃ  ｌｉｇｈｔ  ｅｍｉｔｔｉｎｇ  ｄｉｏｄｅ：ＯＬＥＤ）ディスプレイがスマートフォン及びタブレットの主流となるか又は主流となる程まで大きく向上した。しかしながら、そのような高いディスプレイ解像度は、レンダリング、特に、高周波数フレームバッファリング及びディスプレイパネルリフレッシュが必須であるビデオに対しては、より多くのエネルギーを要求する。
【０００３】
ＬＣＤディスプレイの場合に、電力消費は、バックライティング明るさレベルの単調関数であり、ＯＬＥＤディスプレイの場合に、電力消費は、供給電圧及びディスプレイコンテンツ自体によって制御される。明るさの制御は、すでに一部のモバイル装置上で具現され、そのような制御は、通常、新たな仕事を付与する前に、すなわち、ビデオの再生開始の前に適応されなければならない。例えば、明るさは、ビデオを視聴する前に１００％、５０％、又は２５％に設定されることができるが、ビデオ再生を妨害しなくては動的に変更されることができない。また、電力消費がＯＬＥＤに対する供給電圧及び入力イメージにより決定されるので、現在の具現例は、電圧を調整するメカニズムを提供していない。
【０００４】
したがって、この技術分野では、ＬＣＤディスプレイバックライティング明るさ又はＯＬＥＤ供給電圧がディスプレイされるコンテンツに従って調整されることができるようにしてディスプレイエネルギーを大きく節減することによりモバイル装置ディスプレイを改善する必要がある。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明は、従来に発生される上述した問題点を解決するためのもので、ディスプレイ電力を効率的に低減するための方法及び装置を提供する。
【課題を解決するための手段】
【０００６】
本発明の一様態によれば、ビデオセグメントのデータを受信するステップと、上記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含み、上記ビデオセグメントのディスプレイの間に、前記ＳＥＩメッセージからの上記ディスプレイ調整情報に基づいてディスプレイのための少なくとも１つのディスプレイパラメータを調整するステップとを含む方法が提供される。
【０００７】
本発明の他の様態によれば、ビデオセグメントのデータを受信するように構成された受信器と、上記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含み、上記ビデオセグメントのディスプレイの間に、前記ＳＥＩメッセージからの上記ディスプレイ調整情報に基づいてディスプレイのための少なくとも１つのディスプレイパラメータを調整するように構成されたプロセッサとを含むシステムが提供される。
【０００８】
本発明のさらに他の様態によれば、伝送するビデオセグメントのデータを受信するステップを含み、上記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ、及び上記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含む方法を提供する。
【０００９】
本発明のまたさらに他の様態によれば、伝送するビデオセグメントのデータをフォーマットするように構成されたビデオサーバを含み、上記フォーマットされたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ、及び上記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含むシステムが提供される。
【００１０】
本発明のまたさらに他の様態によれば、伝送するビデオセグメントのデータを受信するステップと、上記データは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ、及び上記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含み、上記ビデオセグメントがディスプレイされるべき装置に上記データを伝送するステップとを含む方法が提供される。
【００１１】
本発明のより完全な理解及びそれに従う利点は、添付された図面とともに考慮すれば、後述する詳細な説明を参照してより容易に理解できる。また、図面中、同一の参照符号は、同一であるか又は類似した構成要素を示す。
【図面の簡単な説明】
【００１２】
【図１Ａ】本発明の１つ以上の実施形態によって内部の装置が動的コンテンツベースディスプレイ電力低減を実現できるようにするネットワークを示すハイレベル図である。
【図１Ｂ】本発明の一実施形態によって動的コンテンツベースディスプレイ調整及び対応する電力低減が具現され得る図１Ａのネットワークからの無線装置の前面図である。
【図１Ｃ】図１Ｂに示した無線装置の機能的構成要素に対するハイレベルブロック図である。
【図２Ａ】本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力低減のためにＳＥＩメッセージ内に内蔵されるディスプレイ調整情報を使用して明るさを維持するディスプレイ調整を示す図である。
【図２Ｂ】本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力低減のためにＳＥＩメッセージ内に内蔵されるディスプレイ調整情報を使用して明るさを維持するディスプレイ調整を示す図である。
【図３Ａ】本発明の一実施形態による動的、コンテンツベースディスプレイ調整及び対応する電力低減のためのビデオデータビットストリーム内のＳＥＩメッセージ挿入を示す図である。
【図３Ｂ】本発明の一実施形態による動的、コンテンツベースディスプレイ調整及び対応する電力低減のためのビデオデータビットストリーム内のＳＥＩメッセージ挿入を示す図である。
【図４】本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力低減のためにＳＥＩメッセージ挿入を利用してビデオをエンコーディングするプロセスのハイレベルフロー図である。
【図５】本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力低減のために挿入されるＳＥＩメッセージに基づくビデオデコーディング及びディスプレイのプロセスのハイレベルフロー図である。
【発明を実施するための形態】
【００１３】
ビデオセグメントは、ディスプレイの明るさを制御してそれぞれのセグメントディスプレイの間に電力消費を低減するために使用され得るディスプレイ調整情報が内蔵された補足エンハンスメント情報（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ：ＳＥＩ）メッセージがあるペイロードユニット別に送信される。ディスプレイ調整情報は、ピクセル明るさを最大にスケーリングし、それによって液晶ディスプレイ用バックライティングを低減させるか、ＯＬＥＤディスプレイのための供給電圧を調整するために使用され得る最大ピクセル明るさを少なくとも含む。ディスプレイ調整情報は、最小ピクセル明るさピクセルヒストグラムステップサイズ及びスケーリング方法をインジケータをオプションとして含み得る。
【００１４】
本発明を詳細に説明するのに先立って、本明細書の全般にわたって使用される特定の単語及び語句の定義を開示することが望ましい。“含む（ｉｎｃｌｕｄｅ）”及び  “備える（ｃｏｍｐｒｉｓｅ）”という語句だけではなく、その派生語（ｄｅｒｉｖａｔｉｖｅｓ  ｔｈｅｒｅｏｆ）は、限定ではなく、含みを意味する。“又は（ｏｒ）”という用語は、“及び／又は（ａｎｄ／ｏｒ）”の意味を包括する。“関連した（ａｓｓｏｃｉａｔｅｄ  ｗｉｔｈ）”及び“それと関連した（ａｓｓｏｃｉａｔｅｄ  ｔｈｅｒｅｗｉｔｈ）”という語句だけではなく、その派生語句は、“含む（ｉｎｃｌｕｄｅ）”、“含まれる（ｂｅ  ｉｎｃｌｕｄｅｄ  ｗｉｔｈｉｎ）”、“相互に連結する（ｉｎｔｅｒｃｏｎｎｅｃｔ  ｗｉｔｈ）”、“包含する（ｃｏｎｔａｉｎ）”、“包含される（ｂｅ  ｃｏｎｔａｉｎｅｄ  ｗｉｔｈｉｎ）”、“連結する（ｃｏｎｎｅｃｔ  ｔｏ  ｏｒ  ｗｉｔｈ）”、“結合する（ｃｏｕｐｌｅ  ｔｏ  ｏｒ  ｗｉｔｈ）”、“疎通する（ｂｅ  ｃｏｍｍｕｎｉｃａｂｌｅ  ｗｉｔｈ）”、“協力する（ｃｏｏｐｅｒａｔｅ  ｗｉｔｈ）”、“相互配置する（ｉｎｔｅｒｌｅａｖｅ）”、“並置する（ｊｕｘｔａｐｏｓｅ）”、“近接する（ｂｅ  ｐｒｏｘｉｍａｔｅ  ｔｏ）”、“接する（ｂｅ  ｂｏｕｎｄ  ｔｏ  ｏｒ  ｗｉｔｈ）”、“有する（ｈａｖｅ）”、及び“特性を有する（ｈａｖｅ  ａ  ｐｒｏｐｅｒｔｙ  ｏｆ）”などを意味することができる。制御器は、少なくとも１つの動作を制御する装置、システム又はその部分を意味するもので、ハードウェア、ファームウェア、ソフトウェア、又は、それらのうちの２つ以上の組合せで実現することができる。特定の制御器に関連する機能は、集中しているか、あるいは近距離、または遠距離に分散されることもあることに留意すべきである。特定の単語及び語句に関するこのような定義は、本明細書の全般にわたって規定されるもので、当業者には、大部分の場合ではなくても、多くの場合において、このような定義がそのように定義された単語及び語句の先行使用にはもちろん、将来の使用にも適用されるものであることが自明である。
【００１５】
以下に論議される図１乃至図５及びこの特許文書の本発明の原理を記述するのに使用される多様な実施形態は、例示にすぎないもので、どんな方法でも本発明の範囲を限定するものと解釈されてはならない。当業者は、本発明の原理が適切に構成された無線通信システムで具現され得るということが分かる。
【００１６】
ディスプレイ調整のために使用されるメタデータが拡張されたＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）  メッセージとしてビデオストリーム内に内蔵され得る。
【００１７】
本発明で、ディスプレイ電力低減を助けるためにデコーダでパーシングされるＳＥＩメッセージを用いてディスプレイ調整（ｄｉｓｐｌａｙ  ａｄａｐｔａｔｉｏｎ）がビデオコンテンツ情報内に内蔵される。ＬＣＤディスプレイの場合、ディスプレイの明るさが調整され、ＯＬＥＤディスプレイの場合、ディスプレイ供給電圧が調整される。このような拡張されたＳＥＩメッセージ内の要素は、ビデオエンコーディングの中にエンコーダから導出されることができる。
【００１８】
ディスプレイ調整は、基本アプリケーション及びハードウェア能力によって、ストリーム内にフレーム別に、又はＧＯＰ（ｇｒｏｕｐ  ｏｆ  ｐｉｃｔｕｒｅｓ）内にＧＯＰシーン別に、または時間インターバル別にも挿入され得るＳＥＩメッセージ（すなわち、  ｄｉｓｐｌａｙ＿ａｄａｐｔａｔｉｏｎ（））を許可することによって定義される。フレームレベル解決法と比べると、ＧＯＰ、シーン又は時間インターバルベース処理方式は、メッセージ挿入に、より少ないオーバーヘッドを要する。高周波ディスプレイ調整、例えば３０Ｈｚビデオに対する毎３３ｍｓをサポートできないプロセッサの場合、ＧＯＰ、シーン又は時間インターバルベース方式がフレームベース解決法より良好である。それにも関わらず、この明細書では基本的にフレームレベル解決法を使用して概念が説明される。
【００１９】
図１Ａは、本発明の１つ以上の実施形態によって内部の装置が動的コンテンツベースディスプレイ調整及び対応する電力低減を実現できるようにするネットワークを示すハイレベル図である。ネットワーク１００は、既存手順、しかしながら、以下でより詳細に記述されるように、ＮＡＬＵヘッダー（ら）内に内蔵されるディスプレイ調整情報によってビデオコンテンツをエンコーディングするように構成されたエンコーダ制御器を含むコンテンツエンコーダデータプロセシングシステム１０１を含む。コンテンツエンコーダ１０１は、ビデオコンテンツをユーザ装置に伝達するコンテンツサーバデータプロセシングシステム１０２と通信可能に結合（されるか、それとは異なり併合）される。コンテンツサーバ１０２は、ユーザデバイス（ＵＥ）又はモバイルステーション（ＭＳ）と呼ばれるユーザ装置１０５へのビデオコンテンツ伝送のためにインターネット１０３のような通信ネットワーク及び基地局（ＢＳ）１０４を含む無線通信システムによって接続される。上述したように、ユーザ装置１０５は、無線音声通信他に少なくともビデオコンテンツ再生を含む機能が可能な“スマート”フォン又はタブレット装置であり得る。これとは異なり、ユーザ装置１０５は、ＬＣＤやＯＬＥＤディスプレイを有し、少なくとも一般的な動作期間中に基本的にバッテリーから電力を受ける所定の装置のように、ビデオ再生の中に動的コンテンツベースディスプレイ電力低減から利益を得るラップトップコンピュータやその他無線装置であり得る。
【００２０】
図１Ｂは、本発明の一実施形態によって動的コンテンツベースディスプレイ調整及び対応する電力低減が具現され得るネットワークからの無線装置の前面図であり、図１Ｃは、その無線装置の機能的構成要素のハイレベルブロック図である。ユーザ装置１０５はモバイル電話であり、バックライティングされるＬＣＤ（図１Ｃに示す選択的輝度光源を含む）やＯＬＥＤディスプレイ１０６を含む。ディスプレイ１０６と結合されたプロセッサ１０７は、ディスプレイ上にディスプレイされるコンテンツを制御する。ユーザ装置１０５内のプロセッサ１０７及び他の構成要素は、外部電源（図示せず）により充電されるか、または外部電源により電力を受けることができるバッテリー（図示せず）により電力の供給を受ける。プロセッサ１０７と結合されたメモリ１０８は、プロセッサ１０７により再生されディスプレイ１０６上にディスプレイされるビデオコンテンツを保存するかバッファリングすることができ、そのようなビデオ再生を実行するためのビデオ再生アプリケーション（又は“アプリ”）１０９を保存することもできる。再生されるビデオコンテンツは、ビデオコンテンツの再生と同時発生的（例えば、時間上で重複して）又は再生の先に、アンテナ１１１に接続された送受信器１１０を通して受信されることができる。上述したように、ビデオコンテンツは、基地局１０４からの無線通信を通じて受信されることができる。例示的な実施形態で、モバイル装置１０５により内部再生及びディスプレイ１０６上のディスプレイのために受信されるビデオコンテンツは、ＳＥＩメッセージ（ら）内に内蔵されるディスプレイ調整情報を含む。ディスプレイ調整情報が選択的輝度光源及びディスプレイ１０６に対するディスプレイコントロール１１２をセッティングするためにプロセッサ１０７により使用される。
【００２１】
ＩＴＵ−Ｔ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｕｎｉｏｎ（ＩＴＵ）  Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ  Ｓｅｃｔｉｏｎ）  ＶＣＥＧ（Ｖｉｄｅｏ  Ｃｏｄｉｎｇ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）標準Ｈ．２６４高級ビデオ符号化（ＡＶＣ、ＭＰＥＧ−４パート１０（Ｍｏｔｉｏｎ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ  ４パート１０）とも称する）及びその拡張例で、それぞれのＳＥＩメッセージ（ら）が以下でより詳細に記述されるようなペイロードビットストリーム内に挿入される。ｐａｙｌｏａｄＴｙｐｅ＝４７を有した新たなＳＥＩメッセージは、以下の＜表１＞に示したようである。（ｐａｙｌｏａｄＴｙｐｅ＝４７という選択は、この例で例示のためのものであり、不特定ｐａｙｌｏａｄＴｙｐｅ値がその代わりに使用されることもできる）。ビットストリームでＳＥＩメッセージと会う度に、デコーダはそのＳＥＩメッセージをパーシングし、＜表２＞に定義されたようにフレームレベル、ＧＯＰレベル、シーンレベル又は時間インターバルレベルディスプレイ調整を実行する。
【００２２】
ＳＥＩメッセージの現在定義は、ディスプレイ調整関連情報の内蔵をサポートするために拡張を通じて修正される。＜表１＞は、Ｈ．２６４／ＡＶＣ及びその拡張（＜表１＞の斜体で表した修正事項）に対して拡張されたＳＥＩメッセージを示す。
【００２３】
【表１Ａ】
2015520406.tif 000003
【００２４】
【表１Ｂ】
2015520406.tif 000004
【００２５】
＜表２＞は、Ｈ．２６４／ＡＶＣでのディスプレイ調整ＳＥＩメッセージがシンタックスを示す（＜表２＞で斜体で表した修正事項）。
【００２６】
【表２】
2015520406.tif 000005
【００２７】
＜表２＞から自明であるように、以下の３種類の相互に異なるタイプのディスプレイ調整（“ｄｉｓｐｌａｙ＿ｓｃａｌｉｎｇ＿ｍｅｔｈｏｄ”）が考察される：ピクセルの明るさを維持するディスプレイ調整（“ＢＲＩＧＨＴＮＥＳＳ＿ＰＲＥＳＥＲＶＥＤ”）；コントラストを維持するディスプレイ調整（“ＣＯＮＴＲＡＳＴ＿ＰＲＥＳＥＲＶＥＤ”）；及び認知的無損失ディスプレイ調整（“ＰＥＲＣＥＰＴＵＡＬ＿ＬＯＳＳＬＥＳＳ”）。明るさを維持するディスプレイ調整は、パラメータとして１つの値−それぞれのＮＡＬＵヘッダーとともにエンコーディングされる再構成されたフレームのためのピクセル明るさ値内で最大ピクセル明るさ値（“ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ”）−を取る。コントラストを維持するディスプレイ調整は、再構成されたフレームに対するピクセル明るさ値のヒストグラム内で最大ピクセル明るさ値及び最小ピクセル明るさ値（“ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ”）の両方をパラメータとして取る。明るさ及びコントラストの両方すべてを維持する認知的無損失ディスプレイ調整は、三個のパラメータであるヒストグラム内の最大及び最小ピクセル明るさ値（“ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ”）及びヒストグラム生成時に使用されたピクセル明るさ値のステップサイズ（“ｐｉｘｅｌ＿ｈｉｓｔ＿ｓｔｅｐｓｉｚｅ”）を取る。
【００２８】
ＩＴＵ  ＶＣＥＧ及びＩＳＯ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｓｔａｎｄａｒｄｓ  Ｏｒｇａｎｉｚａｔｉｏｎ）／ＩＥＣ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｅｌｅｃｔｒｏ−ｔｅｃｈｎｉｃａｌ  Ｃｏｍｍｉｓｓｉｏｎ）ＭＰＥＧ（Ｍｏｔｉｏｎ  Ｐｉｃｔｕｒｅｓ  Ｅｘｐｅｒｔ  Ｇｒｏｕｐ）ＪＣＴ−ＶＣ（Ｊｏｉｎｔ  Ｃｏｌｌａｂｏｒａｔｉｖｅ  Ｔｅａｍｏｎ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ）標準Ｈ．２６５高効率ビデオ符号化（ＨＶＥＣ）で、ＳＥＩ及びビデオ使用性情報（ＶＵＩ（ｖｉｄｅｏ  ｕｓａｂｉｌｉｔｙ  ｉｎｆｏｒｍａｔｉｏｎ））メタデータの両方は許可される。したがって、当業者は上述した技法がＨＶＥＣストリームとの使用のためにどのように容易に調整されることかが分かる。
【００２９】
図２Ａ及び図２Ｂは、本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力減少のためにＳＥＩメッセージ内に内蔵されるディスプレイ調整情報を使用して明るさを維持するディスプレイ調整を例示する。  すべてのフレームをデコーディングする前に、現在の再構成フレームを２５５／ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ）だけ拡張するために使用される最大ピクセル値を抽出するためにＳＥＩメッセージがパーシングされる。ｐ（ｉ）が図２Ａに示したように、再構成されたフレームのためのピクセル明るさのヒストグラム内のｉ番目のピクセル値（ラスター走査順序に）の元来の明るさを示すとすれば、図２Ｂに示すスケーリングされたフレームヒストグラム内の該当ピクセルに対してスケーリングされたピクセル明るさｐｎｅｗ（ｉ）は（８ビットピクセル明るさ値において）次式のようである。
【００３０】
【数１】
2015520406.tif 000006
【００３１】
ここで、Ｙ＝（２５５／ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ）であり、ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅは、上述したようにＳＥＩメッセージで特定されたパラメータである。図２Ａ及び図２Ｂの比較から自明であるように、ヒストグラムは線形スケーリングを通じて移動する。
【００３２】
一方、ピクセル明るさの増加を通じて、より低い明るさのバックライティング（ＬＣＤディスプレイ用）や低供給電圧（ＯＬＥＤディスプレイ用）がエネルギーの純減少のために使用されることができる。すなわち、ＬＣＤディスプレイの場合、スケーリングされたピクセル明るさが減少されたバックライティング明るさと共に使用される。スケーリングされた値は、（ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ／２５５）＊１００％の比でセッティングされることができる。すなわち、スケーリングされたバックライティング明るさｂｎｅｗは、次式のようである。
【００３３】
【数２】
2015520406.tif 000007
【００３４】
ここで、ｂはオリジナルバックライティング明るさであり、スケーリングされた供給電圧は、次式のようである。
【００３５】
【数３】
2015520406.tif 000008
【００３６】
ここで、Ｖは元来の供給電圧である。エネルギーの追加減少のために、一部ピクセル歪み（すなわち、スケーリング後に飽和される）は許可するが、どんな認知的差異もないように最大ピクセル値がさらに変更されることがある。  
【００３７】
【数４】
2015520406.tif 000009
【００３８】
ＣＯＮＴＲＡＳＴ＿ＰＲＥＳＥＲＶＥＤモードでスケーリングする時の調整のために、ｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅと共にパラメータｍｉｎ＿ｐｉｘｅｌ＿ｖａｌｕｅが同様に使用されることができる。最大及び最小ピクセル明るさ間の範囲がコントラストを維持するために調整され得る。同様に、ＣＯＮＴＲＡＳＴ＿ＰＲＥＳＥＲＶＥＤモードのスケーリングをする時、調整のためにｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅとともにパラメータｍｉｎ＿ｐｉｘｅｌ＿ｖａｌｕｅ及びｐｉｘｅｌ＿ｈｉｓｔ＿ｓｔｅｐｓｉｚｅが使用されることができる。最大及び最小ピクセル明るさ間の範囲及びピクセル明るさの分布すべてが調整され得る。  上記ではバックライト明るさ及び供給電圧の線形スケーリングが前提されるが、実際実施形態ではそのようなスケーリングは非線形でもある。線形又は非線形調整のいずれも多様なレベルのバックライト明るさや供給電圧のディスプレイ電力を測定することによって生成され得るルックアップテーブルを通じて具現され得る。
【００３９】
図３Ａ及び図３Ｂは、本発明の一実施形態による動的、コンテンツベースディスプレイ調整及び対応する電力低減のためのビデオデータビットストリーム内のＳＥＩメッセージ挿入を示す。図５３Ａは、フレームベースＳＥＩメッセージ挿入を例示し、図３Ｂは、ＧＯＰベースＳＥＩメッセージ挿入を例示する。類似の挿入方式がシーンベース又は時間インターバルベースのＳＥＩメッセージ挿入のために使用されることができる。
【００４０】
赤（Ｒ）、緑（Ｇ）及び青（Ｂ）カラーチャンネルそれぞれの個別バックライティングをするＬＣＤディスプレイにおいて、上述したようなピクセル明るさスケーリング及びバックライティング明るさ減少が個別ＲＧＢカラーそれぞれのピクセル及びバックライティング明るさに対して各々具現され得る。ＯＬＥＤディスプレイ内の赤緑青ＬＥＤに対して個別供給電圧が使用される程度で、上述したようなピクセル明るさスケーリング及び供給電圧減少がそれぞれのＲＧＢカラーに対して個別的に具現され得る。そのような方式で多様なカラー構成要素が個別的に調整されることができる。
【００４１】
図４は、本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力低減のためにＳＥＩメッセージ挿入を用いてビデオをエンコーディングするプロセスのハイレベルフロー図である。このプロセスは、エンコーダ１０１内でエンコーダ制御器によって実行される。ディスプレイ調整をサポートしない装置は、ＳＥＩメッセージ内に内蔵されたディスプレイ調整情報を簡単に無視することができるために、ディスプレイ調整をサポートする装置への伝送が意図されるか否かと関係なく、ビデオエンコーディングのために同一のプロセスが使用されることができる。プロセス４００は、エンコーディングされるビデオのフレーム、ＧＯＰ、シーン又は時間インターバルセグメントのピクセルデータを受信することから開始される（ステップ４０１）。
【００４２】
少なくともｍａｘ＿ｐｉｘｅｌ＿ｖａｌｕｅ及びオプションとしてｍｉｎ＿ｐｉｘｅｌ＿ｖａｌｕｅ及びｐｉｘｅｌ＿ｈｉｓｔ＿ｓｔｅｐｓｉｚｅの決定を含み、処理中であるセグメントのビデオデータのピクセル明るさのヒストグラムが決定される（ステップ４０２）。処理中であるビデオデータのセグメントに対して、スケーリング方法及び適切なパラメータが含まれるＳＥＩメッセージが生成される（ステップ４０３）。  ＳＥＩメッセージがこのとき、該当セグメントデータと関連したペイロードストリーム内に挿入されて、エンコーディングされたビデオデータが伝送される（ステップ４０４４）。ビデオエンコーディングが不完全すると（ステップ４０５）、エンコーディングされているビデオの次のフレーム、ＧＯＰ、シーン又は時間インターバルセグメントに対するピクセルデータに対して該当プロセスのさらに他の反復が実行される。
【００４３】
図５は、本発明の一実施形態による動的コンテンツベースディスプレイ調整及び対応する電力低減のために挿入されるＳＥＩメッセージに基づくビデオデコーディング及びディスプレイのプロセスのハイレベルフロー図である。上記プロセスは、ユーザデバイス１０５により実行される。プロセス５００は、デコーディングされるビデオのフレーム、ＧＯＰ、シーン又は時間インターバルセグメントに対してＳＥＩメッセージ及び関連ペイロードを受信することから開始される（ステップ５０１）。ＳＥＩメッセージからスケーリング方法及びパラメータ（ら）が抽出され（ステップ５０２）、そのスケーリング方法及びパラメータ（ら）に基づいてピクセル明るさ及び供給電圧が（ＯＬＥＤディスプレイのために）調整されるか、ピクセル及びバックライティング明るさが（ＬＣＤディスプレイのために）調整される（ステップ５０３）。該当フレーム、ＧＯＰ、シーン又は時間インターバルセグメントのペイロードからデコーディングされたビデオコンテンツが調整されたディスプレイ設定を通じてディスプレイされる（ステップ５０４）。ビデオデコーディングが不完全すると（ステップ５０５）、デコーディングされているビデオの次のフレーム、ＧＯＰ、シーン又は時間インターバルセグメントに対して該当プロセスのさらに他の反復が実行される。
【００４４】
明るさ維持アルゴリズムに基づくＳＥＩメッセージを用いるディスプレイ調整が上記開示事項で例として説明される。そのようなアルゴリズムは、最大ピクセル値が内蔵された情報と同一に維持されることを必要とする。しかしながら、開示された原理がそのような実施形態に限定されるものではない。他の実施形態では、最小及び最大ピクセル明るさ値の両方又はヒストグラム分布のように、ディスプレイ調整を助けるためにビデオエンコーダから導出された所定の情報がＳＥＩメッセージの一部として内蔵され得る。
【００４５】
本発明は、データコストを減らしながらもより電力効率的であるので、モバイルストリーミングアプリケーションに対するユーザ経験を向上させることができるスマートフォン及びタブレットのような製品を作ることができる。
【００４６】
図面に図示され、上述したそれぞれのプロセスフロー及び／又は信号シーケンスは、直列又は一列でなられたステップ及び／又は信号のシーケンスを記述するが、明示的に言及されないか、自明でなければ（たとえば、信号が伝送前に受信されることができない）、そのようなシーケンスから実行の特定順序、ステップや部分の実行又はその信号の伝送が同時発生的であるか、重複する順序でない順次的であるか、介在又は中間ステップや信号の発生無しに図示されたステップの実行や信号の伝送が全的であるという推定が導出されてはならない。その上、当業者は完全なプロセス及び信号シーケンスが例示されるか記述されないということが分かる。その代わりに、単純性及び明瞭性のために、本発明に固有であるか本発明の理解に必要な程度の個別プロセス及び信号シーケンスだけが図示及び記述される。
【００４７】
以上、本発明の詳細な説明においては具体的な実施形態に関して説明したが、特許請求の範囲の記載及びこれと均等なものに基づいて定められる本発明の範囲及び趣旨を逸脱することなく、形式や細部の様々な変更が可能であることは、当該技術分野における通常の知識を持つ者には明らかである。
【符号の説明】
【００４８】
１０１  エンコーダ
１０２  コンテンツサーバデータプロセシングシステム
１０３  インターネット
１０４  基地局
１０５  ユーザ装置
１０６  ディスプレイ
１０７  プロセッサ
１０８  メモリ
１０９  ビデオ再生アプリケーション
１１０  送受信器
１１１  アンテナ
１１２  ディスプレイコントロール
【図１Ａ】
2015520406.tif 000010
【図１Ｂ】
2015520406.tif 000011
【図１Ｃ】
2015520406.tif 000012
【図２Ａ】
2015520406.tif 000013
【図２Ｂ】
2015520406.tif 000014
【図３Ａ】
2015520406.tif 000015
【図３Ｂ】
2015520406.tif 000016
【図４】
2015520406.tif 000017
【図５】
2015520406.tif 000018
【手続補正書】
【提出日】平成26年10月21日(2014.10.21)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
方法であって、
ビデオセグメントのデータを受信するステップと、前記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含み、
前記ビデオセグメントのディスプレイの間に、前記ＳＥＩメッセージからの前記ディスプレイ調整情報に基づいてディスプレイのための少なくとも１つのディスプレイパラメータを調整するステップとを含むことを特徴とする方法。
【請求項２】
バックライティングされる液晶ディスプレイ（ＬＣＤ）上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいてピクセルのピクセル明るさ及びバックライティング明るさをスケーリングするステップをさらに含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記バックライティングされたＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値及び最小ピクセル明るさ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするステップをさらに含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記ＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値、前記最小ピクセル明るさ値、及びピクセルヒストグラムステップサイズ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするステップをさらに含むことを特徴とする請求項３に記載の方法。
【請求項５】
有機発光ダイオード（ＯＬＥＤ）ディスプレイ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいて供給電圧をスケーリングするステップをさらに含むことを特徴とする請求項１に記載の方法。
【請求項６】
システムであって、
ビデオセグメントのデータを受信するように構成された受信器と、前記受信されたデータは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージを含むように構成され、
前記ビデオセグメントのディスプレイの間に、前記ＳＥＩメッセージからの前記ディスプレイ調整情報に基づいてディスプレイのための少なくとも１つのディスプレイパラメータを調整するように構成されたプロセッサとを含むことを特徴とするシステム。
【請求項７】
前記プロセッサは、バックライティングされる液晶ディスプレイ（ＬＣＤ）上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいてピクセルのピクセル明るさ及びバックライティング明るさをスケーリングするように構成されることを特徴とする請求項６に記載のシステム。
【請求項８】
前記プロセッサは、
前記バックライティングされたＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値及び最小ピクセル明るさ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするように構成されることを特徴とする請求項７に記載のシステム。
【請求項９】
前記プロセッサは、
前記バックライティングされたＬＣＤ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から前記最大ピクセル明るさ値、前記最小ピクセル明るさ値、及びピクセルヒストグラムステップサイズ値に基づいて前記ピクセル明るさ及びバックライティング明るさをスケーリングするように構成されることを特徴とする請求項８に記載のシステム。
【請求項１０】
前記プロセッサは、
有機発光ダイオード（ＯＬＥＤ）ディスプレイ上での前記ビデオセグメントのディスプレイの間に、前記ディスプレイ調整情報から最大ピクセル明るさ値に基づいて供給電圧をスケーリングするように構成されることを特徴とする請求項６に記載のシステム。
【請求項１１】
請求項６に記載のシステムを含むモバイル通信装置であって、
前記システムは、基地局から無線通信を通じてビデオセグメントのデータを受信するように構成されることを特徴とするモバイル通信装置。
【請求項１２】
請求項６に記載のシステムを含むタブレットであって、
前記システムは、ネットワークから無線通信を通じてビデオセグメントのデータを受信するように構成されることを特徴とするタブレット。
【請求項１３】
方法であって、
伝送するビデオセグメントのデータをフォーマットするステップを含み、前記フォーマットされたデータは、
ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ及び
前記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含むことを特徴とする方法。
【請求項１４】
システムであって、
伝送するビデオセグメントのデータをフォーマットするように構成されたビデオサーバを含み、前記フォーマットされたデータは、
ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ及び
前記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含むことを特徴とするシステム。
【請求項１５】
方法であって、
伝送するビデオセグメントのデータを受信するステップと、前記データは、ディスプレイの明るさ及び電力消費に影響を及ぼす１つ以上のディスプレイパラメータを調整するためのディスプレイ調整情報を含むＳＥＩ（ｓｕｐｐｌｅｍｅｎｔａｌ  ｅｎｈａｎｃｅｍｅｎｔ  ｉｎｆｏｒｍａｔｉｏｎ）メッセージ及び前記ビデオセグメントをディスプレイするためのデータを含む１つ以上のペイロードユニットを含み、
前記ビデオセグメントがディスプレイされるべき装置に前記データを伝送するステップとを含むことを特徴とする方法。
【請求項１６】
前記ディスプレイ調整情報は、
最大ピクセル明るさ値、最小ピクセル明るさ値及びピクセル明るさヒストグラムステップサイズ値のうち１つ以上を含むことを特徴とする請求項１３に記載の方法。
【請求項１７】
前記ディスプレイ調整情報は、
明るさを維持するスケーリング方法、コントラストを維持するスケーリング方法、及び認知的無損失スケーリング方法から選択されたスケーリング方法を示す識別子を含むことを特徴とする請求項１３に記載の方法。
【国際調査報告】
2015520406.tif 000019
2015520406.tif 000020
2015520406.tif 000021