(57)【要約】ＭＭＴフォーマットに従った高フレームレート画像をＭＰＥＧ−２ＴＳフォーマットとして記録し、再生可能とする。ＭＭＴフォーマットに従ったメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）の設定パケットに格納して、ＰＩＤに基づくストリーム単位の選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを記録媒体に記録する。再生装置は、再生制御情報から、ストリーム対応のパケット識別子（ＰＩＤ）を取得し、取得ＰＩＤを利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する。
2017199743.tif 000002
【特許請求の範囲】
【請求項１】
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記データ処理部は、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成する情報処理装置。
【請求項２】
前記データ処理部は、さらに、
生成したＭＰＥＧ−２ＴＳフォーマットデータを情報記録場媒体に記録する請求項１に記載の情報処理装置。
【請求項３】
前記ＭＭＴフォーマットデータには、高フレームレート画像再生に適用する画像データとして、メインストリームと、サブストリームが含まれ、
メインストリームと、サブストリームの両ストリームを利用した画像再生によって高フレームレート画像再生が実行され、
メインストリームのみの選択再生により、低フレームレート画像再生が実行される構成である請求項１に記載の情報処理装置。
【請求項４】
前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報ファイルに、メインストリームとサブストリームの両ストリームを利用した高フレームレート画像再生、
または、メインストリームのみを利用した低フレームレート画像再生のいずれかを選択的に実行可能とするための画像情報を格納し、
前記ＭＰＥＧ−２ＴＳフォーマットデータとともに情報記録場媒体に記録する請求項１に記載の情報処理装置。
【請求項５】
前記再生制御情報ファイルは、プレイリストファイル、またはクリップ情報ファイルである請求項４に記載の情報処理装置。
【請求項６】
前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるプレイリストファイルに、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を記録する請求項４に記載の情報処理装置。
【請求項７】
前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるクリップ情報ファイルのプログラム情報記録領域に、
前記メインストリームを格納したパケットの識別子（ＰＩＤ）と、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を記録する請求項４に記載の情報処理装置。
【請求項８】
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記データ処理部は、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得し、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する情報処理装置。
【請求項９】
前記データ処理部は、
前記再生制御情報から取得したパケット識別子（ＰＩＤ）に基づいて、
メインストリームと、サブストリームの両ストリームを利用した高フレームレート画像再生処理、または、
メインストリームのみに基づく低フレームレート画像再生処理のいずれかを選択的に実行する請求項８に記載の情報処理装置。
【請求項１０】
前記再生制御情報ファイルは、プレイリストファイル、またはクリップ情報ファイルである請求項８に記載の情報処理装置。
【請求項１１】
前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるプレイリストファイルから、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を取得する請求項８に記載の情報処理装置。
【請求項１２】
前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるクリップ情報ファイルのプログラム情報記録領域から、
前記メインストリームを格納したパケットの識別子（ＰＩＤ）と、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を取得する請求項８に記載の情報処理装置。
【請求項１３】
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した情報記録媒体であり、
前記再生制御情報は、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）が設定され、
情報記録媒体からの画像再生を実行する再生装置が、
前記再生制御情報から読み出したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行させることを可能とした情報記録媒体。
【請求項１４】
情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記データ処理部が、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成する情報処理方法。
【請求項１５】
情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記データ処理部が、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得し、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する情報処理方法。
【請求項１６】
情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記プログラムは、前記データ処理部に、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成させるプログラム。
【請求項１７】
情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記プログラムは、前記データ処理部に、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得させ、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、情報処理装置、情報記録媒体、および情報処理方法、並びにプログラムに関する。さらに詳細には、例えば１２０フレームレートの高フレームレート画像の記録、再生を行なう情報処理装置、情報記録媒体、および情報処理方法、並びにプログラムに関する。
【背景技術】
【０００２】
現在、高画質画像の放送を実現するための規格化が進められており、その一つとして、ＭＭＴ（ＭＰＥＧ  Ｍｅｄｉａ  Ｔｒａｎｓｐｏｒｔ）フォーマットに従ったデータフォーマットを利用したデータ配信方式についての議論や規格化が進行している。【０００３】
ＭＭＴフォーマットは、画像（Ｖｉｄｅｏ）、音声（Ａｕｄｉｏ）、字幕（Ｓｕｂｔｉｔｌｅ）等、コンテンツ構成データである符号化データを放送波やネットワークを介して伝送する際のデータ転送方式（トランスポートフォーマット）を規定したものである。
ＭＭＴフォーマットは、例えば１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）の記録、転送、再生を可能としたフォーマットとして規定されている。
なお、プログレッシブ画像とは、プログレッシブ方式に従った出力処理が実行される画像である。
上記記載［１２０ｐ］の１２０は、１２０フレーム／秒のフレームレートを意味しｐは、プログレッシブ画像であることを意味する。以下の説明においても同様である。【０００４】
一方、放送と同様の画像（Ｖｉｄｅｏ）、音声（Ａｕｄｉｏ）、字幕（Ｓｕｂｔｉｔｌｅ）等からなるコンテンツの記録再生に利用される情報記録媒体（メディア）として、例えばＢＤ（Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ）やフラッシュメモリがある。
これらの情報記録媒体で利用される現行のデータフォーマットとして、ＭＰＥＧ−２ＴＳフォーマットがある。【０００５】
しかし、現行のＭＰＥＧ−２ＴＳフォーマットは、ＭＭＴフォーマットにおいて利用が予定されている１２０ｆ／ｓ（フレーム／秒）等の高フレームレート画像の記録や再生を可能としたフォーマットではない。
なお、ＢＤを利用したデータ記録再生処理構成については、例えば特許文献１（特開２０１１−０２３０７１号公報）等に記載がある。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１１−０２３０７１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
本開示は、例えば、上記の問題点に鑑みてなされたものであり、ＭＭＴフォーマットを適用した記録、転送、再生が許容される例えば１秒間に１２０フレームの高フレームレートの画像をＢＤ等の情報記録媒体を利用して、記録、再生可能とする情報処理装置、情報記録媒体、および情報処理方法、並びにプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
本開示の第１の側面は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記データ処理部は、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成する情報処理装置にある。【０００９】
さらに、本開示の第２の側面は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記データ処理部は、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得し、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する情報処理装置にある。【００１０】
さらに、本開示の第３の側面は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した情報記録媒体であり、
前記再生制御情報は、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）が設定され、
情報記録媒体からの画像再生を実行する再生装置が、
前記再生制御情報から読み出したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行させることを可能とした情報記録媒体にある。【００１１】
さらに、本開示の第４の側面は、
情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記データ処理部が、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成する情報処理方法にある。【００１２】
さらに、本開示の第５の側面は、
情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記データ処理部が、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得し、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する情報処理方法にある。【００１３】
さらに、本開示の第６の側面は、
情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記プログラムは、前記データ処理部に、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成させるプログラムにある。【００１４】
さらに、本開示の第７の側面は、
情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記プログラムは、前記データ処理部に、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得させ、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行させるプログラム。【００１５】
なお、本開示のプログラムは、例えば、様々なプログラム・コードを実行可能な情報処理装置やコンピュータ・システムに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体によって提供可能なプログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、情報処理装置やコンピュータ・システム上でプログラムに応じた処理が実現される。【００１６】
本開示のさらに他の目的、特徴や利点は、後述する本開示の実施例や添付する図面に基づくより詳細な説明によって明らかになるであろう。なお、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。
【発明の効果】
【００１７】
本開示の一実施例の構成によれば、ＭＭＴフォーマットに従った高フレームレート画像をＭＰＥＧ−２ＴＳフォーマットとして記録し、再生可能とする構成が実現される。
具体的には、ＭＭＴフォーマットに従ったメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）の設定パケットに格納して、ＰＩＤに基づくストリーム単位の選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを記録媒体に記録する。再生装置は、再生制御情報から、ストリーム対応のパケット識別子（ＰＩＤ）を取得し、取得ＰＩＤを利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する。
本構成により、ＭＭＴフォーマットに従った高フレームレート画像をＭＰＥＧ−２ＴＳフォーマットとして記録し、再生可能とする構成が実現される。
なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
【図面の簡単な説明】
【００１８】
【図１】ＭＭＴフォーマットについて説明する図である。
【図２】ＭＰＥＧ−２ＴＳフォーマットについて説明する図である。
【図３】ＭＭＴフォーマットに従った画像データ格納構成例について説明する図である。
【図４】画像再生例について説明する図である。
【図５】ＭＭＴフォーマットをＭＰＥＧ−２ＴＳフォーマットに変換して記録する処理例について説明する図である。
【図６】ＭＭＴフォーマットをＭＰＥＧ−２ＴＳフォーマットに変換して記録する場合の処理手順の一例について説明する図である。
【図７】ＭＭＴフォーマットをＭＰＥＧ−２ＴＳフォーマットに変換して記録する場合の処理手順の一例について説明する図である。
【図８】ＭＭＴフォーマットをＭＰＥＧ−２ＴＳフォーマットに変換して記録する場合の処理手順の一例について説明する図である。
【図９】ＭＭＴフォーマットをＭＰＥＧ−２ＴＳフォーマットに変換して記録する場合の処理手順の一例について説明する図である。
【図１０】情報記録媒体の記録データのディレクトリ例について説明する図である。
【図１１】情報記録媒体の記録データの再生処理例について説明する図である。
【図１２】画像情報の記録構成例について説明する図である。
【図１３】プレイリストファイルのデータ構成について説明する図である。
【図１４】プレイリストファイルの拡張データ記録領域のデータ構成について説明する図である。
【図１５】プレイリストファイルの拡張データ記録領域に記録される高フレームレート画像関連画像情報の例について説明する図である。
【図１６】クリップ情報ファイルのデータ構成について説明する図である。
【図１７】クリップ情報ファイルのプログラム情報のデータ構成例について説明する図である。
【図１８】クリップ情報ファイルのコーディング情報のデータ構成例について説明する図である。
【図１９】クリップ情報ファイルのコーディング情報中に記録される高フレームレート画像関連画像情報について説明する図である。
【図２０】クリップ情報ファイルのプログラム情報内のグループ情報として記録される高フレームレート画像関連画像情報について説明する図である。
【図２１】情報記録媒体に対するデータ記録を実行する情報処理装置の構成について説明する図である。
【図２２】情報記録媒体に対するデータ記録を実行する情報処理装置の実行する処理シーケンスを説明するフローチャートを示す図である。
【図２３】情報記録媒体からのデータ再生を実行する情報処理装置の構成について説明する図である。
【図２４】情報記録媒体からのデータ再生を実行する情報処理装置の実行する処理シーケンスを説明するフローチャートを示す図である。
【図２５】本開示の処理に適用される報処理装置のハードウェア構成例について説明する図である。
【発明を実施するための形態】
【００１９】
以下、図面を参照しながら本開示の情報処理装置、情報記録媒体、および情報処理方法、並びにプログラムの詳細について説明する。なお、説明は以下の項目に従って行なう。
１．ＭＭＴフォーマットと、ＭＰＥＧ−２ＴＳフォーマットについて
２．ＭＭＴフォーマットデータを利用した様々なフレームレートの画像データ格納構成と再生処理例について
３．ＭＭＴフォーマットデータからＭＰＥＧ−２ＴＳフォーマットデータへのフォーマット変換処理について
４．情報記録媒体の記録データ構成と再生処理の概要について
５．プレイリストファイルに対する高フレームレート画像関連画像情報の記録例について
６．クリップ情報ファイルに対する高フレームレート画像関連画像情報の記録例について
６−１．ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］記録領域を利用した高フレームレート画像関連画像情報記録例
６−２．グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］と、ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］記録領域を利用した高フレームレート画像関連画像情報記録例
７．情報記録媒体に対するデータ記録処理を実行する情報処理装置の構成と処理について
８．情報記録媒体からのデータ再生処理を実行する情報処理装置の構成と処理について
９．情報処理装置の構成例について
１０．本開示の構成のまとめ
【００２０】
［１．ＭＭＴフォーマットと、ＭＰＥＧ−２ＴＳフォーマットについて］
図１、図２を参照して、ＭＭＴフォーマットと、ＭＰＥＧ−２ＴＳフォーマットについて説明する。
【００２１】
まず、図１参照してＭＭＴ（ＭＰＥＧ  Ｍｅｄｉａ  Ｔｒａｎｓｐｏｒｔ）フォーマットについて説明する。
先に説明したように、ＭＭＴフォーマットは、画像（Ｖｉｄｅｏ）、音声（Ａｕｄｉｏ）、字幕（Ｓｕｂｔｉｔｌｅ）等、コンテンツ構成データである符号化データを放送波やネットワークを介して伝送する際のデータ転送方式（トランスポートフォーマット）を規定したものである。
ＭＭＴフォーマットは、例えば１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）の記録、転送、再生を可能としたフォーマットとして規定されている。
【００２２】
図１は、ＩＳＯ／ＩＥＣ  ２３００８−１に規定されるファイルフォーマットであるＭＭＴフォーマットについて説明する図である。
【００２３】
図１（ａ）〜（ｃ）にはＭＭＴフォーマットデータの構成を示している。
最下段に示す図１（ａ）は、ＭＭＴフォーマットデータの全体構成を示す図である。
図１（ａ）に示すように、ＭＭＴフォーマットデータは、複数のメディアプレゼンテーションユニット（ＭＰＵ：Ｍｅｄｉａ  ｐｒｅｓｅｎｔａｔｉｏｎ  ｕｎｉｔ）によって構成される。
ＭＰＵは、例えば画像、音声、字幕等の１つの単位として設定されるユニットである。例えば、画像の場合、１ＭＰＵが１つのＭＰＥＧ圧縮画像単位である１ＧＯＰ（Ｇｒｏｕｐ  ｏｆ  ｐｉｃｔｕｒｅ）に相当する。
【００２４】
１つのＭＰＵは、図１（ｂ）に示すように、１つまたは複数のメディアフラグメントユニット（ＭＦＵ：Ｍｅｄｉａ  Ｆｒａｇｍｅｎｔ  ｕｎｉｔ）によって構成される。
具体的には、１つのＭＰＵは、ペイロードタイプ（Ｐａｙｌｏａｄ＿ｔｙｐｅ）＝０ｘ０（ＭＰＵ）で、かつ同じパケット識別子（Ｐａｃｋｅｔ＿ｉｄ）を持つＭＦＵの１つ、または複数から構成される。
【００２５】
１つのＭＦＵは、図１（ｃ）に示すように、１つまたは複数のＭＭＴＰパケットによって構成される。
具体的には、１つのＭＦＵは、ペイロードタイプ（Ｐａｙｌｏａｄ＿ｔｙｐｅ）＝０ｘ０（ＭＰＵ）で、かつ同じパケット識別子（Ｐａｃｋｅｔ＿ｉｄ）を持つＭＭＴパケットの１つ、または複数から構成される。
ＭＭＴＰパケットは可変長であり、様々なパケットサイズに設定可能である。
ＭＭＴＰパケットの各々は、属性情報等を格納するヘッダ（ＭＭＴヘッダ）と、符号化画像の実データ等を格納するペイロード（ＭＭＴペイロード）により、構成される。
【００２６】
次に、図２を参照して、ＭＰＥＧ−２ＴＳフォーマットについて説明する。
ＭＰＥＧ−２ＴＳフォーマットは画像（Ｖｉｄｅｏ）、音声（Ａｕｄｉｏ）、字幕（Ｓｕｂｔｉｔｌｅ）等、コンテンツ構成データである符号化データを記録媒体（メディア）に格納、または放送波やネットワークを介して伝送する際の符号化データ等のデータ格納形式（コンテナフォーマット）を規定したフォーマットである。
【００２７】
ＭＰＥＧ−２ＴＳフォーマットは、ＩＳＯ１３８１８−１において標準化されたフォーマットであり、例えばＢＤ（Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ）に対するデータ記録や、デジタル放送等に用いられている。
【００２８】
図２（ａ）〜（ｃ）はＭＰＥＧ−２ＴＳフォーマットデータの構成を示す図である。
最下段に示す図２（ａ）は、ＭＰＥＧ−２ＴＳのフォーマットデータの全体構成を示す図である。
図２（ａ）に示すように、ＭＰＥＧ−２ＴＳフォーマットデータは、複数のエレメンタリストリーム（Ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ）によって構成される。
レメンタリストリーム（Ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ）は、例えば画像、音声、字幕等の１つの単位として設定されるユニットである。
【００２９】
１つのエレメンタリストリーム（Ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ）は、図２（ｂ）に示すように、１つまたは複数のＰＥＳ（Ｐａｃｋｅｔｉｚｅｄ  Ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ）パケットによって構成される。
具体的には、１つのエレメンタリストリーム（Ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ）は、ペイロードタイプ（Ｐａｙｌｏａｄ＿ｔｙｐｅ）＝０ｘ０で、かつ同じパケット識別子（Ｐａｃｋｅｔ＿ｉｄ）を持つＰＥＳパケットの１つ、または複数から構成される。
【００３０】
１つのＰＥＳパケットは、図２（ｃ）に示すように、１つまたは複数のＴＳパケットによって構成される。
具体的には、１つのＰＥＳパケットは、ペイロードタイプ（Ｐａｙｌｏａｄ＿ｔｙｐｅ）＝０ｘ０で、かつ同じパケット識別子（Ｐａｃｋｅｔ＿ｉｄ）を持つＴＳパケットの１つ、または複数から構成される。
ＴＳパケットは、前述のＭＭＴＰパケットと異なり、固定長であり、１つのＴＳパケットのパケットサイズは、１８８バイトに固定されている。
【００３１】
［２．ＭＭＴフォーマットデータを利用した様々なフレームレートの画像データ格納構成と再生処理例について］
次に、図３以下を参照して、ＭＭＴフォーマットデータを利用した様々なフレームレートの画像データ格納構成と再生処理例について説明する。
【００３２】
図３は、ＭＭＴフォーマットデータを利用した画像データの格納構成例を説明する図である。
図３に示す画像データの格納例は、１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）データをＭＭＴフォーマットデータとして格納した例である。
【００３３】
図３最下段の（１）に示すビデオストリーム構成データは、１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）データである。
この１２０ｐビデオストリームは、１フレームごと交互に、
（ａ）メインストリーム構成フレーム、
（ｂ）サブストリーム構成フレーム、
これらの２つのストリーム構成フレームが交互に設定されている。
なお、この画像データは、例えばＨＥＶＣ（ＭＰＥＧ−４ＨＥＶＣ）符号化処理が施されてＭＭＴフォーマットデータ中に格納される。
【００３４】
（ａ）メインストリーム構成フレームと、（ｂ）サブストリーム構成フレームの全フレームを再生すると、１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）の再生が可能となる。
一方、（ｂ）サブストリーム構成フレームを再生せず、（ａ）メインストリーム構成フレームのみを選択再生することで、１秒間に６０フレームの低フレームレートのプログレッシブ画像（６０ｐ画像）の再生が可能となる。
【００３５】
１２０ｐ画像を再生、表示可能な再生装置やテレビ等の表示装置は、今、開発段階にあり、今後、製品化、普及すると予測されるが、現在のテレビ等の表示装置や、再生装置の多くは、１２０ｐ画像の再生表示機能を有しておらず、６０Ｐ画像の再生表示機能を有するのみである。
【００３６】
ＭＭＴフォーマットデータは、このような６０ｐ画像の再生可能な現行装置において再生や表示を可能とするため、１２０ｐ画像を構成する画像フレームの１つおきの画像フレームをメインストリームとし、残りをサブストリームとして設定している。
６０ｐ画像の再生、表示可能な現行装置は、メインストリームのみを選択して再生、表示することで、６０ｐ画像を再生表示することができる
【００３７】
図３最下段の（１）に示すビデオストリーム構成データから、図３（２ａ），（２ｂ）に示すように、
（２ａ）メインストリーム対応のＭＦＵ（メディアフラグメントユニット）
（２ｂ）サブストリーム対応のＭＦＵ（メディアフラグメントユニット）
これら２つのストリーム対応のＭＦＵ群が生成される。
【００３８】
図３（３）に示すように、ＭＭＴフォーマットデータは、
（２ａ）メインストリーム対応のＭＦＵ（メディアフラグメントユニット）
（２ｂ）サブストリーム対応のＭＦＵ（メディアフラグメントユニット）
これら２つのストリーム対応のＭＦＵ群に格納されたデータを複数のＭＭＴＰパケットに格納したデータとなる。
【００３９】
なお、図３（３）に示すように、ＭＭＴフォーマットデータに設定される１つのパケット（ＭＭＴＰパケット）には、メインストリーム、またはサブストリーム、いずれか一方のストリーム対応のデータのみが格納される。
【００４０】
メインストリームデータを格納したＭＭＴＰパケットのＭＭＴヘッダには、メインストリーム対応のパケット識別子（例えば、ＩＤ１）が格納される。
一方、サブストリームデータを格納したＭＭＴＰパケットのＭＭＴヘッダには、サブストリーム対応のパケット識別子（例えば、ＩＤ２）が格納される。
【００４１】
例えば、この再生装置は、これらのパケット識別子に従って、ＭＭＴフォーマットデータからメインストリームのみを抽出して再生する処理（６０ｐ画像再生）や、メインストリームとサブストリーム双方のデータを抽出して再生する処理（１２０画像再生）等を選択的に実行することが可能となる。
【００４２】
図４は、画像の再生表示処理例を説明する図である。
図４（１）は、図３（１）に示すと同様のビデオストリーム構成データである。すなわち、１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）データである。
この１２０ｐビデオストリームは、１フレームごと交互に、
（ａ）メインストリーム構成フレーム、
（ｂ）サブストリーム構成フレーム、
これらの２つのストリーム構成フレームが交互に設定されている。
【００４３】
図４（２）は、１２０ｐ画像再生例を示している。
１２０ｐ画像対応表示装置１０は、１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）を再生、表示可能な表示装置（テレビ）である。
この１２０ｐ画像対応表示装置１０は、（ａ）メインストリーム構成フレームと、（ｂ）サブストリーム構成フレームの全フレームを再生表示し、１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）の再生表示を行う。
【００４４】
一方、図４（３）は、６０ｐ画像再生例を示している。
６０ｐ画像対応表示装置２０は、１秒間に６０フレームの低フレームレートのプログレッシブ画像（６０ｐ画像）のみ、再生、表示可能な表示装置（テレビ）である。
この６０ｐ画像対応表示装置２０は、（ａ）メインストリーム構成フレームのみを選択して再生表示することで、１秒間に６０フレームの低フレームレートのプログレッシブ画像（６０ｐ画像）の再生表示を行う。
【００４５】
［３．ＭＭＴフォーマットデータからＭＰＥＧ−２ＴＳフォーマットデータへのフォーマット変換処理について］
先に説明したように、ＭＭＴフォーマットは、画像（Ｖｉｄｅｏ）、音声（Ａｕｄｉｏ）、字幕（Ｓｕｂｔｉｔｌｅ）等、コンテンツ構成データである符号化データを放送波やネットワークを介して伝送する際のデータ転送方式（トランスポートフォーマット）を規定したものである。
ＭＭＴフォーマットは、例えば１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）の記録、転送、再生を可能としたフォーマットとして規定されている。
【００４６】
一方、放送と同様の画像（Ｖｉｄｅｏ）、音声（Ａｕｄｉｏ）、字幕（Ｓｕｂｔｉｔｌｅ）等からなるコンテンツの記録再生に利用される情報記録媒体（メディア）として、例えばＢＤ（Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ）やフラッシュメモリがある。
【００４７】
これらの情報記録媒体で利用されるデータの記録フォーマットとして、ＭＰＥＧ−２ＴＳフォーマットがある。
しかし、このＭＰＥＧ−２ＴＳフォーマットは、ＭＭＴフォーマットにおいて許容される１２０ｆ／ｓ（フレーム／秒）等の高フレームレート画像の記録再生を可能としたフォーマットではない。
【００４８】
例えば、図５に示すように、情報処理装置５０が、放送局３１や、コンテンツサーバ３２等の送信装置３０から送信されるＭＭＴフォーマットデータ４０を受信し、ＢＤやフラッシュメモリ等の情報記録媒体７０に記録する場合、ＭＭＴフォーマットデータ４０を、ＭＰＥＧ−２ＴＳフォーマットデータ６０に変換して記録することが必要となる。
【００４９】
ＭＭＴフォーマットデータのまま記録処理を実行してしまうと、現行のＢＤプレーヤ等の再生装置、すなわち、ＭＰＥＧ−２ＴＳフォーマットデータを再生するための再生プログラムを適用した再生処理を実行する再生装置では再生することができない。
再生装置において再生可能とするためには、ＭＭＴフォーマットデータ４０を、ＭＰＥＧ−２ＴＳフォーマットデータ６０に変換して情報記録媒体７０に記録することが必要となる。
【００５０】
本開示の情報処理装置５０は、図５に示すようにＭＭＴフォーマットデータ４０を、ＭＰＥＧ−２ＴＳフォーマットデータ６０に変換するフォーマット変換処理を実行する。
以下、このフォーマット変換処理の具体例について、図６以下を参照して説明する。
【００５１】
図６に示す（１）〜（３ｂ）の各図は、図１、図３を参照して説明したＭＭＴフォーマットデータに対する１２０ｐ画像の格納構成例を示す図である。
図６（１）〜（３ｂ）の各図は、以下のデータ例を示している。
（１）ＭＭＴフォーマットデータ
（２ａ）メインＭＦＵ（＝メインストリームを格納したＭＦＵ）
（２ｂ）サブＭＦＵ（＝サブストリームを格納したＭＦＵ）
（３ａ）メインＭＰＵ（＝メインストリームを格納したＭＰＵ）
（３ｂ）サブＭＰＵ（＝サブストリームを格納したＭＰＵ）
【００５２】
先に図１、図３等を参照して説明した通り、ＭＭＴフォーマットデータは、図６（１）に示すようにＭＭＴＰパケットによって構成されている。
１秒間に１２０フレームの高フレームレートのプログレッシブ画像（１２０ｐ画像）データを、このＭＭＴフォーマットデータに格納する場合、各ＭＭＴＰパケットは、以下の２種類のパケットに区分できる。
（ａ）１２０ｐと６０ｐ画像再生の双方に利用可能なメインストリーム構成フレーム対応の画像データを格納したメインストリーム対応ＭＭＴＰパケット［ＭＭＴＰ  ｐａｃｋｅｔ（）１２０ｐ（６０ｐ）］、
（ｂ）１２０ｐ画像再生のみに適用されるサブストリーム構成フレーム対応の画像データを格納したサブストリーム対応ＭＭＴＰパケット［ＭＭＴＰ  ｐａｃｋｅｔ（）１２０ｐ］、
【００５３】
図６（１）に示すＭＭＴフォーマットデータは、上記（ａ），（ｂ）２種類のＭＭＴＰパケットによって構成される。
なお、上記（ａ），（ｂ）２種類のＭＭＴＰパケットの各々には、メインストリームと、サブストリームのいずれのストリーム対応の画像データを格納したパケットであるかを識別可能なパケット識別子を含むヘッダが設定されている。
【００５４】
図６（２）に示すように、ＭＭＴフォーマットデータは、
（２ａ）メインＭＦＵ（メインストリーム対応のＭＦＵ（メディアフラグメントユニット））
（２ｂ）サブＭＦＵ（サブストリーム対応のＭＦＵ（メディアフラグメントユニット））
これら２つのストリーム対応のＭＦＵ群に分割可能となる。
【００５５】
さらに、図６（２ａ）メインＭＦＵ群は、例えば１つのＭＰＥＧ圧縮画像単位である１ＧＯＰ（Ｇｒｏｕｐ  ｏｆ  ｐｉｃｔｕｒｅ）に相当する画像データを格納した、
（３ａ）メインＭＰＵ（メディアプレゼンテーションユニット）
として区分可能である。
【００５６】
図６（３ａ）に示すように、１つのＭＰＵは、ヘッダ部と、ペイロード部を有する。
ヘッダ部には、ペイロード部に格納された画像データに関する属性情報等が格納される。
ペイロード部には、画像圧縮データが格納される。メインＭＰＵのペイロードには、１２０ｐ画像再生、および６０ｐ画像再生のいずれにも利用されるメイン画像ストリーム構成データの符号化（圧縮）データ（ＨＥＶＣ符号化データ）が格納される。
【００５７】
同様に、図６（２ｂ）サブＭＦＵ群は、例えば１つのＭＰＥＧ圧縮画像単位である１ＧＯＰ（Ｇｒｏｕｐ  ｏｆ  ｐｉｃｔｕｒｅ）に相当する画像データを格納した、
（３ｂ）サブＭＰＵ（メディアプレゼンテーションユニット）
として区分可能となる。
【００５８】
サブＭＰＵのペイロード部には、画像圧縮データが格納される。サブＭＰＵのペイロードには、１２０ｐ画像再生のみに利用されるサブ画像ストリーム構成データの符号化（圧縮）データ（ＨＥＶＣ符号化データ）が格納される。
【００５９】
図５に示す情報処理装置５０は、図６〜図７に示すステップＳ０１〜Ｓ０３を実行して、ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットデータに変換する処理を実行する。
以下、各ステップの処理について説明する。
【００６０】
（ステップＳ０１）
情報処理装置５０は、まず、図６に示すステップＳ０１の処理を実行する。
図６には、メインストリーム、サブストリームの２つのストリーム対応の処理ステップ（Ｓ０１ａ），（Ｓ０１ｂ）を示している。
【００６１】
ステップＳ０１ａは、メインストリーム対応の処理であり、以下の処理を実行する。
情報処理装置５０は、メインストリーム構成画像データを格納したメインＭＰＵから、メインストリーム対応の画像データを取得し、所定単位のデータ、例えば、１アクセスユニット、具体的には、例えば１ピクチャごとにＭＰＥＧ−２ＴＳフォーマットにおいて規定されるＰＥＳパケット（メイン対応ＰＥＳパケット）を生成する。
【００６２】
一方、ステップＳ０１ｂは、サブストリーム対応の処理であり、以下の処理を実行する。
情報処理装置５０は、サブストリーム構成画像データを格納したサブＭＰＵから、サブストリーム対応の画像データを取得し、所定単位のデータ、例えば、１アクセスユニット、具体的には、例えば１ピクチャごとにＭＰＥＧ−２ＴＳフォーマットにおいて規定されるＰＥＳパケット（サブ対応ＰＥＳパケット）を生成する。
【００６３】
図６（４ａ），（４ｂ）に示すように、ＰＥＳパケットは、ＰＥＳヘッダと、ＰＥＳペイロードによって構成される。
１つのＰＥＳパケットのＰＥＳペイロードとして、メインＭＰＵから取り出した例えば１ピクチャ単位のデータを格納し、その属性情報を、ＰＥＳヘッダに記録する。
【００６４】
なお、ＰＥＳヘッダに記録する情報は、例えばＰＥＳパケットに格納したデータがメインストリーム対応の画像データであるか、サブストリーム対応の画像データであるかを識別可能とした識別子の他、再生処理等において必要となる属性情報等である。
これらの情報は、ＭＭＴフォーマットデータのＭＰＵヘッダから取得して、そのまま記録してもよいし、情報処理装置５０が、ＭＰＵヘッダからの取得情報に基づいて新たに生成した情報を記録する構成としてもよい。
【００６５】
（ステップＳ０２）
次に、図７を参照して、情報処理装置５０の実行するステップＳ０２の処理について説明する。
なお、図７には、図６を参照して説明したステップＳ０１の処理も示している。
【００６６】
情報処理装置５０は、ステップＳ０１ａ，Ｓ０１ｂにおいてＭＭＴパケットのＭＰＵから取得したデータに基づいて、メインストリーム対応のＰＥＳパケット（メイン対応ＰＥＳパケット）と、サブストリーム対応のＰＥＳパケット（サブ対応ＰＥＳパケット）を生成する。
【００６７】
これらの処理の後、ステップＳ０２の処理として、ＰＥＳパケットの格納データを用いてＴＳパケット生成を行う。
先に図２を参照して説明したように、ＴＳパケットは、前述のＭＭＴＰパケットと異なり、固定長であり、１つのＴＳパケットのパケットサイズは、１８８バイトに固定されている。
【００６８】
情報処理装置５０は、メインストリーム画像データを格納したメイン対応ＰＥＳパケットに対する処理ステップ（Ｓ０２ａ）と、サブストリーム画像データを格納したサブ対応ＰＥＳパケットに対する処理ステップ（Ｓ０２ｂ）を実行する。
【００６９】
ステップＳ０２ａは、メインストリーム画像データを格納したメイン対応ＰＥＳパケットに対する処理であり、メイン対応ＰＥＳパケットの格納データを用いてメイン対応ＴＳパケットを生成する。
一方、ステップＳ０２ｂは、サブストリーム画像データを格納したサブ対応ＰＥＳパケットに対する処理であり、サブ対応ＰＥＳパケットの格納データを用いてサブ対応ＴＳパケットを生成する。
【００７０】
なお、ＴＳパケットは、４バイトのＴＳヘッダと、１８４バイトのＴＳペイロードによって構成される。
ＴＳペイロードには、画像データ（ＨＥＶＣ符号化データ）を格納し、ＴＳヘッダには、ＴＳペイロードに格納した画像データに関する情報が記録される。
具体的には、ＴＳヘッダには、ＴＳペイロードの格納データがメインストリーム対応の画像データであるか、サブストリーム対応の画像データであるかを識別可能としたストリーム対応のパケット識別子（ＰＩＤ）の他、再生処理等において必要となる属性情報を記録する。
これらの情報は、ＰＥＳヘッダから取得して、そのまま記録してもよいし、情報処理装置５０が、ＰＥＳヘッダからの取得情報に基づいて新たに生成した情報を記録する構成としてもよい。
【００７１】
（ステップＳ０３）
ステップＳ０２ａ，Ｓ０２ｂにおいて、各ストリーム対応のＴＳパケット、すなわち、
（ａ）メイン対応ＴＳパケット列
（ｂ）サブ対応ＴＳパケット列
これらのストリーム別ＴＳパケット列の生成が完了すると、次に、これら２種類のストリーム対応ＴＳパケット列を１つのＴＳパケット列にまとめる処理を行なう。
図７（６）に示すメインサブ対応ＴＳパケットである。
【００７２】
各ＴＳパケットの配列順は、フォーマット変換対象として入力したＭＭＴフォーマットデータ、すなわち、図６（１）に示すＭＭＴフォーマットデータのデータ配列順と同様の配列順とする。
ただし、ＴＳパケットは１８８バイト固定長であり、ＭＭＴＰパケットはパケットサイズが固定されておらず、データ配列順を完全に一致させることが困難となる場合が発生する可能性がある。この場合は、ダミーデータの記録による調整を行なう。あるいは、多少のずれの発生を許容した配列処理を実行してもよい。
【００７３】
図５に示す情報処理装置５０は、図６、図７を参照して説明した処理ステップＳ０１〜Ｓ０３を実行して、ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットデータに変換する処理を実行する。
すなわち、図６（１）に示すＭＭＴＰパケット列から構成されるＭＭＴフォーマットデータを図７（６）に示すＴＳパケット列から構成されるＭＰＥＧ−２ＴＳフォーマットデータに変換する。
【００７４】
図７（６）に示すＴＳパケット列から構成されるＭＰＥＧ−２ＴＳフォーマットデータは、図５に示すように、情報処理装置５０に装着されたＢＤ等の情報記録媒体７０に記録される。
【００７５】
このようにして、情報処理装置５０が、放送局等から受信したＭＭＴフォーマットデータを、ＭＰＥＧ−２ＴＳフォーマットデータとして情報記録媒体７０に記録することが可能となる。
この情報記録媒体に記録されたＭＰＥＧ−２ＴＳフォーマットデータは、ＭＰＥＧ−２ＴＳフォーマットデータの再生プログラムを持つ一般的なＢＤプレーヤ等によって再生することが可能となる。
なお、具体的な再生処理例については、後段で説明する。
【００７６】
図６、図７を参照して説明したフォーマット変換処理例は、１２０ｐ画像データを格納したＭＭＴフォーマットデータから、すべての画像データを取得して、ＭＰＥＧ−２ＴＳフォーマットデータに変換する処理例である。
【００７７】
しかし、先に図４を参照して説明したように、現行の再生装置や表示装置は、１２０Ｐ画像の再生表示機能がなく、６０ｐ画像の再生表示機能を有するものが多い。
このような再生装置や表示装置において利用する画像データは、メインストリーム画像のみとなる。
【００７８】
従って、ＭＭＴフォーマットデータに含まれるサブストリーム画像は変換対象とせず、メインストリーム画像のみを抽出してＭＰＥＧ−２ＴＳフォーマットデータを構成して、例えばＢＤ等の情報記録媒体に記録する処理を行なえば、６０ｐ画像の再生、表示を行う装置において６０ｐ画像の再生、表示が可能となる。
【００７９】
図８、図９は、ＭＭＴフォーマットデータから、メインストリーム画像のみを抽出してＭＰＥＧ−２ＴＳフォーマットデータを生成するフォーマット変換処理例を説明する図である。
【００８０】
例えば、図５に示す情報処理装置５０は、図８、図９に示す処理（ステップＳ１１〜Ｓ１２）に従って、メインストリーム画像データのみを格納したＭＰＥＧ−２ＴＳフォーマットデータを生成することができる。
図８、図９を参照して、このフォーマット変換処理シーケンスについて説明する。
【００８１】
図８（１）は、図１、図３を参照して説明したＭＭＴフォーマットデータに対する１２０ｐ画像の格納構成例を示す図である。
このＭＭＴフォーマットデータから、メインストリーム画像を格納したＭＭＴＰパケットを選択抽出する。
この選択抽出は、ＭＭＴＰバケットのヘッダ情報に基づいて実行することができる。
【００８２】
図８（２）メインＭＦＵは、図８（１）のＭＭＴフォーマットデータのメインストリームを格納したＭＭＴＰパケットを構成するＭＦＵ、すなわち、メインＭＦＵを示している。
図８（２）メインＭＦＵ群は、例えば１つのＭＰＥＧ圧縮画像単位である１ＧＯＰ（Ｇｒｏｕｐ  ｏｆ  ｐｉｃｔｕｒｅ）に相当する画像データを格納した、
（３）メインＭＰＵ（メディアプレゼンテーションユニット）
として区分可能となる。
【００８３】
図８（３）に示すように、１つのＭＰＵは、ヘッダ部と、ペイロード部を有する。
ヘッダ部には、ペイロード部に格納された画像データに関する属性情報等が格納される。
ペイロード部には、画像圧縮データが格納される。メインＭＰＵのペイロードには、１２０ｐ画像再生、および６０ｐ画像再生のいずれにも利用されるメイン画像ストリーム構成データの符号化（圧縮）データ（ＨＥＶＣ符号化データ）が格納される。
【００８４】
図５に示す情報処理装置５０は、図８〜図９に示すステップＳ１１〜Ｓ１３を実行して、ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットデータに変換する処理を実行する。
以下、各ステップの処理について説明する。
【００８５】
（ステップＳ１１）
情報処理装置５０は、まず、図８に示すステップＳ１１の処理を実行する。
ステップＳ１１は、メインストリーム画像データを格納したメインＭＰＵに対する処理であり、以下の処理を実行する。
情報処理装置５０は、メインストリーム構成画像データを格納したメインＭＰＵから、メインストリーム対応の画像データを取得し、所定単位のデータ、例えば、１アクセスユニット、具体的には、例えば１ピクチャごとにＭＰＥＧ−２ＴＳフォーマットにおいて規定されるＰＥＳパケット（メイン対応ＰＥＳパケット）を生成する。
【００８６】
図８（４）に示すように、ＰＥＳパケットは、ＰＥＳヘッダと、ＰＥＳペイロードによって構成される。
１つのＰＥＳパケットのＰＥＳペイロードとして、メインＭＰＵから取り出した例えば１ピクチャ単位のデータを格納し、その属性情報を、ＰＥＳヘッダに記録する。
【００８７】
なお、ＰＥＳヘッダに記録する情報は、例えばＰＥＳパケットに格納したデータがメインストリーム対応の画像データであるか、サブストリーム対応の画像データであるかを識別可能とした識別子の他、再生処理等において必要となる属性情報等である。
これらの情報は、ＭＭＴフォーマットデータのＭＰＵヘッダから取得して、そのまま記録してもよいし、情報処理装置５０が、ＭＰＵヘッダからの取得情報に基づいて新たに生成した情報を記録する構成としてもよい。
【００８８】
（ステップＳ１２）
次に、図９を参照して、情報処理装置５０の実行するステップＳ１２の処理について説明する。
なお、図９には、図８を参照して説明したステップＳ１１の処理も示している。
【００８９】
情報処理装置５０は、ステップＳ１１においてＭＭＴパケットのＭＰＵから取得したデータに基づいて、メインストリーム対応のＰＥＳパケット（メイン対応ＰＥＳパケット）を生成する。
【００９０】
この処理の後、ステップＳ１２の処理として、ＰＥＳパケットの格納データを用いてＴＳパケット生成を行う。
先に図２を参照して説明したように、ＴＳパケットは、前述のＭＭＴＰパケットと異なり、固定長であり、１つのＴＳパケットのパケットサイズは、１８８バイトに固定されている。
【００９１】
情報処理装置５０は、メインストリーム画像データを格納したメイン対応ＰＥＳパケットに対する処理ステップ（Ｓ１２）を実行する。
【００９２】
ステップＳ１２は、メインストリーム画像データを格納したメイン対応ＰＥＳパケットに対する処理であり、メイン対応ＰＥＳパケットの格納データを用いてメイン対応ＴＳパケットを生成する。
【００９３】
なお、ＴＳパケットは、４バイトのＴＳヘッダと、１８４バイトのＴＳペイロードによって構成される。
ＴＳペイロードには、画像データ（ＨＥＶＣ符号化データ）を格納し、ＴＳヘッダには、ＴＳペイロードに格納した画像データに関する情報が記録される。
具体的には、ＴＳペイロードの格納データが、メインストリーム対応の画像データであるか、サブストリーム対応の画像データであるかを識別可能とした識別子（ＰＩＤ）の他、再生処理等において必要となる属性情報等である。
これらの情報は、ＰＥＳヘッダから取得して、そのまま記録してもよいし、情報処理装置５０が、ＰＥＳヘッダからの取得情報に基づいて新たに生成した情報を記録する構成としてもよい。
【００９４】
図５に示す情報処理装置５０は、図８、図９を参照して説明した処理ステップＳ１１〜Ｓ１２を実行して、ＭＭＴフォーマットデータに含まれるメインストリーム画像データのみを選択抽出して、メインストリーム画像データを有するＭＰＥＧ−２ＴＳフォーマットデータに変換する処理を実行する。
【００９５】
図９（５）に示すＴＳパケット列から構成されるＭＰＥＧ−２ＴＳフォーマットデータは、図５に示すように、情報処理装置５０に装着されたＢＤ等の情報記録媒体７０に記録される。
【００９６】
このようにして、情報処理装置５０が、放送局等から受信したＭＭＴフォーマットデータを、ＭＰＥＧ−２ＴＳフォーマットデータとして情報記録媒体７０に記録することが可能となる。
この情報記録媒体に記録されたＭＰＥＧ−２ＴＳフォーマットデータは、６０ｐ画像として再生可能なメインストリーム画像データのみを有するＭＰＥＧ−２ＴＳフォーマットデータである。
ＭＰＥＧ−２ＴＳフォーマットデータの再生プログラムを持つ一般的なＢＤプレーヤによって再生することで６０ｐ画像の再生が可能となる。
なお、具体的な再生処理例については、後段で説明する。
【００９７】
［４．情報記録媒体の記録データ構成と再生処理の概要について］
次に、図１０以下を参照して、情報記録媒体の記録データ構成と、情報記録媒体からのデータ再生処理の概要について説明する。
情報記録媒体とは、例えば、ＢＤ（Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ）やフラッシュメモリ等である。
【００９８】
図１０は、情報記録媒体７０に記録されたＭＰＥＧ−２ＴＳフォーマットデータを含むデータのディレクトリ構成例を示す図である。
ディレクトリには、図１０に示すように様々な管理情報、再生制御情報、再生対象データの格納ファィルが設定される。
再生対象データは、ＭＰＥＧ−２ＴＳフォーマットに従って記録されたデータである。
【００９９】
再生処理に適用される以下のファイルについて説明する。
インデックスファイル、
プレイリストファイル、
クリップ情報ファイル、
クリップＡＶストリームファイル、
例えば、これらのファイルが記録される。
【０１００】
インデックスファイルには、再生処理に適用するインデックス情報としてのタイトル情報等、ディスク格納データ全体に対応した管理情報等が格納される。
プレイリストファイルは、タイトルによって指定される再生プログラムのプログラム情報に従ってコンテンツの再生順等を規定したファイルであり、例えば、再生位置情報等を記録したクリップ情報ファイルの指定情報等を有する。
クリップ情報ファイルは、プレイリストファイルによって指定されるファイルであり、クリップＡＶストリームファイルの再生位置情報等を有する。
クリップＡＶストリームファイルは、再生対象となるＡＶストリームデータを格納したファイルである。クリップＡＶストリームファイルは、再生対象となる画像、音声、字幕等の各データを格納したパケット（ＴＳパケット）によって構成され、ＭＰＥＧ−２ＴＳフォーマットデータである。
【０１０１】
なお、インデックスファイル、プレイリストファイル、クリップ情報ファイル、これらのデータファイルは、クリップＡＶストリームファイルに格納された再生データである画像、音声、字幕等の再生処理に適用する管理情報、再生制御情報、再生データ属性情報等を格納したファイルであり、データベースファイルと呼ばれる。
【０１０２】
情報処理装置が情報記録媒体に記録されたコンテンツを再生するシーケンスは以下の通りである。
（ａ）まず、再生アプリケーションによってインデックスファイルから特定のタイトルを指定する。
（ｂ）指定されたタイトルに関連付けられた再生プログラムが選択される。
（ｃ）選択された再生プログラムのプログラム情報に従ってコンテンツの再生順等を規定したプレイリストが選択される。
（ｄ）選択されたプレイリストに規定されたクリップ情報によって、コンテンツ実データとしてのＡＶストリームあるいはコマンドが読み出されて、ＡＶストリームの再生や、コマンドの実行処理が行われる。
【０１０３】
図１１は、情報記録媒体（メディア）７０に記録される以下のデータ、すなわち、
プレイリストファイル、
クリップ情報ファイル、
クリップＡＶストリームファイル、
これらのデータの対応関係を説明する図である。
【０１０４】
実際の再生対象データである画像、音声、字幕等の再生対象データからなるＡＶストリームはクリップＡＶストリーム（Ｃｌｉｐ  ＡＶ  Ｓｔｒｅａｍ）ファイルとして記録され、さらに、これらのＡＶストリームの管理情報、再生制御情報ファイルとして、プレイリスト（ＰｌａｙＬｉｓｔ）ファイルと、クリップ情報（Ｃｌｉｐ  Ｉｎｆｏｒｍａｔｉｏｎ）ファイルが規定される。
【０１０５】
これら複数のカテゴリのファイルは、図１１に示すように、
プレイリスト（ＰｌａｙＬｉｓｔ）ファイルを含むプレイリストレイヤ、
クリップＡＶストリーム（Ｃｌｉｐ  ＡＶ  Ｓｔｒｅａｍ）ファイルと、クリップ情報（Ｃｌｉｐ  Ｉｎｆｏｒｍａｔｉｏｎ）ファイルからなるクリップレイヤ、
これらの２つのレイヤに区分できる。
【０１０６】
なお、一つのクリップＡＶストリーム（Ｃｌｉｐ  ＡＶ  Ｓｔｒｅａｍ）ファイルには一つのクリップ情報（Ｃｌｉｐ  Ｉｎｆｏｒｍａｔｉｏｎ）ファイルが対応付けられ、これらのペアを一つのオブジェクトと考え、これらをまとめてクリップ（Ｃｌｉｐ）、あるいはクリップファイルと呼ぶ。
クリップＡＶストリームファイルに含まれるデータの詳細情報、例えばＭＰＥＧデータのＩピクチャ位置情報などを記録したＥＰマップなどの管理情報がクリップ情報ファイルに記録される。
【０１０７】
クリップＡＶストリーム（Ｃｌｉｐ  ＡＶ  Ｓｔｒｅａｍ）ファイルは、ＭＰＥＧ−２ＴＳ（トランスポートストリーム）をＢＤＭＶフォーマットの規定構造に従って配置したデータを格納している。
【０１０８】
また、クリップ情報（Ｃｌｉｐ  Ｉｎｆｏｒｍａｔｉｏｎ）ファイルは、例えば、クリップＡＶストリームファイルのバイト列データのデータ位置と、時間軸上に展開した場合の再生開始ポイントである（エントリポイント：ＥＰ）等の再生時間位置等の対応データ等、クリップＡＶストリームファイルの格納データの再生開始位置などを取得するための管理情報を格納している。
【０１０９】
プレイリストは、クリップ（Ｃｌｉｐ）の再生開始位置や再生終了位置に対応するアクセスポイントを時間軸上の情報であるタイムスタンプで指し示す情報を有する。
例えば、コンテンツの開始点からの再生時間経過位置を示すタイムスタンプに基づいてクリップ情報ファイルを参照して、クリップＡＶストリームファイルのデータ読み出し位置、すなわち再生開始点としてのアドレスを取得することが可能となる。
クリップ情報ファイル（Ｃｌｉｐ  Ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）は、このタイムスタンプから、クリップＡＶストリームファイル中のストリームのデコードを開始すべきアドレス情報を見つけるために利用される。
【０１１０】
このように、プレイリスト（ＰｌａｙＬｉｓｔ）ファイルは、クリップ（＝クリップ情報ファイル＋クリップＡＶストリームファイル）レイヤに含まれる再生可能データに対する再生区間の指定情報を有する。
プレイリスト（ＰｌａｙＬｉｓｔ）ファイルには、１つ以上のプレイアイテム（ＰｌａｙＩｔｅｍ）が設定され、プレイアイテムの各々が、クリップ（＝クリップ情報ファイル＋クリップＡＶストリームファイル）レイヤに含まれる再生可能データに対する再生区間の指定情報を有する。
【０１１１】
図１０を参照して説明したように、情報記録媒体７０に格納されるデータとして、
インデックスファイル、
プレイリストファイル、
クリップ情報ファイル、
クリップＡＶストリームファイル、
これらのファイルがある。
【０１１２】
先に説明した１２０ｐ画像を構成するメインストリーム画像データやサブストリーム画像データ等の再生対象データは、クリップＡＶストリームファイルに格納される。
インデックスファイル、プレイリストファイル、クリップ情報ファイル等のデータベースファイルは、クリップＡＶストリームファイルに格納された再生対象データの再生処理に適用する様々なデータを格納したファイルであり、クリップＡＶストリームファイルに格納されたデータの属性情報等を記録することができる。
【０１１３】
以下、情報記録媒体に記録された画像データの種類、具体的には、１２０ｐ画像、すなわち１２０ｆ／ｓｅｃの高フレームレート画像が記録されているか否か等の高フレームレート画像関連画像情報を、プレイリストファイル、クリップ情報ファイル等のデータベースファイルに記録した実施例について説明する。
図１２は、プレイリストファイル、クリップ情報ファイルに対する格納する画像情報、すなわち高フレームレート画像関連画像情報の具体例を説明する図である。
【０１１４】
プレイリストファイルには、そのプレイリストを適用して再生されデータに関する情報が記録可能であり、プレイリストファイルに記録する画像情報、すなわち、高フレームレート画像関連画像情報は、例えば以下の情報となる。
「プレイリストによる再生対象データに高フレームレート画像（１２０ｐ画像等）が含まれているか否かを示す高フレームレート画像関連画像情報」
【０１１５】
クリップ情報ファイルには、そのクリップ情報ファイルを適用して再生されデータに関する情報が記録可能であり、クリップ情報ファイルに記録する画像情報、すなわち、高フレームレート画像関連画像情報は、例えば以下の情報となる。
「クリップ情報ファイルに対応付けられた再生対象データ中に高フレームレート画像（１２０ｐ画像等）が含まれているか否かを示す高フレームレート画像関連画像情報」
【０１１６】
以下、プレイリストファイル、クリップ情報ファイル、各々に対する具体的な高フレームレート画像関連画像情報の記録例について、順次、説明する。
【０１１７】
［５．プレイリストファイルに対する高フレームレート画像関連画像情報の記録例について］
まず、図１３以下を参照してプレイリストファイルに対する高フレームレート画像関連画像情報の記録例について説明する。
【０１１８】
図１０〜図１２を参照して説明したように、プレイリストファイルには、そのプレイリストを適用して再生されデータに関する情報が記録可能であり、プレイリストファイルに記録する高フレームレート画像関連画像情報は、例えば以下の情報となる。
「プレイリストの再生対象データ中に高フレームレート画像（１２０ｐ画像等）が含まれているか否かを示す高フレームレート画像関連画像情報」
【０１１９】
図１３は、プレイリストファイルのデータ構成例（シンタックス）を示す図である。
プレイリストファイルには、そのプレイリストを適用して再生されデータに関する情報が記録される。
プレイリストファイルには、図１３に示すように、様々な拡張データを記録可能な拡張データ記録領域［ＥｘｔｅｎｓｉｏｎＤａｔａ（）］１２１が設定される。
【０１２０】
拡張データ記録領域［ＥｘｔｅｎｓｉｏｎＤａｔａ（）］には、様々な拡張データが記録されるため、拡張データがどのようなデータであるかを示す拡張データ識別子が、各拡張データに対応付けられて拡張データとともに記録される。
【０１２１】
拡張データ識別子は２つのＩＤ（ＩＤ１，ＩＤ２）によって構成される。
本実施例では、プレイリストファイルにおける高フレームレート画像関連画像情報格納領域を示す拡張データ識別子として未定義の以下の識別子、
ＩＤ１＝０ｘ０００４
ＩＤ２＝０ｘ０００１
この拡張データ識別子を利用する。
この識別情報に対応付けられた拡張データ記録領域に高フレームレート画像関連画像情報、すなわち、例えば以下の画像情報を記録する。
「プレイリストの再生対象データ中に高フレームレート画像（１２０ｐ画像等）が含まれているか否かを示す高フレームレート画像関連画像情報」
【０１２２】
なお、この拡張データ識別子の設定、すなわち、
ＩＤ１＝０ｘ０００４
ＩＤ２＝０ｘ０００１
これらのＩＤ設定は、一例であり、この他のＩＤを高フレームレート画像関連画像情報の記録領域を示すＩＤとして利用する構成も可能である。
【０１２３】
図１４は、図１３に示すプレイリストファイルの拡張データ記録領域［ＥｘｔｅｎｓｉｏｎＤａｔａ（）］１２１に記録される高フレームレート画像関連画像情報のデータ記録領域の構成例（シンタックス）を示す図である。
図１４に示すように、プレイリストファイルの拡張データ記録領域１２１には、拡張データ識別子（ＩＤ）記録領域１２２と、データブロック（ｄａｔａ＿ｂｌｏｃｋ）１２３が設定される。
【０１２４】
拡張データ識別子（ＩＤ）記録領域１２２には、上述した高フレームレート画像関連画像情報の記録領域を示すＩＤ（ＩＤ１＝０ｘ０００４，ＩＤ２＝０ｘ０００１）が記録される。
この拡張データ識別子（ＩＤ）記録領域１２２の後に高フレームレート画像関連画像情報の記録領域であるデータブロック（ｄａｔａ＿ｂｌｏｃｋ）１２３が設定される。
【０１２５】
データブロック（ｄａｔａ＿ｂｌｏｃｋ）１２３に記録される具体的なデータについて、図１５を参照して説明する。
図１５は、図１４に示すデータブロック（ｄａｔａ＿ｂｌｏｃｋ）１２３の詳細構成を示す図である。すなわち、プレイリストファイルに記録される高フレームレート画像関連画像情報の具体的なデータ例を示している。
【０１２６】
図１５に示すようにデータブロックには、ＨＥＶＣビデオ情報［ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ］として、以下のデータ記録領域が設定される。
（１）データ長（ｌｅｎｇｔｈ）１２４、
（２）ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）１２５、
以下、これらの各情報について、順次、説明する。
【０１２７】
（１）データ長（ｌｅｎｇｔｈ）１２４
データ長（ｌｅｎｇｔｈ）１２４には、この拡張データ記録領域、すなわち、拡張データ識別子（ＩＤ１＝０ｘ０００４，ＩＤ２＝０ｘ０００１）によって区分された高フレームレート画像関連画像情報としてのＨＥＶＣビデオ情報記録領域のデータ長（バイト数）が記録される。
【０１２８】
（２）ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）１２５
ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドには、１２０ｐ画像を構成するサブストリーム、すなわち、６０ｐ画像再生には利用されず、１２０ｐ画像再生のみに利用されるサブストリーム画像を格納したパケットの識別子に相当するＰＩＤが記録される。
【０１２９】
再生装置は、このストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドに記録されたＰＩＤを参照して、サブストリーム画像の格納パケットを識別可能となる。
１２０ｐ画像再生を実行できない再生装置、すなわち、６０ｐ画像再生を行なう再生装置は、この記録フィールドに記録されたＰＩＤに基づいて、サブストリーム画像データの格納パケットを判別し、サブトリーム画像格納パケットからの画像データ取得処理を行なわず、その他のメインストリーム画像格納パケットのみから画像データを取得することで、メインストリーム画像のみの画像再生、すなわち６０ｐ画像再生を行なうことが可能となる。
【０１３０】
一方１２０Ｐ画像再生を実行する再生装置は、ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドに記録されたＰＩＤを持つパケット、すなわち、サブストリーム画像格納パケット、およびその他のメインストリーム画像格納パケットの双方から画像データを取得することで、メインストリームとサブストリームを合わせた画像再生、すなわち１２０ｐ画像再生を行なうことが可能となる。
【０１３１】
［６．クリップ情報ファイルに対する高フレームレート画像関連画像情報の記録例について］
次に、図１６以下を参照してクリップ情報ファイルに対する高フレームレート画像関連画像情報の記録例について説明する。
【０１３２】
図１０〜図１２を参照して説明したように、クリップ情報ファイルには、そのクリップ情報ファイルに対応づけられた再生対象データに関する情報が記録可能であり、クリップ情報ファイルに記録する高フレームレート画像関連画像情報は、例えば以下の情報となる。
「クリップ情報ファイルに対応付けられた再生対象データ中に高フレームレート画像（１２０ｐ画像等）が含まれているか否かを示す高フレームレート画像関連画像情報」
【０１３３】
図１６は、クリップ情報ファイルのデータ構成例（シンタックス）を示す図である。
クリップ情報ファイルには、そのクリップ情報に対応付けられた再生データに関する情報が記録される。
クリップ情報ファイルには、図１６に示すように、このクリップ情報に対応付けられた再生データに関する情報として、例えば、以下の各情報が記録される。
クリップ情報［ＣｌｉｐＩｎｆｏ（）］、
シーケンス情報［ＳｅｑｕｅｎｃｅＩｎｆｏ（）］、
プログラム情報［ＰｒｏｇｒａｍＩｎｆｏ（）］、
【０１３４】
クリップ情報［ＣｌｉｐＩｎｆｏ（）］は、クリップ情報ファイルに対応するＡＶストリームファイルの属性情報を記録する。
シーケンス情報［ＳｅｑｕｅｎｃｅＩｎｆｏ（）］は、このクリップ情報ファイルに対応するＡＶストリームファイルに格納された再生対象データの再生シーケンスに関する情報を記録する。
【０１３５】
プログラム情報［ＰｒｏｇｒａｍＩｎｆｏ（）］について説明する。
プログラム情報［ＰｒｏｇｒａｍＩｎｆｏ（）］の記録情報について、図１７以下を参照して説明する。
プログラム情報［ＰｒｏｇｒａｍＩｎｆｏ（）］は、クリップ情報ファイルによって再生されるクリップＡＶストリームの再生区間や時間区間の定義情報等を含むプログラム(ｐｒｏｇｒａｍ＿ｓｅｑｕｅｎｃｅ)に関する情報を記録する。
【０１３６】
図１７に示す、ＰｒｏｇｒａｍＩｎｆｏに記録される主なデータについて説明する。
（ａ）プログラムシーケンス数［ｎｕｍ＿ｏｆ＿ｐｒｏｇｒａｍ＿ｓｅｑｕｅｎｃｅｓ］１３１には、クリップ情報ファイルに含まれるプログラムシーケンス（ｐｒｏｇｒａｍ＿ｓｅｑｕｅｎｃｅ）の数が記録される。
（ｂ）ＳＰＮプログラムシーケンス開始アドレス［ＳＰＮ＿ｐｒｏｇｒａｍ＿ｓｅｑｕｅｎｃｅ＿ｓｔａｒｔ［ｉ］］１３２には、ＡＶストリームファイル上でプログラムシーケンスが開始する場所の相対アドレスが記録される。
（ｃ）プログラムマップＰＩＤ［ｐｒｏｇｒａｍ＿ｍａｐ＿ＰＩＤ［ｉ］］１３３には、プログラムシーケンス（ｐｒｏｇｒａｍ＿ｓｅｑｕｅｎｃｅ）のマップが格納されているＴＳパケットの識別子（ＰＩＤ）が記録される。
【０１３７】
（ｄ）ストリームＰＩＤ［ｓｔｒｅａｍ＿ＰＩＤ］１３４には、このクリップ情報ファイルのプログラムシーケンスに従って再生されるストリームが格納されているＴＳパケットの識別子（ＰＩＤ）が記録される。
なお、例えば、プログラムシーケンスが６０ｐ画像再生に利用されるプログラムシーケンスである場合、このパケット識別子（ＰＩＤ）は、例えば６０ｐ画像再生に適用されるメインストリームを格納したＴＳパケットのパケット識別子である。
【０１３８】
一方、プログラムシーケンスが１２０ｐ画像再生に利用されるプログラムシーケンスである場合、このパケット識別子（ＰＩＤ）は、１２０ｐ画像再生に適用されるメインストリームとサブストリームを格納したＴＳパケットのパケット識別子である。
【０１３９】
（ｅ）ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］１３５には、再生対象ストリームのコーディング（符号化）情報が記録される。
（ｆ）グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］１３６には、再生対象データグループに含まれるストリーム数が記録される。
（ｇ）ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］１３７には、再生対象データグループに含まれるストリームの属性情報が記録される。
【０１４０】
このように、クリップ情報ファイルには、再生対象として関連付けられたクリップＡＶストリームファイルの格納データの再生に必要な様々な情報が記録される。
上記（ａ）〜（ｇ）の各情報記録領域中、以下の情報記録領域を利用して記録される高フレームレート画像関連情報の例について、図１８以下を参照して説明する。
（ｅ）ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］１３５
（ｆ）グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］１３６
（ｇ）ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］１３７
以下、これらの情報記録領域に対する高フレームレート画像関連画像情報の具体的な記録例について説明する。
【０１４１】
［６−１．ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］記録領域を利用した高フレームレート画像関連画像情報記録例］
まず、図１８、図１９を参照して、ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］を利用した高フレームレート画像関連画像情報の具体的な記録例について説明する。
【０１４２】
図１８は、クリップ情報ファイルのプログラム情報［ＰｒｏｇｒａｍＩｎｆｏ（）］記録領域内に設定されるストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］のデータ構成例を示す図である。
ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］には、以下のデータが記録される。
（ａ）ストリームコーディングタイプ［ｓｔｒｅａｍ＿ｃｏｄｉｎｇ＿ｔｙｐｅ］１４１、
（ｂ）ビデオ対応ストリームコーディングタイプ識別子［ｓｔｒｅａｍ＿ｃｏｄｉｎｇ＿ｔｙｐｅ＝ｘｘｘｘ］１４２、
（ｃ）ビデオストリーム情報１４３、
（ｄ）オーディオ対応ストリームコーディングタイプ識別子［ｓｔｒｅａｍ＿ｃｏｄｉｎｇ＿ｔｙｐｅ＝ｘｘｘｘ］１４４、
（ｅ）オーディオストリーム情報１４５、
【０１４３】
ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］には、各ストリーム単位で、ストリームに関する様々な情報が記録される。
【０１４４】
ビデオストリームの場合、先に説明したメインストリームと、サブストリームの各々のストリームに対応する情報を個別に記録することができる。
ビデオストリームに関する情報としては、ビデオストリーム情報１４３中に示すように、例えば以下の各情報をストリーム単位で記録することができる。
（１）ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）
（２）フレームレート（ｆｒａｍｅ＿ｒａｔｅ）、
（３）アスペクト比（ａｓｐｅｃｔ＿ｒａｔｉｏ）、
【０１４５】
上記（１）〜（３）の各情報は、メインストリームについての情報と、サブストリームについての情報として個別に記録することが可能であり、再生装置は、再生装置の再生対象とするストリームに応じた情報を取得し、取得情報に従った再生処理を行なうことが可能となる。
【０１４６】
ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］に対する具体的な情報記録例について、図１９を参照して説明する。
図１９には、ストリームコーディング情報［ＳｔｒｅａｍＣｏｄｉｎｇＩｎｆｏ］として、ビデオストリームに関する以下の情報記録例を示す。
（Ａ）ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）情報記録例
（Ｂ）フレームレート（ｆｒａｍｅ＿ｒａｔｅ）情報記録例
【０１４７】
（Ａ）ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）情報記録例として、以下のデータ記録例を示している。
（１）記録ビット値［５（０１０１）］：意味［１０８０ｐ（２Ｋのプログレッシブ画像）］
（２）記録ビット値［８（１０００）］：意味［２１６０ｐ（４Ｋのプログレッシブ画像）］
（３）記録ビット値［９（１００１）］：意味［４３２０ｐ（８Ｋのプログレッシブ画像）］
【０１４８】
また、（Ｂ）フレームレート（ｆｒａｍｅ＿ｒａｔｅ）情報記録例として、以下のデータ記録例を示している。
（１）記録ビット値［７（０１１１）］：意味［６０ｆ／ｓ］
（２）記録ビット値［８（１０００）］：意味［６０ｆ／ｓ］
（３）記録ビット値［９（１００１）］：意味［１２０ｆ／ｓ］
（４）記録ビット値［１０（１０１０）］：意味［１２０ｆ／ｓ］
【０１４９】
例えば、メインストリームに関するフレームレート情報として、
記録ビット値［８（１０００）］（＝意味［６０ｆ／ｓ］）
上記情報を記録する。
さらに、サブストリームに関するフレームレート情報として、
記録ビット値［９（１００１）］（＝意味［１２０ｆ／ｓ］）
上記情報を記録する。
【０１５０】
このように、メインストリームとサブストリーム各々のストリームに関するフレームレート情報を記録することができる。
例えば、６０ｐ画像の再生処理のみ可能な再生装置は、図１９に示すフレームレート情報から、
（１）記録ビット値［７（０１１１）］：意味［６０ｆ／ｓ］
（２）記録ビット値［８（１０００）］：意味［６０ｆ／ｓ］
上記のような、６０ｆ／ｓのフレームレート情報が記録されたストリームのみを選択して再生する。
この再生処理により、６０ｐ画像のメインストリーム選択再生が可能となる。
【０１５１】
また、１２０ｐ画像の再生が可能な再生装置は、図１９に示すフレームレート情報として、６０ｆ／ｓのフレームレート情報が記録されたストリームと、１２０ｆ／ｓのフレームレート情報が記録されたストリームを併せて再生する。
この再生処理により、メインストリームとサブストリームを併せた１２０ｐ画像再生が可能となる。
【０１５２】
［６−２．グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］と、ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］記録領域を利用した高フレームレート画像関連画像情報記録例］
次に、図２０を参照して、グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］と、ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］記録領域を利用した高フレームレート画像関連画像情報の具体的な記録例について説明する。
【０１５３】
先に、図１７を参照して説明したように、
グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］１３６には、再生対象データグループに含まれるストリーム数が記録される。
ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］１３７には、再生対象データグループに含まれるストリームの属性情報が記録される。
【０１５４】
図２０は、このクリップ情報ファイルの再生対象データとなる画像データに１２０ｐ画像が含まれる場合、すなわちねメインストリーム画像とサブストリーム画像が含まれている場合の、以下の各情報の記録例を示している。
グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］、
ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］、
【０１５５】
図２０に示すように、グループ内ストリーム数１５１の記録情報は、［２］が記録される。
これは、
メインストリーム
サブストリーム、
これらの２つのストリームが、このクリップ情報ファイルに対応付けられたストリームであることを意味する。
【０１５６】
さらに、ストリームインデックス参照情報として、図２０に示すように、
６０ｐ画像再生用のメインストリーム情報１５２、
１２０ｐ画像再生用のメインストリーム＋サブストリームの２ストリーム情報１５３、
これらのストリームインデックス参照情報が記録される。
【０１５７】
６０ｐ画像再生用のメインストリーム情報１５２は、例えば以下の各情報（インデックス情報）によって構成される。
ｇｒｏｕｐ１  （６０Ｈｚ）
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝６０Ｈｚのビデオ
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝ａｕｄｉｏ１（たとえば日本語）
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝ａｕｄｉｏ２（たとえば英語）
【０１５８】
上記情報は、グループ１が、
６０Ｈｚ（６０ｆ／ｓ）対応のビデオ、
音声データとして、日本語音声と英語音声
これらのデータを含むことを示すものである。
【０１５９】
また、このこれらのインデックス情報には、ビデオデータや音声データを格納したＴＳパケットのパケット識別子（ＰＩＤ）が含まれる。
すなわち、
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝６０Ｈｚのビデオ
上記情報中には、６０ｐ画像再生と、１２０ｐ画像再生の双方に利用されるメインストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）が含まれている。
【０１６０】
６０ｐ画像を再生する再生装置は、この６０ｐ画像再生用のメインストリーム情報１５２から再生対象となる画像（６０ｐ画像）と音声情報を取得できる。
【０１６１】
また、１２０ｐ画像再生用のメインストリーム＋サブストリームの２ストリーム情報１５３は、例えば以下の各情報によって構成される。
ｇｒｏｕｐ２  （１２０Ｈｚ）
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝６０Ｈｚのビデオ
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝１２０Ｈｚのビデオ
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝ａｕｄｉｏ１（たとえば日本語）
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝ａｕｄｉｏ２  （たとえば英語）
【０１６２】
上記情報は、グループ２が、
６０Ｈｚ（６０ｆ／ｓ）対応のビデオ、
１２０Ｈｚ（１２０ｆ／ｓ）対応のビデオ、
音声データとして、日本語音声と英語音声
これらのデータを含むことを示すものである。
【０１６３】
また、このこれらのインデックス情報には、ビデオデータや音声データを格納したＴＳパケットのパケット識別子（ＰＩＤ）が含まれる。
すなわち、
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝６０Ｈｚのビデオ
上記情報中には、６０ｐ画像再生と、１２０ｐ画像再生の双方に利用されるメインストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）が含まれている。
さらに、
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝１２０Ｈｚのビデオ
上記情報中には、１２０ｐ画像再生に利用されるメインストリーム画像を格納したＴＳパケット、およびサブストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）が含まれている。
【０１６４】
１２０ｐ画像を再生する再生装置は、この１２０ｐ画像再生用のメインストリーム＋サブストリームの２ストリーム情報１５３から再生対象となる画像（１２０ｐ画像）と音声情報を取得できる。
【０１６５】
［７．情報記録媒体に対するデータ記録処理を実行する情報処理装置の構成と処理について］
次に、図２１、図２２を参照して情報記録媒体に対するデータ記録処理を実行する情報処理装置の構成と処理について説明する。
【０１６６】
先に説明したように、本開示の情報処理装置は、ＭＭＴフォーマットで記録されている１２０ｐ画像等の高フレームレート画像データを、ＭＰＥＧ−２ＴＳフォーマットに変換してＢＤやフラッシュメモリ等の情報記録媒体に記録する。
さらに、このフォーマット変換に伴い、プレイリスト、あるいはクリップ情報ファイルの少なくともいずれかのデータベースファイルに、クリップＡＶストリームファイルに高フレームレート画像が記録されていることを示す情報や、６０Ｐ画像の再生処理、あるいは１２０ｐ画像の再生処理のいずれかを選択して実行可能とするための情報を記録する。
【０１６７】
以下、このような高フレームレート画像関連画像情報を記録した情報記録媒体の生成処理、具体的には、ＢＤ等の情報記録媒体に対するデータ記録処理を実行する情報処理装置の構成と、処理シーケンスについて説明する。
【０１６８】
図２１は、ＢＤ等の情報記録媒体に対するデータ記録処理を実行する情報処理装置３００の構成を示す図である。
情報処理装置３００は、図２１に示す情報記録媒体（記録メディア）３２０に、ＭＰＥＧ−２ＴＳフォーマットに従った画像データ、さらに、高フレームレート画像関連画像情報を記録したプレイリストやクリップ情報ファイル等のデータベースファイルを記録する。
【０１６９】
データ入力部３０１は、情報記録媒体３２０に対するＭＭＴフォーマットデータ３３１、すなわち画像データ、音声データ、字幕データ等を含むＭＭＴフォーマットデータ３３１を入力する。
データ入力部３０１は、ＭＭＴフォーマットデータ３３１を送信する例えば放送局やコンテンツサーバ等からの送信データを受信する受信部、あるいは、ＭＭＴフォーマットデータ３３１を記録したメディアからのデータ読み取りを実行するメディア読み取り部等によって構成される。
【０１７０】
データ入力部３０１から入力するＭＭＴフォーマットデータ３３１は、先に図１を参照して説明したデータフォーマットに従ったデータであり、例えば１２０ｐ画像等の高フレームレート画像データが含まれている。
【０１７１】
ＭＭＴフォーマットデータ３３１は、制御部３０３の制御によって、記憶部３０４に格納される。
ユーザ入力部３０２は、例えば情報記録媒体３２０に対するデータ記録の開始要求等を入力する。
制御部４０１は、ＭＭＴフォーマットデータ３３１を解析し、ＭＭＴフォーマットデータ３３１に１２０ｐ画像等の高フレームレート画像が含まれるか否かを判定し、判定情報に応じてフォーマット変換の処理態様を制御する。
【０１７２】
ユーザ入力部３０２から、データ記録開始要求を入力すると、この入力をトリガとして、記憶部３０４に格納されたＭＭＴフォーマットデータ３３１が、デマルチプレクサ（ＤｅＭＵＸ）３０５に入力される。
デマルチプレクサ（ＤｅＭＵＸ）３０５は、ＭＭＴフォーマットデータ３３１から、画像、音声、字幕等の各データを格納したパケットを取得し、データ種別のパケットに分類し、各パケットを、データ種類に応じて、多重化処理部３０６の字幕データ変換部３１１、画像データ変換部３１２、音声データ変換部３１３に入力する。
【０１７３】
字幕データ変換部３１１は、データ入力部３０１が入力し、記憶部３０４に格納されたＭＭＴフォーマットデータ３３１から、字幕データを取得し、ＭＰＥＧ−２ＴＳフォーマットデータに変換する。
画像データ変換部３１２は、データ入力部３０１が入力し、記憶部３０４に格納されたＭＭＴフォーマットデータ３３１から、画像データを取得し、ＭＰＥＧ−２ＴＳフォーマットデータに変換する。
音声データ変換部３１３は、データ入力部３０１が入力し、記憶部３０４に格納されたＭＭＴフォーマットデータ３３１から、音声データを取得し、ＭＰＥＧ−２ＴＳフォーマットデータに変換する。
【０１７４】
ＭＭＴフォーマットデータからＭＰＥＧ−２ＴＳフォーマットデータへのォーマット変換処理は、先に、図６〜図９を参照して説明した処理に従った処理である。
なお、図６〜図９を参照して説明したフォーマット変換処理は、画像データのみについて説明しているが、その他の音声、字幕データについても、同様の処理シーケンスでフォーマット変換を行う。
【０１７５】
マルチプレクサ（ＭＵＸ）３１４は、字幕データ変換部３１１、画像データ変換部３１２、音声データ変換部３１３が変換した字幕、画像、音声各データを入力し、これらのデータを格納したトランスポートストリームファイル（ＴＳファイル）を生成する。
【０１７６】
さらに、制御部４０１は、ＭＭＴフォーマットデータ３３１を解析し、ＭＭＴフォーマットデータ３３１に１２０ｐ画像等の高フレームレート画像が含まれるか否かを判定し、判定情報に応じたデータベースファイルの生成を実行する。
すなわち、情報記録媒体５２０に記録するための管理データや再生制御情報ファイルを生成する。具体的には、前述した高フレームレート画像関連画像情報を記録したプレイリストファイル、クリップ情報ファイル等のデータベースファイルを含む記録データを生成する。
【０１７７】
多重化処理部３０６の生成したＭＰＥＧ−２ＴＳフォーマットデータと、制御部３０３の生成した高フレームレート画像関連画像情報を記録したプレイリストファイル、クリップ情報ファイル等のデータベースファイルを含む記録データ３３２は、制御部３０３の制御の下、記録部３０６によって、ドライブ３０７を介して情報記録媒体３２０に出力され、記録される。
【０１７８】
次に、図２１に示す情報処理装置３００が実行する情報記録媒体３２０に対するデータ記録処理のシーケンスについて、図２２に示すフローチャートを参照して説明する。
【０１７９】
図２２に示すフローに従った処理は、例えば情報処理装置の記憶部に格納されたプログラムに従って、プログラム実行機能を有するＣＰＵを備えたデータ処理部（制御部）の制御の下で実行することができる。
以下、図２２のフローに示す各ステップの処理について、順次、説明する。
【０１８０】
（ステップＳ１０１）
まず、情報処理装置３００は、ステップＳ１０１において、データ入力部３０１を介して記録用データであるＭＭＴフォーマットデータを入力する。
なお、この記録用データには画像データ、音声データ、字幕データ等が含まれる。
なお、このフローでは、画像データのフォーマット変換と、記録処理のみについて説明する。
画像データには１２０ｐ画像等の高フレームレート画像が含まれる。
【０１８１】
（ステップＳ１０２）
次に、ステップＳ１０２において、制御部３０３は、１２０ｐ画像等の高フレームレートの画像記録を実行するか否かを判定する。
【０１８２】
例えばフォーマット変換後のＭＰＥＧ−２ＴＳフォーマッデータを記録した情報記録媒体３２０の記録データを再生する再生装置や表示装置が１２０ｐ画像再生を実行可能な場合は、１２０ｐ画像等の高フレームレートの画像記録を実行すると判定する。
一方、再生装置や表示装置が１２０ｐ画像再生を実行不可能な場合は、１２０ｐ画像等の高フレームレートの画像記録を実行しないと判定する。
この判定処理は、ユーザ入力部からの入力情報に基づいて実行可能である。
【０１８３】
あるいは、このフローに従ったフォーマット変換及びデータ記録を実行する記録装置が再生機能を有する場合は、その再生機能に基づいて判定してもよい。
１２０ｐ画像再生機能を有する場合は、１２０ｐの画像記録を行うと判定し、有しない場合は、１２０ｐの画像記録を行わないと判定する。
【０１８４】
ステップＳ１０２において、１２０ｐ画像等の高フレームレートの画像記録を実行すると判定した場合は、ステップＳ１１１に進み、行わないと判定した場合は、ステップＳ１０３に進む。
【０１８５】
（ステップＳ１０３）
まず、ステップＳ１０２において１２０ｐ画像等の高フレームレートの画像記録を実行しないと判定した場合の処理について説明する。
なお、ステップＳ１０３〜Ｓ１０４の処理は、先に図８、図９を参照して説明したフォーマット変換処理に相当する処理である。
【０１８６】
まず、ステップＳ１０３において、ＭＭＴフォーマットデータから、１２０ｐ画像再生、６０ｐ画像再生のいずれにも利用可能なメインストリーム画像を格納したパケットを選択してメインストリーム対応の画像データを抽出する。
【０１８７】
（ステップＳ１０４）
次に、ステップＳ１０４において、ステップＳ１０３でＭＭＴフォーマットデータから抽出したメインストリーム対応画像データを、ＭＰＥＧ−２ＴＳフォーマットにおいて規定されるＴＳパケットに格納する。
すなわち、図９（５）に示すメイン対応ＴＳパケットを生成する。
【０１８８】
（ステップＳ１０５）
次に、ステップＳ１０５において、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ）に、ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）と、フレームレート（ｆｒａｍｅ＿ｒａｔｅ）＝６０ｐ等を設定する。
【０１８９】
この処理は、先に図１９を参照して説明したクリップ情報ファイルのプログラム情報記録領域に対するビデオフォーマット情報と、フレームレート情報の記録処理である。
【０１９０】
ステップＳ１０５では、図１９に示す例の（Ａ）ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）情報として、
（１）記録ビット値［５（０１０１）］：意味［１０８０ｐ（２Ｋのプログレッシブ画像）］
（２）記録ビット値［８（１０００）］：意味［２１６０ｐ（４Ｋのプログレッシブ画像）］
（３）記録ビット値［９（１００１）］：意味［４３２０ｐ（８Ｋのプログレッシブ画像）］
このいずれかを記録する。
【０１９１】
また、（Ｂ）フレームレート（ｆｒａｍｅ＿ｒａｔｅ）情報として、
（１）記録ビット値［７（０１１１）］：意味［６０ｆ／ｓ］
（２）記録ビット値［８（１０００）］：意味［６０ｆ／ｓ］
これらのいずれかを記録する。
【０１９２】
これらの情報を記録することで、再生装置は、このクリップ情報ファイルに従ったデータ再生によって再生される画像データが６０ｐ画像であると判断することが可能となる。
【０１９３】
（ステップＳ１１１）
次に、ステップＳ１０２において１２０ｐ画像等の高フレームレートの画像記録を実行すると判定した場合の処理について説明する。
なお、ステップＳ１１１〜Ｓ１１２の処理は、先に図６、図７を参照して説明したフォーマット変換処理に相当する処理である。
【０１９４】
まず、ステップＳ１１１において、ＭＭＴフォーマットデータ中の画像データを格納したメディアフラグメントユニット（ＭＦＵ：Ｍｅｄｉａ  Ｆｒａｇｍｅｎｔ  ｕｎｉｔ）を、以下の２つのＭＦＵに分離する。
（ａ）メインストリーム画像データを格納したメインストリームＭＦＵ、
（ｂ）サブストリーム画像データを格納したサブストリームＭＦＵ
【０１９５】
このＭＦＵ分離処理は、先に説明した図６に示す（２ａ）メインＭＦＵ、（２ｂ）サブＭＦＵの分離処理に相当する処理である。
このＭＦＵ分離処理は、ＭＭＴＰパケットのパケット識別子に基づいて実行される。
【０１９６】
（ステップＳ１１２）
次に、メインストリームＭＦＵから抽出したメインストリーム画像データをＴＳバケットに格納したメインストリーム対応ＴＳパケットと、サブストリームＭＦＵから抽出したサブストリーム画像データをＴＳバケットに格納したサブストリーム対応ＴＳパケットを生成する。
【０１９７】
このストリーム対応ＴＳパケット生成処理は、先に説明した図７に示す（５ａ）メイン対応ＴＳ、（５ｂ）サブ対応ＴＳの生成処理に相当する処理である。
【０１９８】
さらに、ステップＳ１１２では、図７に示す（５ａ）メイン対応ＴＳパケット、（５ｂ）サブ対応ＴＳパケットの各々に、ストリーム対応の異なるパケット識別子（ＰＩＤ）を設定し、多重化処理を実行する。
このＴＳパケット多重化処理は、先に説明した図７に示す（６）メインサブ包含ＴＳパケットの生成処理に相当する処理である。
【０１９９】
メイン対応ＴＳパケットと、サブ対応ＴＳパケットの各々に、異なるパケット識別子（ＰＩＤ）を設定することで、再生装置は、ＰＩＤに基づいてメインストリームのみを選択した再生処理（６０ｐ画像再生）や、メインストリームトサブストリームの双方を選択した再生処理（１２０ｐ画像再生）を実行することが可能となる。
【０２００】
（ステップＳ１１３）
次に、ステップＳ１１３において、メインストリーム対応ＴＳパケットの再生制御情報として対応付けられたクリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ）に、ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）と、フレームレート（ｆｒａｍｅ＿ｒａｔｅ）＝６０ｐ等を設定する。
【０２０１】
この処理は、先に図１９を参照して説明したクリップ情報ファイルのプログラム情報記録領域に対するビデオフォーマット情報と、フレームレート情報の記録処理である。
【０２０２】
ステップＳ１１３では、図１９に示す例の（Ａ）ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）情報として、
（１）記録ビット値［５（０１０１）］：意味［１０８０ｐ（２Ｋのプログレッシブ画像）］
（２）記録ビット値［８（１０００）］：意味［２１６０ｐ（４Ｋのプログレッシブ画像）］
（３）記録ビット値［９（１００１）］：意味［４３２０ｐ（８Ｋのプログレッシブ画像）］
このいずれかを記録する。
【０２０３】
また、（Ｂ）フレームレート（ｆｒａｍｅ＿ｒａｔｅ）情報として、
（１）記録ビット値［７（０１１１）］：意味［６０ｆ／ｓ］
（２）記録ビット値［８（１０００）］：意味［６０ｆ／ｓ］
これらのいずれかを記録する。
【０２０４】
これらの情報を記録することで、再生装置は、このクリップ情報ファイルに従ったデータ再生によって再生される画像データが６０ｐ画像として再生可能であると判断することが可能となる。
【０２０５】
（ステップＳ１１４）
次に、ステップＳ１１４において、サブストリーム対応ＴＳパケットの再生制御情報として対応付けられたクリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ）に、ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）と、フレームレート（ｆｒａｍｅ＿ｒａｔｅ）＝１２０ｐ等を設定する。
【０２０６】
この処理は、先に図１９を参照して説明したクリップ情報ファイルのプログラム情報記録領域に対するビデオフォーマット情報と、フレームレート情報の記録処理である。
【０２０７】
ステップＳ１１４においても、ステップＳ１１３の処理と同様、図１９に示す例の（Ａ）ビデオフォーマット（ｖｉｄｅｏ＿ｆｏｒｍａｔ）情報として、
（１）記録ビット値［５（０１０１）］：意味［１０８０ｐ（２Ｋのプログレッシブ画像）］
（２）記録ビット値［８（１０００）］：意味［２１６０ｐ（４Ｋのプログレッシブ画像）］
（３）記録ビット値［９（１００１）］：意味［４３２０ｐ（８Ｋのプログレッシブ画像）］
このいずれかを記録する。
【０２０８】
また、（Ｂ）フレームレート（ｆｒａｍｅ＿ｒａｔｅ）情報として、
（３）記録ビット値［９（１００１）］：意味［１２０ｆ／ｓ］
（２）記録ビット値［１０（１０１０）］：意味［１２０ｆ／ｓ］
これらのいずれかを記録する。
【０２０９】
これらの情報を記録することで、再生装置は、このクリップ情報ファイルに従ったデータ再生によって再生される画像データが１２０ｐ画像として再生可能なサブストリーム画像であると判断することが可能となる。
【０２１０】
（ステップＳ１１５）
さらに、ステップＳ１１５において、クリップ情報（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）にグループ情報（ｇｒｏｕｐ  ｉｎｆｏｒｍａｔｉｏｎ）を登録する処理を実行する。
【０２１１】
この処理は、先に、図２０を参照して説明した情報の登録処理である。
図２０を参照して説明したように、
グループ内ストリーム数［ｎｕｍ＿ｏｆ  ｓｔｒｅａｍｓ＿ｉｎ＿ｇｒｏｕｐｓ］として、メインストリームとサブストリームが存在することを示す［２］を記録する。
さらに、ストリームインデックス参照情報［ｒｅｆ＿ｔｏ＿ｓｔｒｅａｍ＿ｉｎｄｅｘ］に、図２０に示すように、
６０ｐ画像再生用のメインストリーム情報１５２、
１２０ｐ画像再生用のメインストリーム＋サブストリームの２ストリーム情報１５３、
これらのストリームインデックス参照情報を記録する。
【０２１２】
６０ｐ画像を再生する再生装置は、図２０に示す６０ｐ画像再生用のメインストリーム情報１５２から再生対象となる画像（６０ｐ画像）と音声情報を取得できる。
１２０ｐ画像を再生する再生装置は、図２０に示す１２０ｐ画像再生用のメインストリーム＋サブストリームの２ストリーム情報１５３から再生対象となる画像（１２０ｐ画像）と音声情報を取得できる。
【０２１３】
（ステップＳ１１６）
次に、フォーマット変換を実行した画像ストリームムの再生制御情報となるプレイリストファイル（ＰｌａｙＬｉｓｔ＿ｆｉｌｅ）にＨＥＶＣビデオ情報（ＨＥＶＣ＿ｖｉｄｅｏ＿Ｉｎｆｏ（））を記録する。
【０２１４】
この処理は、先に、図１５を参照して説明した処理である。
図１５に示すようにプレイリストファイル（ＰｌａｙＬｉｓｔ＿ｆｉｌｅ）に、ＨＥＶＣビデオ情報［ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ］として、以下のデータを記録する。
（１）データ長（ｌｅｎｇｔｈ）、
（２）ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）、
【０２１５】
（２）ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）には、１２０ｐ画像を構成するサブストリーム、すなわち、６０ｐ画像再生には利用されず、１２０ｐ画像再生のみに利用されるサブストリーム画像を格納したパケットの識別子に相当するＰＩＤを記録する。
【０２１６】
再生装置は、このストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドに記録されたＰＩＤを参照して、サブストリーム画像の格納パケットを識別可能となる。
１２０ｐ画像再生を実行できない再生装置、すなわち、６０ｐ画像再生を行なう再生装置は、この記録フィールドに記録されたＰＩＤに基づいて、サブストリーム画像データの格納パケットを判別し、サブイトリーム画像格納パケットからの画像データ取得処理を行なわず、その他のメインストリーム画像格納パケットのみから画像データを取得することで、メインストリーム画像のみの画像再生、すなわち６０ｐ画像再生を行なうことが可能となる。
【０２１７】
一方１２０Ｐ画像再生を実行する再生装置は、ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドに記録されたＰＩＤを持つパケット、すなわち、サブストリーム画像格納パケット、およびその他のメインストリーム画像格納パケットの双方から画像データを取得することで、メインストリームとサブストリームを合わせた画像再生、すなわち１２０ｐ画像再生を行なうことが可能となる。
【０２１８】
以上が、ＭＭＴフォーマットデータからＭＰＥＧ−２ＴＳフォーマットへの変換処理において、図２１に示す情報処理装置３００が実行する処理である。
図２１に示す情報処理装置３００は、図２２に示すフローに従って実行した結果として得られるＭＰＥＧ−２ＴＳフォーマットデータと、プレイリスト、クリップ情報ファイルを含むデータベースファイルを併せて、先に図１０を参照して説明したディレクトリ構成に従ったデータを生成して、図２１に示す情報記録媒体３２０に記録する。
【０２１９】
［８．情報記録媒体からのデータ再生処理を実行する情報処理装置の構成と処理について］
次に、図２３、図２４を参照して情報記録媒体からのデータ再生処理を実行する情報処理装置の構成と処理について説明する。
【０２２０】
再生処理を実行する情報処理装置は、装置に装着した情報記録媒体に記録されたＭＰＥＧ−２ＴＳフォーマットデータの読み取り、再生処理を実行する。
この再生処理において、情報処理装置が１２０ｐ画像の再生機能を有していれば、１２０ｐ画像再生を実行する。すなわち、メインストリームと、サブストリームを利用した再生処理を実行する。
一方、情報処理装置が１２０ｐ画像の再生機能を有していなければ、６０ｐ画像再生を実行する。すなわち、サブストリームを利用せず、メインストリームのみの再生処理を実行する。
【０２２１】
図２３は、ＢＤ等の情報記録媒体５１０に記録されたデータの再生処理を実行する情報処理装置４００の構成を示す図である。
情報処理装置４００は、図２３に示す情報記録媒体（記録メディア）５１０に記録されたデータを読み取り、出力装置（表示部＋スピーカ）５２０に出力する。なお、出力装置５２０は、例えばテレビ等であり、ディスプレイ、スピーカ等を備えた表示装置である。
【０２２２】
情報記録媒体（記録メディア）５１０は、図２１、図２２を参照して説明した処理によって生成されたＭＰＥＧ−２ＴＳフォーマットデータと、プレイリスト、クリップ情報ファイル等のデータベースが記録された記録媒体である。
【０２２３】
クリップＡＶストリームファイルには１２０ｐ画像等の高フレームレート画像が記録されている。
また、プレイリストファイル、クリップ情報ファイルの各々には、前述した高フレームレート画像関連画像情報が記録されている。
【０２２４】
制御部４０１は、例えば、ユーザ入力部４０２からの再生指示情報の入力に基づいて、情報記録媒体５１０の記録データを、記録再生部４０４、ドライブ４０３を介して読み取り、データバッファとしての記憶部４０５に格納し、その格納データを再生処理部４０６に出力する。
【０２２５】
また、制御部４０１は、入出力インタフェース４０７を介して出力装置（表示部＋スピーカ）５２０との通信を実行する。制御部４０１は、情報記録媒体５１０から読み出したインデックスファイル、プレイリストファイル、クリップ情報ファイル等のデータベースファイルに記録された高フレームレート画像関連画像情報を解析する。
さらに、解析結果に基づき、表示処理に必要な再生データを再生処理部４０６に生成させ、出力装置（表示部＋スピーカ）５２０に出力させる制御を実行する。
【０２２６】
再生処理部４０６は、制御部４０１の制御の下、情報記録媒体５１０から読み出された再生データ、すなわち、画像、音声、字幕等の各データを格納したクリップＡＶストリームファイルから各データを取得して再生データを生成する。
【０２２７】
デマルチプレクサ（ＤｅＭＵＸ）４１１は、画像、音声、字幕等の各データを格納したクリップＡＶストリームファイルを構成するデータ格納パケットを取得し、データ種別のパケットに分類し、各パケットを、データ種類に応じて、字幕データ生成部４１２、画像データ生成部４１３、音声データ生成部４１４に出力する。
【０２２８】
字幕データ生成部４１２、画像データ生成部４１３、音声データ生成部４１４は、パケットに格納されたデータの復号処理等を実行し、復号データを出力データ生成部４１５に出力する。
出力データ生成部４１５は、字幕、画像、音声の各データを、入出力インタフェース４０７を介して出力装置（表示部＋スピーカ）５２０に出力する。
【０２２９】
なお、画像データ生成部４１５は、制御部４０１の制御の下、情報記録媒体５１０から読み出したＭＰＥＧ−２ＴＳフォーマットデータ中のＴＳパケットに格納された画像データが１２０ｐ画像データであるか否か、情報処理装置４００が、１２０ｐ画像の再生機能を有するか否かに応じて、再生可能な画像データを生成する処理を実行する。
この処理の詳細については、後段で、図２４に示すフローを参照して説明する。
【０２３０】
出力装置（表示部＋スピーカ）５２０は、情報処理装置４００から入力する字幕、画像、音声等の各データを、出力装置（表示部＋スピーカ）５２０を介して出力する。
【０２３１】
次に、図２３に示す情報処理装置４００が実行する情報記録媒体５１０からのデータ再生処理のシーケンスについて、図２４に示すフローチャートを参照して説明する。
【０２３２】
図２４に示すフローに従った処理は、例えば情報処理装置４００の記憶部に格納されたプログラムに従って、プログラム実行機能を有するＣＰＵを備えたデータ処理部（制御部）の制御の下で実行することができる。
【０２３３】
なお、図２４に示すフローに従った処理を実行する情報処理装置は、図２３に示す情報処理装置４００であり、情報記録媒体（記録メディア）５１０を装着し、装着した情報記録媒体５１０に記録されたデータを読み取り、出力装置（表示部＋スピーカ）５２０に出力する。なお、出力装置５２０は、例えばテレビ等であり、ディスプレイ、スピーカ等を備えた表示装置である。
【０２３４】
情報記録媒体（記録メディア）５１０は、図２１、図２２を参照して説明した処理によって生成されたＭＰＥＧ−２ＴＳフォーマットデータと、プレイリスト、クリップ情報ファイル等のデータベースが記録された記録媒体である。
以下、図２４のフローに示す各ステップの処理について、順次、説明する。
【０２３５】
（ステップＳ２０１）
まず、情報処理装置４００の制御部４０１は、ステップＳ２０１において、高フレームレート画像（１２０ｐ画像）対応の再生制御情報であるプレイリスト（ＰｌａｙＬｉｓｔ）を指定した再生指示を、ユーザ入力部４０２から入力する。
【０２３６】
（ステップＳ２０２）
次に、ステップＳ２０２において、制御部４０１は、自装置、すなわち情報処理装置４００が、１２０ｐ画像等の高フレームレートの画像再生の機能を有するか否かを判定する。
【０２３７】
この判定処理は、情報処理装置４００のメモリ等に記録された機能情報に基づいて実行してもよいし、ユーザ入力部４０２からの入力に基づいて実行してもよい。
ステップＳ２０２において、１２０ｐ画像等の高フレームレートの画像再生機能を有すると判定した場合は、ステップＳ２１１に進み、機能を有さないと判定した場合は、ステップＳ２０３に進む。
【０２３８】
（ステップＳ２０３）
まず、ステップＳ２０２において、情報処理装置４００が、１２０ｐ画像等の高フレームレートの画像再生機能を有していないと判定した場合の処理について説明する。
【０２３９】
この場合、ステップＳ２０３〜Ｓ２０５において実行する処理は、高フレームレート画像（１２０ｐ画像）の再生ではなく、６０ｐ画像の再生処理、すなわちメインストリームのみを利用した６０ｐ画像の再生処理となる。
先に図４を参照して説明した図４（３）の６０ｐ画像再生例と同様の処理である。
【０２４０】
この場合、まず、ステップＳ２０３において、ステップＳ２０１で指定された再生制御情報であるプレイリストを情報記録媒体から読み出し、プレイリストの記録情報に従った再生処理の準備を実行する。
ただし、プレイリストに記録された画像情報（ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ（））の読み出しは不要である。
【０２４１】
プレイリストに記録された画像情報（ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ（））は、先に図１５を参照して説明した情報である。
図１５を参照して説明したように、プレイリストに記録された画像情報（ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ（））には、ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）１２５が記録される。
ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドには、１２０ｐ画像を構成するサブストリーム、すなわち、６０ｐ画像再生には利用されず、１２０ｐ画像再生のみに利用されるサブストリーム画像を格納したパケットの識別子に相当するＰＩＤが記録される。
再生装置は、このストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドに記録されたＰＩＤを参照して、サブストリーム画像の格納パケットを識別可能となる。
【０２４２】
６０ｐ画像再生を行なう再生装置は、メインストリーム画像のみを利用した再生を実行することになり、メインストリームの画像データを格納したパケットのＰＩＤのみを取得できればよい。
メインストリームの画像データを格納したパケットのＰＩＤは、次のステップＳ２０４で、プレイリストに関連付けられたクリップ情報ファイルから取得することになる。
【０２４３】
（ステップＳ２０４）
次に、ステップＳ２０４において、制御部４０１は、プレイリストに関連付けられたクリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）を取得し、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ（））を読み出して、６０ｐ画像再生に必要となるメインストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）を取得する。
【０２４４】
先に図１７を参照して説明したように、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ（））には、ストリームＰＩＤ［ｓｔｒｅａｍ＿ＰＩＤ］１３４が記録される。すなわち、クリップ情報ファイルのプログラムシーケンスに従って再生されるストリームが格納されているＴＳパケットの識別子（ＰＩＤ）が記録される。
【０２４５】
例えば、プログラムシーケンスが６０ｐ画像再生に利用されるプログラムシーケンスである場合、このパケット識別子（ＰＩＤ）は、例えば６０ｐ画像再生に適用されるメインストリームを格納したＴＳパケットのパケット識別子である。
ステップＳ２０４では、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ（））から、６０ｐ画像再生に適用されるメインストリームを格納したＴＳパケットのパケット識別子（ＰＩＤ）を取得する。
【０２４６】
（ステップＳ２０５）
次に、ステップＳ２０５において、ステップＳ２０４で取得したメインストリーム画像を格納したＴＳパケットの識別子（ＰＩＤ）に基づいてＴＳパケットの選択抽出を実行し、ＴＳパケット列から、メインストリーム画像を格納したＴＳパケットのみを選択して、データを取り出し、復号処理を実行して再生処理を行なう。
【０２４７】
この再生処理において再生されるストリームは、サブストリームを適用しない、メインストリームのみであり、６０ｐ画像の再生処理となる。
すなわち、図４（３）に示すメインストリームのみを利用した６０ｐ画像の再生処理となる。
【０２４８】
（ステップＳ２１１）
次に、ステップＳ２０２において、情報処理装置４００が、１２０ｐ画像等の高フレームレートの画像再生機能を有していると判定した場合のステップＳ２１１以下の処理について説明する。
【０２４９】
ステップＳ２１１〜Ｓ２１４において実行する処理は、高フレームレート画像（１２０ｐ画像）の再生となる。
先に図４を参照して説明した図４（２）の１２０ｐ画像再生例と同様の処理である。
【０２５０】
ステップＳ２１１〜Ｓ２１３は、いずれも、１２０ｐ画像再生に利用するメインストリームとサブストリームの画像を格納したＴＳパケットの識別子（ＰＩＤ）を確認する処理である。
従って、ステップＳ２１１〜Ｓ２１３のすべての処理を行なうことは必須ではなく、いずれかの処理を実行して、メインストリームとサブストリームの画像を格納したＴＳパケットの識別子（ＰＩＤ）を取得すればよい。
【０２５１】
ステップＳ２１１において、ステップＳ２０１で指定された再生制御情報であるプレイリストを情報記録媒体から読み出し、プレイリストの記録情報に従った再生処理の準備を実行する。
ステップＳ２１１では、先に説明した６０ｐ画像再生時のステップＳ２０３の処理とは異なり、プレイリストに記録された画像情報（ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ（））の読み出しを実行する。
【０２５２】
先に図１５を参照して説明したように、プレイリストに記録された画像情報（ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ（））には、ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）１２５が記録される。
ストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドには、１２０ｐ画像を構成するサブストリーム、すなわち、６０ｐ画像再生には利用されず、１２０ｐ画像再生のみに利用されるサブストリーム画像を格納したパケットの識別子に相当するＰＩＤが記録される。
再生装置は、このストリームパケット識別子（ｓｔｒｅａｍＰＩＤ）記録フィールドに記録されたＰＩＤを参照して、サブストリーム画像の格納パケットを識別可能となる。
【０２５３】
１２０ｐ画像再生を行なう再生装置は、メインストリームとサブストリーム双方のストリームを利用した再生を実行することになる。
ステップＳ２１１において、まず、プレイリストに記録された画像情報（ＨＥＶＣ＿ｖｉｄｅｏ＿ｉｎｆｏ（））から、サブストリーム画像の格納パケットのパケット識別子（ＰＩＤ）を取得する。
【０２５４】
（ステップＳ２１２）
次に、ステップＳ２１２において、制御部４０１は、プレイリストに関連付けられたクリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）を取得し、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ（））を読み出して、１２０ｐ画像再生に必要となるもう１つのストリーム、すなわち、メインストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）を取得する。
【０２５５】
先に図１７を参照して説明したように、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ（））には、ストリームＰＩＤ［ｓｔｒｅａｍ＿ＰＩＤ］１３４が記録される。すなわち、クリップ情報ファイルのプログラムシーケンスに従って再生されるストリームが格納されているＴＳパケットの識別子（ＰＩＤ）が記録される。
【０２５６】
例えば、プログラムシーケンスが１２０ｐ画像再生に利用されるプログラムシーケンスである場合、このパケット識別子（ＰＩＤ）は、例えば１２０ｐ画像再生に適用されるメインストリームとサブストリームを格納したＴＳパケットのパケット識別子である。
ステップＳ２１２では、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のプログラム情報（ＰｒｏｇｒａｍＩｎｆｏ（））から、１２０ｐ画像再生に適用されるメインストリームとサブストリームを格納したＴＳパケットのパケット識別子（ＰＩＤ）を取得する。
【０２５７】
（ステップＳ２１３）
次に、ステップＳ２１３において、制御部４０１は、クリップ情報ファイル（Ｃｌｉｐ  ｉｎｆｏｒｍａｔｉｏｎ  ｆｉｌｅ）のグループ（ｇｒｏｕｐ）情報を読み出して、１２０ｐ画像再生に必要となるストリーム、すなわち、メインストリームとサブストリームの画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）を取得する。
【０２５８】
グループ（ｇｒｏｕｐ）情報は、先に、図２０を参照して説明した情報である。
先に図２０を参照して説明したように、例えば、グループ情報中に記録された下記データ、すなわち、
ｓｔｒｅａｍ＿ｉｎｄｅｘ＝１２０Ｈｚのビデオ
上記情報中には、１２０ｐ画像再生に利用されるメインストリーム画像を格納したＴＳパケット、およびサブストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）が含まれている。
【０２５９】
ステップＳ２１３では、このグループ情報を参照して、１２０ｐ画像再生に利用されるメインストリーム画像を格納したＴＳパケット、およびサブストリーム画像を格納したＴＳパケットのパケット識別子（ＰＩＤ）を取得する。
【０２６０】
なお、前述したように、ステップＳ２１１〜ステップＳ２１３の処理は、いずれも１２０ｐ画像再生に利用するメインストリームとサブストリームの画像格納ＴＳパケットの識別子（ＰＩＤ）の取得処理を含んでいる。
従って、これらの処理（ステップＳ２１１〜Ｓ２１３）におけるパケットＩＤ取得処理は、いずれかのステップにおいて実行する設定としてよい。
【０２６１】
（ステップＳ２１４）
次に、ステップＳ２１４において、メインストリーム画像とサブストリーム画像を格納したＴＳパケットの識別子（ＰＩＤ）に基づいてＴＳパケットを選択して、データを取り出し、復号処理を実行して再生処理を行なう。
【０２６２】
この再生処理において再生されるストリームは、メインストリームとサブストリームの双方であり、１２０ｐ画像の再生処理となる。
すなわち、図４（２）に示すメインストリームとサブストリームを利用した１２０ｐ画像の再生処理となる。
【０２６３】
［９．情報処理装置の構成例について］
次に、情報記録媒体に対するデータ記録、情報記録媒体からのデータ再生を実行する情報処理装置として適用可能な情報処理装置のハードウェア構成例について、図２５を参照して説明する。
【０２６４】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）６０１は、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）６０２、または記憶部６０８に記憶されているプログラムに従って各種の処理を実行するデータ処理部として機能する。例えば、上述した実施例において説明したシーケンスに従った処理を実行する。ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）６０３には、ＣＰＵ６０１が実行するプログラムやデータなどが記憶される。これらのＣＰＵ６０１、ＲＯＭ６０２、およびＲＡＭ６０３は、バス６０４により相互に接続されている。
【０２６５】
ＣＰＵ６０１はバス６０４を介して入出力インタフェース６０５に接続され、入出力インタフェース６０５には、各種スイッチ、キーボード、マウス、マイクロホンなどよりなる入力部６０６、ディスプレイ、スピーカなどよりなる出力部６０７が接続されている。ＣＰＵ６０１は、入力部６０６から入力される指令に対応して各種の処理を実行し、処理結果を例えば出力部６０７に出力する。
【０２６６】
入出力インタフェース６０５に接続されている記憶部６０８は、例えばハードディスク等からなり、ＣＰＵ６０１が実行するプログラムや各種のデータを記憶する。通信部６０９は、インターネットやローカルエリアネットワークなどのネットワークを介したデータ通信の送受信部、さらに放送波の送受信部として機能し、外部の装置と通信する。
【０２６７】
入出力インタフェース６０５に接続されているドライブ６１０は、磁気ディスク、光ディスク、光磁気ディスク、あるいはメモリカード等の半導体メモリなどのリムーバブルメディア６１１を駆動し、データの記録あるいは読み取りを実行する。
【０２６８】
［１０．本開示の構成のまとめ］
以上、特定の実施例を参照しながら、本開示の実施例について詳解してきた。しかしながら、本開示の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本開示の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。
【０２６９】
なお、本明細書において開示した技術は、以下のような構成をとることができる。
（１）  ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記データ処理部は、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成する情報処理装置。
【０２７０】
（２）  前記データ処理部は、さらに、
生成したＭＰＥＧ−２ＴＳフォーマットデータを情報記録場媒体に記録する（１）に記載の情報処理装置。
【０２７１】
（３）  前記ＭＭＴフォーマットデータには、高フレームレート画像再生に適用する画像データとして、メインストリームと、サブストリームが含まれ、
メインストリームと、サブストリームの両ストリームを利用した画像再生によって高フレームレート画像再生が実行され、
メインストリームのみの選択再生により、低フレームレート画像再生が実行される構成である（１）または（２）に記載の情報処理装置。
【０２７２】
（４）  前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報ファイルに、メインストリームとサブストリームの両ストリームを利用した高フレームレート画像再生、
または、メインストリームのみを利用した低フレームレート画像再生のいずれかを選択的に実行可能とするための画像情報を格納し、
前記ＭＰＥＧ−２ＴＳフォーマットデータとともに情報記録場媒体に記録する（１）〜（３）いずれかに記載の情報処理装置。
【０２７３】
（５）  前記再生制御情報ファイルは、プレイリストファイル、またはクリップ情報ファイルである（４）に記載の情報処理装置。
【０２７４】
（６）  前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるプレイリストファイルに、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を記録する（４）または（５）に記載の情報処理装置。
【０２７５】
（７）  前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるクリップ情報ファイルのプログラム情報記録領域に、
前記メインストリームを格納したパケットの識別子（ＰＩＤ）と、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を記録する（４）〜（６）いずれかに記載の情報処理装置。
【０２７６】
（８）  情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記データ処理部は、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得し、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する情報処理装置。
【０２７７】
（９）  前記データ処理部は、
前記再生制御情報から取得したパケット識別子（ＰＩＤ）に基づいて、
メインストリームと、サブストリームの両ストリームを利用した高フレームレート画像再生処理、または、
メインストリームのみに基づく低フレームレート画像再生処理のいずれかを選択的に実行する（８）に記載の情報処理装置。
【０２７８】
（１０）  前記再生制御情報ファイルは、プレイリストファイル、またはクリップ情報ファイルである（８）または（９）に記載の情報処理装置。
【０２７９】
（１１）  前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるプレイリストファイルから、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を取得する（８）〜（１０）いずれかに記載の情報処理装置。
【０２８０】
（１２）  前記データ処理部は、
前記ＭＰＥＧ−２ＴＳフォーマットデータの再生制御情報として利用されるクリップ情報ファイルのプログラム情報記録領域から、
前記メインストリームを格納したパケットの識別子（ＰＩＤ）と、
前記サブストリームを格納したパケットの識別子（ＰＩＤ）を取得する（８）〜（１１）いずれかに記載の情報処理装置。
【０２８１】
（１３）  高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した情報記録媒体であり、
前記再生制御情報は、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）が設定され、
情報記録媒体からの画像再生を実行する再生装置が、
前記再生制御情報から読み出したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行させることを可能とした情報記録媒体。
【０２８２】
（１４）  情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記データ処理部が、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成する情報処理方法。
【０２８３】
（１５）  情報処理装置において実行する情報処理方法であり、
前記情報処理装置は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記データ処理部が、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得し、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する情報処理方法。
【０２８４】
（１６）  情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
ＭＭＴフォーマットデータをＭＰＥＧ−２ＴＳフォーマットに変換するデータ処理部を有し、
前記プログラムは、前記データ処理部に、
ＭＭＴフォーマットデータに含まれる画像データを構成するメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）を設定したＴＳパケットに格納して、ＰＩＤに基づくメインストリームのみの選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを生成させるプログラム。
【０２８５】
（１７）  情報処理装置において情報処理を実行させるプログラムであり、
前記情報処理装置は、
情報記録媒体の記録データの再生処理を実行するデータ処理部を有し、
前記情報記録媒体は、
高フレームレート画像再生と、低フレームレート画像再生の双方に利用されるメインストリームと、高フレームレート再生のみに利用されるサブストリームを、ＭＰＥＧ−２ＴＳフォーマットに従ったＴＳパケットに、ストリーム別に格納した画像データと、
前記画像データの再生制御情報を記録した構成であり、
前記プログラムは、前記データ処理部に、
前記再生制御情報から、メインストリーム格納パケットと、サブストリーム格納パケットを区別可能なストリーム対応のパケット識別子（ＰＩＤ）を取得させ、
取得したパケット識別子（ＰＩＤ）を利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行させるプログラム。
【０２８６】
また、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させるか、あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。例えば、プログラムは記録媒体に予め記録しておくことができる。記録媒体からコンピュータにインストールする他、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、インターネットといったネットワークを介してプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。
【０２８７】
なお、明細書に記載された各種の処理は、記載に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。また、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。
【産業上の利用可能性】
【０２８８】
以上、説明したように、本開示の一実施例の構成によれば、ＭＭＴフォーマットに従った高フレームレート画像をＭＰＥＧ−２ＴＳフォーマットとして記録し、再生可能とする構成が実現される。
具体的には、ＭＭＴフォーマットに従ったメインストリームと、サブストリームを異なるパケット識別子（ＰＩＤ）の設定パケットに格納して、ＰＩＤに基づくストリーム単位の選択再生を可能としたＭＰＥＧ−２ＴＳフォーマットデータを記録媒体に記録する。再生装置は、再生制御情報から、ストリーム対応のパケット識別子（ＰＩＤ）を取得し、取得ＰＩＤを利用して、各ストリーム格納パケットを識別して、ストリーム単位の画像再生を実行する。
本構成により、ＭＭＴフォーマットに従った高フレームレート画像をＭＰＥＧ−２ＴＳフォーマットとして記録し、再生可能とする構成が実現される。
【符号の説明】
【０２８９】
１０  １２０ｐ対応表示装置
２０  ６０ｐ対応表示装置
３０  送信装置
３１  放送局
３２  コンテンツサーバ
４０  ＭＭＴフォーマットデータ
５０  情報処理装置
６０  ＭＰＥＧ−２ＴＳフォーマットデータ
７０  情報記録媒体
３００  情報処理装置
３０１  データ入力部
３０２  ユーザ入力部
３０３  制御部
３０４  記憶部
３０５  デマルチプレクサ
３０６  多重化処理部
３０７  記録部
３０８  ドライブ
３１１  字幕データ変換部
３１２  画像データ変換部
３１３  音声データ変換部
３１４  マルチプレクサ
３２０  情報記録媒体
４００  情報処理装置
４０１  制御部
４０２  ユーザ入力部
４０３  ドライブ
４０４  記録再生部
４０５  記憶部
４０６  再生処理部
４０７  入出力Ｉ／Ｆ
４１１  デマルチプレクサ
４１２  字幕データ生成部
４１３  画像データ生成部
４１４  音声データ生成部
４１５  出力データ生成部
５１０  情報記録媒体
５２０  出力装置（表示部＋スピーカ）
６０１  ＣＰＵ
６０２  ＲＯＭ
６０３  ＲＡＭ
６０４  バス
６０５  入出力インタフェース
６０６  入力部
６０７  出力部
６０８  記憶部
６０９  通信部
６１０  ドライブ
６１１  リムーバブルメディア
【図１】
2017199743.tif 000003
【図２】
2017199743.tif 000004
【図３】
2017199743.tif 000005
【図４】
2017199743.tif 000006
【図５】
2017199743.tif 000007
【図６】
2017199743.tif 000008
【図７】
2017199743.tif 000009
【図８】
2017199743.tif 000010
【図９】
2017199743.tif 000011
【図１０】
2017199743.tif 000012
【図１１】
2017199743.tif 000013
【図１２】
2017199743.tif 000014
【図１３】
2017199743.tif 000015
【図１４】
2017199743.tif 000016
【図１５】
2017199743.tif 000017
【図１６】
2017199743.tif 000018
【図１７】
2017199743.tif 000019
【図１８】
2017199743.tif 000020
【図１９】
2017199743.tif 000021
【図２０】
2017199743.tif 000022
【図２１】
2017199743.tif 000023
【図２２】
2017199743.tif 000024
【図２３】
2017199743.tif 000025
【図２４】
2017199743.tif 000026
【図２５】
2017199743.tif 000027
【国際調査報告】
2017199743.tif 000028
2017199743.tif 000029
2017199743.tif 000030
2017199743.tif 000031