(57)【要約】【課題】ストリームに時間情報を付加するための処理量が少なく、かつ処理時間が短い信号処理装置を提供する。【解決手段】ストリームを生成する信号処理装置であって、複数の符号化データをパケット化し、複数のパケットデータを出力するパケット化処理装置２４と、ストリームの再生時間に関する情報である時間情報をパケット化処理装置２４によるパケット化よりも前に算出する時間情報算出装置２３と、パケット化処理装置２４より出力される複数のパケットデータを多重化することによりストリームを生成する多重化処理装置２７とを備え、パケット化処理装置２４は、パケット化と同時に時間情報を付加する。【選択図】図３
2009038587.tif 000002
【特許請求の範囲】
【請求項１】
各々が画像データまたは音声データを符号化したデータである複数の符号化データからストリームを生成する信号処理装置であって、
前記複数の符号化データをパケット化し、複数のパケットデータを出力するパケット化処理手段と、
前記ストリームの再生時間に関する情報である時間情報を前記パケット化処理手段によるパケット化よりも前に算出する時間情報算出手段と、
前記パケット化処理手段より出力される前記複数のパケットデータを多重化することによりストリームを生成する多重化処理手段と、
前記ストリームに前記時間情報を付加する時間情報付加手段と
を備える信号処理装置。
【請求項２】
前記時間情報付加手段は、前記パケット化処理手段によるパケット化時に前記複数のパケットデータに前記時間情報を付加することにより、前記ストリームに前記時間情報を付加する
請求項１に記載の信号処理装置。
【請求項３】
前記時間情報付加手段は、前記多重化処理手段による多重化時に前記ストリームに前記時間情報を付加する
請求項１に記載の信号処理装置。
【請求項４】
前記時間情報算出手段は、フレーム単位で定められるオフセット値およびパケット単位で定められるオフセット値に基づいて、前記時間情報を算出する
請求項１〜３のいずれか１項に記載の信号処理装置。
【請求項５】
前記フレーム単位で定められるオフセット値および前記パケット単位で定められるオフセット値は、前記符号化データの種類ごとに定められる
請求項４に記載の信号処理装置。
【請求項６】
前記フレーム単位で定められるオフセット値および前記パケット単位で定められるオフセット値は、前記ストリームのビットレート毎に定められる
請求項４に記載の信号処理装置。
【請求項７】
前記フレーム単位で定められるオフセット値および前記パケット単位で定められるオフセット値は、前記ストリームのフレームレート毎に定められる
請求項４に記載の信号処理装置。
【請求項８】
前記時間情報算出手段は、前記ストリームのデコードの最小単位で定められるオフセット値およびパケット単位で定められるオフセット値に基づいて、前記時間情報を算出する
請求項１〜３のいずれか１項に記載の信号処理装置。
【請求項９】
請求項１〜８のいずれか１項に記載の信号処理装置と、
レンズと、
イメージセンサと
を備えることを特徴とする撮像装置。
【請求項１０】
各々が画像データまたは音声データを符号化したデータである複数の符号化データからストリームを生成する信号処理方法であって、
ストリームの再生時間に関する情報である時間情報を算出し、
前記時間情報の算出後に、前記複数の符号化データをパケット化することにより複数のパケットデータを生成し、
前記複数の符号化データのパケット化と同時に、前記時間情報を前記複数のパケットデータに付加し、
前記複数のパケットデータを多重化することによりストリームを生成する
信号処理方法。
【請求項１１】
画像データを取り込む画像データ処理装置と、
音声データを取り込む音声取り込み装置と、
前記画像データ処理装置で取り込まれた前記画像データを符号化する画像データ符号化手段と、
前記音声取り込み装置で取り込まれた前記音声データを符号化する音声データ符号化手段と、
請求項１〜８のいずれか１項に記載の信号処理装置とを備え、
前記パケット化処理手段は、前記画像データ符号化手段および前記音声データ符号化手段よりそれぞれ出力される符号化された画像データおよび音声データをパケット化し、複数のパケットデータを出力し、
前記多重化処理手段は、さらに、生成したストリームを記録媒体に記憶する
動画記録装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、信号処理装置に関し、特に、デジタル化または符号化されて伝送される映像データおよび音声データを多重化することにより、ストリームを生成する信号処理装置に関する。
【背景技術】
【０００２】
近年、動画を取り扱うフォーマットとして、画像圧縮方式として高能率符号化方式であるＭＰＥＧ−２，Ｈ．２６４（ＭＰＥＧ−４  ＡＶＣ）が用いられている。また、音声圧縮方式としてＡＣ−３（Ｄｏｌｂｙ  Ｄｉｇｉｔａｌ）、Ｇ．７２６などが用いられている。画像、音声圧縮したデジタル信号の伝送には、多重方式として放送等のリアルタイム伝送に用いられるトランスポートストリーム方式や蓄積型のプログラムストリーム方式などが用いられている。
【０００３】
近年、デジタル放送など１ストリームに映像データおよび複数の音声データを多重化する場合などを考慮して、映像データおよび音声データの各々に時間情報を付加するだけでなく、多重化されたストリームに対して時間情報を付加するような動画の取り扱いフォーマットも出現してきている（例えば、特許文献１参照。）。
【０００４】
このようにデータが多重化され、時間情報が付加された動画フォーマットのストリームは以下のように再生される。つまり、時間情報に合わせてストリームが入力され、入力されたストリームから圧縮画像データが抽出される。次に、デコーダが圧縮画像データの復号を行ない、復号された映像データおよび音声データを、各データの時間情報に合わせて出力する。この復号化処理によって得られた映像データは、ディスプレイに動画として表示される。
【０００５】
また、デジタル放送などではストリームが常に放送されている状態において、必要な時にストリームの入力および再生が行なわれる。このため、ストリームの途中からでも再生できるようにする必要がある。このようなことから、ストリーム再生に必要な情報をある一定のタイミング毎に付加するような動画フォーマットの規格も存在する。このような規格に則った動画ストリームを生成するには、時間情報を付加するまで、ストリームのどのタイミングで再生情報を付加して良いのかわからない。このため、時間情報を付加する度に、再生情報を挿入するか否かの判断と、多重化されたデータに対して、再生情報を組み込む処理を行わなければならなかった。
【０００６】
図７は、従来の信号処理装置の構成の一例を示すブロック図である。
信号処理装置は、画像データと音声データとを多重化することによりストリームを生成する装置であり、画像データ圧縮／伸張処理装置１１と、音声データ圧縮／伸張処理装置１２と、パケット化処理装置１３と、ＣＰＵ１４と、多重化処理装置１５と、時間情報算出装置１６と、時間情報付加装置１７と、再生情報付加装置１８とを含む。
【０００７】
画像データ圧縮／伸張処理装置１１は、非圧縮の画像データを、ＭＰＥＧ−２，ＭＰＥＧ−４（Ｈ．２６４）形式で圧縮し、フレーム毎に時間情報を付加して出力する。同様に、音声データ圧縮／伸張処理装置１２は、非圧縮の音声データを、ＡＣ−３，Ｇ．７２６などの形式で圧縮し、フレーム毎に時間情報を付加して出力する。
【０００８】
パケット化処理装置１３は、画像データ圧縮／伸張処理装置１１および音声データ圧縮／伸張処理装置１２でそれぞれ圧縮された画像データおよび音声データをパケット化する。つまり、パケット化処理装置１３は、両データを、多重化処理装置１５において多重化できるような形式のパケットデータであり、かつ両データをそれぞれ生成する動画フォーマットの規格で定められたパケットデータにパケット化し、出力する。
【０００９】
多重化処理装置１５は、パケット化処理装置１３にてパケット化された音声データおよび画像データを多重化して、ストリームを出力する。つまり、多重化処理装置１５は、両データの時間情報に基づき、生成する動画フォーマットの規格に則って、同期を取れるような形で音声データおよび画像データの多重化を行い、出力する。
【００１０】
時間情報付加装置１７は、多重化処理装置１５にて出力されたストリームに対して、パケット毎に時間情報を付加する。なお、時間情報の補正が必要な場合には、時間情報算出装置１６が時間情報を算出し、時間情報付加装置１７に通知する。時間情報付加装置１７は、通知を受けた時間情報をストリームに付加する。
【００１１】
時間情報を付加した後に、再生情報付加装置１８は、ストリームに再生情報を付加するか否かを判断し、必要な場合には、ストリームに再生情報を付加して出力する。
【００１２】
なお、各処理は、ＣＰＵ１４においても行うことができる。
図８は、従来の信号処理装置によるストリームの生成処理を示すフローチャートである。
【００１３】
画像データ圧縮／伸張処理装置１１および音声データ圧縮／伸張処理装置１２は、非圧縮データが入力されると、規定された固定の単位毎に非圧縮データを圧縮することにより、非圧縮データを圧縮データに変換して出力する（Ｓ１０１）。パケット化処理装置１３は、出力された圧縮データをパケット化して、出力する（Ｓ１０２）。多重化処理装置１５は、パケット化されたデータを、動画フォーマットの規格で定められた時間の範囲内で多重化して、出力する（Ｓ１０３）。時間情報算出装置１６は、時間情報が動画フォーマットの規格に則っているかを判断する（Ｓ１０４）。
【００１４】
時間情報の補正が必要であれば（Ｓ１０４でＹＥＳ）、時間情報算出装置１６は、動画フォーマットの規格に則って、時間情報を算出する（Ｓ１０５）。時間情報算出装置１６は、多重化され出力されたデータに時間情報を付加する（Ｓ１０６）。再生情報付加装置１８は、再生情報を付加する必要があるかを判断する（Ｓ１０７）。再生情報を付加する必要があれば（Ｓ１０７でＹＥＳ）、再生情報付加装置１８は、データに再生情報を付加し（Ｓ１０８）、外部に出力する（Ｓ１０９）。
【特許文献１】特開２００３−１７４６２０号公報
【発明の開示】
【発明が解決しようとする課題】
【００１５】
上述のように、従来の時間情報を含む動画ストリームの生成処理においては、時間情報の算出を音声データおよび画像データの多重化後に行なっている。このため、時間情報の付加は、多重化後に行われなければならない。よって、画像データおよび音声データを一定単位毎に多重化し、その後に時間情報を付加してから外部に出力するような方法をとるか、多重化されたストリームを外部に出力する処理の途中に専用の時間情報付加タイマを使用して情報の付加を行わなければならない。また、時間情報を記録する動画フォーマットの規格に準拠させる必要もあり、再生系バッファモデルなどの規格を意識した上で時間情報を求め、多重化されたストリームに付加する必要がある。動画フォーマットの規格によっては、再生情報をストリームに一定の間隔で挿入したり、時間情報をパケット毎に付加したりする必要があり、時間情報および再生情報の付加に要する処理量が多く、かつ付加に要する処理時間が長くなり、システムに大きな負荷がかかってしまうという問題がある。
【００１６】
本発明は、上述の課題を解決するためになされたものであり、ストリームに時間情報を付加するための処理量が少なく、かつ処理時間が短い信号処理装置を提供することを目的とする。
【課題を解決するための手段】
【００１７】
上記目的を達成するために、本発明に係る信号処理装置は、各々が画像データまたは音声データを符号化したデータである複数の符号化データからストリームを生成する信号処理装置であって、前記複数の符号化データをパケット化し、複数のパケットデータを出力するパケット化処理手段と、前記ストリームの再生時間に関する情報である時間情報を前記パケット化処理手段によるパケット化よりも前に算出する時間情報算出手段と、前記パケット化処理手段より出力される前記複数のパケットデータを多重化することによりストリームを生成する多重化処理手段と、前記ストリームに前記時間情報を付加する時間情報付加手段とを備える。
【００１８】
この構成によると、符号化データのパケット化よりも前に時間情報を算出しているので、パケット化または多重化を行う際に、時間情報を付加することができる。これにより、多重化が終了した時点では、ストリームをそのまま外部に出力できる状態になっている。このため、従来のように多重化後に時間情報を付加するような処理が必要なくなる。よって、時間情報の付加にかかる処理量を少なくし、かつ付加にかかる処理時間を短縮することができる。
【００１９】
また、ストリームの一定時間間隔毎に再生に必要な情報である再生情報を挿入することを求められる規格もあるが、このような規格であっても、事前に時間情報を算出しておくことにより、多重化前に再生情報の挿入タイミングが分かる。このため、再生情報を多重化と同時に挿入することができ、ストリーム出力時に時間情報を付加する場合に比べ、再生情報の挿入の判断や、再生情報の挿入処理を行う必要が無く、処理が簡易で、かつ処理量が少なくなる。
【００２０】
なお、本発明は、このような特徴的な手段を備える信号処理装置として実現することができるだけでなく、信号処理装置に含まれる特徴的な手段をステップとする信号処理方法として実現したり、信号処理方法に含まれる特徴的なステップをコンピュータに実行させるプログラムとして実現したりすることもできる。そして、そのようなプログラムは、ＣＤ−ＲＯＭ（Compact Disc-Read Only Memory）等の記録媒体やインターネット等の通信ネットワークを介して流通させることができるのは言うまでもない。
【発明の効果】
【００２１】
本発明に係る信号処理装置によると、時間情報および再生情報の付加に要する処理量を少なくし、かつ処理時間を短縮することができる。
【発明を実施するための最良の形態】
【００２２】
以下、本発明の実施の形態に係る信号処理装置について説明する。本実施の形態に係る信号処理装置は、動画データを記録する処理装置である。
【００２３】
動画フォーマットの規格としてＨＤ（High Definition）画質の動画フォーマットとして規格化されたＡＶＣＨＤ（Advanced Video Codec High Definition）がある。このＡＶＣＨＤ規格の動画フォーマットのストリームとしてはトランスポートストリームが採用されている。図１に示すように、ＡＶＣＨＤでは、１８８ｂｙｔｅのＴＳ（トランスポートストリーム）パケット毎に当該パケットの先頭に４ｂｙｔｅの多重化ストリームの時間情報が付加される。また、ＡＶＣＨＤには、再生側に関しても制約があり、Ｔ−ＳＴＤ（システムターゲットデコーダ）のデコーダモデルが存在し、このデコーダモデルの制約を満たした形で時間情報を付加する必要がある。Ｔ−ＳＴＤではストリーム毎に入力されるストリームの転送レートとバッファサイズとが決められており、ＡＶＣＨＤ規格では、このデコーダモデルを満たすことが必須となっている。
【００２４】
（実施の形態１）
図２は、本実施の形態に係る信号処理装置が組み込まれているデジタルスチルカメラの外観図である。デジタルスチルカメラは、映像の撮影および音声の収録を同時に行なう装置である。
【００２５】
図３は、本実施の形態に係る信号処理装置の構成を示すブロック図である。
信号処理装置は、画像データと音声データとを多重化することによりストリームを生成する装置であり、画像データ圧縮／伸張処理装置２１と、音声データ圧縮／伸張処理装置２２と、時間情報算出装置２３と、パケット化処理装置２４と、ＣＰＵ２５と、再生情報付加装置２６と、多重化処理装置２７とを含む。
【００２６】
画像データ圧縮／伸張処理装置２１は、符号化される前の非圧縮の画像データをＭＰＥＧ−２，ＭＰＥＧ−４（Ｈ．２６４）形式で圧縮し、フレーム毎に時間情報を付加して出力する。音声データ圧縮／伸張処理装置２２は、符号化される前の非圧縮の音声データをＧ．７２６，ＡＣ−３の形式で圧縮し、出力する。時間情報算出装置２３は、符号化された画像データおよび音声データに対して付加すべき時間情報を算出する。
【００２７】
パケット化処理装置２４は、画像データ圧縮／伸張処理装置２１および音声データ圧縮／伸張処理装置２２よりそれぞれ出力される符号化された画像データおよび音声データのＰＥＳ（Packetized Elementary Stream）パケット化と、ＴＳ（Transport Stream）パケット化と、時間情報算出装置２３から出力される時間情報の付加とを同時に行なう。なお、ＰＥＳパケット化とＴＳパケット化とは必ずしも同時に行なう必要はなく、ＰＥＳパケット化を行なった後に、ＴＳパケット化を行なっても構わない。
【００２８】
再生情報付加装置２６は、出力されたパケット毎に、時間情報を参照し、再生情報の付加と挿入の判断を行う。多重化処理装置２７は、再生情報付加装置２６より出力されたパケットデータを動画フォーマットの規格に則った形で多重化を行い、外部に出力する。
【００２９】
なお、各処理は、ＣＰＵ２５においても行うことができる。
図４は、Ｔ−ＳＴＤのデコーダモデルの入力部分の一例を示す図である。ＡＶＣＨＤ規格のストリームでは、転送レート制御装置３１が、ＴＳパケットに付加されている時間情報と２７ＭＨｚのカウンタ３２の値とが一致した時に、外部から入力されたデータを転送する。転送レート制御装置３１が、外部から入力されたデータを出力するタイミングを制御することで転送レートを制御し、デコーダモデルのバッファのオーバーフロー、アンダーフローを回避している。
【００３０】
時間情報算出装置２３は、ＴＳパケット単位での時間情報オフセット値Ｎとフレーム単位での時間情報オフセット値Ｍとを持ち、この２つの値を用いて、時間情報を算出する。
【００３１】
ＴＳパケット単位の時間情報オフセット値Ｎは例えば１つのＴＳパケットが転送される間に２７ＭＨｚのカウンタがカウントアップする値などに設定しておく。フレーム単位での時間情報オフセット値Ｍは、１フレームの時間間隔毎の値、例えば３０ｆｐｓ（frame per second）の場合には１フレームが３３．３ｍｓであるため、その間に２７ＭＨｚのカウンタがカウントアップする値などに設定しておく。
【００３２】
時間情報は、以下の算出式に従い算出される。
時間情報＝（（ストリーム先頭からのフレーム数）＊Ｍ）
＋（（フレーム先頭からのパケット数）＊Ｎ）
【００３３】
デコーダモデルではモデル化されている各バッファの出力レートとバッファサイズとが音声、画像、その他のストリームで異なる。このため、一つのオフセット値の組（Ｍ，Ｎ）だけを用いて時間情報を算出するためには、バッファのオーバーフローを考慮し最も低レートのストリームに合わせたオフセット値の組を選択しなければならない。このため、ストリームの転送に時間が掛かってしまう。そこで、無駄なくストリームの転送を行うために、データの種類毎にオフセット値の組（Ｍ，Ｎ）を持たせて、ストリーム毎に時間情報の算出に使用するオフセット値を変化させる。これにより、ストリームの転送時間の短縮を図ることができる。
【００３４】
また、ビットレートが異なればバッファに蓄積するフレーム数も異なる。このため、ビットレートによって転送速度の最適値が異なってくる。そのためビットレート毎に最適なオフセット値の組（Ｍ，Ｎ）を持たせておくことにより、ストリームの転送時間の短縮を図ることができる。同様にフレームレートが異なる場合でも転送速度の最適値が異なってくる。そのためフレームレート毎に最適なオフセット値が変わる。このため、フレームレート毎に最適なオフセット値の組（Ｍ，Ｎ）を持たせておくことにより、ストリームの転送時間の短縮を図ることができる。
【００３５】
また、外部からデータが入力されてから映像が出力されるまでの時間を短縮させようとした場合に、フレーム分のデータが蓄積されてからデコードを開始するのではなく、最小のデコードできる単位のデータが蓄積された時点からデコードを開始させるという方法がある。
【００３６】
その場合、多重化は、フレーム単位ではなく、最小デコード単位で行う。このため、上記のようなフレーム単位のオフセット値ではなく、最小のデコード単位のオフセット値を用いて時間情報を算出することもできる。
【００３７】
また、ＡＶＣＨＤの規格では一定のストリーム時間毎にＰＳＩ（Program Specific Information）とＳＩ（Service Information）と呼ばれる再生に必要な情報を挿入する必要があるが、従来は、多重化後にＰＳＩ挿入およびＳＩ挿入の処理を行っていた。これに対し、本実施の形態では、時間情報をパケット化より前に算出するため、多重化前にＰＳＩおよびＳＩの挿入のタイミングがわかる。このため、パケット化または多重化と同時に、ＰＳＩおよびＳＩの挿入も行うことができる。
【００３８】
図５は、信号処理装置によるストリーム生成処理のフローチャートである。
画像データ圧縮／伸張処理装置２１および音声データ圧縮／伸張処理装置２２は、非圧縮の画像データおよび音声データがそれぞれ入力されると、規定された固定の単位毎に圧縮データに変換し出力する（Ｓ２０１）。
【００３９】
時間情報算出装置２３は、画像データ圧縮／伸張処理装置２１および音声データ圧縮／伸張処理装置２２より出力される圧縮データの時間情報を算出する（Ｓ２０２）。
【００４０】
パケット化処理装置２４は、画像データ圧縮／伸張処理装置２１および音声データ圧縮／伸張処理装置２２より出力される圧縮データと、時間情報算出装置２３より出力される時間情報とを受け、圧縮データのパケット化と時間情報の付加とを同時に行なう（Ｓ２０３）。再生情報付加装置２６は、再生情報であるＰＳＩおよびＳＩをパケット化されたデータに付加する必要があるか否かを判断する（Ｓ２０４）。付加する必要があると判断した場合には（Ｓ２０４でＹＥＳ）、再生情報付加装置２６は、ＰＳＩおよびＳＩをパケット化されたデータに付加する（Ｓ２０５）。多重化処理装置２７は、パケット化された画像データおよび音声データを多重化し（Ｓ２０６）、外部へ出力する（Ｓ２０７）。
【００４１】
信号処理装置に画像データを取り込む画像データ処理装置および音声データ取り込み装置などを付加することにより、デジタルスチルカメラやデジタルビデオカメラなどの動画記録機能を持った製品を構成することができ、その製品により時間情報を付加した動画データの記録を行うことができる。
【００４２】
図６は、信号処理装置に、画像データ処理装置および音声データ取り込み装置を付加したデジタルスチルカメラの一例を示す図である。
【００４３】
デジタルスチルカメラは、画像データ処理装置４１と、音声データ取り込み装置４２と、画像データ圧縮／伸張処理装置４３と、音声データ圧縮／伸張処理装置４４と、時間情報算出装置４５と、パケット化処理装置４６と、ＣＰＵ４７と、再生情報付加装置４８と、多重化処理装置４９とを含む。
【００４４】
画像データ処理装置４１は、カメラ等により取り込まれた画像を符号化可能なデータに変換し、補正を行なう装置である。
【００４５】
音声データ取り込み装置４２は、マイクより入力されたデータを取り込む装置である。
画像データ圧縮／伸張処理装置４３〜多重化処理装置４９は、図３に示した信号処理の画像データ圧縮／伸張処理装置２１〜多重化処理装置２７とそれぞれ同様である。このためその詳細な説明は繰り返さない。
【００４６】
ただし、画像データ圧縮／伸張処理装置４３は画像データ処理装置４１から画像データを受け取る。また、音声データ圧縮／伸張処理装置４４は音声データ取り込み装置４２から音声データを受け取る。
【００４７】
また、多重化処理装置４９は、多重化したデータを記録媒体５０に記憶する。さらに、各装置にて出力されたデータはメモリ５１に一時記録しても良い。
【００４８】
以上説明したように、本実施の形態によると、符号化データのパケット化よりも前に時間情報を算出しているので、パケット化または多重化を行う際に、時間情報を付加することができる。これにより、多重化が終了した時点では、ストリームをそのまま外部に出力できる状態になっている。このため、従来のように多重化後に時間情報を付加するような処理が必要なくなる。よって、時間情報の付加にかかる処理量を少なくし、かつ付加にかかる処理時間を短縮することができる。
【００４９】
また、ストリームの一定時間間隔毎に再生に必要な情報である再生情報を挿入することを求められる規格もあるが、このような規格であっても、事前に時間情報を算出しておくことにより、多重化前に再生情報の挿入タイミングが分かる。このため、再生情報を多重化と同時に挿入することができ、ストリーム出力時に時間情報を付加する場合に比べ、再生情報の挿入の判断や、再生情報の挿入処理を行う必要が無く、処理が簡易で、かつ処理量が少なくなる。
【００５０】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【産業上の利用可能性】
【００５１】
本発明は、デジタルスチルカメラ、デジタルビデオカメラおよびＤＶＤレコーダなどに適用できる。
【図面の簡単な説明】
【００５２】
【図１】ＡＶＣＨＤにおけるＴＳパケットの構成を示す図である。
【図２】本発明の実施の形態に係る信号処理装置が組み込まれているデジタルスチルカメラの外観図である。
【図３】本発明の実施の形態に係る信号処理装置の構成を示すブロック図である。
【図４】Ｔ−ＳＴＤのデコーダモデルの入力部分の一例を示す図である。
【図５】信号処理装置によるストリーム生成処理のフローチャートである。
【図６】デジタルスチルカメラの構成の一例を示す図である。
【図７】従来の信号処理装置の構成を示すブロック図である。
【図８】従来の信号処理装置によるストリームの生成処理を示すフローチャートである。
【符号の説明】
【００５３】
１１、２１、４３  画像データ圧縮／伸張処理装置
１２、２２、４４  音声データ圧縮／伸張処理装置
１６、２３、４５  時間情報算出装置
１３、２４、４６  パケット化処理装置
１４、２５、４７  ＣＰＵ
１８、２６、４８  再生情報付加装置
１５、２７、４９  多重化処理装置
１７  時間情報付加装置
３１  転送レート制御装置
３２  カウンタ
４１  画像データ処理装置
４２  音声データ取り込み装置
５０  記録媒体
５１  メモリ
【図１】
2009038587.tif 000003
【図２】
2009038587.tif 000004
【図３】
2009038587.tif 000005
【図４】
2009038587.tif 000006
【図５】
2009038587.tif 000007
【図６】
2009038587.tif 000008
【図７】
2009038587.tif 000009
【図８】
2009038587.tif 000010