(57)【要約】【課題】例えばフレームレートが100Hz又は120Hzの映像データとともに効率的に音声ストリームを伝送可能なSDIを実現する。【解決手段】音声多重部は、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に音声サンプルを多重する。例えば、本技術は、放送用カメラに適用することができる。【選択図】図７
2018170789.tif 000002
【特許請求の範囲】
【請求項１】
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重部を
備える信号処理装置。
【請求項２】
前記音声多重部は、前記第１の水平ラインの次の第２の水平ラインから連続するｎ２行の水平ラインの前記データ領域に前記音声サンプルを多重する
請求項１に記載の信号処理装置。
【請求項３】
前記映像データのフレームレートは、96Hzから120Hzまでの範囲内であり、
音声のサンプリングレートは、32kHzから96kHzまでの範囲内であり、
前記音声多重部は、前記第２の水平ラインから連続する２行の水平ラインの前記データ領域に前記音声サンプルを多重する
請求項２に記載の信号処理装置。
【請求項４】
前記音声多重部は、最大で４つの音声サンプルを含む音声データパケットを最大で８つまで１つの前記データ領域に多重する
請求項３に記載の信号処理装置。
【請求項５】
前記音声多重部は、スイッチングポイントを含む水平ラインの次の水平ラインの前記データ領域を飛ばして、前記音声サンプルを多重する
請求項２に記載の信号処理装置。
【請求項６】
前記音声多重部は、前記音声サンプルを多重した水平ラインが、前記スイッチングポイントの影響により後ろにずれているか否かを示すフラグを当該水平ラインの前記データ領域に設定する
請求項５に記載の信号処理装置。
【請求項７】
前記映像データを多重した前記データストリームを生成する映像信号処理部を
さらに備える請求項１に記載の信号処理装置。
【請求項８】
信号処理装置が、
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重ステップを
含む信号処理方法。
【請求項９】
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重ステップを
含む処理をコンピュータに実行させるためのプログラム。
【請求項１０】
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生部を
含む信号処理装置。
【請求項１１】
信号処理装置が、
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生ステップを
含む信号処理方法。
【請求項１２】
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生ステップを
含む処理をコンピュータに実行させるためのプログラム。
【請求項１３】
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重部と、
前記音声サンプルが多重された前記データストリームの送信を制御する送信制御部と
を備える信号送信装置と、
前記データストリームの受信を制御する受信制御部と、
前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生部と
を備える信号受信装置と
を含む信号伝送システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、信号処理装置、信号処理方法、プログラム、及び、信号伝送システムに関し、例えば、フレームレートが96Hzから120Hzまでの範囲内の映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームに音声ストリームを多重して伝送する場合に用いて好適な信号処理装置、信号処理方法、プログラム、及び、信号伝送システムに関する。
【背景技術】
【０００２】
従来、3G-SDIフォーマットのレベルＡで規定されるデータストリームに多重する音声ストリームのチャネル数を増やす技術が提案されている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第４７０２４０２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、すでにITU（International Telecommunication Union）で規格化されている120Pの映像データに対して、まだ有効なSDIは規格化されていない。当然、特許文献１では、120Pの映像データに付随する音声ストリームの伝送方法について、具体的な提案がなされていない。
【０００５】
そこで、本技術は、例えばフレームレートが96Hzから120Hzまでの範囲内の映像データとともに効率的に音声ストリームを伝送可能なSDIを実現するためのものである。
【課題を解決するための手段】
【０００６】
本技術の第１の側面の信号処理装置は、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重部を備える。
【０００７】
前記音声多重部には、前記第１の水平ラインの次の第２の水平ラインから連続するｎ２行の水平ラインの前記データ領域に前記音声サンプルを多重させることができる。
【０００８】
前記映像データのフレームレートを、96Hzから120Hzまでの範囲内とし、音声のサンプリングレートを、32kHzから96kHzまでの範囲内とし、前記音声多重部には、前記第２の水平ラインから連続する２行の水平ラインの前記データ領域に前記音声サンプルを多重させることができる。
【０００９】
前記音声多重部には、最大で４つの音声サンプルを含む音声データパケットを最大で８つまで１つの前記データ領域に多重させることができる。
【００１０】
前記音声多重部には、スイッチングポイントを含む水平ラインの次の水平ラインの前記データ領域を飛ばして、前記音声サンプルを多重させることができる。
【００１１】
前記音声多重部には、前記音声サンプルを多重した水平ラインが、前記スイッチングポイントの影響により後ろにずれているか否かを示すフラグを当該水平ラインの前記データ領域に設定させることができる。
【００１２】
前記映像データを多重した前記データストリームを生成する映像信号処理部をさらに設けることができる。
【００１３】
本技術の第１の側面の信号処理方法は、信号処理装置が、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重ステップを含む。
【００１４】
本技術の第１の側面のプログラムは、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重ステップを含む処理をコンピュータに実行させる。
【００１５】
本技術の第２の側面の信号処理装置は、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生部を含む。
【００１６】
本技術の第２の側面の信号処理方法は、信号処理装置が、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生ステップを含む。
【００１７】
本技術の第２の側面のプログラムは、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生ステップを含む処理をコンピュータに実行させる。
【００１８】
本技術の第３の側面の信号伝送システムは、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重部と、前記音声サンプルが多重された前記データストリームの送信を制御する送信制御部とを備える信号送信装置と、前記データストリームの受信を制御する受信制御部と、前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生部とを備える信号受信装置とを含む。
【００１９】
本技術の第１の側面においては、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重される。
【００２０】
本技術の第２の側面においては、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルが抽出され、前記音声サンプルを含む音声ストリームが復元される。
【００２１】
本技術の第３の側面においては、所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重され、前記音声サンプルが多重された前記データストリームが送信され、前記データストリームが受信され、前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームが復元される。
【発明の効果】
【００２２】
本技術の第１乃至第３の側面によれば、例えばフレームレートが96Hzから120Hzまでの範囲内の映像データとともに効率的に音声ストリームを伝送可能なSDIを実現することができる。
【図面の簡単な説明】
【００２３】
【図１】SMPTE 299-1に規定されている音声データパケットのデータ構造を示す図である。
【図２】SMPTE 299-1に規定されている音声データパケットの使用可能領域を示す図である。
【図３】本技術を適用した信号伝送システムの一実施の形態を示すブロック図である。
【図４】放送用カメラの本技術の実施の形態に関連する部分の構成例を示すブロック図である。
【図５】CCUの本技術の実施の形態に関連する部分の構成例を示すブロック図である。
【図６】信号送信処理を説明するためのフローチャートである。
【図７】音声データパケットの多重方法の例を示す図である。
【図８】音声データパケットの多重位置の例を示す図である。
【図９】音声データパケットの多重位置の他の例を示す図である。
【図１０】信号受信処理を説明するためのフローチャートである。
【図１１】コンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２４】
以下、本技術を実施するための形態（以下、実施の形態という）について説明する。なお、説明は以下の順序で行う。
１．現行のHD-SDI（High Definition-Serial Digital Interface）の音声ストリームの多重方式
２．本技術の実施の形態
３．変形例
【００２５】
＜１．現行のHD-SDIの音声ストリームの多重方式＞
現行の1.485GbpsのHD-SDIフォーマットで規定されたデータストリーム（以下、単にHD-SDIとも称する）への音声ストリームの多重方式は、SMPTE 299-1に規定されている。また、HD-SDIに多重される音声ストリームのフォーマットは、AES（Audio Engineering Society）3により規定される。
【００２６】
図１は、SMPTE 299-1に規定されている音声データパケットのデータ構造を示している。
【００２７】
１つの音声データパケットは、補助データフラグ（ADF）、データID（DID）、データブロックナンバー（DBN）、データカウント（DC）、オーディオクロック位相データ（CLK）、CH1乃至CH4の計４チャネルの音声データ、ECC0乃至ECC5からなる誤り訂正コード、及び、チェックサム（CS）を含む。そして、ADFからCH4までの範囲が、誤り訂正コードにより保護される。また、１つの音声データパケットの長さは、31バイトである。なお、ここでは、１バイトが10ビットであり、以下、１バイトのことを１ワードとも称する。
【００２８】
CH1乃至CH4には、それぞれ１つの音声データのサンプル（以下、音声サンプルと称する）が含まれる。そして、音声ストリームのサンプリングレートが32kHz、44.1kHz又は48kHzの場合、４チャネルの音声データを１つの音声データパケットに多重することができる。すなわち、連続するAESサブフレーム１及びAESサブフレーム２のそれぞれ２チャネル（チャネル１及び２）の音声サンプルを１つの音声データパケットに多重することができる。
【００２９】
一方、音声ストリームのサンプリングレートが96kHzの場合、２チャネルの音声データを１つの音声データパケットに多重することができる。すなわち、連続するAESサブフレーム１及びAESサブフレーム２のチャネル１の第１の音声サンプル及び第２の音声サンプルを１つの音声データパケットに多重することができる。
【００３０】
図２は、SMPTE 299-1に規定されている音声データパケットの使用可能領域を示している。なお、図２は、SMPTE 292-1で規定されている2200サンプル×1125ラインの60Iの映像データにおける音声データパケットの使用可能領域を示している。
【００３１】
音声データパケットは、Cb/Cr系列のデータストリーム（以下、Ｃ系列データストリームと称する）の水平ブランキング領域からSAV（Start of Active Video）、EAV（End of Active Video）、LN（Line Number）、CRCC（Cyclic Redundancy Check）の領域を除いた水平補助データ領域に多重することが可能である。ただし、音声データパケットは、スイッチングポイント含む水平ラインの次の水平ライン（以下、単にラインとも称する）の水平補助データ領域には多重することはできない。
【００３２】
ところで、音声ストリームのサンプリングレートが48kHzの場合、映像データの１ライン当たりの音声のサンプリング回数は、平均で約1.42（＝48kHz÷30Hz÷1125ライン）回となる。従って、１ライン当たりのサンプリング回数は、２ラインに１回弱の割合で２回となり、１ラインに最大２回音声データパケットを伝送する必要がある。一方、水平補助データ領域は268バイトなので、31バイトの音声データパケットを４つ含むパケット列を２つ１ラインに多重することができる。
【００３３】
従って、音声ストリームのサンプリングレートが48kHzの場合、１つの音声データパケットに４チャネルの音声データが含まれるため、最大１６チャネルの音声データを伝送することができる。また、音声ストリームのサンプリングレートが96kHzの場合、１つの音声データパケットに２チャネルの音声データが含まれるため、最大８チャネルの音声データを伝送することができる。
【００３４】
＜２．本技術の実施の形態＞
次に、図３乃至図９を参照して、本技術の実施の形態について説明する。
【００３５】
［信号伝送システム１の構成例］
図３は、本技術を適用した信号伝送システム１の一実施の形態を示すブロック図である。
【００３６】
信号伝送システム１は、ｎ台の放送用カメラ１１−１乃至１１−ｎ及びCCU（カメラコントロールユニット）１２を含むように構成される。放送用カメラ１１−１乃至１１−ｎは、それぞれ光ファイバケーブル１３−１乃至１３−ｎを介してCCU１２に接続されている。
【００３７】
なお、以下、放送用カメラ１１−１乃至１１−ｎを個々に区別する必要がない場合、単に、放送用カメラ１１と称する。また、以下、光ファイバケーブル１３−１乃至１３−ｎを個々に区別する必要がない場合、単に、光ファイバケーブル１３と称する。
【００３８】
放送用カメラ１１は、フレームレートが100Hz又は120Hzの映像データを伝送するためのSDI（以下、100Hz-SDI又は120Hz-SDIと称する）により信号（データストリーム）を送信する信号送信装置として用いられる。また、CCU１２は、100Hz-SDI又は120Hz-SDIにより信号（データストリーム）を受信する信号受信装置として用いられる。そして、放送用カメラ１１とCCU１２を組み合わせた信号伝送システム１は、100Hz-SDI又は120Hz-SDIにより信号（データストリーム）を伝送する信号伝送システムとして用いられる。
【００３９】
各放送用カメラ１１は、撮影の結果得られる2200サンプル×1125ライン或いは2640サンプル×1125ラインの映像データ（２Ｋ映像データ）を、光ファイバケーブル１３を介してCCU１２に送信する。なお、この映像データは、フレームレートが100Hz若しくは120Hzのプログレッシブ方式の映像データ（100P若しくは120Pの映像データ）、又は、フィールドレートが200Hz若しくは240Hzの映像データ（200I若しくは240Iの映像データ）とされる。
【００４０】
CCU１２は、各放送用カメラ１１を制御したり、各放送用カメラ１１から映像データを受信したり、各放送用カメラ１１のモニタに他の放送用カメラ１１で撮影中の映像を表示させるための映像データ（リターンビデオ）を送信したりする。
【００４１】
［放送用カメラ１１の回路構成例］
図４は、放送用カメラ１１の本技術の実施の形態に関連する部分の構成例を示すブロック図である。
【００４２】
放送用カメラ１１ａは、撮像素子１０１、音声入力部１０２、信号処理部１０３、及び、送信制御部１０４を含むように構成される。また、信号処理部１０３は、映像信号処理・付加部１１１、マッピング部１１２、音声多重部１１３、多重部１１４、スクランブラ１１５、及び、パラレル／シリアル（Ｐ／Ｓ）変換部１１６を含むように構成される。
【００４３】
撮像素子１０１は、例えば、CMOSイメージセンサ、CCDイメージセンサ等により構成される。撮像素子１０１は、撮影の結果得られる100P、120P、200I又は240Iの映像データを信号処理部１０３の映像信号処理・付加部１１１に供給する。
【００４４】
なお、撮像素子１０１により生成される映像データのフォーマットは、特に限定されるものではない。例えば、RGB空間やYCbCr空間等の多種の色空間のフォーマットを採用することが可能である。また、例えば、YCbCr空間の場合、4:4:4、4:2:2、4:1:1、4:2:0等のうちの任意のシステムを採用することが可能である。
【００４５】
なお、以下、映像データの色空間のフォーマットとして、YCbCrの4:2:2システムを採用した場合を例に挙げて説明する。
【００４６】
音声入力部１０２は、例えば、マイクロフォンや音声処理装置等により構成される。音声入力部１０２は、撮像素子１０１による撮影と並行して、複数チャネルの音声の収集を行う。また、音声入力部１０２は、収集した複数チャネルの音声を所定のサンプリングレートでサンプリングし、複数チャネルのデジタルの音声データを含む音声ストリームを生成し、信号処理部１０３のマッピング部１１２に供給する。サンプリングレートは、例えば、32KHzから96kHzの範囲内（例えば、32kHz、44.1kHz、48kHz、96kHz等）に設定される。
【００４７】
映像信号処理・付加部１１１は、映像データに対して傷補正、ガンマ補正、色空間の変換等の映像処理を行う。また、映像信号処理・付加部１１１は、映像データを多重したデータストリームを複数生成する。すなわち、映像信号処理・付加部１１１は、所定のフォーマットの複数のデータストリームに映像データを多重する。また、映像信号処理・付加部１１１は、複数のデータストリームに所定の情報を付加する。そして、映像信号処理・付加部１１１は、生成した複数のデータストリームを音声多重部１１３に供給する。
【００４８】
音声多重部１１３は、映像信号処理・付加部１１１から供給される複数のデータストリームのうちの少なくとも１つに音声ストリームを多重する。音声多重部１１３は、音声ストリームを多重したデータストリームを含む複数のデータストリームを多重部１１４に供給する。
【００４９】
多重部１１４は、所定の方法により、複数のデータストリームを多重化し、１つのデータストリームを生成する。多重部１１４は、生成したデータストリームをスクランブラ１１５に供給する。
【００５０】
スクランブラ１１５は、所定の方式のスクランブル処理をデータストリームに施し、スクランブル処理後のデータストリームをパラレル／シリアル変換部１１６に供給する。
【００５１】
パラレル／シリアル変換部１１６は、データストリームをパラレル／シリアル変換し、変換後のデータストリームを送信制御部１０４に供給する。
【００５２】
送信制御部１０４は、CCU１２へのデータストリームの送信を制御する。
【００５３】
［CCU１２の回路構成例］
図５は、CCU１２の本技術の実施の形態に関連する部分の構成例を示すブロック図である。
【００５４】
CCU１２は、受信制御部１５１、信号処理部１５２、映像処理部１５３及び音声処理部１５４を含むように構成される。また、信号処理部１５２は、シリアル／パラレル（Ｓ／Ｐ）変換部１６１、デスクランブラ１６２、分離部１６３、及び、再生部１６４を含むように構成される。
【００５５】
受信制御部１５１は、各放送用カメラ１１から供給されるデータストリームの受信を制御する。受信制御部１５１は、受信したデータストリームを信号処理部１５２のシリアル／パラレル変換部１６１に供給する。
【００５６】
シリアル／パラレル変換部１６１は、データストリームをシリアル／パラレル変換し、変換後のデータストリームをデスクランブラ１６２に供給する。
【００５７】
デスクランブラ１６２は、放送用カメラ１１のスクランブラ１１５とは逆のデスクランブル処理をデータストリームに施し、デスクランブル処理後のデータストリームを分離部１６３に供給する。
【００５８】
分離部１６３は、放送用カメラ１１の多重部１１４とは逆の処理により、データストリームを複数のデータストリームに分離し、再生部１６４に供給する。
【００５９】
再生部１６４は、複数のデータストリームに多重されている各画素のデータを抽出し、抽出した画素データを含む元の映像データを復元し、映像処理部１５３に供給する。また、再生部１６４は、複数のデータストリームに多重されている音声サンプルを抽出し、抽出した音声サンプルを含む元の音声ストリームを復元し、音声処理部１５４に供給する。
【００６０】
映像処理部１５３は、映像データに対する各種の処理を行う装置により構成され、再生部１６４から供給される映像データに対して所定の処理を行う。例えば、映像処理部１５３は、映像データに基づく映像を表示するディスプレイ、映像データを記憶する記憶装置等により構成される。
【００６１】
音声処理部１５４は、音声データに対する各種の処理を行う装置により構成され、再生部１６４から供給される音声データに対して所定の処理を行う。例えば、音声処理部１５４は、音声データに基づく音声を出力するスピーカ、音声データを記憶する記憶装置等により構成される。
【００６２】
なお、処理内容によっては、映像処理部１５３と音声処理部１５４を１つの装置により構成することも可能である。
【００６３】
［信号送信処理］
次に、図６のフローチャートを参照して、放送用カメラ１１により実行される信号送信処理について説明する。なお、この処理は１フレーム分の映像データを送信する場合の処理を示しており、複数フレームの映像データを送信する場合には、この処理が繰り返し実行される。
【００６４】
ステップＳ１において、映像信号処理・付加部１１１は、映像信号処理及びSAV等の付加を行う。具体的には、映像信号処理・付加部１１１は、撮像素子１０１から供給される映像データに対して、傷補正、ガンマ補正、色空間の変換等の映像処理を行う。また、映像信号処理・付加部１１１は、例えば、映像データのＹ系列のデータとＣ系列（CbCr）のデータとを、SMPTE 274に規定されているものと同様の構成の２つのデータストリームに分けて多重する。さらに、映像信号処理・付加部１１１は、SMPTE 274の規定に示されているものと同様のSAV、EAV、LN、CRCCを、生成した２つのデータストリームに付加する。映像信号処理・付加部１１１は、生成した２つのデータストリームを音声多重部１１３に供給する。
【００６５】
ステップＳ２において、マッピング部１１２は、音声ストリームのマッピングを行う。具体的には、マッピング部１１２は、音声入力部１０２から供給される音声ストリームを、AES3で規定されているフォーマットにマッピングする。マッピング部１１２は、マッピング後の音声ストリームを音声多重部１１３に供給する。
【００６６】
ステップＳ３において、音声多重部１１３は、音声ストリームをデータストリームに多重する。具体的には、音声多重部１１３は、２つのデータストリームのうち一方のデータストリーム（例えば、Ｃ系列のデータストリーム）に音声ストリームを多重する。
【００６７】
例えば、音声ストリームのサンプリングレートが48kHzで、映像データのフレームレートが120Hz（120P又は240I）の場合、映像データの１ライン当たりの音声のサンプリング回数は、平均で約0.36回（＝48kHz÷120Hz÷1125ライン）となる。また、音声ストリームのサンプリングレートが48kHzで、映像データのフレームレートが100Hz（100P又は200I）の場合、映像データの１ライン当たりの音声のサンプリング回数は、平均で約0.43回（＝48kHz÷100Hz÷1125ライン）となる。
【００６８】
従って、映像データのフレームレートが120Hz又は100Hzの場合、映像データの２ラインに１回以下の間隔で音声のサンプリングが行われる。より具体的には、最短で２ラインに１回、最長で３ラインに１回の間隔で、音声データのサンプリングが行われ、音声サンプルが発生することになる。また、音声データのサンプリングが行われ、音声サンプルが発生したライン（以下、サンプリングラインと称する）の次のラインでは、サンプリングが行われず、音声サンプルは発生しないことになる。
【００６９】
そこで、音声多重部１１３は、基本的にサンプリングラインの次のラインから連続する２行のラインの水平補助データ領域に、図７に示されるように、SMPTE 299-1の規定と同様の構成を有する音声パケットデータを最大４つ含むパケット列を最大で２つずつ多重する。１つの音声データパケットには４チャネル分の音声サンプルが含まれるため、１パケット列あたり１６チャネル分の音声サンプルが含まれる。また、音声データのサンプリングが１回行われる毎に、８個×２行の最大１６個の音声データパケットがデータストリームに多重されるため、最大で６４チャネルの音声データをデータストリームに多重することができる。
【００７０】
なお、音声データのサンプリングレートが96kHzの場合、最大で48KHzの場合の半分の３２チャネルの音声データをデータストリームに多重することができる。
【００７１】
なお、SMPTE 299-1の規定と同様に、スイッチングポイントの次のラインの水平補助データ領域への音声データパケットの多重は禁止される。そのため、図８及び図９に示されるように、スイッチングラインの影響により、音声データパケットの多重位置が後ろにずれる場合がある。
【００７２】
具体的には、図８は、音声データＡ乃至Ｃのサンプリングが行われ、かつ、音声データＢのサンプリングラインにスイッチングポイントが含まれる場合を示している。なお、図内の最下段に示されている多重位置フラグ（mpf）とは、音声データパケットの多重位置と、対応する音声データのサンプリングラインとの関係を示すフラグであり、音声データパケットのCLKの所定の位置に設定される。
【００７３】
音声データＡについては、サンプリングライン及び次のラインがスイッチングポイントを含んでいない。従って、音声データＡに対応するパケット列Ａ１乃至Ａ４は、スイッチングポイントの影響を受けずに、音声データＡのサンプリングラインの次のラインから連続する２行のラインの水平補助データ領域に多重される。また、パケット列Ａ１乃至Ａ４に含まれる音声データパケットの多重位置フラグの値は、当該音声データパケットが、スイッチングポイントの影響を受けずに通常の位置のラインに多重されたことを示す０に設定される。
【００７４】
音声データＣについても同様に、サンプリングライン及び次のラインがスイッチングポイントを含んでいない。従って、音声データＣに対応するパケット列Ｃ１乃至Ｃ４は、スイッチングポイントの影響を受けずに、音声データＣのサンプリングラインの次のラインから連続する２行のラインの水平補助データ領域に多重される。また、パケット列Ｃ１乃至Ｃ４に含まれる音声データパケットの多重位置フラグの値は０に設定される。
【００７５】
一方、音声データＢについては、サンプリングラインがスイッチングポイントを含んでおり、次のラインの水平補助データ領域に音声データパケットを多重することができない。従って、音声データＢに対応するパケット列Ｂ１乃至Ｂ４は、音声データＢのサンプリングラインの次のラインの水平補助データ領域を飛ばして、サンプリングラインから２行後のラインから連続する２行のラインの水平補助データ領域に多重される。また、パケット列Ｂ１乃至Ｂ４に含まれる音声データパケットの多重位置フラグの値は、当該音声データパケットがスイッチングポイントの影響により通常より後ろにずれたラインに多重されたことを示す１に設定される。
【００７６】
図９は、音声データＡ乃至Ｃのサンプリングが行われ、かつ、音声データＡのサンプリングラインの次のラインにスイッチングポイントが含まれる場合を示している。
【００７７】
音声データＡについては、サンプリングラインの次のラインがスイッチングポイントを含んでおり、サンプリングラインの２行後のラインの水平補助データ領域に音声データパケットを多重することができない。従って、音声データＡに対応するパケット列Ａ１及びＡ２は、音声データＡのサンプリングラインの次のラインの水平補助データ領域に多重されるが、パケット列Ａ３及びＡ４は、１行飛ばして、サンプリングラインから３行後のラインの水平補助データ領域に多重される。
【００７８】
また、パケット列Ａ１及びＡ２に含まれる音声データパケットの多重位置フラグの値は、０に設定される。一方、パケット列Ａ３及びＡ４に含まれる音声データパケットの多重位置フラグの値は、当該音声データパケットがスイッチングポイントの影響により通常より後ろにずれたラインに多重されたことを示す１に設定される。
【００７９】
さらに、音声データＢに対応するパケット列Ｂ１乃至Ｂ４は、パケット列Ａ３及びＡ４の多重位置が１ライン後ろにずれたことにより、通常より１ライン後ろにずれたラインの水平補助データ領域に多重される。従って、パケット列Ｂ１乃至Ｂ４に含まれる音声データパケットの多重位置フラグの値は、当該音声データパケットがスイッチングポイントの影響により通常より後ろにずれたラインに多重されたことを示す１に設定される。
【００８０】
なお、音声データＣに対応する音声データパケットの多重位置、及び、多重位置フラグの値は、図８の例と同様である。
【００８１】
また、音声多重部１１３は、音声ストリームを多重したデータストリームとは別のデータストリーム（例えば、Ｙ系列のデータストリーム）の水平補助データ領域に、SMPTE 299-1に規定されているものと同様の音声制御パケットを多重する。
【００８２】
なお、音声多重部１１３は、フォーマッタでEAVの最初のワードから音声サンプルの位置までを297MHzや297/1.110MHzなどのクロックで計測した値を、オーディオクロック位相として使用する。
【００８３】
そして、音声多重部１１３は、音声ストリーム及び音声制御パケットを多重したデータストリームを多重部１１４に供給する。
【００８４】
ステップＳ４において、多重部１１４は、データストリームを多重化する。すなわち、多重部１１４は、２つのデータストリームをワード単位で１つのデータストリームに多重する。多重部１１４は、多重したデータストリームをスクランブラ１１５に供給する。
【００８５】
ステップＳ５において、スクランブラ１１５は、例えば、SMPTE 292-1の規定と同様の方法により、データストリームのスクランブルを行い、パラレル／シリアル変換部１１６に供給する。
【００８６】
ステップＳ６において、パラレル／シリアル変換部１１６は、データストリームをパラレル／シリアル変換し、送信制御部１０４に供給する。
【００８７】
ステップＳ７において、送信制御部１０４は、データストリームをCCU１２に送信する。
【００８８】
その後、信号送信処理は終了する。
【００８９】
［信号受信処理］
次に、図１０のフローチャートを参照して、図６の放送用カメラ１１により実行される信号送信処理に対応して、CCU１２により実行される信号受信処理について説明する。なお、この処理は１フレーム分の映像データを受信する場合の処理を示しており、複数フレームの映像データを受信する場合には、この処理が繰り返し実行される。
【００９０】
ステップＳ５１において、受信制御部１５１は、放送用カメラ１１から送信されてきたデータストリームを受信する。受信制御部１５１は、受信したデータストリームをシリアル／パラレル変換部１６１に供給する。
【００９１】
ステップＳ５２において、シリアル／パラレル変換部１６１は、放送用カメラ１１のパラレル／シリアル変換部１１６と逆の処理により、データストリームをシリアル／パラレル変換する。シリアル／パラレル変換部１６１は、変換後のデータストリームをデスクランブラ１６２に供給する。
【００９２】
ステップＳ５３において、デスクランブラ１６２は、放送用カメラ１１のスクランブラ１１５と逆の処理により、データストリームのデスクランブルを行う。デスクランブラ１６２は、デスクランブル後のデータストリームを分離部１６３に供給する。
【００９３】
ステップＳ５４において、分離部１６３は、放送用カメラ１１の多重部１１４と逆の処理により、データストリームを分離する。分離部１６３は、分離後の２つのデータストリームを再生部１６４に供給する。
【００９４】
ステップＳ５５において、再生部１６４は、データストリームの再生を行う。すなわち、再生部１６４は、２つのデータストリームに多重されている各画素のデータを抽出し、抽出した画素データを含む元の映像データを復元する。また、再生部１６４は、２つのデータストリームに多重されている音声サンプルを抽出し、抽出した音声サンプルを含む元の音声ストリームを復元する。そして、再生部１６４は、復元した映像データを映像処理部１５３に供給し、復元した音声データを音声処理部１５４に供給する。
【００９５】
映像処理部１５３は、例えば、映像データに基づく映像の表示、映像データの記録等の所定の処理を映像データに対して施す。音声処理部１５４は、例えば、音声データに基づく音声の出力、音声データの記録等の所定の処理を音声データに対して施す。
【００９６】
その後、信号受信処理は終了する。
【００９７】
以上のようにして、フレームレートが100Hz又は120Hzの映像データとともに音声データを効率的に伝送可能なSDIを実現することができる。すなわち、現行のHD-SDIの音声信号多重方式であるSMPTE 299-1と整合性があり、かつ、最大でSMPTE 299-1の規定の４倍のチャネルの音声データを映像データとともに伝送することが可能なSDIを実現することができる。
【００９８】
＜３．変形例＞
以下、上述した本技術の実施の形態の変形例について説明する。
【００９９】
本技術の適用範囲は、上述した映像データのフレームレート及び音声のサンプリングレートの場合に限定されるものではなく、映像データのｎ１（ｎ１≧２）行のラインに１回以下の間隔で音声のサンプリングが行われる場合に適用することができる。この場合、音声サンプルが発生したサンプリングラインより後のｎ２（２≦ｎ２≦ｎ１）行のラインの水平補助データ領域に発生した音声サンプルを多重するようにすればよい。これにより、１ラインの水平補助データ領域に音声サンプルを多重する場合と比較して、より多くのチャネル数の音声データをデータストリームに多重して伝送することが可能になる。なお、具体的には、例えば、映像データのフレームレートを96Hzに設定することが想定される。
【０１００】
また、音声データパケットの多重位置も、必ずしも対応する音声サンプルのサンプリングラインの次のラインから始める必要はなく、例えば、２行以上後のラインから始めるようにしてもよい。また、１回のサンプリングで発生した音声サンプルを連続する複数のラインではなく、断続的に複数のラインに多重するようにしてもよい。
【０１０１】
また、映像データのフォーマットは、特定のものに限定されるものではなく、SDIのデータストリームに多重できる形式であればよい。同様に、音声データのフォーマットも、SDIのデータストリームに多重できる形式であれば、AES3以外のフォーマットを採用することが可能である。
【０１０２】
さらに、映像データのフレームサイズも上述した例に限定されるものではなく、他の値に設定することも可能である。
【０１０３】
［コンピュータの構成例］
上述した一連の処理は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。
【０１０４】
図１１は、上述した一連の処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。
【０１０５】
コンピュータにおいて、CPU（Central Processing Unit）３０１，ROM（Read Only Memory）３０２，RAM（Random Access Memory）３０３は、バス３０４により相互に接続されている。
【０１０６】
バス３０４には、さらに、入出力インタフェース３０５が接続されている。入出力インタフェース３０５には、入力部３０６、出力部３０７、記憶部３０８、通信部３０９、及びドライブ３１０が接続されている。
【０１０７】
入力部３０６は、キーボード、マウス、マイクロフォンなどよりなる。出力部３０７は、ディスプレイ、スピーカなどよりなる。記憶部３０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部３０９は、ネットワークインタフェースなどよりなる。ドライブ３１０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア３１１を駆動する。
【０１０８】
以上のように構成されるコンピュータでは、CPU３０１が、例えば、記憶部３０８に記憶されているプログラムを、入出力インタフェース３０５及びバス３０４を介して、RAM３０３にロードして実行することにより、上述した一連の処理が行われる。
【０１０９】
コンピュータ（CPU３０１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア３１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。
【０１１０】
コンピュータでは、プログラムは、リムーバブルメディア３１１をドライブ３１０に装着することにより、入出力インタフェース３０５を介して、記憶部３０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部３０９で受信し、記憶部３０８にインストールすることができる。その他、プログラムは、ROM３０２や記憶部３０８に、あらかじめインストールしておくことができる。
【０１１１】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【０１１２】
また、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。
【０１１３】
さらに、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【０１１４】
例えば、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０１１５】
また、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。
【０１１６】
さらに、例えば、本技術は以下のような構成も取ることができる。
【０１１７】
（１）
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重部を
備える信号処理装置。
（２）
前記音声多重部は、前記第１の水平ラインの次の第２の水平ラインから連続するｎ２行の水平ラインの前記データ領域に前記音声サンプルを多重する
前記（１）に記載の信号処理装置。
（３）
前記映像データのフレームレートは、96Hzから120Hzまでの範囲内であり、
音声のサンプリングレートは、32kHzから96kHzまでの範囲内であり、
前記音声多重部は、前記第２の水平ラインから連続する２行の水平ラインの前記データ領域に前記音声サンプルを多重する
前記（２）に記載の信号処理装置。
（４）
前記音声多重部は、最大で４つの音声サンプルを含む音声データパケットを最大で８つまで１つの前記データ領域に多重する
前記（３）に記載の信号処理装置。
（５）
前記音声多重部は、スイッチングポイントを含む水平ラインの次の水平ラインの前記データ領域を飛ばして、前記音声サンプルを多重する
前記（２）乃至（４）のいずれかに記載の信号処理装置。
（６）
前記音声多重部は、前記音声サンプルを多重した水平ラインが、前記スイッチングポイントの影響により後ろにずれているか否かを示すフラグを当該水平ラインの前記データ領域に設定する
前記（５）に記載の信号処理装置。
（７）
前記映像データを多重した前記データストリームを生成する映像信号処理部を
さらに備える前記（１）乃至（６）のいずれかに記載の信号処理装置。
（８）
信号処理装置が、
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重ステップを
含む信号処理方法。
（９）
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重ステップを
含む処理をコンピュータに実行させるためのプログラム。
（１０）
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生部を
含む信号処理装置。
（１１）
信号処理装置が、
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生ステップを
含む信号処理方法。
（１２）
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われ、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルが多重された前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生ステップを
含む処理をコンピュータに実行させるためのプログラム。
（１３）
所定のフレームレートの映像データのｎ１（ｎ１≧２）行の水平ラインに１回以下の間隔で音声のサンプリングが行われる場合、前記映像データを伝送するためのSDI（Serial Digital Interface）のフォーマットで規定されるデータストリームにおいて前記映像データの水平ライン毎に設けられている水平ブランキング領域内の所定のデータ領域であって、音声サンプルが発生した第１の水平ラインより後のｎ２（２≦ｎ２≦ｎ１）行の水平ラインのデータ領域に前記音声サンプルを多重する音声多重部と、
前記音声サンプルが多重された前記データストリームの送信を制御する送信制御部と  を備える信号送信装置と、
前記データストリームの受信を制御する受信制御部と、
前記データストリームから前記音声サンプルを抽出し、前記音声サンプルを含む音声ストリームを復元する再生部と
を備える信号受信装置と
を含む信号伝送システム。
【符号の説明】
【０１１８】
１  信号伝送システム,  １１−１乃至１１−ｎ  放送用カメラ,  １２  CCU,  １０１  撮像素子,  １０２  音声入力部,  １０３  信号処理部,  １０４  送信制御部,  １１１  映像信号処理・付加部,  １１２  マッピング部，  １１３  音声多重部,  １１４  多重部,  １１５  スクランブラ,  １１６  パラレル／シリアル変換部,  １５１  受信制御部,  １５２  信号処理部,  １６１  シリアル／パラレル変換部,  １６２  デスクランブラ,  １６３  分離部,  １６４  再生部
【図１】
2018170789.tif 000003
【図２】
2018170789.tif 000004
【図３】
2018170789.tif 000005
【図４】
2018170789.tif 000006
【図５】
2018170789.tif 000007
【図６】
2018170789.tif 000008
【図７】
2018170789.tif 000009
【図８】
2018170789.tif 000010
【図９】
2018170789.tif 000011
【図１０】
2018170789.tif 000012
【図１１】
2018170789.tif 000013