(57)【要約】【課題】信号間の時間的な対応を高精度に特定する。【解決手段】信号処理部２１は、信号値の差異を減縮する信号処理を音響信号Ａ1に対して実行する。解析処理部２２は、信号処理の実行後の音響信号Ｂ1と、音響信号Ｂ2とを対比することで、音響信号Ａ1と音響信号Ａ2との時間的な対応を特定する。【選択図】図４
2019165386.tif 000002
【特許請求の範囲】
【請求項１】
信号値の差異を減縮する信号処理を第１信号に対して実行し、
前記信号処理の実行後の第１信号と、第２信号とを対比することで、前記第１信号と前記第２信号との時間的な対応を特定する
コンピュータにより実現される信号解析方法。
【請求項２】
前記第２信号について前記信号処理を実行し、
前記信号処理の実行後の第１信号と、前記信号処理の実行後の第２信号とを対比する
請求項１の信号解析方法。
【請求項３】
前記信号処理は、前記信号値の範囲を制限する制限処理を含む
請求項１または請求項２の信号解析方法。
【請求項４】
前記制限処理は、前記信号値を正負対称の範囲に制限する処理である
請求項３の信号解析方法。
【請求項５】
信号値の差異を減縮する信号処理を第１信号に対して実行する信号処理部と、
前記信号処理の実行後の第１信号と、第２信号とを対比することで、前記第１信号と前記第２信号との時間的な対応を特定する解析処理部と
を具備する信号解析装置。
【請求項６】
前記信号処理部は、前記第１信号および前記第２信号について前記信号処理を実行し、
前記解析処理部は、前記信号処理の実行後の第１信号と、前記信号処理の実行後の第２信号とを対比する
請求項５の信号解析装置。
【請求項７】
前記信号処理は、前記信号値の範囲を制限する制限処理を含む
請求項５または請求項６の信号解析装置。
【請求項８】
前記制限処理は、前記信号値を正負対称の範囲に制限する処理である
請求項７の信号解析装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の信号の相互間における時間的な対応を解析するための技術に関する。
【背景技術】
【０００２】
複数の信号間における時間的な対応を解析するための技術が従来から提案されている。例えば特許文献１には、複数の音声符号化情報の間で信号値のパターンを比較することで、両者間の時間差を解析する技術が開示されている。複数の音声符号化情報は、信号値が所定の範囲の外側にある成分が抽出されたうえで相互に比較される。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１０５４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１の技術では、各音声符号化情報のうち振幅が大きい成分同士が比較される。しかし、信号間の時間的な対応を解析するうえで重要な成分の振幅が、相対的に小さい場合がある。したがって、特許文献１の技術のように振幅が大きい成分同士を比較する構成では、信号間の時間的な対応を高精度に特定できないという問題がある。以上の事情を考慮して、本発明は、信号間の時間的な対応を高精度に特定することを目的とする。
【課題を解決するための手段】
【０００５】
以上の課題を解決するために、本発明の好適な態様に係る情報処理方法は、信号値の差異を減縮する信号処理を第１信号に対して実行し、前記信号処理の実行後の第１信号と、第２信号とを対比することで、前記第１信号と前記第２信号との時間的な対応を特定する。
【０００６】
本発明の好適な態様に係る情報処理装置は、信号値の差異を減縮する信号処理を第１信号に対して実行する信号処理部と、前記信号処理の実行後の第１信号と、第２信号とを対比することで、前記第１信号と前記第２信号との時間的な対応を特定する解析処理部とを具備する。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施形態に係る情報処理装置の構成を例示するブロック図である。
【図２】２系統の音響信号の時間的な関係の説明図である。
【図３】合成後のコンテンツの説明図である。
【図４】情報処理装置の機能的な構成を例示するブロック図である。
【図５】信号処理の説明図である。
【図６】情報処理装置の動作の具体的な手順を例示するフローチャートである。
【発明を実施するための形態】
【０００８】
図１は、本発明の好適な態様に係る情報処理装置１００の構成を例示するブロック図である。情報処理装置１００（信号解析装置の例示）は、映像と音響とを含む各種のコンテンツを再生するコンピュータシステムである。図１に例示される通り、情報処理装置１００は、制御装置１１と記憶装置１２と再生装置１３とを具備する。例えば携帯電話機、スマートフォン，タブレット端末またはパーソナルコンピュータ等の各種の情報端末が、情報処理装置１００として好適に利用される。
【０００９】
制御装置１１は、例えばＣＰＵ（Central  Processing  Unit）等の処理回路であり、情報処理装置１００の各要素を統括的に制御する。制御装置１１は、１個以上の処理回路を含んで構成される。記憶装置１２は、制御装置１１が実行するプログラムと制御装置１１が使用する各種のデータとを記憶するメモリである。例えば磁気記録媒体もしくは半導体記録媒体等の公知の記録媒体、または複数種の記録媒体の組合せが、記憶装置１２として好適である。なお、情報処理装置１００とは別体の記憶装置１２（例えばクラウドストレージ）を用意し、制御装置１１が通信網を介して記憶装置１２に対する書込および読出を実行してもよい。すなわち、記憶装置１２を情報処理装置１００から省略してもよい。
【００１０】
記憶装置１２は、コンテンツＸ1およびコンテンツＸ2を記憶する。コンテンツＸ1およびコンテンツＸ2は、例えば音響空間内の相異なる位置および画角で共通の被写体を収録した映像作品である。例えば通信網を介して他装置から受信したコンテンツＸ1およびコンテンツＸ2が記憶装置１２に格納される。なお、撮像装置および収音装置を含む収録装置が収録したコンテンツＸ1およびコンテンツＸ2を情報処理装置１００が受信してもよい。
【００１１】
コンテンツＸ1は映像信号Ｖ1と音響信号Ａ1とで表現され、コンテンツＸ2は映像信号Ｖ2と音響信号Ａ2とで表現される。各映像信号Ｖn（ｎ＝１,２）は、撮像装置により撮像された動画像を表す信号であり、各音響信号Ａnは、収音装置により収音された音響の波形を表す信号である。具体的には、音響信号Ａnは、音圧レベル（強度）を表す信号値の時系列で表現される。なお、映像信号Ｖnおよび音響信号Ａnの形式は任意である。収録が実施された期間はコンテンツＸ1とコンテンツＸ2とで重複する。したがって、図２に例示される通り、音響信号Ａ1と音響信号Ａ2とは共通の音響成分を含む。ただし、収録開始の時刻はコンテンツＸ1とコンテンツＸ2との間で相違するから、音響信号Ａ1と音響信号Ａ2との間で位相は相違する。
【００１２】
制御装置１１は、図１に例示される通り、コンテンツＸ1とコンテンツＸ2とを合成することでコンテンツＹを生成する。コンテンツＹは、映像信号Ｖyと音響信号Ａyとで表現される。映像信号Ｖyは、図３に例示される通り、コンテンツＸ1の映像信号Ｖ1が表す画像とコンテンツＸ2の映像信号Ｖ2が表す画像とが並置された画像である。音響信号Ａyは、音響信号Ａ1と音響信号Ａ2とを混合することで生成される。なお、音響信号Ａ1および音響信号Ａ2の一方を音響信号Ａyとして利用してもよい。
【００１３】
再生装置１３は、制御装置１１が生成したコンテンツＹを再生する。具体的には、再生装置１３は、表示装置１３１と放音装置１３２とを具備する。表示装置１３１は、例えば液晶表示パネルで構成され、コンテンツＹの映像信号Ｖyが表す画像を表示する。放音装置１３２は、例えばスピーカまたはヘッドホンであり、コンテンツＹの音響信号Ａyが表す音響を放音する。
【００１４】
図４は、情報処理装置１００の機能的な構成を例示するブロック図である。図４に例示される通り、制御装置１１は、記憶装置１２に記憶されたプログラムを実行することで、コンテンツＸ1とコンテンツＸ2とからコンテンツＹを生成するための複数の機能（信号解析部２０、合成処理部３０および再生制御部４０）を実現する。なお、相互に別体で構成された複数の装置の集合（すなわちシステム）で制御装置１１の機能を実現してもよいし、制御装置１１の機能の一部または全部を専用の電子回路で実現してもよい。
【００１５】
信号解析部２０は、音響信号Ａ1（第１信号の例示）と音響信号Ａ2（第２信号の例示）との時間的な対応を解析する。具体的には、音響信号Ａ1と音響信号Ａ2との時間差Ｔを特定する。時間差Ｔは、図２に例示される通り、時間軸上で始点が共通するように音響信号Ａ1と音響信号Ａ2とを配置した場合に、音響信号Ａ1のうち特定の音響が発音される時点と音響信号Ａ2のうち当該音響が発音される時点との時間差（すなわち位相差）である。音響信号Ａ1の収録の開始時刻と音響信号Ａ2の収録の開始時刻と差異を時間差Ｔと表現してもよい。
【００１６】
図４の合成処理部３０は、コンテンツＸ1とコンテンツＸ2とを相互に同期させた状態で合成する。合成処理部３０によるコンテンツＸ1とコンテンツＸ2との合成によりコンテンツＹが生成される。コンテンツＸ1とコンテンツＸ2との同期とは、特定の音響または画像が再生される時点がコンテンツＸ1とコンテンツＸ2とについて時間軸上で共通する状態を意味する。合成処理部３０は、信号解析部２０が解析した時間差ＴだけコンテンツＸ1およびコンテンツＸ2の一方を他方に対して時間軸上で移動させることでコンテンツＸ1とコンテンツＸ2とを同期させる。具体的には、合成処理部３０は、映像信号Ｖ1と映像信号Ｖ2とを相互に同期させた状態で合成することでコンテンツＹの映像信号Ｖyを生成する。また、合成処理部３０は、音響信号Ａ1と音響信号Ａ2とを相互に同期させた状態で合成することでコンテンツＹの音響信号Ａyを生成する。図３に例示した通り、共通の被写体を相異なる位置および画角で収録した映像作品（すなわちマルチアングル動画）がコンテンツＹとして生成される。なお、音響信号Ａ1および音響信号Ａ2の一方を音響信号Ａyとして選択する前述の構成では、信号解析部２０による解析の結果に応じて相互に同期された音響信号Ａ1および音響信号Ａ2の一方が音響信号Ａyとして選択される。
【００１７】
図４の再生制御部４０は、合成処理部３０が生成したコンテンツＹを再生装置１３に再生させる。すなわち、再生制御部４０は、映像信号Ｖyを表示装置１３１に供給することでコンテンツＹの画像を表示装置１３１に表示させ、音響信号Ａyを放音装置１３２に供給することでコンテンツＹの音響を放音装置１３２に放音させる。
【００１８】
図４に例示される通り、信号解析部２０は、信号処理部２１と解析処理部２２とを具備する。信号処理部２１は、音響信号Ａ1に対する信号処理で音響信号Ｂ1を生成し、音響信号Ａ2に対する同様の信号処理で音響信号Ｂ2を生成する。信号処理部２１が実行する信号処理は、音響信号Ａnにおける信号値の差異を減縮する処理である。本実施形態の信号処理は、音響信号Ａnの信号値の範囲を制限する制限処理である。
【００１９】
図５は、制限処理の説明図である。図５に例示される通り、制限処理は、音響信号Ａnの信号値の値域を範囲Ｒに制限する処理（すなわちリミッタ）である。すなわち、音響信号Ａnの振幅が制限処理により範囲Ｒに減縮される。範囲Ｒの上限値ｒHは、音響信号Ａnの信号値がとり得る最大値を下回り、範囲Ｒの下限値ｒLは、音響信号Ａnの信号値がとり得る最小値を上回る。信号処理部２１は、音響信号Ａnにおいて上限値ｒHを上回る信号値を上限値ｒHに変更し（すなわちクリップ）、下限値ｒLを下回る信号値を下限値ｒLに変更する。すなわち、音響信号Ａnのうち範囲Ｒの外側の部分が削除される。他方、音響信号Ａnにおいて範囲Ｒ内の信号値は変更されない。したがって、制限処理の結果、音響信号Ａnのうち振幅が大きい区間は振幅が制限され、振幅が小さい区間は維持される。すなわち、信号処理部２１は、信号値に応じて相違する度合で音響信号Ａnを強調する。
【００２０】
以上の説明から理解される通り、信号処理部２１による信号処理は、音響信号Ａnのうち振幅が小さい成分を、振幅が大きい成分に対して相対的に強調する処理である。すなわち、信号処理部２１は、音響信号Ａ1のうち振幅が小さい成分を強調することで音響信号Ｂ1を生成し、音響信号Ａ2のうち振幅が小さい成分を強調することで音響信号Ｂ2を生成する。
【００２１】
本実施形態における範囲Ｒは、図５から理解される通り、正負対称の範囲である。すなわち、範囲Ｒの上限値ｒHと下限値ｒLとの中点が信号値のゼロに相当する。上限値ｒHと下限値ｒLとの間で絶対値が一致すると表現してもよい。ただし、範囲Ｒを正負非対称の範囲としてもよい。
【００２２】
図４の解析処理部２２は、以上に説明した信号処理の実行後の音響信号Ｂ1と、当該信号処理の実行後の音響信号Ｂ2とを対比することで、音響信号Ｂ1と音響信号Ｂ2との時間的な対応（すなわち時間差Ｔ）を特定する。具体的には、解析処理部２２は、音響信号Ｂ1と音響信号Ｂ2との波形の類似性を評価することで時間差Ｔを算定する。音響信号Ｂ1と音響信号Ｂ2との間における波形の類似性の指標としては相互相関が好適である。すなわち、解析処理部２２は、音響信号Ｂ1と音響信号Ｂ2との時間差τを変化させながら相互相関を順次に算定し、相互相関が最大値となるとき（すなわち波形の類似性が最大であるとき）の音響信号Ｂ1と音響信号Ｂ2との時間差τを時間差Ｔとして特定する。
【００２３】
図６は、制御装置１１がコンテンツＹを生成する処理の具体的な手順を例示するフローチャートである。例えば利用者からの指示を契機として図６の処理が開始される。図６の処理を開始すると、信号処理部２１は、音響信号Ａ1に対する信号処理で音響信号Ｂ1を生成し、音響信号Ａ2に対する信号処理で音響信号Ｂ2を生成する（Ｓ1）。前述の通り、信号処理は、各音響信号Ａnの振幅を範囲Ｒに減縮する制限処理を含む。解析処理部２２は、信号処理後の音響信号Ｂ1と音響信号Ｂ2とを対比することで、両者間の時間差Ｔを解析する（Ｓ2）。合成処理部３０は、解析処理部２２が解析した時間差ＴだけコンテンツＸ1およびコンテンツＸ2の一方を他方に対して時間軸上で移動させることにより両者を同期させる（Ｓ3）。合成処理部３０は、相互に同期した状態のコンテンツＸ1とコンテンツＸ2とを合成することでコンテンツＹを生成する（Ｓ4）。再生制御部４０は、合成処理部３０が合成したコンテンツＹを再生装置１３に再生させる（Ｓ5）。
【００２４】
以上に説明した通り、本実施形態では、信号値の差異を減縮する信号処理が各音響信号Ａnに対して実行される。以上の構成によれば、信号処理を実行しない構成（以下「対比例」という）と比較して、各音響信号Ａnにおいて信号値が相対的に小さい部分が両者間の対比に反映される。したがって、以下の例示の通り、音響信号Ａ1と音響信号Ａ2との間の時間的な対応を高精度に特定することが可能である。
【００２５】
対比例は、音響信号Ａ1と音響信号Ａ2との間で相互相関を算定する構成である。対比例では、各音響信号Ａnのうち振幅が大きい部分が相互相関に対して支配的に寄与し、音響信号Ａnのうち振幅が小さい部分の寄与は充分に小さい。しかし、音響信号Ａ1と音響信号Ａ2とを同期させるうえで、各音響信号Ａnのうち振幅が小さい部分が重要となる場合がある。例えば、大音量の効果音が周期的に発生する環境のもとで小音量の会話音が継続的に発音される場面を想定する。対比例では、大音量の効果音が相互相関に対して支配的に寄与するから、効果音の発生周期の整数倍に相当する誤差が時間差Ｔに発生し得る。対比例とは対照的に、実施形態では、相互相関に対して会話音が寄与する度合が相対的に増大するから、小音量の会話音も加味して高精度に時間差Ｔを特定することが可能である。
【００２６】
本実施形態では、信号値の値域を制限する簡便な制限処理により、音響信号Ａ1と音響信号Ａ2との間の時間的な対応を高精度に特定できるという利点もある。なお、各音響信号Ａnの信号値を正負非対称の範囲Ｒに制限する構成では、信号処理の前後で音響信号Ａnの位相が変化する可能性がある。本実施形態では、信号値が正負対称の範囲Ｒに制限されるから、信号処理に起因した各音響信号Ａnの位相の変化が抑制される。したがって、音響信号Ａ1と音響信号Ａ2との時間的な対応を高精度に特定できるという前述の効果は格別に顕著である。
【００２７】
＜変形例＞
以上に例示した態様に付加される具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２個以上の態様を、相互に矛盾しない範囲で適宜に併合してもよい。
【００２８】
（１）音響信号Ａnの信号値の差異を減縮する信号処理の具体的な内容は、前述の形態で例示した制限処理に限定されない。例えば、各音響信号Ａnにクリップが発生する程度に当該音響信号Ａnを増幅する信号処理を、信号処理部２１が実行してもよい。また、例えば、音響信号Ａnの信号値を表すビット列の一部を削除すること（すなわち低ビット化）で、音響信号Ａnの振幅を範囲Ｒ内に制限してもよい。
【００２９】
音響信号Ａnを時間軸上で平滑化することで、当該音響信号Ａnの信号値の差異を減縮することも可能である。音響信号Ａnの平滑化には、例えば信号値の時系列の移動平均または自乗平均平方根（ＲＭＳ：Root  Mean  Square）を算定する処理が好適である。また、所定の閾値を上回る信号値を当該信号値に応じた圧縮率で低減する圧縮処理（コンプレッサ）を音響信号Ａnに対する信号処理として採用してもよい。音響の立上りの時間（アタックタイム）を長くする信号処理により信号値の差異を減縮してもよい。
【００３０】
音響信号Ａnを構成する複数の信号値のうち所定の範囲Ｒ内の信号値の時系列を抽出する信号処理を信号処理部２１が実行してもよい。すなわち、範囲Ｒの外側の信号値は無視される。以上の例示のように範囲Ｒ内の信号値を抽出する信号処理も、範囲Ｒ内に信号値を制限する前述の形態の信号処理と同様に、制限処理の概念に含まれる。
【００３１】
相異なる複数（Ｋ個）の範囲Ｒ1〜ＲKの各々について、当該範囲Ｒk（ｋ＝１〜Ｋ）を適用した制限処理を実行してもよい。すなわち、相異なる範囲Ｒkに対応するＫ系統の音響信号Ｂn_1〜Ｂn_Kが、音響信号Ａ1および音響信号Ａ2の各々から生成される。Ｋ個の範囲Ｒ1〜ＲKの各々は、例えば正負対称の範囲であり、数値幅は範囲Ｒk毎に相違する。解析処理部２２は、音響信号Ａ1から生成された音響信号Ｂ1_kと音響信号Ａ2から生成された音響信号Ｂ2_kとを対比することで相互相関を算定する。すなわち、相異なる範囲Ｒkに対応したＫ個の相互相関が算定される。解析処理部２２は、例えば、Ｋ個の相互相関の各々から特定される時間差Ｔの代表値（例えば平均値または中央値）を、音響信号Ａ1と音響信号Ａ2との時間的な対応の解析結果として確定する。
【００３２】
以上の例示から理解される通り、信号処理部２１が実行する信号処理は、音響信号Ａnの信号値の差異を減縮する処理として包括的に表現され、具体的には、音響信号Ａnのうち振幅が小さい成分を振幅が大きい成分に対して相対的に強調する処理である。
【００３３】
（２）前述の形態では、音響の波形（すなわち音圧レベルの時間変化）を表す音響信号Ａnに対して信号処理を実行したが、信号処理の対象となる信号（第１信号または第２信号）は、以上の例示に限定されない。例えば、コンテンツＸnの音響から抽出された特徴量の時系列を表す信号に対して、信号値の差異を減縮するための信号処理を実行してもよい。音響の特徴量としては、例えば音高（基本周波数）またはＭＦＣＣ（Mel-Frequency  Cepstrum  Coefficients）が例示される。また、音響信号Ａnから抽出された特定の周波数帯域の成分について信号処理を実行してもよい。
【００３４】
また、信号処理の対象となる信号は、各コンテンツＸnの音響に関する信号に限定されない。例えば、画像の明度の時系列を表す明度信号に対して信号処理を実行することで、２系統の明度信号の相互間における時間的な対応を特定してもよい。また、例えば無線通信における電波の受信強度の時系列を表す強度信号に対して信号処理を実行することで、２系統の強度信号の相互間における時間的な対応を特定してもよい。以上の例示から理解される通り、信号値の時系列で表現される任意の信号の処理に本発明は適用され、信号値の具体的な意味は不問である。
【００３５】
（３）前述の形態では、音響信号Ａ1および音響信号Ａ2の双方について信号処理を実行したが、音響信号Ａ1および音響信号Ａ2の一方のみについて信号処理を実行してもよい。ただし、音響信号Ａ1および音響信号Ａ2の双方について信号処理を実行する構成によれば、音響信号Ａ1において信号値が相対的に小さい部分だけでなく、音響信号Ａ2において信号値が相対的に小さい部分についても、解析処理部２２による対比に反映させることが可能である。したがって、音響信号Ａ1と音響信号Ａ2との間の時間的な対応を高精度に特定できるという効果は格別に顕著である。
【００３６】
（４）以上の形態では、音響信号Ａ1および音響信号Ａ2の２系統の間で時間的な対応を特定したが、３系統以上の信号の相互間で時間的な対応を特定してもよい。例えば、３系統以上の信号から２系統の信号を選択する各組合せについて、前述の形態と同様の方法で時間的な対応を解析することが可能である。
【００３７】
（５）前述の形態では、コンテンツＸ1とコンテンツＸ2とで被写体が共通する場合を便宜的に例示したが、コンテンツＸ1とコンテンツＸ2との間で被写体が相違してもよい。ただし、音響信号Ａ1と音響信号Ａ2との対比によりコンテンツＸ1とコンテンツＸ2との時間的な対応を特定するためには、音響信号Ａ1と音響信号Ａ2との双方に、相互に類似または共通する音響成分が含まれる必要がある。例えば、特定の楽曲が再生される環境で被写体１がダンスする様子を収録したコンテンツＸ1と、当該楽曲が再生される環境で被写体２がダンスする様子を収録したコンテンツＸ2とについては、音響信号Ａ1と音響信号Ａ2とが共通の音響成分を含む。したがって、コンテンツＸ1とコンテンツＸ2との時間的な対応を特定することが可能である。
【００３８】
（６）前述の形態では、映像信号Ｖnおよび音響信号Ａnで各コンテンツＸnが表現される場合を例示したが、コンテンツＸ1およびコンテンツＸ2の一方または双方は、音響信号Ａnのみで構成されてもよい。例えば、信号解析部２０は、音響信号Ａ1と音響信号Ａ2との時間的な対応を解析し、合成処理部３０は、音響信号Ａ1と音響信号Ａ2とを相互に同期させた状態で合成することによりコンテンツＹ（音響信号Ａy）を生成する。また、各コンテンツＸnの映像信号Ｖnを他の信号に置換してもよい。
【００３９】
（７）携帯電話機またはスマートフォン等の端末装置との間で通信するサーバ装置により情報処理装置１００の機能を実現してもよい。例えば、情報処理装置１００は、端末装置から受信した音響信号Ａ1および音響信号Ａ2から両者間の時間的な対応（具体的には時間差Ｔ）を特定し、特定結果を端末装置に送信する。すなわち、情報処理装置１００は信号解析部２０を具備し、合成処理部３０および再生制御部４０は端末装置に搭載される。なお、信号解析部２０および合成処理部３０を情報処理装置１００に搭載し、合成処理部３０が生成したコンテンツＹを端末装置に送信してもよい。以上に例示した通り、合成処理部３０および再生制御部４０を情報処理装置１００から省略してもよい。
【００４０】
（８）前述の形態に係る情報処理装置１００の機能は、コンピュータ（例えば制御装置１１）とプログラムとの協働により実現される。前述の形態に係るプログラムは、コンピュータが読取可能な記録媒体に格納された形態で提供されてコンピュータにインストールされる。記録媒体は、例えば非一過性（non-transitory）の記録媒体であり、ＣＤ-ＲＯＭ等の光学式記録媒体（光ディスク）が好例であるが、半導体記録媒体または磁気記録媒体等の公知の任意の形式の記録媒体を含む。なお、非一過性の記録媒体とは、一過性の伝搬信号（transitory,  propagating  signal）を除く任意の記録媒体を含み、揮発性の記録媒体を除外するものではない。また、通信網を介した配信の形態でプログラムをコンピュータに提供してもよい。
【００４１】
＜付記＞
以上に例示した形態から、例えば以下の構成が把握される。
【００４２】
本発明の好適な態様（第１態様）に係る信号解析方法は、信号値の差異を減縮する信号処理を第１信号に対して実行し、前記信号処理の実行後の第１信号と、第２信号とを対比することで、前記第１信号と前記第２信号との時間的な対応を特定する。以上の態様では、第２信号と対比される第１信号について、信号値の差異を減縮する信号処理が実行されるから、第１信号の信号値の差異が減縮されない構成と比較して、第１信号のうち信号値が相対的に小さい部分が第２信号との対比に反映される。したがって、第１信号と第２信号との間の時間的な対応を高精度に特定することが可能である。
【００４３】
第１態様の好適例（第２態様）において、前記第２信号について前記信号処理を実行し、前記信号処理の実行後の第１信号と、前記信号処理の実行後の第２信号とを対比する。以上の態様では、第１信号および第２信号の双方について、信号値の差異を減縮する信号処理が実行される。したがって、第１信号において信号値が相対的に小さい部分だけでなく、第２信号において信号値が相対的に小さい部分についても、第１信号と第２信号との対比に反映させることが可能である。
【００４４】
第１態様または第２態様の好適例（第３態様）において、前記信号処理は、前記信号値の範囲を制限する制限処理を含む。以上の態様によれば、信号値の範囲を制限する簡便な処理により信号値の差異を減縮することが可能である。
【００４５】
第３態様の好適例（第４態様）において、前記制限処理は、前記信号値を正負対称の範囲に制限する処理である。以上の態様では、信号値が正負対称の範囲に制限されるから、信号処理に起因した位相の変化を抑制できる。したがって、第１信号と第２信号との時間的な対応を高精度に特定できるという利点がある。
【００４６】
以上に例示した各態様の情報処理方法を実行する情報処理装置、または、以上に例示した各態様の情報処理方法をコンピュータに実行させるプログラムとしても、本発明の好適な態様は実現される。
【符号の説明】
【００４７】
１００…情報処理装置、１１…制御装置、１２…記憶装置、１３…再生装置、１３１…表示装置、１３２…放音装置、２０…信号解析部、２１…信号処理部、２２…解析処理部、３０…合成処理部、４０…再生制御部、Ｘ1，Ｘ2，Ｙ…コンテンツ、Ｖ1，Ｖ2…映像信号、Ａ1，Ａ2，Ｂ1，Ｂ2…音響信号。
【図１】
2019165386.tif 000003
【図２】
2019165386.tif 000004
【図３】
2019165386.tif 000005
【図４】
2019165386.tif 000006
【図５】
2019165386.tif 000007
【図６】
2019165386.tif 000008