(57)【要約】【課題】  映像音声再生システムにおいて、ユーザが視聴している映像や音声を中断することなく、テレビの映像と無線接続する外付けスピーカとのタイミング同期を行う。【解決手段】  表示機２の内部スピーカ２１５と外付けスピーカ３の外部スピーカ３０８とから同じ映像コンテンツの音声信号を出力させ、その時間差を遅延時間演算部３０５にて計算することで、映像信号と音声信号が同期するように、映像遅延部２０３に与える映像遅延時間を決定する。【選択図】図１
2020048014.tif 000002
【特許請求の範囲】
【請求項１】
映像表示装置と音声出力装置とを有し、
前記映像表示装置において、出力装置用音声信号を前記音声出力装置に無線で送信し、
前記音声出力装置において、前記出力装置用音声信号を受信し音声に変換して出力する映像音声再生システムであって、
前記映像表示装置は、
映像信号を映像に変換して表示する映像表示部と、
表示装置用音声信号を音声に変換して出力する音声出力部と、
前記出力装置用音声信号を前記音声出力装置に無線で送信する音声送信部と、
前記音声出力部から出力される音声と前記音声出力装置から出力される音声との間の時間差に基づいて、前記映像信号の遅延時間である映像遅延時間を決定する遅延時間決定部と、
前記映像信号を前記映像遅延時間だけ遅延させ、前記映像表示部から出力される映像の出力タイミングと前記音声出力装置から出力される音声の出力タイミングとを同期させる映像遅延部とを備える
映像音声再生システム。
【請求項２】
前記音声出力装置は、前記音声出力部から出力される音声と前記音声出力装置から出力される音声との合成音声を収録する音声収録部と、
前記合成音声から前記時間差を演算する遅延時間演算部と
を備える請求項１に記載の映像音声再生システム。
【請求項３】
前記音声出力装置は、前記音声出力部から出力される音声と前記音声出力装置から出力される音声との合成音声を収録する音声収録部を備え、
前記映像表示装置は、前記合成音声から前記時間差を演算する遅延時間演算部をさらに備える
請求項１に記載の映像音声再生システム。
【請求項４】
前記映像表示装置を遠隔から操作するための遠隔操作器をさらに備え、
前記遠隔操作器は、前記音声出力部から出力される音声と前記音声出力装置から出力される音声との合成音声を収録する音声収録部と、
前記合成音声から前記時間差を演算する遅延時間演算部とを備える
請求項１に記載の映像音声再生システム。
【請求項５】
前記映像表示装置を遠隔から操作するための遠隔操作器をさらに備え、
前記遠隔操作器は、前記音声出力部から出力される音声と前記音声出力装置から出力される音声との合成音声を収録する音声収録部を備え、
前記映像表示装置は、前記合成音声から前記時間差を演算する遅延時間演算部をさらに備える
請求項１に記載の映像音声再生システム。
【請求項６】
前記音声出力装置は、前記音声出力部から送信される音声信号と前記音声出力装置から出力される音声を変換した音声信号とを合成する音声混合部と、
前記合成された音声信号にフィルタ処理を行い、前記時間差を演算する遅延時間演算部とをさらに備える
請求項１に記載の映像音声再生システム。
【請求項７】
前記映像表示装置は、前記音声出力部から出力される音声と前記音声出力装置から出力される音声とから前記時間差を演算する遅延時間演算部とをさらに備える
請求項１に記載の映像音声再生システム。
【請求項８】
前記映像表示装置は、前記映像遅延部が前記映像信号を前記映像遅延時間だけ遅延させ、前記映像表示部から出力される映像の出力タイミングと前記音声出力装置から出力される音声の出力タイミングとを同期させた後に、前記表示装置用音声信号を遅延させ、前記音声出力部から出力される音声の出力タイミングと前記音声出力装置から出力される音声の出力タイミングとを同期させる
請求項１から７のいずれか1項に記載の映像音声再生システム。
【請求項９】
前記映像表示装置は、前記映像遅延部が前記映像信号を前記映像遅延時間だけ遅延させ、前記映像表示部から出力される映像の出力タイミングと前記音声出力装置から出力される音声の出力タイミングとを同期させた後に、前記表示装置用音声信号を無音とする
請求項１から７のいずれか1項に記載の映像音声再生システム。
【請求項１０】
映像を表示するとともに、出力装置用音声信号を外部の音声出力装置に無線で送信する映像表示装置であって、
映像信号を前記映像に変換して表示する映像表示部と、
表示装置用音声信号を音声に変換して出力する音声出力部と、
前記出力装置用音声信号を前記音声出力装置に無線で送信する音声送信部と、
前記音声出力部から出力される音声と前記音声出力装置から出力される音声との間の時間差に基づいて、前記映像信号の遅延時間である映像遅延時間を決定する遅延時間決定部と、
前記映像信号を前記映像遅延時間だけ遅延させ、前記映像表示部から出力される映像の出力タイミングと前記音声出力装置から出力される音声の出力タイミングとを同期させる映像遅延部とを備える
映像表示装置。
【請求項１１】
映像を表示するとともに、出力装置用音声信号を外部の音声出力装置に無線で送信する映像表示方法であって、
映像信号を前記映像に変換して表示するステップと、
表示装置用音声信号を音声に変換して出力するステップと、
前記出力装置用音声信号を前記音声出力装置に無線で送信するステップと、
音声出力部から出力される音声と前記音声出力装置から出力される音声との間の時間差に基づいて、前記映像信号の遅延時間である映像遅延時間を決定するステップと、
前記映像信号を前記映像遅延時間だけ遅延させ、映像表示部から出力される映像の出力タイミングと前記音声出力装置から出力される音声の出力タイミングとを同期させるステップとを備える
映像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルテレビの映像音声再生システム及び映像表示装置に関する。
【背景技術】
【０００２】
従来、映像を表示する装置と音声を出力する装置とを有し、映像を表示する装置から音声を出力する装置へ音声を表す信号が無線で伝送されるシステムにおいて、映像と音声とを同期させる装置が知られている。映像の表示と音声の出力の同期化にあっては、映像を表示する装置において無線通信信号が生成されるまでの時間と、無線通信信号がリモコンまで送信されるに要する時間と、音声を出力する装置で出力されるまでの時間との合計時間を演算しておこなう。例えば映像を表示する装置であるテレビと、テレビと無線で接続した音声を出力する装置であるヘッドホンとで構成されるＡＶシステムにおいて、テレビで出力される映像と、ヘッドホンで出力する音声とを同期させる（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−１８７７６５（第９−１１頁、第２図）
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１のＡＶシステムでは、テレビのスピーカから無線で接続したヘッドホンに音声出力を切り替える際に、同期のための遅延時間を機械的に決定することが可能と記してあるが、例示された“音圧レベルのピークのタイミングの比較”という方法は映像コンテンツの音声信号には適応が困難であり、実際に特許文献１には設定専用の音声を再生する設定モードが必要であることが書かれている。この場合、遅延時間調整を行うために視聴していた映像や音声を中断する必要があり、同様にテレビのスピーカからヘッドホン等の外付けの音声を出力する装置への音声出力の切り替えをスムーズに行うことが困難である。
【０００５】
この発明は、上記のような課題を解決するためになされたもので、ユーザの映像コンテンツ視聴を中断させることなく、表示機の出力する映像と外部スピーカの出力する音声との再生タイミングを同期させる映像音声再生システムを得るものである。
【課題を解決するための手段】
【０００６】
この発明に係る映像音声再生システムにおいては、映像表示装置と音声出力装置とを有し、映像表示装置において、出力装置用音声信号を音声出力装置に無線で送信し、音声出力装置において、出力装置用音声信号を受信し音声に変換して出力する映像音声再生システムであって、映像表示装置は、映像信号を映像に変換して表示する映像表示部と、表示装置用音声信号を音声に変換して出力する音声出力部と、出力装置用音声信号を音声出力装置に無線で送信する音声送信部と、音声出力部から出力される音声と音声出力装置から出力される音声との間の時間差に基づいて、映像信号の遅延時間である映像遅延時間を決定する遅延時間決定部と、映像信号を映像遅延時間だけ遅延させ、映像表示部から出力される映像の出力タイミングと音声出力装置から出力される音声の出力タイミングとを同期させる映像遅延部とを備えるものである。
【発明の効果】
【０００７】
本発明によれば、映像音声再生システムが、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、表示機の内部スピーカの出力した音声と外付けスピーカの外部スピーカの出力した音声との間の時間差を遅延時間として演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機の出力する映像と外部スピーカの出力する音声との再生タイミングを同期させることができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施の形態１における映像音声再生システム１の構成を示すブロック図である。
【図２】本発明の実施の形態１における映像音声再生システム１の映像再生及び音声再生に関するタイミングチャート例である。
【図３】本発明の実施の形態１における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【図４】本発明の実施の形態１における遅延時間演算部３０５で行う遅延時間演算処理の説明図である。
【図５】本発明の実施の形態１における遅延時間演算部３０５で行う遅延時間演算処理における音声信号の処理経過をグラフで表した模式図である。
【図６】本発明の実施の形態２における映像音声再生システム１ａの構成を示すブロック図である。
【図７】本発明の実施の形態２における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【図８】本発明の実施の形態３における映像音声再生システム１ｂの構成を示すブロック図である。
【図９】本発明の実施の形態３における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【図１０】本発明の実施の形態４における映像音声再生システム１ｃの構成を示すブロック図である。
【図１１】本発明の実施の形態４における遅延時間演算の実行処理を示すフローチャートである。
【図１２】本発明の実施の形態５における映像音声再生システム１ｄの構成を示すブロック図である。
【図１３】本発明の実施の形態５における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【図１４】本発明の実施の形態６における映像音声再生システム１ｅの構成を示すブロック図である。
【図１５】本発明の実施の形態６における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【図１６】本発明の実施の形態６における遅延時間演算部２１４で行う遅延時間演算処理の説明図である。
【発明を実施するための形態】
【０００９】
実施の形態１．
図１は、この発明の実施の形態１における映像音声再生システム１の構成を示すブロック図である。
【００１０】
本実施の形態の映像音声再生システム１は、表示機２と外付けスピーカ３とを備える。
【００１１】
表示機２は、デジタルテレビや車載モニターなどがこれに該当する。表示機２は、また映像表示装置である。なお、以降デジタルテレビをテレビと称す。
【００１２】
外付けスピーカ３は、無線接続可能なスピーカやヘッドホン、イヤホンなどがこれに該当する。外付けスピーカ３は、また音声出力装置である。
【００１３】
映像音声再生システム１では、表示機２が出力する音声を、無線を通じて外付けスピーカ３に送信可能であり、表示機２と外付けスピーカ３とから音声を出力する。また外付けスピーカ３は、表示機２の内部スピーカ２１５が出力する音声と外付けスピーカ３の外部スピーカ３０８が出力する音声との合成音声を収録し、遅延時間の演算を行い、遅延時間を表示機２に送信する。
【００１４】
なお、表示機２と外付けスピーカ３との間の通信規格としては、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）があげられる
【００１５】
本実施の形態における表示機２は、映像音声分離部２０１、映像処理部２０２、映像遅延部２０３、映像表示部２０４、音声処理部２０５、音声遅延部２０６、音声再生部２０７、音声送信部２０８、遅延時間決定部２０９、遅延時間受信部２１０、パイロット信号保存部２１１、及び内部スピーカ２１５を備える。内部スピーカ２１５は、また音声出力部である。
【００１６】
映像音声分離部２０１は、外部から入力された信号を映像コンテンツ情報と音声情報とに分離する。また、映像音声分離部２０１は、映像コンテンツ情報を映像処理部２０２に送信し、音声情報を音声処理部２０５に送信する。表示機２がテレビである場合、テレビにおいて操作される映像コンテンツ情報は、例えば、テレビが受信した放送波に含まれる映像コンテンツ情報でもよいし、ＤＶＤやＢｌｕ−ｌａｙ Ｄｉｓｃ（登録商標）やＨＤＤなどの映像媒体に記憶された映像コンテンツ情報でもよい。
【００１７】
映像処理部２０２は、映像音声分離部２０１から送信された映像情報について輝度調整、コントラスト調整、及びカラーバランス調整などの各種映像調整処理を実施し、生成された映像信号を映像遅延部２０３に送信する。
【００１８】
映像遅延部２０３は、遅延時間決定部２０９により決定される一定の遅延時間である映像遅延時間だけ待機した後、受信した映像信号を映像表示部２０４へ出力する。この映像信号は、映像表示部２０４から映像として出力される。なお、映像遅延部２０３は、映像信号を映像遅延時間だけ遅延させ、映像表示部から出力される映像の出力タイミングと音声出力装置から出力される音声の出力タイミングとを同期させる。
【００１９】
音声処理部２０５は、映像音声分離部２０１から送信された音声信号について周波数バランス調整や反響度合の調整などの各種音声調整処理を実施し、生成された音声信号を音声遅延部２０６に送信する。また、パイロット信号保存部２１１からパイロット信号が送信された場合は、生成された音声信号にパイロット信号を加算し、音声遅延部２０６に送信する。
【００２０】
音声遅延部２０６は、遅延時間決定部２０９により決定される一定の遅延時間だけ待機した後、受信した音声信号を、音声再生部２０７と音声送信部２０８の両方に送信する。
【００２１】
音声再生部２０７は、受信した音声信号を増幅し、この増幅した音声信号を音声に変換して内部スピーカ２１５から出力する。また、内部スピーカ２１５から出力される音声は、表示装置用音声信号を音声に変換したものである。表示装置用音声信号は、表示機２における音声信号であり、外付けスピーカ３に無線を通じて送信される。
【００２２】
音声送信部２０８は、受信した音声信号を外付けスピーカ３の音声受信部３０１に無線を通じて送信する。
【００２３】
遅延時間決定部２０９は、遅延時間受信部２１０で受信した遅延時間を使用して、映像の再生タイミングと音声の再生タイミングとを同期させるように映像信号及び音声信号の遅延時間を決定する。なお、遅延時間決定部２０９は、音声出力部から出力される音声と音声出力装置から出力される音声との間の時間差に基づいて、映像信号の遅延時間である映像遅延時間を決定する。
【００２４】
パイロット信号保存部２１１は、映像音声分離部２０１から送信された音声信号から生成されたパイロット信号を音声処理部２０５に送信する。パイロット信号はどのような音声信号でもよいが、人の可聴領域の端である１０ｋＨｚ以上の音声信号で、周波数が階段状に上下するなど自然には生成されないような音声信号であることが望ましい。またパイロット信号の音量についてもどのような音量でもよいが、音声信号より小さくテレビ視聴者が不快にならない程度の音量であり、かつ、マイク３０９が収録するには十分な音量であることが望ましい。
【００２５】
本実施の形態における外付けスピーカ３は、音声受信部３０１、音声バッファ３１０、音声再生部３０２、外部スピーカ３０８、マイク３０９、音声入力部３０３、バンドパスフィルタ３０４、遅延時間演算部３０５、及び遅延時間送信部３０６を備える。
【００２６】
音声受信部３０１は、表示機２の音声送信部２０８から送信される音声信号を、受信し、復調し、伝送路でのゆらぎを吸収するために音声バッファ３１０に出力する。音声バッファ３１０は、音声受信部３０１から出力された音声信号を蓄積する。
【００２７】
音声バッファ３１０で蓄積された音声信号は、音声再生部３０２により増幅され、外部スピーカ３０８から音声に変換して出力される。外部スピーカ３０８から出力される音声は、出力装置用音声信号を音声に変換したものである。出力装置用音声信号は、外付けスピーカ３における音声信号である。
【００２８】
マイク３０９は、表示機２の内部スピーカ２１５が出力する音声と外付けスピーカ３の外部スピーカ３０８が出力する音声との合成音声を収録する。マイク３０９は、また音声収録部である。
【００２９】
音声入力部３０３は、マイク３０９で収録した音声を入力して音声信号に変換する。音声入力部３０３は、音声信号を増幅し、バンドパスフィルタ３０４へと送信する。
【００３０】
バンドパスフィルタ３０４は、音声入力部３０３から送信された音声信号にフィルタ処理を施す。実施されるフィルタ処理は、パイロット信号において含まれない周波数成分がカットオフされるような処理を含む。例えば、１０ｋＨｚ以上の周波数で構成されるパイロット信号の場合は、フィルタ処理は１０ｋＨｚ以上を通過域とするハイパスフィルタを含んだフィルタにより行われる。この処理により、パイロット信号をユーザの映像コンテンツ視聴を阻害しないような小さな音量、例えば音圧比１／１０程度のパイロット信号とすることができる。フィルタ処理された音声信号は、遅延時間演算部３０５に送信される。
【００３１】
遅延時間演算部３０５は、フィルタ処理された音声信号を入力し、表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３の外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算し、遅延時間送信部３０６から表示機２へと送信する。
【００３２】
図２は、本発明の実施の形態１における映像音声再生システム１の映像再生及び音声再生に関するタイミングチャート例である
【００３３】
映像音声再生システム１では、既に述べたように映像と音声との同期処理（リップシンク）を行うために遅延時間の付与が必要である。
【００３４】
図２（ａ）は、表示機２の内部スピーカ２１５を使用して音声を再生する場合に、リップシンクが行われている状態のタイミングチャート例である。図２（ａ）において、上側の図が映像信号のタイミングを示し、下側の図が表示機２の内部スピーカ２１５における音声信号のタイミングを示す。
【００３５】
図２（ｂ）は、表示機２の内部スピーカ２１５での音声の再生と、外付けスピーカ３の外部スピーカ３０８での音声の再生とを共に行う場合のタイミングチャート例である。図２（ｂ）において、上側の図が表示機２の内部スピーカ２１５における音声信号のタイミングを示し、下側の図が外付けスピーカ３の外部スピーカ３０８における音声信号のタイミングを示す。
【００３６】
図２（ｃ）は、外付けスピーカ３の外部スピーカ３０８を使用して音声を再生する場合に、リップシンクが行われている状態のタイミングチャート例である。図２（ｃ）において、上側の図が映像信号のタイミングを示し、下側の図が外付けスピーカ３の外部スピーカ３０８における音声信号のタイミングを示す。
【００３７】
一般的に映像コンテンツから映像信号と音声信号とを取り出すときには、映像信号を取り出す時間が音声信号を取り出す時間よりも長い。そのため、表示機２が内部スピーカ２１５を使用して音声を再生するなど他に時間を要する処理がない場合は、図２（ａ）に示すように、音声遅延部２０６が音声信号に対する音声遅延のための遅延時間を付与することで音声再生を遅延させ、映像と音声とのリップシンクを行う。
【００３８】
このとき、表示機２の内部スピーカ２１５での音声の再生と、外付けスピーカ３の外部スピーカ３０８での音声の再生とを共に行うと、無線伝送遅延時間及び無線伝送音声信号デコードを実施するための所要時間及び音声バッファ３１０での伝送路時間ゆらぎ吸収のための遅延時間が発生するため、図２（ｂ）に示すように音声再生タイミングに差が発生してしまう。この時間の差を遅延時間と定義する。
【００３９】
表示機２が外付けスピーカ３の外部スピーカ３０８を使用して音声を再生するなど音声信号を無線通信で送信する場合でも、図２（ｃ）に示すように、この遅延時間をもとに映像遅延部２０３が映像遅延時間を付与することで映像再生を遅延させ、映像と音声とのリップシンクを行うことができる。
【００４０】
遅延時間は、図２に示すように望ましくは遅延時間の合計が最短となるように決定されてもよいが、映像及び音声一方の遅延時間を固定し、もう一方の遅延時間を動的に変更するような決定方法でもよい。
【００４１】
以下で図３から図５までを用いて、映像音声再生システム１での遅延時間演算の実行処理の流れについて説明を行う。本実施の形態では、音声のエネルギー差分をもとにした適応フィルタの更新を行うことで遅延時間の演算を行う方法についての説明を行うが、その他の音声の遅延時間を検出する方法であればどのような方法であってもよい。
【００４２】
図３は、本発明の実施の形態１における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【００４３】
図３中の各ブロックの説明を行う。ステップＳ１０１では、表示機２と外付けスピーカ３の通信を開始することを表す。ステップＳ１０２では、表示機２が音声信号にパイロット信号を加算する。ステップＳ１０３では、表示機２と外付けスピーカ３とがパイロット信号が加算された音声信号を音声に変換して出力し、外付けスピーカ３がその出力された音声を収録する。ステップＳ１０４では、外付けスピーカ３が収録した音声を用いて遅延時間を演算する。ステップＳ１０５では、外付けスピーカ３が演算された遅延時間を表示機２に送信する。ステップＳ１０６では、遅延時間を決定し表示機２にて適用する。
【００４４】
図４は、本発明の実施の形態１における遅延時間演算部３０５で行う遅延時間演算処理の説明図である。
【００４５】
遅延時間演算部３０５は、適応フィルタ３１１を備える。
【００４６】
適応フィルタ３１１は、表示機２において加算されたパイロット信号に適応フィルタ３１１が持つパラメータで以てフィルタ処理を行うことで、バンドパスフィルタ３０４によってフィルタ処理された目標となる音声信号との誤差が最小となるように逐次的にフィルタ係数を変化させる音声信号フィルタである。
【００４７】
なお、例えば遅延時間演算部３０５は、パイロット信号保存部２１１と同様のパイロット信号を保存し、必要なタイミングで適応フィルタ３１１にパイロット信号を送信するようなパイロット信号保存部をさらに設けてもよい。
【００４８】
図５は、本発明の実施の形態１における遅延時間演算部３０５での遅延時間演算処理における音声信号の処理経過をグラフで表した模式図である。なお図は模式図であるため、使用する音声信号の波形パターンはこの限りではない。
【００４９】
図５（ａ）は、パイロット信号保存部２１１が持つパイロット信号の一例である。図５（ｂ）は、表示機２の音声処理部２０５にてパイロット信号と映像情報コンテンツとを加算した後の音声信号の一例である。図５（ｃ）は、外付けスピーカ３のマイク３０９にて収録した音声を変換した音声信号の一例である。図５（ｄ）は、外付けスピーカ３のバンドパスフィルタ３０４にてフィルタ処理が実行された後の音声信号の一例である。図５（ｅ）は、外付けスピーカ３の適応フィルタ３１１のフィルタ係数演算結果の一例である。
【００５０】
以下で、実施の形態１における遅延時間演算の実行処理及び適用処理の流れを示す。
【００５１】
図３に示すように、まず表示機２と外付けスピーカ３との通信が開始されることをトリガに、遅延時間演算の実行処理及び適用処理は開始される（ステップＳ１０１）。
【００５２】
次に、パイロット信号保存部２１１は、図５（ａ）で示すようなパイロット信号を音声処理部２０５に送信する。音声処理部２０５は、パイロット信号を音声信号に加算する処理を行う（ステップＳ１０２）。このとき、図５（ｂ）のような音声信号が得られる。
【００５３】
次に、音声が表示機２の内部スピーカ２１５と外付けスピーカ３の外部スピーカ３０８とから出力される。このとき既に述べたように音声信号が無線により送信されるため、外部スピーカ３０８から出力される音声は、内部スピーカ２１５から出力される音声に比べ、遅れて出力される。それと並行して、外付けスピーカ３のマイク３０９が収録を開始し、内部スピーカ２１５が出力する音声と外部スピーカ３０８が出力する音声との合成音声が収録される（ステップＳ１０３）。マイク３０９が収録した音声を変換した音声信号は、図５（ｃ）に示すように、図５（ｂ）で示した音声信号が内部スピーカ２１５と外部スピーカ３０８との間の時間差及び音量差を以て合成された音声を変換した音声信号になる。
【００５４】
マイク３０９にて合成音声が収録されると、バンドパスフィルタ３０４が音声信号にフィルタ処理を行い、遅延時間演算部３０５が表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３の外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する（ステップＳ１０４）。
【００５５】
具体的には、以下の手順で行う。以下では。パイロット信号を適応フィルタ３１１にてフィルタ処理をした音声信号をｙ（ｋ）とし、内部スピーカ２１５、外部スピーカ３０８が出力する音声がマイクに到達し、バンドパスフィルタ３０４によってフィルタ処理された音声信号をｄ（ｋ）と定義する。なお図５（ｄ）はバンドパスフィルタ３０４にてフィルタ処理が実行された後の音声信号の一例であり、パイロット信号において含まれない周波数成分がカットオフされパイロット信号の特徴を強調できている状態が図に示されている。
【００５６】
遅延時間演算部３０５では、図４に示すように、まずｙ（ｋ）−ｄ（ｋ）の差分波形ｅ（ｋ）の音圧エネルギーを演算する。このエネルギー成分が０になるように適応フィルタ３１１のフィルタパラメータを変化させる。この操作は言い換えると、ｄ（ｋ）に含まれる内部スピーカ２１５と外部スピーカ３０８とから出力されるパイロット信号の時間遅れがそれぞれどのようになっているかを演算することに等しい。このとき図５（ｅ）に示すように、２つのピークがフィルタパラメータの係数列上に発生するので、この差をもとに遅延時間の演算を行うことができる。
【００５７】
続いて、演算した遅延時間を遅延時間送信部３０６から表示機２の遅延時間受信部２１０に送信する（ステップＳ１０５）。
【００５８】
最後に、遅延時間受信部２１０で受信した遅延時間を遅延時間決定部２０９に送信し、遅延時間決定部２０９が遅延時間を映像遅延部２０３と音声遅延部２０６とのそれぞれにどの程度の時間をもって適用するかを決定する（ステップＳ１０６）。例えば、内部スピーカ２１５の音声出力は表示機２の映像出力を基準として遅延時間が決められる。また、映像出力は外部スピーカ３０８が出力する音声出力を基準として遅延時間が決められる。
【００５９】
以上で、実施の形態１での遅延時間演算の実行処理が完了となる。
【００６０】
以上のように本実施の形態の映像音声再生システム１によれば、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、表示機２の出力する音声と外付けスピーカ３の出力する音声とを合成した合成音声を収録し、表示機２の出力する音声と外付けスピーカ３の出力する音声との時間差を遅延時間として自動的に演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機２の出力する映像と外付けスピーカ３の出力する音声との再生タイミングを同期させることができる。
【００６１】
なお、表示機２の出力する映像と外付けスピーカ３の出力する音声との再生タイミングを同期させた後、表示機２の出力する音声と外付けスピーカ３の出力する音声とは、上記表示機２の出力する映像と外付けスピーカ３の出力する音声とのように同期させてもよいし、又は、表示機２の出力する音声を無音としてもよい。
【００６２】
実施の形態２．
図６は、この発明の実施の形態２における映像音声再生システム１ａの構成を示すブロック図である。
【００６３】
本実施の形態における表示機２ａは、映像音声分離部２０１、映像処理部２０２、映像遅延部２０３、映像表示部２０４、音声処理部２０５、音声遅延部２０６、音声再生部２０７、音声送信部２０８、遅延時間決定部２０９、パイロット信号保存部２１１、音声受信部２１２、バンドパスフィルタ２１３、遅延時間演算部２１４、及び内部スピーカ２１５を備える。
【００６４】
音声受信部２１２は、外付けスピーカ３ａで収録した音声を変換した音声信号を受信する。
【００６５】
バンドパスフィルタ２１３は、実施の形態１のバンドパスフィルタ３０４と同様に、音声受信部２１２で受信した音声信号にフィルタ処理を施す。フィルタ処理された音声信号は、遅延時間演算部２１４に送信される。
【００６６】
遅延時間演算部２１４は、実施の形態１の遅延時間演算部３０５と同様に、フィルタ処理された音声信号をもとに表示機２ａの内部スピーカ２１５の出力した音声と外付けスピーカ３ａの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する。演算した遅延時間は、遅延時間決定部２０９に送信される。
【００６７】
外付けスピーカ３ａは、音声受信部３０１、音声バッファ３１０、音声再生部３０２、音声入力部３０３、音声送信部３０７、外部スピーカ３０８、及びマイク３０９を備える。
【００６８】
音声入力部３０３は、マイク３０９で収録された音声を音声信号に変換する。音声送信部３０７は、音声入力部３０３で変換された音声信号を表示機２ａに送信する。
【００６９】
この構成によると、本実施の形態の映像音声再生システム１ａは、外付けスピーカ３ａにて、マイク３０９で収録された音声を変換した音声信号を複雑な信号処理をすることなく音声送信部３０７から表示機２ａの音声受信部２１２に送信し、表示機２ａにて、バンドパスフィルタ２１３が受信された音声信号のフィルタ処理を行い、遅延時間演算部２１４がフィルタ処理された音声信号を用いて遅延時間の演算を行う点が、実施の形態１と異なる。
【００７０】
図７は、本発明の実施の形態２における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【００７１】
図７中の各ブロックのうち、実施の形態１と異なるステップＳ２０４及びステップＳ２０５についての説明を行う。ステップＳ２０４では、外付けスピーカ３ａが収録した音声を表示機２ａに送信する。ステップＳ２０５では、表示機２ａが受信した音声を用いて遅延時間を演算する。
【００７２】
以下で、実施の形態２における遅延時間演算の実行処理及び適用処理の流れを示す。
【００７３】
図７に示すように、まず表示機２ａと外付けスピーカ３ａとの通信が開始されることをトリガとして遅延時間演算の実行処理及び適用処理が開始される（ステップＳ２０１）。
【００７４】
次に、パイロット信号保存部２１１は、パイロット信号を音声処理部２０５に送信する。音声処理部２０５は、パイロット信号と音声信号とを加算する処理を行う。（ステップＳ２０２）。
【００７５】
次に、表示機２ａの内部スピーカ２１５と外付けスピーカ３ａの外部スピーカ３０８とから音声が出力される。このとき実施の形態１と同様に音声信号が無線により送信されるため、外付けスピーカ３ａから出力される音声は、内部スピーカ２１５から出力される音声に比べ、遅れて出力される。それと並行して、外付けスピーカ３ａのマイク３０９が収録を開始し、内部スピーカ２１５が出力する音声と外部スピーカ３０８が出力する音声との合成音声を収録する（ステップＳ２０３）。
【００７６】
音声入力部３０３にてマイク３０９が収録した合成音声が入力されると、音声入力部３０３は、入力された合成音声を変換した音声信号を増幅し、音声送信部３０７は、音声信号を表示機２ａの音声受信部２１２に送信する（ステップＳ２０４）
【００７７】
音声受信部２１２が音声信号を受信すると、バンドパスフィルタ２１３が音声信号にフィルタ処理を行い、遅延時間演算部２１４がフィルタ処理された音声信号を入力とし、表示機２ａの内部スピーカ２１５の出力した音声と外付けスピーカ３ａの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する（ステップＳ２０５）。
【００７８】
最後に、遅延時間演算部２１４が演算した遅延時間を遅延時間決定部２０９に送信し、遅延時間決定部２０９が遅延時間を映像遅延部２０３と音声遅延部２０６とのそれぞれにどのように適用するかを決定する（ステップＳ２０６）。
【００７９】
以上で、実施の形態２での遅延時間演算の実行処理が完了となる。
【００８０】
以上のように本実施の形態によれば、映像音声再生システム１ａが、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、外付けスピーカ３ａが、表示機２ａの出力する音声と外付けスピーカ３ａの出力する音声とを収録し、表示機２ａが、リモコンで収録した合成音声から表示機２ａの内部スピーカ２１５の出力した音声と外付けスピーカ３ａの外部スピーカ３０８の出力した音声との時間差を遅延時間として自動的に演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機２ａの出力する映像と外付けスピーカ３ａの出力する音声との再生タイミングを同期させることができる。
【００８１】
実施の形態３．
図８は、本発明の実施の形態３における映像音声再生システム１ｂの構成を示すブロック図である。
【００８２】
実施の形態１、２における映像音声再生システムは、表示機及び外付けスピーカを備えていたが、本実施の形態における映像音声再生システム１ｂは、リモコン４をさらに備える。
【００８３】
リモコン４は、例えば表示機２のリモートコントローラや利用者のスマートフォンなどがこれに該当する。リモコン４は、また遠隔操作器である。
【００８４】
なお、表示機２とリモコン４との間の通信規格としては、例えば、Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙ）方式やＢｌｕｅｔｏｏｔｈ（登録商標）があげられる
【００８５】
本実施の形態における表示機２は、実施の形態１と同様である。
【００８６】
本実施の形態における外付けスピーカ３ｂは、音声受信部３０１、音声バッファ３１０、音声再生部３０２、及び外部スピーカ３０８を備える。
【００８７】
本実施の形態におけるリモコン４は、音声入力部４０１、バンドパスフィルタ４０２、遅延時間演算部４０３、遅延時間送信部４０４、及びマイク４０６を備える。
【００８８】
マイク４０６は、実施の形態１におけるマイク３０９と同様に、内部スピーカ２１５が出力する音声と外部スピーカ３０８が出力する音声との合成音声を収録する。マイク４０６は、また音声収録部である。
【００８９】
音声入力部４０１は、実施の形態１の外付けスピーカ３ｂにおける音声入力部３０３と同様に、マイク４０６で収録された合成音声を変換した音声信号を増幅し、バンドパスフィルタ４０２へと送信する。
【００９０】
バンドパスフィルタ４０２は、実施の形態１の外付けスピーカ３ｂにおけるバンドパスフィルタ３０４と同様に、音声入力部４０１から送信された音声信号にフィルタ処理を施す。フィルタ処理された音声信号は、遅延時間演算部４０３に送信される。
【００９１】
遅延時間演算部４０３は、実施の形態１の外付けスピーカ３ｂにおける遅延時間演算部３０５と同様に、フィルタ処理された音声信号を入力し、表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３ｂの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する。遅延時間演算部４０３は、遅延時間送信部４０４及び遅延時間受信部２１０を経由して、演算された遅延時間を遅延時間決定部２０９に送信する。
【００９２】
この構成によると、本実施の形態の映像音声再生システム１ｂは、リモコン４のマイク４０６で収録した合成音声を変換した音声信号に対して、バンドパスフィルタ４０２が音声信号のフィルタ処理を行い、遅延時間演算部４０３がフィルタ処理された音声信号を用いて遅延時間の演算を行う点で、実施の形態１と異なる。
【００９３】
図９は、本発明の実施の形態３における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【００９４】
図９中の各ブロックのうち、実施の形態１に追加されたステップＳ３０２とステップＳ３０３についての説明を行う。ステップＳ３０２では、リモコン４と表示機２とが通信可能であるかを判定する。ステップＳ３０３では、映像音声再生システム１ｂが、遅延時間演算処理を行わずに既定の遅延時間を適用することを決定する。
【００９５】
以下で、実施の形態３における遅延時間演算の実行処理及び適用処理の流れを示す。
【００９６】
表示機２と外付けスピーカ３ｂとの通信が開始されることをトリガとして遅延時間演算の実行及び適用処理が開始される（ステップＳ３０１）。
【００９７】
次に映像音声再生システム１ｂは、リモコン４と表示機２とが通信可能であるかを判定する（ステップＳ３０２）。別の判定方法としては、例えばリモコン４がスマートフォンである場合は、無線通信で接続されているので常に送受信可能であるかを判定できる。
【００９８】
リモコン４と表示機２とが通信可能でない場合（ステップＳ３０２：Ｎｏ）、映像音声再生システム１ｂとして、表示機２が遅延時間演算処理を行わずに既定の遅延時間を適用することを決定する（ステップＳ３０３）。
【００９９】
リモコン４と表示機２とが通信可能である場合（ステップＳ３０２：ｙｅｓ）、パイロット信号保存部２１１は、パイロット信号を音声処理部２０５に送信する。音声処理部２０５がパイロット信号と音声信号とを加算する処理を行う。（ステップＳ３０４）。
【０１００】
次に、音声が表示機２の内部スピーカ２１５と外付けスピーカ３ｂの外部スピーカ３０８とから出力される。このとき既に述べたように音声信号が無線により送信されるため、外付けスピーカ３ｂから出力される音声は、表示機２から出力される音声に比べ、遅れて出力される。それと並行して、リモコン４のマイク４０６が収録を開始し、内部スピーカ２１５が出力する音声と外付けスピーカ３ｂが出力する音声との合成音声を収録する（ステップＳ３０５）。
【０１０１】
マイク４０６にて合成音声が収録されると、音声入力部４０１は収録された合成音声が入力される。音声入力部４０１は、合成音声を変換した音声信号を増幅し、バンドパスフィルタ４０２は、音声信号にフィルタ処理を行う。遅延時間演算部４０３は、フィルタ処理された音声信号を入力し、表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３ｂの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する（ステップＳ３０６）。
【０１０２】
遅延時間送信部４０４は、遅延時間演算部４０３が演算した遅延時間を表示機２の遅延時間受信部２１０に送信する（ステップＳ３０７）。
【０１０３】
遅延時間受信部２１０は、受信した遅延時間を遅延時間決定部２０９に送信する。遅延時間決定部２０９は、遅延時間を映像遅延部２０３と音声遅延部２０６とのそれぞれにどのように適用するかを決定する（ステップＳ３０８）。
【０１０４】
以上で、実施の形態３での遅延時間演算の実行処理が完了となる。
【０１０５】
以上のように本実施の形態によれば、映像音声再生システム１ｂが、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、リモコン４が、表示機２の出力する音声と外部スピーカ３０８の出力する音声とを収録し、収録した音声から表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３ｂの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として自動的に演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機２の出力する映像と外部スピーカ３０８の出力する音声との再生タイミングを同期させることができる。
【０１０６】
実施の形態４．
図１０は、本発明の実施の形態４における映像音声再生システム１ｃの構成を示すブロック図である。
【０１０７】
本実施の形態における表示機２ａは、実施の形態２と同様に、映像音声分離部２０１、映像処理部２０２、映像遅延部２０３、映像表示部２０４、音声処理部２０５、音声遅延部２０６、音声再生部２０７、音声送信部２０８、遅延時間決定部２０９、パイロット信号保存部２１１、音声受信部２１２、バンドパスフィルタ２１３、遅延時間演算部２１４、及び内部スピーカ２１５を備える。
【０１０８】
本実施の形態におけるリモコン４ａは、音声入力部４０１、音声送信部４０５、及びマイク４０６を備える。
【０１０９】
音声入力部４０１は、マイク４０６で収録された音声を音声信号に変換する。音声送信部４０５は、音声入力部４０１で変換された音声信号を出力する。
【０１１０】
音声送信部４０５は、入力された音声を音声信号に変換して表示機２ａに送信する。また、本実施の形態における外付けスピーカ３ｂは、実施の形態３と同様である。
【０１１１】
この構成によると、リモコン４ａは音声信号を表示機２ａの音声受信部２１２に送信し、表示機２ａは、バンドパスフィルタ２１３が受信した音声信号のフィルタ処理を行い、遅延時間演算部２１４がフィルタ処理された音声信号を用いて遅延時間の演算を行う点が、実施の形態３と異なる。
【０１１２】
図１１は、本発明の実施の形態４における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【０１１３】
表示機２ａと外付けスピーカ３ｂとの通信が開始されることをトリガとして遅延時間演算の実行処理及び適用処理が開始される（ステップＳ４０１）。
【０１１４】
次に映像音声再生システム１ｃは、リモコン４ａと表示機２ａとが通信可能であるかを判定する（ステップＳ４０２）。
【０１１５】
リモコン４ａと表示機２ａとが通信可能でない場合（ステップＳ４０２：ｎｏ）、映像音声再生システム１ｃとして、表示機２ａが遅延時間演算処理を行わずに既定の遅延時間を適用することを決定する（ステップＳ４０３）。
【０１１６】
リモコン４ａと表示機２ａとが通信可能である場合（ステップＳ４０２：ｙｅｓ）、パイロット信号保存部２１１は、パイロット信号を音声処理部２０５に送信する。音声処理部２０５がパイロット信号と音声信号とを加算する処理を行う。（ステップＳ４０４）。
【０１１７】
次に、音声信号が表示機２ａの内部スピーカ２１５と外付けスピーカ３ｂの外部スピーカ３０８とから出力される。このとき既に述べたように音声信号が無線により送信されるため、外付けスピーカ３ｂから出力される音声は、表示機２ａから出力される音声に比べ、遅れて出力される。それと並行して、リモコン４ａのマイク４０６が収録を開始し、内部スピーカ２１５が出力する音声と外付けスピーカ３ｂが出力する音声との合成音声を収録する（ステップＳ４０５）。
【０１１８】
マイク４０６にて合成音声が収録されると、音声入力部４０１が収録された合成音声を変換した音声信号を増幅し、音声送信部４０５が音声信号を表示機２ａの音声受信部２１２に送信する（ステップＳ４０６）
【０１１９】
音声受信部２１２が音声信号を受信すると、バンドパスフィルタ２１３が音声信号にフィルタ処理を行い、遅延時間演算部２１４がフィルタ処理された音声信号を入力し、表示機２ａの内部スピーカ２１５の出力した音声と外付けスピーカ３ｂの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する（ステップＳ４０７）。
【０１２０】
最後に、演算した遅延時間受信部２１０で受信した遅延時間を遅延時間決定部２０９に送信し、遅延時間決定部２０９が遅延時間を映像遅延部２０３と音声遅延部２０６とのそれぞれにどのように適用するかを決定する（ステップＳ４０８）。
【０１２１】
以上で、実施の形態４の遅延時間演算の実行処理が完了となる。
【０１２２】
以上のように本実施の形態によれば、映像音声再生システムが、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、リモコン４ａが、表示機２ａの出力する音声と外付けスピーカ３ｂの出力する音声とを収録し、表示機２ａが、リモコン４ａで収録した合成音声から表示機２ａの内部スピーカ２１５の出力した音声と外付けスピーカ３ｂの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として自動的に演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機２ａの出力する映像と外付けスピーカ３ｂの出力する音声との再生タイミングを同期させることができる。
【０１２３】
実施の形態５．
図１２は、本発明の実施の形態５における映像音声再生システム１ｄの構成を示すブロック図である。
【０１２４】
本実施の形態における外付けスピーカ３ｃは、音声受信部３０１、音声バッファ３１０、音声再生部３１４、外部スピーカ３０８、音声入力部３０３、音声混合部３１３、バンドパスフィルタ３０４、遅延時間演算部３０５、遅延時間送信部３０６、及びマイク３０９を備える。
【０１２５】
音声混合部３１３は、表示機２が外付けスピーカ３ｃへと無線で送信した音声信号と、表示機２が内部スピーカ２１５より出力した音声を変換した音声信号とを混合する。この操作により外付けスピーカ３ｃは、実施の形態１で述べたような内部スピーカ２１５が出力する音声と外部スピーカ３０８が出力する音声との合成音声を変換した音声信号に相当する音声信号を生成し、バンドパスフィルタ３０４に送信する。
【０１２６】
この構成によると、本実施の形態の映像音声再生システム１ｄは、外付けスピーカ３ｃにて受信した音声信号を出力しないので、映像音声再生システム１ｄから発せられる音声が多重化することなく、遅延時間の演算を行うことができる点が実施の形態１と異なる。
【０１２７】
図１３は、本発明の実施の形態５における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【０１２８】
図１３中の各ブロックのうち、実施の形態１と異なるステップＳ５０３とステップＳ５０４についての説明を行う。ステップＳ５０３は、表示機２がパイロット信号の加算された音声信号を外付けスピーカ３ｃに送信するブロックである。ステップＳ５０４は、外付けスピーカ３ｃが表示機２の出力した音声を変換した音声信号と表示機２から無線で送信された音声信号とを加算するブロックである。
【０１２９】
以下で、実施の形態５における遅延時間演算の実行処理及び適用処理の流れを示す。
【０１３０】
図に示すように、まず表示機２と外付けスピーカ３ｃとの通信が開始されることをトリガに、遅延時間演算の実行及び適用処理は開始される（ステップＳ５０１）。
【０１３１】
次に、パイロット信号保存部２１１は、パイロット信号を音声処理部２０５に送信する。音声処理部２０５がパイロット信号と音声信号とを加算する処理を行う。（ステップＳ５０２）。
【０１３２】
次に、表示機２がパイロット信号の加算された音声信号を外付けスピーカ３ｃに送信し、表示機２がパイロット信号の加算された音声信号を増幅し、この増幅した音声信号を音声に変換して内部スピーカ２１５から出力する。それと並行して、外付けスピーカ３ｃのマイク３０９が収録を開始し、内部スピーカ２１５が出力する音声を収録し、表示機２の音声送信部２０８から無線で音声信号を送信する（ステップＳ５０３）。
【０１３３】
音声入力部３０３にて音声が収録されると、音声混合部３１３が、表示機２の出力音声を変換した音声信号と表示機２から無線で送信された音声信号とを混合する（ステップＳ５０４）。
【０１３４】
音声混合部３１３にて音声信号が混合されると、バンドパスフィルタ３０４が音声信号にフィルタ処理を行い、遅延時間演算部３０５が表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３ｃの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として演算する（ステップＳ５０５）。
【０１３５】
続いて、演算した遅延時間を遅延時間送信部３０６から表示機２の遅延時間受信部２１０に送信する（ステップＳ５０６）。
【０１３６】
最後に、遅延時間受信部２１０で受信した遅延時間を遅延時間決定部２０９に送信し、遅延時間決定部２０９が遅延時間を映像遅延部２０３と音声遅延部２０６とのそれぞれにどのように適用するかを決定する（ステップＳ５０７）。
【０１３７】
以上で、実施の形態５での遅延時間演算の実行処理が完了となる。
【０１３８】
以上のように本実施の形態によれば、映像音声再生システムが、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、外付けスピーカ３ｃが、表示機２の出力する音声を収録し、表示機２の内部スピーカ２１５の出力した音声と外付けスピーカ３ｃの外部スピーカ３０８の出力した音声との間の時間差を遅延時間として自動的に演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機２の出力する映像と外付けスピーカ３ｃの出力する音声との再生タイミングをさせることができる。
【０１３９】
また、以上のように本実施の形態によれば、音声が表示機２からのみ出力され外付けスピーカ３ｃからは出力されずに遅延時間を演算できるため、映像音声再生システムから発せられる音声が多重化することなく、ユーザは映像コンテンツの音声を複数のスピーカから聞くことがない。その結果としてユーザは映像コンテンツの視聴を快適に行うことができる。
【０１４０】
実施の形態６．
図１４は、本発明の実施の形態６における映像音声再生システム１ｅの構成を示すブロック図である。
【０１４１】
本実施の形態における映像音声再生システム１ｅの表示機２ｂは、映像音声分離部２０１、映像処理部２０２、映像遅延部２０３、映像表示部２０４、音声処理部２０５、音声遅延部２０６、音声再生部２０７、音声送信部２０８、遅延時間決定部２０９、音声受信部２１２、遅延時間演算部２１４、及び内部スピーカ２１５を備える。内部スピーカ２１５は、また音声出力部である。
【０１４２】
本実施の形態における映像音声再生システム１ｅの外付けスピーカ３ａは、音声受信部３０１、音声バッファ３１０、音声再生部３０２、音声入力部３０３、音声送信部３０７、外部スピーカ３０８、及びマイク３０９を備える。
【０１４３】
この構成によると、表示機２ｂにてパイロット音声の付与をすることなく遅延時間の演算を行い、リップシンクを行う点が実施の形態２と異なる。
【０１４４】
図１５は、本発明の実施の形態６における遅延時間演算の実行処理及び適用処理を示すフローチャートである。
【０１４５】
図１５中の各ブロックのうち、音声処理部２０５がパイロット信号と音声信号とを加算するステップが存在しない点が、実施の形態２と異なる。
【０１４６】
図１６は、本発明の実施の形態６における遅延時間演算部２１４で行う遅延時間演算処理の説明図である。
【０１４７】
本発明の実施の形態６における適応フィルタ３１１では、映像コンテンツの音声信号に対してフィルタ処理を行い（ｙ（ｋ））、マイク３０９にて収録した音声を変換した音声信号（ｄ（ｋ））との誤差信号（ｅ（ｋ））を最小化することを目的とする。このようにすることで、パイロット音声の付与をすることなく遅延時間の演算を行い、リップシンクを行う点が実施の形態２と異なる。
【０１４８】
以上のように本実施の形態によれば、映像音声再生システムが、ユーザが視聴している映像コンテンツの映像と音声とを出力しながら、外部スピーカ３０８が、表示機２ｂの出力する音声と外部スピーカ３０８の出力する音声との合成音声を収録し、リモコンで収録した合成音声から表示機２ｂの出力する音声と外部スピーカ３０８の出力する音声との時間差を遅延時間として自動的に演算することで、ユーザの映像コンテンツ視聴を中断させることなく、表示機２ｂの出力する映像と外部スピーカ３０８の出力する音声との再生タイミングを同期させることができる。
【０１４９】
さらに本実施の形態によれば、表示機２ｂにてパイロット音声の付与をすることなく遅延時間の演算を行うため、ユーザの映像コンテンツ視聴を阻害することなく、リップシンクを行うことができる。
【０１５０】
なお、以上の実施形態はあくまでも例示であって、本発明はこれらの実施形態によって限定されるものではない。
【符号の説明】
【０１５１】
１，１ａ，１ｂ，１ｃ，１ｄ，１ｅ  映像音声再生システム
２，２ａ，２ｂ  表示機
２０１  映像音声分離部
２０２  映像処理部
２０３  映像遅延部
２０４  映像表示部
２０５  音声処理部
２０６  音声遅延部
２０７  音声再生部
２０８  音声送信部
２０９  遅延時間決定部
２１０  遅延時間受信部
２１１  パイロット信号保存部
２１２  音声受信部
２１３  バンドパスフィルタ
２１４  遅延時間演算部
２１５  内部スピーカ
３，３ａ，３ｂ，３ｃ  外付けスピーカ
３０１  音声受信部
３０２  音声再生部
３０３  音声入力部
３０４  バンドパスフィルタ
３０５  遅延時間演算部
３０６  遅延時間送信部
３０７  音声送信部
３０８  外部スピーカ
３０９  マイク
３１０  音声バッファ
３１１  適応フィルタ
３１２  パイロット信号保存部
３１３  音声混合部
３１４  音声再生部
４，４ａ  リモコン
４０１  音声入力部
４０２  バンドパスフィルタ
４０３  遅延時間演算部
４０４  遅延時間送信部
４０５  音声送信部
４０６  マイク
【図１】
2020048014.tif 000003
【図２】
2020048014.tif 000004
【図３】
2020048014.tif 000005
【図４】
2020048014.tif 000006
【図５】
2020048014.tif 000007
【図６】
2020048014.tif 000008
【図７】
2020048014.tif 000009
【図８】
2020048014.tif 000010
【図９】
2020048014.tif 000011
【図１０】
2020048014.tif 000012
【図１１】
2020048014.tif 000013
【図１２】
2020048014.tif 000014
【図１３】
2020048014.tif 000015
【図１４】
2020048014.tif 000016
【図１５】
2020048014.tif 000017
【図１６】
2020048014.tif 000018