(57)【要約】【課題】走行中に同乗者が快適な会話環境を共有できる車内会話支援システムを提供する。【解決手段】本発明による車内会話支援システムは話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話を支援するシステムである。車内に配置される複数の個別マイクまたは共通マイクと、車内に配置される共通スピーカまたは複数の個別スピーカと、ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記個別マイクまたは共通マイクの出力を補正部により補正し、前記調整部で増幅して前記共通スピーカまたは個別スピーカに接続する音響処理部と、から構成されている。【選択図】図１
2008042390.tif 000002
【特許請求の範囲】
【請求項１】
話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムであって、
車内に配置される複数の個別マイクまたは共通マイクと、
車内に配置される共通スピーカまたは複数の個別スピーカと、
ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記個別マイクまたは共通マイクの出力を補正部により補正し、前記調整部で増幅して前記共通スピーカまたは個別スピーカに接続する音響処理部と、
から構成した車内会話支援システム。
【請求項２】
話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムであって、
車内に話者ごとに配置される複数の車内マイクと、
車内に各話者共通に設けられた共通スピーカと、
ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記車内マイクの出力を補正部により補正し、前記調整部で増幅して前記共通スピーカに接続する音響処理部と、
から構成した車内会話支援システム。
【請求項３】
話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムであって、
車内に配置される複数の個別スピーカと、
車内に各話者に共通に設けられた共通マイクと、
ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記共通マイクの出力を補正部により補正し、前記調整部で増幅して前記個別スピーカに接続する音響処理部と、
から構成した車内会話支援システム。
【請求項４】
前記共通スピーカは車内の天井に配置された天井スピーカであり、
前記複数の個別マイクは話者の座席に関連して配置された車内マイクであり、
前記ハウリング防止用のフィルタ部のフィルタは前記天井スピーカを囲む閉曲面上の点と前記任意の車内マイク間の音響伝達特性を持つFIR 、あるいはIIR フィルタであり、
前記フィルタ部は前記音響処理部内の帰還キャンセルループに配置されている、
請求項２記載の車内会話支援システム。
【請求項５】
前記共通マイクは車内の天井に配置された天井マイクであり、
前記複数の個別スピーカは話者の座席に関連して配置された車内スピーカであり、
前記ハウリング防止用のフィルタ部のフィルタは前記天井マイクを囲む閉曲面上の点と前記任意の車内スピーカ間の音響伝達特性を持つFIR 、あるいはIIR フィルタであり、
前記マイク出力はフィルタされて各車内スピーカチャンネルごとに加算される、
請求項３記載の車内会話支援システム。
【請求項６】
請求項４または５記載の車内会話支援システムにおいて、
前記音響処理部のフィルタの特性は、前記個別マイクまたは個別スピーカと対応閉曲面上の点間の音響伝達特性、またはインパルス応答の実測値に基づいてパラメータ設定部により予め設定した車内会話支援システム。
【請求項７】
請求項１〜６記載の車内会話支援システムは、さらに
車外マイクまたは運転制御用の車載コンピュータのデータに基づいて運転環境を検出または推定する走行状態検出部を含み、
前記検出部により前記音響処理部の調整部を制御する車内会話支援システム。
【請求項８】
請求項１〜７記載の車内会話支援システムは、さらに
前記音響処理部の調整部の増幅器に音声信号を入力する音声信号入力端子を設け、前記システムの外部の音声信号を接続可能にした車内会話支援システム。
【請求項９】
請求項１〜８記載の車内会話支援システムにおいて、さらに
車外の全方位画像と車内の画像を獲得する２以上のカメラと、
前記マイクの出力と前記カメラの出力と関連音声信号を同時に記録再生可能である記録再生装置と、
前記記録再生装置の記録／再生選択する指示手段と、
前記記録再生装置の画像出力を表示する複数の表示装置と、
を付加した構成からなり、
前記関連音声信号は直接または再生後に前記音声信号入力端子に接続される、
ように構成した車内会話支援システム。
【請求項１０】
請求項９記載の車内会話支援システムにおいて、さらに
前記カメラの画像処理を行う画像処理装置と、
前記カメラ画像のどの部分を切り出し画像処理させるかを指示する指示手段と、
画像処理前／後の画像表示を選択する画像選択手段と、
を設けて構成した車内会話支援システム。
【請求項１１】
請求項９または請求項１０記載の車内会話支援システムにおいて、さらに
前記記録再生装置は、記録／再生中に画像や音声の付加情報として時間軸方向にタグ付けできる機能を持ち、さらに記録されたタグを時間軸方向に対して検索できる機能を持ち、
さらに検索したタグ位置からの再生が可能である機能を持ち、
前記記録再生装置にタグ付けを指示したり記録したタグの検索を指示するタグ付け検索指示手段と、
を設けて構成した車内会話支援システム。
【請求項１２】
請求項１１記載の車内会話支援システムにおいて、
前記タグ付け検索指示手段は、限定された複数個の専用スイッチであるか特定の言葉を認識する音声認識装置であり、乗車席ごとに設けられ、
前記表示装置は、乗車席ごとに設けられ、
るように構成した車内会話支援システム。
【請求項１３】
請求項９から請求項１２のいずれか記載の車内会話支援システムにおいて、さらに
専用の指示手段の指示により、指示のあった時間以前に記録・再生した画像・音声を
時間遅延させて特定の一定時間範囲で再生できる機能を持つ
ように構成した車内会話支援システム。
【請求項１４】
請求項９から請求項１３のいずれか記載の車内会話支援システムにおいて、さらに
画像を選択する指示手段と、
前記記録再生装置の音声・画像出力から選択した複数の画像を分割表示用の画像に合成変換する画像合成変換装置と、
を付加した構成からなる車内会話支援システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、話者が他の話者が発した生音（直接音）とスピーカからの拡声音を聴取する車内環境での車内会話支援システム、さらに他のコンテンツの音声を聴取しながら会話を可能にする車内会話支援システムに関する。
【背景技術】
【０００２】
複数乗員によるツーリングの楽しみを高揚させるもののひとつとして快適な会話環境が挙げられる。
ところが、停車時に対して車の走行時にはエンジン音やタイヤノイズ、或いは車外からの騒音のため、車内会話が阻害され快適な会話環境を維持することが困難になる。
特に、大型のレクレーションヴィークル(RV)や乗員に高齢者が含まれる場合などは、各乗員同志の距離が大きくなりかつ（高齢者に特有の）感音性の難聴なども加わり騒音と会話を区別する「聞き分け」が困難になる。
これを改善するには、走行中の騒音の大きさとスペクトルに応じて、最も効果的に車内会話音を拡声制御し、収音した会話音をハウリングすることなく安定に増幅する必要がある。
【０００３】
この車内会話環境の改善または、その改善のために必要な技術について数多くの提案がなされている。
特許文献１記載の車室内会話補助装置に係る発明は、スピーカとマイクを同一平面上に配設した車室内会話補助用ルーフモジュールを開示しており、スピーカによる機械的な振動が、マイクロホン（以下マイク）に伝わらない構造を提供している。
特許文献２記載の車内会話補助装置の発明は、話者ごと（つまり座席ごとに）マイクを設け種々の調整をすることを開示している。
特許文献３記載の車載用音響装置の発明は、ハウリングを考慮したマイクとスピーカの配置を提案している。
特許文献４記載の音響システムの発明は、ハウリング防止のための音響空間内（非平面上）のマイクとスピーカの配置を開示している。
特許文献５記載の音場制御装置の発明はＦＩＲフィルタを用いてスピーカからマイクへのフィードバック分を除去し、ハウリングを防止する発明を示している。
【０００４】
本発明に係る車内会話支援システムは前記特許文献２記載の発明と車内環境に共通点が多いから、特許文献２記載の発明についてやや詳しく説明する。特許文献２記載の発明は、騒音下や音楽等の再生中であっても、乗員同士の会話音声を明瞭に聴き取れるように配慮したものである点で優れている。座席ごとに設置された複数のマイクで集音した車内音をオーディオ音や騒音のレベルに応じてゲイン補正し車内に拡声するものである。マイクで収音した信号から会話音を分離し、また、マイク毎の入力レベルの大小から発声者の席を判断し発声者の席の方向から聞こえるようにスピーカチャネル毎に会話音声の出力レベルを制御し、オーディオ音と合成して各スピーカなどから出力するようになっている。
【０００５】
しかしながら、次の問題が予想される。
（ア）スピーカから拡声出力された発話者の音声が再度マイクに帰還し、拡声しようとするとハウリングを発生する可能性がある。
（イ）ハウリングを回避すべく系の周波数特性（マイク−スピーカを含む拡声系のループゲイン）を平坦化すると、残響延長が起こり、結局会話の明瞭度を阻害することになるおそれがある。
（ウ）会話のレベルに応じてオーディオ音のレベルを変えることになるので、受聴感としては違和感が発生する可能性がある。
（エ）発声者の位置のスピーカのゲインを上げることになるので、自チャンネルのマイクに大きな帰還音が入り、ますますハウリングしやすくなる（これを阻止するため、最も遠いシートのスピーカのゲインを上げると、今度は音像定位が発声者位置からはずれ不自然な拡声音となる）可能性がある。
（オ）車内騒音を車内マイクにより収音するので、会話音と混ざり分離が困難になったり、スピーカとの間に新たな帰還ループを形成してハウリングを助長する可能性がある。
【特許文献１】特開２００１−１０５９８９号公報
【特許文献２】特開２００２−０５１３９２号公報
【特許文献３】特開平０７−２５５０９９号公報
【特許文献４】特開２００６−１０９３４０号公報
【特許文献５】特許第３１５８４６８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明の目的は、車内に配置されるマイクとスピーカにより走行時においても停車時と同等の会話明瞭度／了解度を提供することができる車内会話支援システムを提供することにある。
本発明のさらに他の目的は、本システム以外の他の装置との組み合わせにおいて増幅器とスピーカの共用により車載設備を節約することができ、他の装置との音声信号の接続性を容易にすることができる車内会話支援システムを提供することにある。
本発明のさらに他の目的は、車外・車内を撮像するカメラ画像と前記マイクにより得られる車内音声とを同時に記録再生できる車内会話支援システムを提供することにある。
本発明のさらに他の目的は、車外・車内を撮像するカメラ画像の特定部分を指示して画像処理させることができる車内会話支援システムを提供することにある。
本発明のさらに他の目的は、カメラ画像や音声の記録／再生中に画像や音声の付加情報として時間軸方向にタグ付けできる機能を持つことにより、見聞きしたい箇所を検索し、検索した位置から再生可能である車内会話支援システムを提供することにある。
本発明のさらに他の目的は、乗車席ごとに限定されたスイッチや特定の言葉の音声認識によるタグ検索ができ、乗車席ごとの表示装置で見ることのできる車内会話支援システムを提供することにある。
【課題を解決するための手段】
【０００７】
前記目的を達成するために、本発明による請求項１記載の車内会話支援システムは、
話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムであって、
車内に配置される複数の個別マイクまたは共通マイクと、
車内に配置される共通スピーカまたは複数の個別スピーカと、
ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記個別マイクまたは共通マイクの出力を補正部により補正し、前記調整部で増幅して前記共通スピーカまたは個別スピーカに接続する音響処理部と、から構成されている。
【０００８】
本発明による請求項２記載の車内会話支援システムは、
話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムであって、
車内に話者ごとに配置される複数の車内マイクと、
車内に各話者共通に設けられた共通スピーカと、
ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記車内マイクの出力を補正部により補正し、前記調整部で増幅して前記共通スピーカに接続する音響処理部と、から構成されている。
【０００９】
本発明による請求項３記載の車内会話支援システムは、
話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムであって、
車内に配置される複数の個別スピーカと、
車内に各話者に共通に設けられた共通マイクと、
ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含み、前記共通マイクの出力を補正部により補正し、前記調整部で増幅して前記個別スピーカに接続する音響処理部と、から構成されている。
【００１０】
本発明による請求項４記載の車内会話支援システムは、請求項２記載のシステムにおいて、
前記共通スピーカは車内の天井に配置された天井スピーカであり、
前記複数の個別マイクは話者の座席に関連して配置された車内マイクであり、
前記ハウリング防止用のフィルタ部のフィルタは前記天井スピーカを囲む閉曲面上の点と前記任意の車内マイク間の音響伝達特性を持つFIR 、あるいはIIR フィルタであり、
前記フィルタ部は前記音響処理部内の帰還キャンセルループに配置されている。
本発明による請求項５記載の車内会話支援システムは、請求項３記載のシステムにおいて、
前記共通マイクは車内の天井に配置された天井マイクであり、
前記複数の個別スピーカは話者の座席に関連して配置された車内スピーカであり、
前記ハウリング防止用のフィルタ部のフィルタは前記天井マイクを囲む閉曲面上の点と前記任意の車内スピーカ間の音響伝達特性を持つFIR 、あるいはIIR フィルタであり、
前記マイク出力はフィルタされて各車内スピーカチャンネルごとに加算される。
本発明による請求項６記載の車内会話支援システムは、請求項４または５記載のシステムにおいて、
前記音響処理部のフィルタの特性は、前記個別マイクまたは個別スピーカと対応閉曲面上の点間の音響伝達特性、またはインパルス応答の実測値に基づいてパラメータ設定部により予め設定したものである。
【００１１】
本発明による請求項７記載の車内会話支援システムは、請求項１〜６記載のシステムにおいて、さらに
車外マイクまたは運転制御用の車載コンピュータのデータに基づいて運転環境を検出または推定する走行状態検出部を含み、
前記検出部により前記音響処理部の調整部を制御するように構成されている。
本発明による請求項８記載の車内会話支援システムは、請求項１〜７記載の車内会話支援システムにおいて、さらに
前記音響処理部の調整部の増幅器に音声信号を入力する音声信号入力端子を設け、前記システムの外部の音声信号を接続可能に構成してある。
本システムと他の装置（例えば車載ステレオ装置）との組み合わせにおいて増幅器とスピーカの共用により車載設備を節約することができ、他の装置との音声信号の接続性を容易にすることができる。さらに、マイクアンプの出力端子を設けることにより、本システム以外の他の装置（例えば音声信号の記録再生可能な装置）との音声信号の接続性をより容易にすることができる。また、通信装置の音声信号の入力と出力を本システムのマイクアンプ出力端子と音声信号入力端子のそれぞれに接続することで、同行車両の乗員同士間の車内会話支援を容易に可能とすることができる。
【００１２】
本発明による請求項９記載の車内会話支援システムは、請求項１〜８記載のシステムにおいて、さらに
車外の全方位画像と車内の画像を獲得する２以上のカメラと、
前記マイクの出力と前記カメラの出力と関連音声信号を同時に記録再生可能である記録再生装置と、
前記記録再生装置の記録／再生選択する指示手段と、
前記記録再生装置の画像出力を表示する複数の表示装置と、
を付加した構成からなり、
前記関連音声信号は直接または再生後に前記音声信号入力端子に接続されるように構成されている。
関連音声信号は、本システムの外部より入力される会話中やカメラの画像取得中に関連した音声帯域の信号である。
本発明による請求項１０記載の車内会話支援システムは、請求項９記載のシステムにおいて、さらに
前記カメラの画像処理を行う画像処理装置と、
前記カメラ画像のどの部分を切り出し画像処理させるかを指示する指示手段と、
画像処理前／後の画像表示を選択する画像選択手段と、
を設けて構成されている。
本発明による請求項１１記載の車内会話支援システムは、請求項９または１０記載のシステムにおいて、さらに
前記記録再生装置は、記録／再生中に画像や音声の付加情報として時間軸方向にタグ付けできる機能を持ち、さらに記録されたタグを時間軸方向に対して検索できる機能を持ち、
さらに検索したタグ位置からの再生が可能である機能を持ち、
前記記録再生装置にタグ付けを指示したり記録したタグの検索を指示するタグ付け検索指示手段と、を設けて構成されている。
本システムにおけるタグとは、画像・音声に関連した付加情報のことであり、画像・音声と同様に時間軸方向に記録・再生が可能である。また、タグ付けとは、指示されたタグを記録することである。
【００１３】
本発明による請求項１２記載の車内会話支援システムは、請求項１１記載のシステムにおいて、
前記タグ付け検索指示手段は、限定された複数個の専用スイッチであるか特定の言葉を認識する音声認識装置であり、乗車席ごとに設けられ、
前記表示装置は、乗車席ごとに設けられるように構成されている。
本発明による請求項１３記載の車内会話支援システムは、請求項９から１２のいずれか記載のシステムにおいて、さらに
専用の指示手段の指示により、指示のあった時間以前に記録・再生した画像・音声を
時間遅延させて特定の一定時間範囲で再生できる（特定時間の巻き戻し再生）機能を持つように構成されている。
本発明による請求項１４記載の車内会話支援システムは、請求項９から１３のいずれか記載のシステムにおいて、さらに
画像を選択する指示手段と、
前記記録再生装置の音声・画像出力から選択した複数の画像を分割表示用の画像に合成変換する画像合成変換装置と、を付加した構成からなる。
【発明の効果】
【００１４】
本発明によれば、車内の空間における騒音の発生を予想し音響処理部で自動調整することにより、拡声音・及び再生音の音質やレベルを常に快適、かつ最適に保つことができる。さらに、スピーカからマイクへの帰還自体を除去、或いは低減するので、ハウリングを防止して安定な拡声が可能になるほか、残響延長により音声の明瞭度が阻害されることも無い。また、拡声系への遅延の挿入により全ての席で生音が先行するため、複数話者の同時発声においても全ての乗員位置で発話者の定位を明確に維持することができる。車内におけるカーステレオやＢＧＭの再生音を上記の騒音として処理すれば、ＢＧＭ等の共同聴取下でも快適な会話が可能となる。
さらに、本システムの外部の音声信号を入力する端子を設けることで、本システムと他の装置とにおいて音声信号用の電力増幅器とスピーカとを共用することができ、車載設備を節約することができる。また、音声信号接続を容易にすることができる。
さらに、前記マイクにより得られる車内音声と車外・車内のカメラ画像とを同時に記録再生できることにより、ツーリング時などのコンテンツ作成用の音声・画像情報ソースとして活用できる車内会話支援システムを提供することができる。また、超広角カメラ、全周囲カメラ、広ダイナミックレンジカメラを含むカメラ画像の特定部分をひずみ補正、透視投影変換、ダイナミックレンジ圧縮などの画像処理を行い、違和感の無い画像を表示することができる車内会話支援システムを提供することができる。
さらに、時間軸方向にタグ付け検索機能を持つことにより、見聞きしたい箇所の検索とその位置からの再生により画像・会話の確認ができる車内会話支援システムを提供することができる。
さらに、乗車席ごとに設けられたタグ検索手段と表示装置により、目の前で画像を確認でき、情報を共有して会話を楽しむことができる。
【発明を実施するための最良の形態】
【００１５】
本発明による車内会話支援システムとして、本件発明者等は２つの車内環境を予定している。その一つは車内（運転手席，助手席，客席）空間に共用天井スピーカ、客席等に個別に複数のマイクを配置する車内環境（車内環境Ａ）の場合を第１の実施形態として図２Ａ，図３Ａに示す。これに対してもう一つは車内空間に共用天井マイク、個別スピーカを配置する車内環境（車内環境Ｂ）の場合を第２の実施形態として図２Ｂ，図３Ｂに示す。なお、各図において「Ｍｉｃ」は「マイク」，「ＳＰ」は「スピーカ」を示す。また、図３Ａ，図３Ｂの一点鎖線枠内の回路を除去した状態が、実施形態の基本形であり、この基本形に一点鎖線枠内の回路を追加したのが拡張形である。
【００１６】
図１は本発明による車内会話支援システムの概念図であり、車内環境Ａについて示してある。本発明による車内会話支援システムは、話者が他の話者が発した生音とスピーカからの拡声音を聴取する車内環境での車内会話支援システムである。
車内に配置される複数の個別マイクと、車内に配置される共通スピーカとからなる車内環境Ａにおいて、ハウリング防止用のフィルタ部と先行音効果用の遅延部からなる補正部および調整部を含んでいる音響処理部を設け、音響処理部で前記個別マイク出力を補正部により補正し、前記調整部で増幅して前記共通スピーカに接続する。これにより、車内の話者にハウリングが防止され、かつ直接音（生音）方向に定位された他の話者の拡声音を聴取可能にしている。
【００１７】
第１の実施形態の車内環境Ａでは、乗員（話者）の頭部、すなわちシートのヘッドレストや前方シートの背後などに複数の個別マイクが配置されている。
天井付近に設置された１個のスピーカの周辺からそれぞれの個別マイクに至る伝播経路の音響伝達特性をFIR(Finite Impulse Response)フィルタにより模擬し、天井付近に設置されたスピーカから個別のマイクに回り込む音を打ち消すようにすることで、車内の温湿度変化や乗員の身動きなどによらず、ハウリングすることなく安定、かつ自然な定位で車内会話を拡声・支援するようシステム構成されている。なおFIR(Finite Impulse Response)フィルタだけではなくIIR(Infinite Impulse Response)フィルタも同様に使用できる。
第２の実施形態の車内環境Ｂでは既存カーステレオ用の複数スピーカを利用し、これら複数のスピーカから天井面に設置された１個のマイク周辺に至る伝播経路の音響伝達特性をFIR(Finite Impulse Response)フィルタにより模擬し、既存カーステレオ用の複数スピーカから天井面に設置されたマイクに回り込む音を打ち消すようにすることで、同様の効果を得るようにシステム構成することもできる。
【００１８】
以下図面等を参照して、本発明による車内会話支援システムの車内環境Ａの実施の形態を説明する。
図２Ａは、車内に共用天井スピーカ、座席に個別マイクを配置した場合の車内環境Ａ（第１の実施形態）のブロック図である。
図３Ａは、本発明による車内会話支援システムの第１の実施形態における車内の配置と音響処理部の回路構成を同時に示した図であり、以下では基本形で説明する。
各座席ごとに個別マイクを用意し、各々ヘッドレスト、或いは各乗員の正面付近の適当な場所（前席の背後やハンドル部、ダッシュボードなど）に設置する。
各個別マイクは（後述のように）、乗員の着席時のみオンとするか、或いは、空席・着席に応じてFIR フィルタのパラメータを変更するようになっている。
【００１９】
車内天井面のほぼ中央に共通スピーカ１個を設置し、この共通スピーカに音響処理部の補正部で、フィルタ処理・遅延処理、調整部で電力増幅等を経た信号が接続され音響として放出される。
音響処理部の各マイクチャンネルにフィルタ（FIR フィルタ）が挿入されている。
一般的には、スピーカを中心とし半径略r=λ/2の円周上のｎ点にこのスピーカを置き各マイク点でインパルス応答r(x)を測定、FIR フィルタのパラメータを略−r(x)となるように設定する。ここで、λは音声主要帯域の中心周波数f に対する波長である。
フィルタ（ FIRフィルタ）で処理された各チャンネルの音声信号は加算されて１本となり、遅延回路・周波数イコライザ・ゲイン調整部・電力増幅器を経て上記の天井スピーカから出力される。遅延回路の遅延時間τは、最も離れた客席同士の距離L に対する時間L /cに対し、さらに 5〜20 (msec) （△t ）遅れるように設定する（τ＝L/c ＋△t ）。ここで、c は空気中における音速である。
【００２０】
車載コンピュータ（車載ＰＣ）などから、車速・エンジン回転数・エンジン負荷などの情報を採取し自車が発生する騒音を予測、周波数イコライザ・ゲイン調整部を時々刻々最適設定する信号を発生する走行状態検出部（または騒音検知制御部）を設ける。
また、必要に応じて、タイヤハウスなどから車外騒音、特に自車が各種の道路を走行するときの騒音を収音し、予め測定された遮音データなどから車内騒音を予測、上記の車速・エンジン回転数・エンジン負荷などから算出した騒音を合わせて最終的な制御信号を出力する。なお最終的な車内音を検知するための別のマイクを車内に配置していない。
座席部分に乗員の有無を検知するシートスイッチ（シートＳＷ）を装着し、乗員の有無に応じてマイクをON/OFF（空席の時はそのマイクのチャンネルをOFF ）したり、または各チャンネルのFIR フィルタのパラメータを二組用意して切り替える。乗員の有無の影響の現れるそのチャンネルのみを制御する。
【００２１】
本発明による車内会話支援システムの音響処理部の出力系統にカスケードに周波数補正装置（イコライザ；ＥＱ）やゲイン調整用ボリューム(Vol) を接続し、自車の走行条件（車速・負荷・エンジン回転数、等）や外来騒音に応じ会話が最適に聞き取れるよう音質やレベルを自動制御（或いは、自動選択）するように構成されている。また各系統の出力（FIR 処理結果）を加算した後、遅延回路や電力増幅器を経て天井スピーカから客席に向け下向きに放射されるように構成された拡声システムにおいて、常に全席で発声者の声が最初に到達し、更に数msec〜数十msec遅れてスピーカから拡声音が到達するように構成されており、発声者位置に音像定位を確保している。
【００２２】
車内環境Ａの車内会話支援システムの動作は次のとおりである。
まず、停車中は騒音がほとんどないか、或いはエンジンのアイドリング程度なので、本システムのゲインは最低、或いはほぼゼロに近い状態になっている。
この状態からある車速に向け車を加速すると、車内騒音は一般的には加速や車速、或いはエンジン負荷と共に大きくなり、複数乗員による車内会話の聞き取り（明瞭度や了解度）は低下する。本システムはこの影響を最小化し、車内会話の快適さの維持を支援するものである。
【００２３】
乗員の発した音声は各座席のマイクにより収音され、マイクアンプを経てFIR フィルタに入る。各FIR フィルタはスピーカ周辺（スピーカを中心とするλ／２の円周上）からそれぞれの個別マイクに至る伝播経路の音響伝達特性を模擬し、天井付近に設置されたスピーカから個別のマイクに回り込む音を打ち消すようパラメータ設定されているので、車速や負荷に応じ拡声レベルを上げてもある程度まではハウリングしない。
つまり、図２Ａのように、 hi(x) をマイク(i) −閉曲面上の点(i) 間のインパルス応答、 -h'i(x) をFIR-i のインパルス応答とすると、各FIR フィルタ(FIR-i) のパラメータは、ほぼh'i(x) ≒ hi(x) となるように設定するので、天井付近に設置されたスピーカから個別のマイクに回り込む音を打ち消すことによりハウリングを防止する。
各FIR の出力は加算されて遅延回路に入り、τi (msec)だけ遅延されてイコライザに送られる。τi の値は発声者の生音が全ての席に最初に到達し、更に数〜数十msec分（実際には5 〜20msec）遅れてスピーカから出力されるように設定する。この処理により、常に全席で発話者の方向に音像の自然な定位が得られる。なお、各τi はほぼ等しいので共通化してτとしてＰ部に置くこともできる。
【００２４】
また、各時点の拡声レベルやイコライザの設定は、車載ＰＣから車速・負荷・エンジン回転数など必要な情報を取り出し、更には、必要に応じて車外騒音などのデータを測定し、騒音検知制御部にて車内騒音を予測、更に必要な制御量を演算することにより時々刻々、自動的に最適制御される（例えば、明瞭度に寄与する４ｋHz付近を強調）。
スピーカを取り巻く複数の点から個々のマイクに至る伝播経路の音響伝達特性をフィルタにより模擬することで、天井付近に設置されたスピーカから個別のマイクに回り込む音を打ち消すようになっているため、乗員の多少の移動や温湿度の変化でハウリングするようなことは無い。しかし、マイクの直前に位置する乗員が居ない（その座席が空席）場合は影響が大きいので、シートスイッチ（シートＳＷ）などで乗員の有無を検知し、対応するチャンネルのFIR パラメータのみ、空席で所定の位置が不感領域となるようパラメータを自動で変更することができる。
【００２５】
前述の実施形態によれば、停車時を基本として、走行時には略6 〜10 (dB) の自然な拡声が得られる。スピーカを取り巻く複数の点から個々のマイクに至る伝播経路の音響伝達特性をフィルタにより模擬することで、天井付近に設置されたスピーカから個別のマイクに回り込む音を打ち消してしまうため、拡声による残響延長で明瞭度や音質を疎外することが無く、スピーカがそれを取り巻く複数の点の中心に置かれるため、乗員の動きや温湿度の変化にも安定した動作をする。拡声のレベルや音質は走行条件や外来騒音に応じて最適、かつ自動で制御される。
またスピーカからの拡声音は全席で発声者の生音が到達した後に到達するよう遅延されるので、常に音像は発声者位置に定位し、自然な会話が促進される。
【００２６】
次に図面等を参照して、本発明による車内会話支援システムの車内環境Ｂの実施の形態を説明する。
図２Ｂは、車内に共用天井マイク、座席に個別スピーカを配置した場合の車内環境Ｂ（第２の実施形態）のブロック図である。
図３Ｂは、本発明による車内会話支援システムの第２の実施形態における車内の配置と音響処理部の回路構成を同時に示した図であり、以下では基本形で説明する。
図２Ｂ，図３Ｂに示すように車内天井面のほぼ中央に共通マイク１個を設置する。この実施形態ではスピーカが座席ごとに設けられている。なお実際には座席と正確に対応せずに天井に設けられている複数のスピーカの利用を妨げるものではない。すなわちスピーカにカーステレオ用のものを利用することもできるが、座席対応にスピーカが配置されている例を参照して説明する。
【００２７】
各座席の乗員の音声は、ほぼ均等な感度で天井マイクにより収音され、マイクアンプ・ゲイン調整部・イコライザ・遅延回路を経て各スピーカ出力に対応するFIR フィルタに同レートで配給され、信号処理された後、電力増幅器を経て各スピーカから室内に放射される。遅延回路の構成を図２Ｂを参照して説明する。図において、 hi(x) はスピーカ(i) −閉曲面上の点(i) 間のインパルス応答を示す。ここに、h'i(x) ≒ hi(x) とする。各入力系の定位制御用遅延τi は拡声音に対し全席で生音が先行するように設定する。各τi はほぼ等しいので共通化してτとしてＰ部に置くこともできる。
各FIR はそれぞれのスピーカから天井面に設置された１個のマイク周辺に至る伝播経路の音響伝達特性を模擬するようにパラメータ設定されている。複数マイクを使う前例と同様、各FIR パラメータはシートＳＷにより乗員の有無が検知され自動的に変更・補正される。騒音検知制御部で検知された車内外の騒音に応じてゲイン、イコライザが最適調整される点も同じである。
【００２８】
各FIR のフィルタのパラメータの決定は、LES 法（Least Squares Error ）などにより行うことができる。要するに、天井マイク（前述の車内環境Ａではスピーカ）の周囲（例えば半径λ/2の円周）上の複数点から個々のマイクに至る伝播経路の音響伝達特性をFIR フィルタにより模擬し、天井付近に設置されたスピーカから個別のマイクに回り込む音を打ち消すようにすることで、わずかな室内音響条件変化（乗員の動きや温湿度の変化）に対して安定に動作させる。
したがって、FIR フィルタは、基本的に固定のものを使用（素子数が少なく安価なものを使用できる）する。
【００２９】
（パラメータ設定部）ここで、前述の各車内環境Ａにも共通するフィルタのパラメータ設定について説明する。以下の２つのいずれも利用できる。
ア）フィルタに全サンプル畳み込み器などを使う場合
閉曲面上の点(i) に実際に使うスピーカを置き対応するマイク(i) で、両点間のインパルス応答 hi(x) を測定する。その符号を反転しそのままフィルタ(i) のインパルス応答 -h'i(x) ≒-hi(x) として使う。順次、i=1,2,3 ・・のように各系統を同様の手順で調整し、スピーカを各閉曲面上の点の中心に戻して動作を開始する。
【００３０】
イ）フィルタに適応FIR フィルタ（タップ数有限・離散的）を使う場合
閉曲面上の点(i) に実際に使うスピーカを置きピンクノイズなどを出力する。対応するマイク(i) の出力とフィルタ（適応FIR フィルタ）(i) の出力のみを信号加算部で加算する（この時、他系統はオフ) 。そのときの信号加算部の出力を適応FIR フィルタの誤差検知入力（適応FIR フィルタは２入力、１出力）部に入力し適応動作させる。信号加算部の出力が最小になって収束するとパラメータの同定が完了する。
この状態で適応動作を止め、同定されたパラメータを持つ固定FIR フィルタとして使用する。順次、i=1,2,3 ・・のように各系統を同様の手順で調整し、スピーカを各閉曲面上の点の中心に戻して動作を開始する。
共に、時間の経過と共にインパルス応答 hi(x) は変化するが、もともと各閉曲面上の点はスピーカの中心から外して設定されており、全体として効果を発現するように意図されている。したがって、個々の時間的な変動はシステムの安定性に大きな影響を与えない。
【００３１】
本発明による車内会話支援システムの車内環境Ｂの形態においても、前述の車内環境Ａの場合と同様な動作と効果が得られる。
前述の基本的な実施形態に、図３Ａ、図３Ｂの一点鎖線枠内の回路を追加したのが拡張形の実施形態であり、図に示すように前記音響処理部の調整部の電力増幅器の入力側に音声信号端子から電力増幅器の入力の信号加算器までの回路を追加することで（利用者からみて予め音声信号入力端子が設けられていることで）、本システムと他の装置（例えば車載ステレオ装置）との組み合わせにおいて電力増幅器とスピーカを共用することが可能であり車載設備を節約することができる。また、車載のラジオやテレビやステレオ装置などや携帯音楽プレーヤーなどの音声信号（本システムからみた外部音声信号）を容易に入力しスピーカで拡声できるようにすることができる。図３Ｂにおいては、モノラル信号で外部からの音声信号を入力するようになっている。ステレオ信号や４チャンネルなどの多チャンネルの音声信号を入力する場合には、各チャンネルに対応した追加回路を対応するそれぞれの電力増幅器の入力側に設けることで実現が可能である。
会話支援側の拡声レベルと外部より入力した音声信号の拡声レベルとのバランス調整のために、音声信号入力端子より入力した外部音声信号の音量調整が行われる。なお、他の装置において音声出力用に音量調整機構がある場合には、本システム側の音声信号入力端子直後の音量調整機構は不要とすることができる（この場合、実質的には電力増幅器の入力に外部の音声信号を接続したことと同じである）。
【００３２】
本発明による車内会話支援システムは、前述の音声以外にも画像の処理や蓄積も並行して行われる。
図４に車外・車内に複数の動画カメラを設置する例を示す。同図（ａ）、（ｂ）の車外カメラ１０１〜１０４、車内カメラ１０５〜１０６に魚眼カメラ、双曲面ミラーを取り付けた全周囲カメラを用いると、容易に全方位画像が得られ、カメラの設置台数を少なくすることができる。同図のカメラ配置例ではカメラ１０１〜１０６に対して撮影有効範囲を矢印範囲で示している。車外カメラに超広角カメラや通常のカメラを用いる場合、車両の全周囲を漏れなく撮像するためには（全方位画像の一部としてカメラ画像を得るので）さらに数多くのカメラを設置する必要がある。車内カメラ１０５は、運転席と助手席とに座る人を撮影できるように設置され、車内カメラ１０６は、後部座席に座る人を撮影できるように設置される。車内カメラにより広角なカメラを用いれば広い範囲を撮像することができ、搭乗者以外に窓越しの風景も撮像することができる。
【００３３】
また、カメラに広ダイナミックレンジカメラを用いれば、通常のカメラに比べて白とびや黒つぶれの少ない画像を撮像できるが、表示装置のダイナミックレンジが狭いためそのままでは表示することができない。撮像画像のダイナミックレンジ圧縮（画像加工処理）を行うことで表示装置に表示することができる。
超広角カメラ、魚眼カメラ、双曲面ミラーを取り付けた全周囲カメラの場合、撮像した画像はそのままでは歪んだ画像であるため、かなり見難いものであり映っているものの把握もし難い。そのため、歪み補正や透視投影変換などの画像加工処理を行って、通常のカメラで撮影されたような画像を表示することで、見た時の違和感を解消することができる。
【００３４】
前記車内会話支援システムに、車外・車内カメラの動画像を取得し、音声信号と同時に記録し再生できる付加装置部分のブロック図を図５に示し、図６に画像処理装置と画像合成変換装置の内部の概略構成のブロック図を示す。
図５において、車内・車外カメラの動画像信号が画像処理装置に入力され、画像処理されて画像表示装置に出力される。画像表示装置は、液晶表示装置などの画像を表示する装置で構成することができる。
【００３５】
カメラ画像のどの部分を切り出し画像処理させるかを指示する指示手段である画像処理指示回路、画像処理前／後の画像表示を選択する画像選択手段である画像選択回路、記録再生装置の記録／再生を選択する指示手段である記録再生指示回路は、それぞれスイッチで構成することができ、操作者により指示されたスイッチに該当する信号を、それぞれ画像処理指示信号、画像選択信号、記録再生指示信号として画像処理装置に出力する。
記録再生指示信号は、記録再生装置にも出力される。
記録再生装置は、磁気テープ記録再生装置やハードディスク記録再生装置やメモリ記録再生装置で構成することができる。これらを複数用いることで音声信号と画像信号とも多チャンネル構成の記録再生装置とすることができ、記録再生指示信号により記録／再生／停止の機能を実行する。記録再生装置の画像入出力部は、記録画像信号を画像処理装置より入力し、再生画像信号を画像処理装置に出力する。記録再生装置の音声入出力部は、図３Ａ、図３Ｂのマイクアンプ出力よりの音声信号と音声信号入力端子１に入力される関連音声信号とを記録音声信号として入力し（ミキシングして記録音声信号とすることも可能）、再生音声信号を図３Ａ、図３Ｂの電力増幅器の入力または音声信号入力端子２へ出力する。
個々に記録されたマイクアンプ出力よりの音声信号と関連音声信号の再生音声信号は、ミキシングされて出力されるか、ミキシングされて記録された再生音声信号が出力される。図３Ａ、図３Ｂの拡張形の実施形態では、音声信号入力端子が１つ設けられているが、一点鎖線枠内の回路を２つ用意し、一方の音声信号入力端子１に関連音声信号を入力し他方の音声信号入力端子２に記録再生装置の再生音声信号を入力し音量調整をすることで、簡単に関連音声信号と再生音声信号をスピーカより拡声することができる。
【００３６】
タグ付け検索指示手段であるタグ付け検索指示装置は、図５に示すようにタグ付け検索指示回路と音声によるタグ付け検索指示部とから構成される。タグ付け検索指示回路は、限定された複数のスイッチで構成することができ、タグ付け検索指示情報を記録再生装置に出力する。音声によるタグ付け検索指示部は、音声認識装置とこの装置用の音声入力部とにより構成することができる。音声入力部は、前記マイクアンプ出力よりの複数の音声信号や複数の専用マイクとこの出力からなり、音声認識装置に入力する。音声認識装置は、入力された音声信号の中から限定された特定の言葉を記録・検索する音声タグとして認識し、タグ付け検索指示情報を記録再生装置に出力する。
記録再生装置では、画像や音声の記録中または再生中にタグ付け指示情報によりタグ付けを実行（タグ情報を記録）したり、再生中や停止中にタグ検索指示情報によりタグの検索を行い検索結果位置から記録済みの画像や音声を再生実行したりする。
【００３７】
図６において、カメラからの画像信号は、記録画像信号として再生記録装置に出力されると共に画像信号選択回路に入力される。この回路の入力のもう一方は、記録再生装置から入力される再生画像信号である。同回路において、カメラからの画像信号か再生画像信号かを記録再生指示信号にて選択し、後段に出力する。カメラ台数分の選択回路がある（同図の２点鎖線部分）。
選択された画像信号は、表示を見易くするためカメラの種類に応じてカメラ画像毎に画像の加工処理を施す。画像処理指示信号によりカメラに適合した画像加工処理を選択する。この選択は、カメラ設置時にどのような種類のカメラであるかわかるので、カメラ設置時点で行われる。
【００３８】
画像加工処理部には、何も処理しないスルー処理、通常のカメラ画像や広角カメラ画像の歪みを補正する歪み補正処理、魚眼カメラ画像や双曲面ミラー使用カメラ画像の透視投影変換処理、広ダイナミックレンジカメラ画像のダイナミックレンジ圧縮処理がある。
魚眼カメラや双曲面ミラーを取り付けた全周囲カメラで得られた画像は、環状画像であり、そのままではわかりにくいため、通常は見たい方向を指示して透視投影変換して通常のカメラで撮像されたかのような画像で表示される。画像処理指示信号により、透視投影変換したい画像部分が指示される。例えば、透視投影で切り出し表示したい画像部分を、水平面に対する垂直方向角度と水平面上での方向角度とズーム度合いとのパラメータで指定して透視投影変換処理させることができる。
【００３９】
ダイナミックレンジ圧縮処理は、表示装置の表示のダイナミックレンジの範囲内となるように、テーブル変換処理、折れ線変換や対数変換やウェーブレット変換などを用いた演算処理、これらの組合せ処理などの方法が用いられる。
カメラとレンズの組合せに応じて画像加工処理部の処理内容の組合せを行うこともできる。
例えば、魚眼レンズを広ダイナミックレンジカメラに取り付けた場合、画像加工処理は、透視投影変換処理とダイナミックレンジ圧縮処理とになる。
画像選択回路では、画像処理指示信号により画像処理選択回路で接続した同じ画像加工処理の出力に接続し、スルー処理の画像データと加工処理された画像データとを画像選択信号の指示により画像処理前／後の画像として選択が行われる。
【００４０】
カメラ画像ごとに画像処理選択回路から画像選択回路までの画像加工処理がおこなわれ（図６の一点鎖線枠内部分）、表示画像選択回路と画像合成変換装置に入力される。
表示画像選択回路では、カメラの画像を選択する回路部、選択されたカメラ画像と画像合成変換装置からの画像とを選択する回路部があり、画像選択信号により選択された画像が表示画像として画像表示装置に出力される。
【００４１】
表示画像選択回路は、画像選択信号により指示された画像を選択する回路であり、スイッチで構成することができる。
画像合成変換装置は、１画面に同時に複数の画像を表示するための画像を合成する装置であり、分割表示画像選択回路と画像サイズ変換回路と画像合成回路とから構成される。複数の画像を選択するために追加される画像を選択する指示手段は、追加スイッチなどで構成することができ、前記画像選択回路内に追加される。この回路部より前記追加スイッチを含めた指示が、画像選択信号として出力される。
【００４２】
画像合成変換装置に入力された画像は、分割表示画像選択回路に入力され、画像サイズ変換回路に出力される。分割表示画像選択回路は、画像選択信号により指示された画像（１画面に同時に表示される画像数分）を選択するための回路である。
画像サイズ変換回路に入力された画像は、画像サイズが変換され、画像合成回路に出力される。画像サイズ変換回路は、１画面に同時に複数の画像を表示するために画像サイズを変換し縮小画像を作成する回路であり、間引き回路や補間回路を用いて画像サイズの変換を行うことができるように構成することができる。例えば水平・垂直とも１画素おきに間引くようにすると１／４サイズの画像が作成でき、表示１画面に４枚分の画像を表示できる。
【００４３】
画像合成回路に入力された縮小画像は、所定画像数を１画面の表示用画像に合成し、表示画像選択回路に出力する。画像合成回路は、入力した縮小画像を１画面分集めて表示用画像として画像を合成変換する回路である。
さらに、図５と図６において、画像処理装置の表示画像出力を記録画像信号として記録再生装置に入力し記録させ、再生時に再生画像信号として画像処理装置に入力後、表示画像選択回路に入力して再生時に記録した表示画像を選択して表示させることもできる。このようにすることで、どの画像を表示して見ていたかが後からもわかるようにすることができる。
【００４４】
なお、タグ付け検索指示装置と画像表示装置は乗車席ごとに設置され、タグ付け検索指示装置は、表示装置と一体となった形で構成することもできる。また、運転席に設けられるタグ付け検索指示装置と画像表示装置は、運転者の運転の妨げにならない位置に設置される。この場合、タグ付け検索指示装置は、限定された数個のスイッチや専用マイクの形でステアリングホイールに組み込まれるような構成とすることもできる。
このようにして、運転者以外の同乗者は、複数の画像を見ながら他の人と会話をしながら手元のスイッチや音声などのタグ付け検索指示装置で簡単にタグ付けの指示ができる。一方、運転者は、画像を注視することはできないが、会話には参加することができ、ステアリングホイールなどの手元に設けられた数少ない数個のスイッチや音声などのタグ付け検索指示装置で簡単にタグ付けの指示ができる。
【００４５】
見逃し通り過ぎてしまった画像や聞き逃してしまった会話をほんの少しだけ（短い一定時間）巻き戻し再生する（ちょっと見聞きする）ことで会話を支援し盛り上げることができる。この機能は、記録再生装置内に付加することができる。記録・再生用の音声・画像信号は、記録再生装置内で共用される。専用の指示手段は、スイッチで構成することができ、図５に専用スイッチで示している。
図７に短い一定時間の巻き戻し再生機能を説明するための図を示す。同図において、記録再生リングバッファは、一定時間内の音声・画像を常に記録しておくための記録領域を示し、リングバッファとして構成されている。また、同図のリングバッファ下端部の矢印は、バッファに記録する時の記録領域を使用する方向を示している。
【００４６】
記録再生リングバッファは、Ａ，Ｂの二つの領域があり、電源投入時に同時に音声・画像の記録を開始する。それぞれのリングバッファの長さは、短い一定時間の再生時間よりも長く設定される。
最初はバッファＡ側を使用し、専用スイッチが押される（バッファ位置t1とする）と、バッファＡの記録を停止する。短い一定時間例えばＫ秒前からの音声・画像の再生をするために、Ｋ秒前のバッファ位置t1−Ｋを再生開始位置としてバッファＡの再生を開始し、Ｋ秒間再生したら（バッファ位置t1にきたら）再生を停止し、記録を再開する。最初の指示はバッファＡ側を使用し、次の指示はバッファＢを使用するように、バッファのＡ，Ｂを交互に使用する。一方のバッファを再生中、他方のバッファはそのまま記録しているので、無記録の期間は無い。図中では、バッファＡ側で再生中もバッファＢ側では記録を続けるため、バッファＡ側がバッファ位置t1で記録再開する時には、バッファＢ側は記録位置がt1＋Ｋまで進んでいる。したがって、バッファＡ側で巻き戻し再生中において、バッファＢ側の記録領域はＢ側バッファ位置t1からt1＋Ｋまでとなる。
【００４７】
なお、専用スイッチの指示により速やかに巻き戻し再生するために、記録再生リングバッファには記憶メモリやメモリカード類などのメモリ記憶装置やハードディスク装置など巻き戻し時間遅れの少ないものが使用される。
このようにして記録された画像・音声・タグ情報は、車内や部屋などで再生して同乗者と共に見てさらに会話を楽しむことができ、タグ付けしたい箇所で速やかにタグ付けをすることができる。記録済みのタグをタグ情報により検索し、タグ付けした位置から画像・音声を再生して楽しむことができる。また、記録された音声・画像・タグ情報を編集し、観賞用の再生コンテンツを制作することにも使用が可能である。
【００４８】
さらに、車内音声と車外・車内のカメラ画像とを同時に収録しタグ付けされた音声・画像情報ソースは、画像処理や編集処理を行うコンテンツ制作に用いることができ、観賞用の再生コンテンツとして活用できる。
また、単に再生して見る場合でも、運転手として見られなかった画像を、同行者と共に見ながら会話をして楽しむこともでき、再生中にタグ付けをすることができる。またさらに、タグを検索することでタグ付けされた位置から再生して楽しむことができる。
【００４９】
タグ付け検索指示手段であるタグ付け検索指示装置によって、タグ付けを行う場面としては、走行中に危険を感じるいわゆるヒヤリハットの場面、および、見事な山並みや波のせせらぎなどの美しい風景を通過中の場面などが挙げられる。前者の危険箇所の場面は、後日当該場所に差し掛かる場合、あるいは運転経路上に当該場所が含まれる場合などに、コンテンツとして運転者や同乗者に情報提示することにより、危険回避の効果を生み出すことができる。また、後者の美しい風景などの場面は、ドライブ後に自宅などで当該箇所のコンテンツを再生することによって回顧し、思い出に浸る効果を演出できることに加え、コンテンツを他者に紹介することで、他者へ当該場所の魅力を伝え、当該場所の観光スポットとしての価値を高めることもできる。
【００５０】
以下図８Ａを参照して、本発明による車内会話支援システムで用いるタグ付け検索指示手段の第１の実施形態を説明する。
図８Ａは、運転者がタグ付けを行う場合の例を示している。運転者が行うタグ付け操作は、安全運転のために運転操作に影響を及ぼすことのない負荷の低い操作であることが求められるため、少数のスイッチからなるタグ付け検索指示装置によるタグ付け操作が適切である。この例は、小さな子供がボールを追って車道に飛び出した場面であり、危険を感じた運転者が、この付近は小さな子供の飛び出しという危険因子を含んだ場所であると認識し、運転席横のスイッチボックスのスイッチを押して、「危険箇所」というタグを付与している。このような簡易なスイッチによって、「危険箇所」「美しい風景」という大局的な種類のタグを付与することだけでも、膨大な長さの収録データにおいて意味のあるところだけをマーキングすることに相当し、コンテンツ作成の効率化に貢献できる。
【００５１】
次に図８Ｂを参照して、本発明による車内会話支援システムで用いるタグ付け検索指示手段の第２の実施形態を説明する。
図８Ｂは、運転者以外の同乗者がタグ付けを行う場合の例を示している。同乗者が行うタグ付け操作は、運転者が行う操作と比べて高い自由度で設計できる。スイッチボックスによるタグ付けでは、スイッチの数を大幅に増やすことも可能であり、より詳細な情報をタグとして付与できる。また、座席に搭載されている座席マイクによって収録した同乗者の発話をタグ付け検索指示装置の音声認識装置で音声認識することにより、音声入力によるタグ付けも可能である。この場合、「危険箇所」「美しい風景」というタグの種類の発声の認識によって、スイッチによる指示と同じタグを付与できることに加え、発話をディクテーションすることにより、当該箇所の説明をテキスト情報のタグとして付与することも可能である。このテキスト情報は、コンテンツ閲覧時に検索キーワードとのマッチングに利用することで、コンテンツ検索の効率化、および信頼性向上にも寄与できる。
【産業上の利用可能性】
【００５２】
本発明による車内会話支援システムは、基本的には自動車産業さらには、交通運輸、ツーリングのサービスの分野でも広く利用できる。
【図面の簡単な説明】
【００５３】
【図１】本発明による車内会話支援システム（第１の実施形態）の概念図である。
【図２Ａ】共用天井スピーカ、個別マイクの車内環境（車内環境Ａ）の場合の車内会話支援システム（第１の実施形態）のブロック図である。
【図２Ｂ】共用天井マイク、個別スピーカの車内環境（車内環境Ｂ）の場合の車内会話支援システム（第２の実施形態）のブロック図である。
【図３Ａ】本発明による車内会話支援システムの第１の実施形態の車内配置の略図と音響処理部の回路図を同時に示した図である。
【図３Ｂ】本発明による車内会話支援システムの第２の実施形態の車内配置の略図と音響処理部の回路図を同時に示した図である。
【図４】本発明によるシステムで利用する複数のカメラを配置する例を示す平面図である。
【図５】本発明によるシステムにおいて付加する装置の例を示すブロック図である。
【図６】本発明によるシステムで用いる画像処理装置と画像合成変換装置を説明するためのブロック図である。
【図７】本発明によるシステムで利用する装置の短い一定時間の巻き戻し再生機能を説明するための図である。
【図８Ａ】本発明によるシステムで利用するタグ付け検索指示手段の第１の実施形態を説明するための図である。
【図８Ｂ】本発明によるシステムで利用するタグ付け検索指示手段の第２の実施形態を説明するための図である。
【符号の説明】
【００５４】
１０１〜１０４  車外カメラ
１０５〜１０６  車内カメラ
【図１】
2008042390.tif 000003
【図２Ａ】
2008042390.tif 000004
【図２Ｂ】
2008042390.tif 000005
【図３Ａ】
2008042390.tif 000006
【図３Ｂ】
2008042390.tif 000007
【図４】
2008042390.tif 000008
【図５】
2008042390.tif 000009
【図６】
2008042390.tif 000010
【図７】
2008042390.tif 000011
【図８Ａ】
2008042390.tif 000012
【図８Ｂ】
2008042390.tif 000013