(57)【要約】【課題】身体の動きそのものを聴覚的に体感できるよう提示することが可能な信号処理装置を提供する。【解決手段】器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行する制御部を備える、信号処理装置が提供される。係る信号処理装置は、身体の動きそのものを聴覚的に体感できるよう提示することが可能となる。【選択図】図１
2017061577.tif 000002
【特許請求の範囲】
【請求項１】
器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行する制御部を備える、信号処理装置。
【請求項２】
前記波形信号は、前記センサで集音された音声信号である、請求項１に記載の信号処理装置。
【請求項３】
前記制御部は、前記波形信号が音声信号では無い場合は、該波形信号を音声信号に変換してから前記エフェクト処理を実行する、請求項１に記載の信号処理装置。
【請求項４】
前記波形信号は、前記センサが検出したモーション量に基づく信号である、請求項１に記載の信号処理装置。
【請求項５】
前記制御部は、所定の音源からの音声信号と、前記他の波形信号とを合成した信号に対して前記波形信号に基づいたエフェクト処理を実行する、請求項１に記載の信号処理装置。
【請求項６】
前記制御部は、エフェクト処理後の前記波形信号及び前記他の波形信号を合成する、請求項１に記載の信号処理装置。
【請求項７】
前記制御部は、前記エフェクト処理として少なくとも一部の周波数帯域に対する増幅処理を含んだ処理を実行する、請求項１に記載の信号処理装置。
【請求項８】
前記制御部は、前記エフェクト処理として少なくとも一部の周波数帯域に対するエコー処理を含んだ処理を実行する、請求項１に記載の信号処理装置。
【請求項９】
前記制御部は、前記エフェクト処理としてピッチシフト処理を含んだ処理を実行する、請求項１に記載の信号処理装置。
【請求項１０】
前記制御部は、前記波形信号の内容に応じて前記エフェクト処理の内容を変化させる、請求項１に記載の信号処理装置。
【請求項１１】
前記制御部は、ユーザによる指示に応じて前記エフェクト処理の内容を変化させる、請求項１に記載の信号処理装置。
【請求項１２】
前記波形信号を出力するセンサを覆う、蜂の巣型に孔が空いている半球状のケースを備える、請求項１に記載の信号処理装置。
【請求項１３】
前記ケースは、中央に行くにつれて前記孔が小さくなる、請求項１２に記載の信号処理装置。
【請求項１４】
器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理をプロセッサで実行することを含む、信号処理方法。
【請求項１５】
器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行することをコンピュータに実行させる、コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、信号処理装置、信号処理方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
物体の動きに合わせて音色や音の変化をコントロールする技術が、例えば特許文献１で開示されている。また、ユーザの動きに基づいた音出力を実現する技術が、例えば特許文献２で開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−２２８４３４号公報
【特許文献２】特開２００９−１５１１０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１で開示されている技術は、ユーザ自身の動きを音に変えて出力するものではないので、ユーザの動きそのものをそのユーザが聴覚的に体感できない。また特許文献２で開示されている技術は、身体の動きを音で提示するための音源が必要であり、身体の動きそのものを聴覚的に提示するものでは無いので、ユーザの動きそのものをそのユーザが聴覚的に体感できない。【０００５】
そこで、本開示では、身体の動きそのものを聴覚的に体感できるよう提示することが可能な、新規かつ改良された信号処理装置、信号処理方法及びコンピュータプログラムを提案する。
【課題を解決するための手段】
【０００６】
本開示によれば、器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行する制御部を備える、信号処理装置が提供される。【０００７】
また本開示によれば、器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理をプロセッサで実行することを含む、信号処理方法が提供される。【０００８】
また本開示によれば、器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行することをコンピュータに実行させる、コンピュータプログラムが提供される。
【発明の効果】
【０００９】
以上説明したように本開示によれば、身体の動きそのものを聴覚的に体感できるよう提示することが可能な、新規かつ改良された信号処理装置、信号処理方法及びコンピュータプログラムを提供することが出来る。【００１０】
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
【図面の簡単な説明】
【００１１】
【図１】本開示の実施の形態に係る信号処理装置の概要を示す説明図である。
【図２】信号処理装置の第１の構成例を示す説明図である。
【図３】信号処理装置の第１の動作例を示す流れ図である。
【図４】信号処理装置の第２の構成例を示す説明図である。
【図５】信号処理装置の第２の動作例を示す流れ図である。
【図６】信号処理装置の第３の構成例を示す説明図である。
【図７】信号処理装置の第３の動作例を示す流れ図である。
【図８】信号処理装置の第４の構成例を示す説明図である。
【図９】信号処理装置の第４の動作例を示す流れ図である。
【図１０】信号処理装置の第５の構成例を示す説明図である。
【図１１】信号処理装置の外観例を示す説明図である。
【図１２】信号処理装置の外観例を示す説明図である。
【図１３Ａ】信号処理装置の外観例を示す説明図である。
【図１３Ｂ】信号処理装置の外観例を示す説明図である。
【図１３Ｃ】信号処理装置の外観例を示す説明図である。
【図１４】半球状の蜂の巣型のケースをマイクに被せていることの効果を模式的に示す説明図である。
【図１５】信号処理装置の応用例を示す説明図である。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１３】
なお、説明は以下の順序で行うものとする。
１．本開示の実施の形態
１．１．概要
１．２．第１の構成例及び動作例
１．３．第２の構成例及び動作例
１．４．第３の構成例及び動作例
１．５．第４の構成例及び動作例
１．６．第５の構成例及び動作例
１．７．外観例
１．８．応用例
２．まとめ
【００１４】
＜１．本開示の実施の形態＞
［１．１．概要］
まず、本開示の実施の形態に係る信号処理装置の概要について説明する。図１は、本開示の実施の形態に係る信号処理装置の概要を示す説明図である。
【００１５】
本開示の実施の形態に係る信号処理装置は、人間の身体の中でも動きのある部位や、スポーツの用具などに装着されうる装置である。そして本開示の実施の形態に係る信号処理装置は、装着された部位や用具などの動きによって発生する信号（例えば風を切る音などの空力音や、装着された部位の近傍で人間が発生させた音）に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成する装置である。
【００１６】
図１は、本開示の実施の形態に係る信号処理装置１００が使用されている様子を示す説明図である。図１に示したのは、リストバンド型の信号処理装置１００が、ユーザ１の左腕の手首に装着されている様子を示している。
【００１７】
図１に示したように、ユーザ１が左腕の手首に信号処理装置１００を装着した状態でユーザ１が左腕を前後に振ると、信号処理装置１００は、そのユーザ１の左腕の前後運動による空力音や、ユーザ１が発生させた音を集音する。そして信号処理装置１００は、集音した空力音や、ユーザ１が発生させた音に対して増幅やエフェクト（音響効果）などの信号処理を行い、左腕の動きを誇張して表した音を出力する。エフェクト処理には、例えばエコーやリバーブ、低周波による変調、速度の変化（タイムストレッチ）、音程の変化（ピッチシフト）などが含まれうる。なお、音の増幅処理もエフェクト処理の一種として捉えても良い。なお、図１では、信号処理装置１００がユーザ１の左腕の手首に装着されている状態が示されているが、信号処理装置１００の装着位置はユーザ１の左腕の手首に限定されるものでは無いことは言うまでも無く、信号処理装置１００は、ユーザ１の左腕の手首以外のあらゆる位置に装着されうる。また図１では、信号処理装置１００はリストバンド型で示されているが、信号処理装置１００の形態は係る例に限定されるものではなく、信号処理装置１００は、例えばユーザ１が身に付ける衣服に装着されるような形態であっても良い。
【００１８】
本開示の実施の形態に係る信号処理装置１００は、装着された部位や用具などの動きによって発生する信号に対して、エフェクトのような信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することで、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。信号処理装置１００は、エフェクト処理として、ローパス、ハイパス、バンドパスなどのフィルタ効果、オシレータ（サイン波、ノコギリ波、三角波、矩形波など）との加算合成や減算合成を行いうる。
【００１９】
例えば信号処理装置１００は、装着された部位や用具などの動きを、マンガやアニメーションのような派手な効果音として出力することができる。また例えば信号処理装置１００は、拍手や足のステップ、指をスナップする音を拡張した音を出力することができる。また例えば信号処理装置１００は、身体に起因して発生した音（打撃や摩擦など）を全て拡張した音を出力することができる。例えば信号処理装置１００は、ユーザが物を叩いたり、物に手を当てて滑らせたり、両手を合わせてこすったり、足を滑らしたりする音を拡張した音を出力することができる。
【００２０】
以上、本開示の実施の形態に係る信号処理装置の概要について説明した。
【００２１】
［１．２．第１の構成例及び動作例］
続いて、本開示の実施の形態に係る信号処理装置１００の第１の構成例について説明する。図２は、本開示の実施の形態に係る信号処理装置１００の第１の構成例を示す説明図である。
【００２２】
図２に示したように、本開示の実施の形態に係る信号処理装置１００は、マイク入力部１１０と、制御部１２０と、音出力部１３０と、を含んで構成される。
【００２３】
マイク入力部１１０は、信号処理装置１００が装着される部位や用具などの動きによって発生する空力音や、装着された部位の近傍で人間が発生させた音を取得する。マイク入力部１１０は、取得した音を音声信号として制御部１２０に出力する。
【００２４】
制御部１２０は、例えばＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）やＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）などのプロセッサや、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などの記憶媒体等で構成される。
【００２５】
制御部１２０は、ユーザの身体の動きに基づいて発生した波形信号として、マイク入力部１１０が出力する音声信号に対する信号処理を行う。制御部１２０は、マイク入力部１１０が出力する音声信号に対する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。上述したように、増幅処理も、エフェクト処理の一種と捉えてもよい。制御部１２０は、マイク入力部１１０が出力する音声信号に対して信号処理を行うと、信号処理後の信号を音出力部１３０に出力する。
【００２６】
制御部１２０は、マイク入力部１１０が出力する音声信号に対する増幅量や増幅する周波数帯、エフェクト処理の内容を、ユーザ（例えばユーザ１）が指定したものとしてもよく、自動的に決定しても良い。制御部１２０は、マイク入力部１１０が出力する音声信号に対する増幅量や増幅する周波数帯、エフェクト処理の内容を自動的に決定する場合は、例えば信号処理装置１００の動きの内容、すなわち信号処理装置１００が装着される部位や用具などの動きの内容に応じて決定しても良い。
【００２７】
音出力部１３０は、例えばスピーカで構成され、制御部１２０から出力される信号に基づいた音を出力する。
【００２８】
本開示の実施の形態に係る信号処理装置１００は、図２に示したような構成を有することで、装着された部位や用具などの動きによって発生する信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図２に示したような構成を有することで、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００２９】
図３は、本開示の実施の形態に係る信号処理装置１００の動作例を示す流れ図である。
【００３０】
信号処理装置１００は、ユーザの身体の動きに基づいて発生した波形信号として、ユーザの身体の動きに基づいて発生した音声信号を取得する（ステップＳ１０１）。ユーザの身体の動きに基づいて発生した音声信号を取得すると、続いて信号処理装置１００は、取得した音声信号に対する信号処理を実行する（ステップＳ１０２）。ステップＳ１１２の信号処理は、制御部１２０が実行する。信号処理装置１００は、ステップＳ１０２で実行する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。
【００３１】
信号処理装置１００は、音声信号に対する信号処理を実行すると、信号処理を実行した後の音声信号を出力する（ステップＳ１０３）。信号処理を実行した後の音声信号は、音出力部１３０から、信号処理装置１００が装着された部位や用具などの動きを拡張した音として出力される。
【００３２】
本開示の実施の形態に係る信号処理装置１００は、図３に示したような動作を実行することで、装着された部位や用具などの動きによって発生する信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図３に示したような動作を実行することで、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することで、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００３３】
［１．３．第２の構成例及び動作例］
続いて、本開示の実施の形態に係る信号処理装置１００の第２の構成例を説明する。図４は、本開示の実施の形態に係る信号処理装置１００の第２の構成例を示す説明図である。
【００３４】
図４に示したように、本開示の実施の形態に係る信号処理装置１００は、マイク入力部１１０と、センサ入力部１１２と、制御部１２０と、音出力部１３０と、を含んで構成される。
【００３５】
マイク入力部１１０は、図２に示した信号処理装置１００のマイク入力部１１０と同様に、信号処理装置１００が装着される部位や用具などの動きによって発生する空力音や、装着された部位の近傍で人間が発生させた音を取得する。マイク入力部１１０は、取得した音を音声信号として制御部１２０に出力する。
【００３６】
センサ入力部１１２は、信号処理装置１００が装着される部位や用具などの動きによって発生するモーション信号を取得する。モーション信号は、例えば加速度センサ、角速度センサ、地磁気センサなどからなるモーションセンサから出力される。モーションセンサは、信号処理装置１００と一体となっていても良く、信号処理装置１００とは別の装置となっていてもよい。センサ入力部１１２は、取得したモーション信号を制御部１２０に出力する。
【００３７】
制御部１２０は、ユーザの身体の動きに基づいて発生した波形信号として、マイク入力部１１０が出力する音声信号に対する信号処理を行う。制御部１２０は、マイク入力部１１０が出力する音声信号に対する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。制御部１２０は、マイク入力部１１０が出力する音声信号に対して信号処理を行うと、信号処理後の信号を音出力部１３０に出力する。
【００３８】
そして図４に示した制御部１２０は、音声信号に対する信号処理を行う際に、センサ入力部１１２から供給されるモーション信号を用いる。例えば制御部１２０は、音声信号に対する信号処理のパラメータを、センサ入力部１１２から供給されるモーション信号の内容に応じて変化させる。より具体的には、モーション信号の値が大きい、すなわち、信号処理装置１００が装着される部位や用具などの動きの量が大きい場合は、制御部１２０は、音声信号に対する増幅処理を行う際の増幅量を大きくしたり、エフェクト処理の際の音声信号の変化量を大きくしたりしてもよい。
【００３９】
制御部１２０は、内部に所定の音源を有していても良い。そして制御部１２０は、マイク入力部１１０が出力する、ユーザの身体の動きに基づいて発生した音声信号と、内部で有している音源とを組み合わせて、モーション信号に応じた信号処理を実行しても良い。
【００４０】
音出力部１３０は、図２に示した信号処理装置１００の音出力部１３０と同様に、例えばスピーカで構成され、制御部１２０から出力される信号に基づいた音を出力する。
【００４１】
本開示の実施の形態に係る信号処理装置１００は、図４に示したような構成を有することで、装着された部位や用具などの動きによって発生する信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図４に示したような構成を有することで、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００４２】
また本開示の実施の形態に係る信号処理装置１００は、図４に示したような構成を有することで、信号処理装置１００が装着される部位や用具などの動きに応じて、信号処理の際のパラメータを変更することができる。従って、本開示の実施の形態に係る信号処理装置１００は、図４に示したような構成を有することで、同じ動作でも動きの量によって出力する音を変化させることが出来る。
【００４３】
図５は、本開示の実施の形態に係る信号処理装置１００の第２の動作例を示す流れ図である。
【００４４】
信号処理装置１００は、ユーザの身体の動きに基づいて発生した音声信号を取得するとともに、ユーザの身体の動きに基づいて発生したモーション信号を取得する（ステップＳ１１１）。ユーザの身体の動きに基づいて発生した音声信号及びユーザの身体の動きに基づいて発生したモーション信号を取得すると、続いて信号処理装置１００は、取得した音声信号に対する信号処理を、モーション信号の内容に基づいて実行する（ステップＳ１１２）。ステップＳ１１２の信号処理は、制御部１２０が実行する。信号処理装置１００は、ステップＳ１１２で実行する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。
【００４５】
例えば信号処理装置１００は、音声信号に対する信号処理のパラメータを、取得したモーション信号の内容に応じて変化させる。より具体的には、モーション信号の値が大きい、すなわち、信号処理装置１００が装着される部位や用具などの動きの量が大きい場合は、信号処理装置１００は、音声信号に対する増幅処理を行う際の増幅量を大きくしたり、エフェクト処理の際の音声信号の変化量を大きくしたりしてもよい。
【００４６】
信号処理装置１００は、音声信号に対する信号処理を実行すると、信号処理を実行した後の音声信号を出力する（ステップＳ１１３）。信号処理を実行した後の音声信号は、音出力部１３０から、信号処理装置１００が装着された部位や用具などの動きを拡張した音として出力される。
【００４７】
本開示の実施の形態に係る信号処理装置１００は、図５に示したような動作を実行することで、装着された部位や用具などの動きによって発生する信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図５に示したような動作を実行することで、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００４８】
また本開示の実施の形態に係る信号処理装置１００は、図５に示したような動作を実行することで、信号処理装置１００が装着される部位や用具などの動きに応じて、信号処理の際のパラメータを変更することができる。従って、本開示の実施の形態に係る信号処理装置１００は、図５に示したような動作を実行することで、同じ動作でも動きの量によって出力する音を変化させることが出来る。
【００４９】
［１．４．第３の構成例及び動作例］
続いて、本開示の実施の形態に係る信号処理装置１００の第３の構成例を説明する。信号処理装置１００の第１の構成例及び第２の構成例では、信号処理装置１００が装着される部位や用具などの動きによって発生する空力音や、装着された部位の近傍で人間が発生させた音をマイク入力部１１０が取得していた。信号処理装置１００の第３の構成例は、ユーザの身体の動きに基づいて発生したモーション信号に対する信号処理を行って、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成する。
【００５０】
図６は、本開示の実施の形態に係る信号処理装置１００の第３の構成例を示す説明図である。本開示の実施の形態に係る信号処理装置１００は、センサ入力部１１２と、制御部１２０と、音出力部１３０と、を含んで構成される。
【００５１】
センサ入力部１１２は、図４に示したセンサ入力部１１２と同様に、信号処理装置１００が装着される部位や用具などの動きによって発生するモーション信号を取得する。モーション信号は、例えば加速度センサ、角速度センサ、地磁気センサなどからなるモーションセンサから出力される。センサ入力部１１２は、取得したモーション信号を制御部１２０に出力する。
【００５２】
制御部１２０は、ユーザの身体の動きに基づいて発生した波形信号として、センサ入力部１１２が出力するモーション信号に対する信号処理を行う。制御部１２０は、センサ入力部１１２が出力するモーション信号に対する信号処理として、センサ入力部１１２が出力するモーション信号を音声信号に変換して、変換後の信号に、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。制御部１２０は、センサ入力部１１２が出力するモーション信号に対して信号処理を行うと、信号処理後の信号を音出力部１３０に出力する。
【００５３】
音出力部１３０は、図２に示した信号処理装置１００の音出力部１３０と同様に、例えばスピーカで構成され、制御部１２０から出力される信号に基づいた音を出力する。
【００５４】
本開示の実施の形態に係る信号処理装置１００は、図６に示したような構成を有することで、装着された部位や用具などの動きによって発生するモーション信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図６に示したような構成を有することで、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００５５】
図７は、本開示の実施の形態に係る信号処理装置１００の第３の動作例を示す流れ図である。
【００５６】
信号処理装置１００は、ユーザの身体の動きに基づいて発生したモーション信号を取得する（ステップＳ１２１）。ユーザの身体の動きに基づいて発生したモーション信号を取得すると、続いて信号処理装置１００は、取得したモーション信号に対する信号処理を実行する（ステップＳ１２２）。ステップＳ１２２の信号処理は、制御部１２０が実行する。信号処理装置１００は、ステップＳ１２２で実行する信号処理として、モーション信号を音声信号とみなして、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。
【００５７】
信号処理装置１００は、音声信号に対する信号処理を実行すると、信号処理を実行した後の音声信号を出力する（ステップＳ１２３）。信号処理を実行した後の音声信号は、音出力部１３０から、信号処理装置１００が装着された部位や用具などの動きを拡張した音として出力される。
【００５８】
本開示の実施の形態に係る信号処理装置１００は、図７に示したような動作を実行することで、装着された部位や用具などの動きによって発生するモーション信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図７に示したような動作を実行することで、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００５９】
［１．５．第４の構成例及び動作例］
続いて、本開示の実施の形態に係る信号処理装置１００の第４の構成例を説明する。信号処理装置１００の第３の構成例は、ユーザの身体の動きに基づいて発生したモーション信号に対する信号処理を行って、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成した。信号処理装置１００の第４の構成例は、入力される信号がマイクで集音された音に基づく音声信号ではなく、楽曲などのオーディオ信号であり、そのオーディオ信号に対する信号処理を行う。
【００６０】
図８は、本開示の実施の形態に係る信号処理装置１００の第４の構成例を示す説明図である。本開示の実施の形態に係る信号処理装置１００は、センサ入力部１１２と、オーディオ入力部１１４と、制御部１２０と、音出力部１３０と、を含んで構成される。
【００６１】
センサ入力部１１２は、図４及び図６に示したセンサ入力部１１２と同様に、信号処理装置１００が装着される部位や用具などの動きによって発生するモーション信号を取得する。モーション信号は、例えば加速度センサ、角速度センサ、地磁気センサなどからなるモーションセンサから出力される。センサ入力部１１２は、取得したモーション信号を制御部１２０に出力する。
【００６２】
オーディオ入力部１１４は、楽曲などからなるオーディオ信号を取得する。オーディオ信号は、例えば信号処理装置１００とは異なる装置やサービス（ポータブル音楽プレーヤ、スマートフォン、タブレット端末、パーソナルコンピュータ、ネットワーク上の音楽配信サービス等）から供給されうる。オーディオ入力部１１４は、取得したオーディオ信号を制御部１２０に出力する。
【００６３】
制御部１２０は、オーディオ入力部１１４が出力するオーディオ信号に対する信号処理を行う。制御部１２０は、オーディオ入力部１１４が出力するオーディオ信号に対する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。制御部１２０は、オーディオ入力部１１４が出力するオーディオ信号に対して信号処理を行うと、信号処理後の信号を音出力部１３０に出力する。
【００６４】
そして図８に示した制御部１２０は、オーディオ信号に対する信号処理を行う際に、ユーザの身体の動きに基づいて発生した波形信号として、センサ入力部１１２から供給されるモーション信号を用いる。例えば制御部１２０は、オーディオ信号に対する信号処理のパラメータを、センサ入力部１１２から供給されるモーション信号の内容に応じて変化させる。より具体的には、モーション信号の値が大きい、すなわち、信号処理装置１００が装着される部位や用具などの動きの量が大きい場合は、制御部１２０は、オーディオ信号に対する増幅処理を行う際の増幅量を大きくしたり、エフェクト処理の際のオーディオ信号の変化量を大きくしたりしてもよい。
【００６５】
音出力部１３０は、図２等に示した信号処理装置１００の音出力部１３０と同様に、例えばスピーカで構成され、制御部１２０から出力される信号に基づいた音を出力する。
【００６６】
本開示の実施の形態に係る信号処理装置１００は、図８に示したような構成を有することで、オーディオ信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きに応じて変化させたオーディオ信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図８に示したような構成を有することで、装着された部位や用具などの動きに応じて変化させたオーディオ信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００６７】
また本開示の実施の形態に係る信号処理装置１００は、図８に示したような構成を有することで、信号処理装置１００が装着される部位や用具などの動きに応じて、信号処理の際のパラメータを変更することができる。従って、本開示の実施の形態に係る信号処理装置１００は、図８に示したような構成を有することで、同じ動作でも動きの量によって出力する音を変化させることが出来る。
【００６８】
図９は、本開示の実施の形態に係る信号処理装置１００の第４の動作例を示す流れ図である。
【００６９】
信号処理装置１００は、オーディオ信号を取得するとともに、ユーザの身体の動きに基づいて発生したモーション信号を取得する（ステップＳ１３１）。オーディオ信号及びユーザの身体の動きに基づいて発生したモーション信号を取得すると、続いて信号処理装置１００は、取得したオーディオ信号に対する信号処理を、モーション信号の内容に基づいて実行する（ステップＳ１３２）。ステップＳ１３２の信号処理は、制御部１２０が実行する。信号処理装置１００は、ステップＳ１３２で実行する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。
【００７０】
例えば信号処理装置１００は、オーディオ信号に対する信号処理のパラメータを、取得したモーション信号の内容に応じて変化させる。より具体的には、モーション信号の値が大きい、すなわち、信号処理装置１００が装着される部位や用具などの動きの量が大きい場合は、信号処理装置１００は、オーディオ信号に対する増幅処理を行う際の増幅量を大きくしたり、エフェクト処理の際のオーディオ信号の変化量を大きくしたりしてもよい。
【００７１】
信号処理装置１００は、オーディオ信号に対する信号処理を実行すると、信号処理を実行した後のオーディオ信号を出力する（ステップＳ１３３）。信号処理を実行した後のオーディオ信号は、音出力部１３０から、信号処理装置１００が装着された部位や用具などの動きに応じて変化させた音として出力される。
【００７２】
本開示の実施の形態に係る信号処理装置１００は、図９に示したような動作を実行することで、オーディオ信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きに応じて変化させたオーディオ信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図９に示したような動作を実行することで、装着された部位や用具などの動きに応じて変化させたオーディオ信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００７３】
また本開示の実施の形態に係る信号処理装置１００は、図９に示したような動作を実行することで、信号処理装置１００が装着される部位や用具などの動きに応じて、信号処理の際のパラメータを変更することができる。従って、本開示の実施の形態に係る信号処理装置１００は、図９に示したような動作を実行することで、同じ動作でも動きの量によって出力する音を変化させることが出来る。
【００７４】
［１．６．第５の構成例及び動作例］
続いて、本開示の実施の形態に係る信号処理装置１００の第５の構成例を説明する。信号処理装置１００の第４の構成例は、入力される信号がマイクで集音された音に基づく音声信号ではなく、楽曲などのオーディオ信号であり、そのオーディオ信号に対する信号処理を行った。信号処理装置１００の第５の構成例は、マイクで集音された音に基づく音声信号と、楽曲などのオーディオ信号との合成処理を、信号処理装置１００が装着される部位や用具などの動きに応じて行う。
【００７５】
図１０は、本開示の実施の形態に係る信号処理装置１００の第５の構成例を示す説明図である。本開示の実施の形態に係る信号処理装置１００は、マイク入力部１１０と、センサ入力部１１２と、オーディオ入力部１１４と、制御部１２０と、音出力部１３０と、を含んで構成される。
【００７６】
マイク入力部１１０は、図２等に示した信号処理装置１００のマイク入力部１１０と同様に、信号処理装置１００が装着される部位や用具などの動きによって発生する空力音や、装着された部位の近傍で人間が発生させた音を取得する。マイク入力部１１０は、取得した音を音声信号として制御部１２０に出力する。
【００７７】
センサ入力部１１２は、図４等に示したセンサ入力部１１２と同様に、信号処理装置１００が装着される部位や用具などの動きによって発生するモーション信号を取得する。モーション信号は、例えば加速度センサ、角速度センサ、地磁気センサなどからなるモーションセンサから出力される。センサ入力部１１２は、取得したモーション信号を制御部１２０に出力する。
【００７８】
オーディオ入力部１１４は、図８に示したオーディオ入力部１１４と同様に、楽曲などからなるオーディオ信号を取得する。オーディオ信号は、例えば信号処理装置１００とは異なる装置やサービス（ポータブル音楽プレーヤ、スマートフォン、タブレット端末、パーソナルコンピュータ、ネットワーク上の音楽配信サービス等）から供給されうる。オーディオ入力部１１４は、取得したオーディオ信号を制御部１２０に出力する。
【００７９】
制御部１２０は、マイク入力部１１０が出力する音声信号、センサ入力部１１２が出力するモーション信号、オーディオ入力部１１４が出力するオーディオ信号の少なくともいずれかに対する信号処理を行う。制御部１２０は、マイク入力部１１０が出力する音声信号、センサ入力部１１２が出力するモーション信号、オーディオ入力部１１４が出力するオーディオ信号に対する信号処理として、例えば少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行う。制御部１２０は、マイク入力部１１０が出力する音声信号、センサ入力部１１２が出力するモーション信号、オーディオ入力部１１４が出力するオーディオ信号の少なくともいずれかに対して信号処理を行うと、信号処理後の信号を音出力部１３０に出力する。
【００８０】
例えば、制御部１２０は、マイク入力部１１０が出力する音声信号と、オーディオ入力部１１４が出力するオーディオ信号との両方に対して、センサ入力部１１２が出力するモーション信号に応じて同じような増幅処理や、所定のエフェクト処理などを行う。制御部１２０は、オーディオ入力部１１４が出力するオーディオ信号との両方に対して処理を行うと、処理後の信号を合成して音出力部１３０に出力する。
【００８１】
また例えば、制御部１２０は、マイク入力部１１０が出力する音声信号と、オーディオ入力部１１４が出力するオーディオ信号とのいずれか一方に対して、センサ入力部１１２が出力するモーション信号に応じて同じような増幅処理や、所定のエフェクト処理などを行う。
【００８２】
また例えば、制御部１２０は、マイク入力部１１０が出力する音声信号の波形に応じて、オーディオ入力部１１４が出力するオーディオ信号に対する増幅処理や、所定のエフェクト処理などのパラメータを変更してもよい。
【００８３】
音出力部１３０は、図２等に示した信号処理装置１００の音出力部１３０と同様に、例えばスピーカで構成され、制御部１２０から出力される信号に基づいた音を出力する。
【００８４】
本開示の実施の形態に係る信号処理装置１００は、図１０に示したような構成を有することで、マイク入力部１１０が出力する音声信号、センサ入力部１１２が出力するモーション信号、オーディオ入力部１１４が出力するオーディオ信号の少なくともいずれかに対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きに応じて変化させた音声信号を生成することができる。本開示の実施の形態に係る信号処理装置１００は、図１０に示したような構成を有することで、装着された部位や用具などの動きに応じて変化させた音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【００８５】
上述した各構成例における制御部１２０は、音声信号やオーディオ信号に対する信号処理を行う際に、信号処理装置１００を装着したユーザや用具の動きの跳度に応じて、音色加工を行ってもよい。具体的には、制御部１２０は、現在の加速値から、加速度の微分値（現在の加速度−前の加速度）を差し引いた値を、音色加工する係数として用いる。
【００８６】
制御部１２０は、現在の加速値から、加速度の微分値（現在の加速度−前の加速度）を差し引いた値を、音色加工する係数として用いることで、ユーザが急激に動きを止めたり、動いたりした際に、音の変化のメリハリを表現できる。例えば、ユーザがダンスしている場合、ユーザが動きを止めたときには、制御部１２０は、エフェクト効果を瞬時に停止させることができる。また同様に、ユーザがダンスしている場合、制御部１２０は、ユーザの動きによってエフェクト効果を追従させることができる。
【００８７】
また本開示の実施の形態に係る信号処理装置１００がオーディオ信号を出力している際に、制御部１２０は、加速度の微分値を差し引いた値に基づいて、そのオーディオ信号に対してエフェクト効果を与えても良い。
【００８８】
例えば、信号処理装置１００がオーディオ信号を出力している際に、ユーザがゆっくり動いたり、動きを止めたりした場合には、加速度の微分値を差し引いた値が小さいので、オーディオ信号に与えるエフェクト効果を弱くし、ユーザが急激に動きを止めたり、動いたりした場合には、加速度の微分値を差し引いた値が大きいので、オーディオ信号に与えるエフェクト効果を強くする。すなわち、ユーザが急激に動きを止めたり、動いたりすると、制御部１２０は、出力されるオーディオ信号にメリハリを与えることができる。
【００８９】
信号処理装置１００が出力するオーディオ信号は、外部から供給されるものであってもよく、マイク１０２などで予め録音した音、例えば人間の声や楽器の音などであってもよい。制御部１２０は、マイク１０２などで予め録音した音にエフェクトを与えることで、その場で録音した音にメリハリを与えることができる。
【００９０】
また制御部１２０は、ユーザや用具の装着部位の回転に応じた信号処理を行ってもよい。例えば、腕や足、道具に信号処理装置１００が装着されている場合に、制御部１２０は、装着部位の回転角に応じて、バンドパス、ローパス、ハイパスフィルタをかけてもよい。また例えば、同じように腕や足、道具に信号処理装置１００が装着されている場合に、制御部１２０は、装着部位の回転角に応じて、ピッチシフトなどのエフェクトを加えてもよい。
【００９１】
また制御部１２０は、ユーザや用具の装着部位の動きの加速の状態に応じた信号処理を行ってもよい。制御部１２０は、ユーザや用具の装着部位の加速の度合いに比例して、音色加工を強くしてもよい。
【００９２】
［１．７．外観例］
続いて、本開示の実施の形態に係る信号処理装置１００の外観例を説明する。
【００９３】
図１１、図１２は、本開示の実施の形態に係る信号処理装置１００の外観例を示す説明図である。図１１、図１２に示した信号処理装置１００は、ユーザの腕に装着するためのバンド２００に装着されるよう構成されている。
【００９４】
図１１、図１２に示した信号処理装置１００は、信号処理装置１００が装着される部位や用具などの動きによって発生する空力音や、装着された部位の近傍で人間が発生させた音を取得するマイク入力部１１０、集音した音に対する信号処理を行う制御部１２０、制御部１２０が信号処理を行った後の信号に基づいて音を出力する音出力部１３０と、を有するように構成される。
【００９５】
信号処理装置１００は、制御部１２０が信号処理を行った後の信号に基づいた音を、信号処理装置１００ではなく外部スピーカから出力しても良い。外部スピーカは、信号処理装置１００に有線で接続されていてもよく、無線で接続されていてもよい。また、信号処理装置１００は、制御部１２０が信号処理を行った後の信号に基づいた音を、信号処理装置１００に加えて外部スピーカから出力しても良い。
【００９６】
信号処理装置１００は、制御部１２０が信号処理を行った後の信号に基づいた音を、信号処理装置１００に加えて外部スピーカからも出力できるようにすることで、利用シーンに応じて、信号処理装置１００の本体から音を出したり、外部スピーカから音を出したりすることを可能にする。
【００９７】
例えば音を出せない環境では、信号処理装置１００は、信号処理後の音をヘッドホンやイヤホンに出力してユーザにだけ聞こえさせることができる。また、より体感に近づけたい場合は、信号処理装置１００は、信号処理後の音を本体から出力させることができる。また、周囲の人間を含めてみんなで盛り上がったり、ユーザの動きを見せつけたりする場合は、信号処理装置１００は、信号処理後の音を外部スピーカから出力させることができる。
【００９８】
図１３Ａ〜図１３Ｃは、信号処理装置１００の外観例を示す説明図である。信号処理装置１００は、空力音を集音するマイク１０２を覆うように、半球状の蜂の巣型に孔が空いているケース１０１を被せている。このように、空力音を集音するマイク１０２を覆うように、半球の蜂の巣型のケース１０１を被せることで、全方位からの音がマイク１０２に収集されやすくなる。また、ケース１０１の中心部に近づくほど、収集される音の密度が高くなる。図１４は、空力音を集音するマイク１０２を覆うように、半球状の蜂の巣型のケース１０１を被せていることの効果を模式的に示す説明図である。
【００９９】
もちろん信号処理装置１００の外観はかかる例に限定されるものでは無い。図１２に示したように、マイクの周囲に孔が空いているケースを被せて、マイクの周囲の３６０度全ての方向の音を集音してもよい。
【０１００】
信号処理装置１００は、図１１、図１２に示したバンド２００と脱着可能に構成されていても良い。さらに、信号処理装置１００は、マイクに被せるケースも脱着可能に構成されていても良い。例えば、全方位で集音して、その集音した音を拡張したい場合は、図１３Ａ〜図１３Ｃに示したようなケース１０１が信号処理装置１００に付けられていても良い。また、一定方向のみから集音して、その集音した音を拡張したい場合は、その方向の音のみを集音しやすい指向性を有するよう構成されたケースが信号処理装置１００に付けられていても良い。
【０１０１】
上述した信号処理装置１００は、ユーザが使用する道具やおもちゃに装着したり、また内蔵されたりしても良い。信号処理装置１００を道具やおもちゃに内蔵することで、人間の身体の動きだけではなく、道具やおもちゃの動きを音で拡張できる。例えば、ボールやシューズ、スポーツ用具に信号処理装置１００が内蔵されていてもよい。ボールやシューズ、スポーツ用具に信号処理装置１００が内蔵されることによって、身体の動きだけでなく、身体から離れたボールの動きなどが音で拡張される。また、おもちゃ等に信号処理装置１００が内蔵されることで、おもちゃ（おもちゃの車や人形、ドローン）などの動きは音で拡張される。
【０１０２】
［１．８．応用例］
上述した信号処理装置１００は、身体運動によって発生する音だけでなく、触感を他の装置に伝送したり、また記録したり、再生したりしてもよい。
【０１０３】
図１５は、本開示の実施の形態に係る信号処理装置１００の応用例を示す説明図である。信号処理装置１００は、信号処理装置１００を装着したユーザの身体運動によって発生する音及び触感（物質を伝わる音）を収録し、他の装置に伝送しても良い。信号処理装置１００が収録し、伝送した音や触感は、他の装置で再生される。
【０１０４】
信号処理装置１００は、例えば、信号処理装置１００を装着したユーザの身体運動によって発生する音及び触感を無線によって他の装置に伝送する。また信号処理装置１００は、例えば、信号処理装置１００を装着したユーザの身体運動によって発生する音及び触感を、所定の音声ファイルの形式で記録する。
【０１０５】
このように、信号処理装置１００を装着したユーザの身体運動によって発生する音及び触感を他の装置に伝送することで、他者の運動体験を体感することができる。また信号処理装置１００は、信号処理装置１００を装着したユーザの身体運動によって発生する音及び触感を記録しておき、後で再生することで、ユーザの過去の運動体験をそのユーザに追体験させることが出来る。
【０１０６】
より具体的には、信号処理装置１００は、信号処理装置１００を装着したユーザの身体運動によって発生する音及び触感を、放送波の映像やネットワークコンテンツ映像と同時に他の装置へ伝送してもよい。信号処理装置１００は、音及び触感を放送波の映像やネットワークコンテンツ映像と同時に他の装置へ伝送することで、当該装置を使用するユーザに、信号処理装置１００を装着したユーザの映像を見ながら、信号処理装置１００を装着したユーザの身体運動を体感させることが出来る。
【０１０７】
信号処理装置１００は、ユーザの触感を伝送するために、例えばマイクが身体部分に密着するような構造を有していても良い。マイクが身体部分に密着するような構造を有していることにより、信号処理装置１００は、身体や物質を通した振動波形を入力し、触感として検知できる。また、信号処理装置１００は、マイクの他に振動センサを用いて身体や物質を通した振動波形を入力してもよい。
【０１０８】
信号処理装置１００が収録した音と触感を再生する装置は、例えば、振動アクチュエータ、スピーカ、モーションセンサ等を有しうる。これらのモジュールを有する装置としては、例えばスマートフォンや、これらのモジュールを備えるスマートフォンケース等があり得る。
【０１０９】
信号処理装置１００が収録した音と触感を再生する装置は、例えば、全ての音や触感を再生してもよく、上記装置を使用するユーザのモーション検知を行って、伝送者のモーションと同じモーションをした場合にのみ、伝送者の身体によって発生した音と触感を再生してもよい。
【０１１０】
信号処理装置１００は、信号処理装置１００を装着したユーザの身体運動によって発生する音と触感を音色加工することで、音と触感を拡張して提示することができる。例えば、信号処理装置１００は、集音した音と触感を音色加工し、スピーカと振動アクチュチューターで再生することで、物質の特性が変わったように感じさせることができる。
【０１１１】
＜２．まとめ＞
以上説明したように本開示の実施の形態によれば、装着された部位や用具などの動きによって発生する信号に対する信号処理を行って、別の信号、すなわち、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成する信号処理装置１００が提供される。本開示の実施の形態に係る信号処理装置１００は、装着された部位や用具などの動きを音で誇張して表すための音声信号を生成することにより、身体の動きそのものを聴覚的に体感できるよう提示することを可能とする。
【０１１２】
本明細書の各装置が実行する処理における各ステップは、必ずしもシーケンス図またはフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、各装置が実行する処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【０１１３】
また、各装置に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述した各装置の構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供されることが可能である。また、機能ブロック図で示したそれぞれの機能ブロックをハードウェアまたはハードウェア回路で構成することで、一連の処理をハードウェアまたはハードウェア回路で実現することもできる。
【０１１４】
また上述の説明で用いた機能ブロック図で示したそれぞれの機能ブロックの一部又は全部は、たとえばインターネット等のネットワークを介して接続されるサーバ装置で実現されてもよい。また上述の説明で用いた機能ブロック図で示したそれぞれの機能ブロックの構成は、単独の装置で実現されてもよく、複数の装置が連携するシステムで実現されても良い。複数の装置が連携するシステムには、例えば複数のサーバ装置の組み合わせ、サーバ装置と端末装置との組み合わせ等が含まれ得る。
【０１１５】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１１６】
例えば、本開示の実施の形態に係る信号処理装置１００は、装着された部位や用具などの動きによって発生する信号に対する信号処理を行って、身体の動きを拡張して表現するための音を出力していたが、他にも、例えばモバイルカメラ等の撮像装置と連動することで、アニメーションのような映像加工をリアルタイムに行って、アニメーション世界のような音を放つ映像を生成しても良い。
【０１１７】
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
【０１１８】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行する制御部を備える、信号処理装置。
（２）
前記波形信号は、前記センサで集音された音声信号である、前記（１）に記載の信号処理装置。
（３）
前記制御部は、前記波形信号が音声信号では無い場合は、該波形信号を音声信号に変換してから前記エフェクト処理を実行する、前記（１）に記載の信号処理装置。
（４）
前記波形信号は、前記センサが検出したモーション量に基づく信号である、前記（１）に記載の信号処理装置。
（５）
前記制御部は、所定の音源からの音声信号と、前記他の波形信号とを合成した信号に対して前記波形信号に基づいたエフェクト処理を実行する、前記（１）に記載の信号処理装置。
（６）
前記制御部は、エフェクト処理後の前記波形信号及び前記他の波形信号を合成する、前記（１）〜（５）のいずれかに記載の信号処理装置。
（７）
前記制御部は、前記エフェクト処理として少なくとも一部の周波数帯域に対する増幅処理を含んだ処理を実行する、前記（１）〜（６）のいずれかに記載の信号処理装置。
（８）
前記制御部は、前記エフェクト処理として少なくとも一部の周波数帯域に対するエコー処理を含んだ処理を実行する、前記（１）〜（７）のいずれかに記載の信号処理装置。
（９）
前記制御部は、前記エフェクト処理としてピッチシフト処理を含んだ処理を実行する、前記（１）〜（８）のいずれかに記載の信号処理装置。
（１０）
前記制御部は、前記波形信号の内容に応じて前記エフェクト処理の内容を変化させる、前記（１）〜（９）のいずれかに記載の信号処理装置。
（１１）
前記制御部は、ユーザによる指示に応じて前記エフェクト処理の内容を変化させる、前記（１）〜（１０）のいずれかに記載の信号処理装置。
（１２）
前記波形信号を出力するセンサを覆う、蜂の巣型に孔が空いている半球状のケースを備える、前記（１）〜（１１）のいずれかに記載の信号処理装置。
（１３）
前記ケースは、中央に行くにつれて孔が小さくなる、前記（１２）に記載の信号処理装置。
（１４）
器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理をプロセッサで実行することを含む、信号処理方法。
（１５）
器具または身体に装着されたセンサから出力される、該センサの装着部位の動きに応じて発生する波形信号に基づいて、該波形信号または他の波形信号に対するエフェクト処理を実行することをコンピュータに実行させる、コンピュータプログラム。
【符号の説明】
【０１１９】
１        ：ユーザ
１００    ：信号処理装置
１０１    ：ケース
１０２    ：マイク
１１０    ：マイク入力部
１１２    ：センサ入力部
１１４    ：オーディオ入力部
１２０    ：制御部
１３０    ：音出力部
２００    ：バンド
【図１】
2017061577.tif 000003
【図２】
2017061577.tif 000004
【図３】
2017061577.tif 000005
【図４】
2017061577.tif 000006
【図５】
2017061577.tif 000007
【図６】
2017061577.tif 000008
【図７】
2017061577.tif 000009
【図８】
2017061577.tif 000010
【図９】
2017061577.tif 000011
【図１０】
2017061577.tif 000012
【図１１】
2017061577.tif 000013
【図１２】
2017061577.tif 000014
【図１３Ａ】
2017061577.tif 000015
【図１３Ｂ】
2017061577.tif 000016
【図１３Ｃ】
2017061577.tif 000017
【図１４】
2017061577.tif 000018
【図１５】
2017061577.tif 000019
【国際調査報告】
2017061577.tif 000020
2017061577.tif 000021
2017061577.tif 000022
2017061577.tif 000023