(57)【要約】【課題】舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器の操作を正確かつ安全に行なうことができる音声操作システムを提供する。【解決手段】音声式操作装置１０は、操作者からの音声による操作指示を受け付ける。音声認識装置４０は、音声式操作装置１０からの音声による操作指示をコマンドデータに変換する。舞台機構制御装置５０は、音声認識装置４０により変換されたコマンドデータ、および複数の機器の状態を示すステータス情報を受けて、コマンドデータおよびステータス情報を表す文字情報を生成する。表示装置２０は、舞台機構制御装置５０により生成された文字情報を表示する。機械式操作装置３０は、操作者からの手動による操作指示を受け付ける。舞台機構制御装置５０は、機械式操作装置３０に入力された手動による操作指示と、コマンドデータとに従って、各複数の機器を制御する。【選択図】図１
2018097259.tif 000002
【特許請求の範囲】
【請求項１】
舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムであって、
操作者からの音声による操作指示を受け付けるように構成された第１の操作装置と、
前記第１の操作装置に入力された前記音声による操作指示を、コマンドデータに変換するように構成された音声認識装置と、
前記音声認識装置により変換された前記コマンドデータ、および前記複数の機器の状態を示すステータス情報を受けて、前記コマンドデータおよび前記ステータス情報を表す文字情報を生成するように構成された制御装置と、
前記制御装置により生成された前記文字情報を表示するように構成された表示装置と、
前記操作者からの手動による操作指示を受け付けるように構成された第２の操作装置とを備え、
前記制御装置は、さらに、前記第２の操作装置に入力された前記手動による操作指示と前記コマンドデータとに従って、各前記複数の機器を制御するように構成される、音声操作システム。
【請求項２】
前記音声による操作指示は、操作対象となる機器を識別するための識別情報、および前記操作対象となる機器に対する操作内容を示す操作情報を含み、
前記音声認識装置は、前記識別情報および前記操作情報を、前記制御装置が実行可能なコマンドコードで表現された前記コマンドデータに変換するように構成される、請求項１に記載の音声操作システム。
【請求項３】
前記表示装置に表示される前記文字情報は、操作対象となる機器を識別するための識別情報、前記操作対象となる機器に対する操作内容を示す操作情報、および前記操作対象となる機器の前記ステータス情報を含む、請求項１に記載の音声操作システム。
【請求項４】
前記第２の操作装置は、機械式の操作部を含み、前記操作部に対する前記手動による操作指示を受け付けるように構成される、請求項１から３のいずれか１項に記載の音声操作システム。
【請求項５】
前記制御装置は、前記コマンドデータが停止指示である場合には、前記手動による操作指示を待たずに、前記コマンドデータに従って前記複数の機器を停止させる、請求項１から４のいずれか１項に記載の音声操作システム。
【請求項６】
前記第１の操作装置は、複数の操作者にそれぞれ対応して複数設けられ、
複数の前記第１の操作装置の各々に入力された前記音声による操作指示を受け付けて前記音声認識装置に伝送するように構成された音声伝送装置をさらに備える、請求項１から５のいずれか１項に記載の音声操作システム。
【請求項７】
前記第２の操作装置は、複数の操作者にそれぞれ対応して複数設けられ、
複数の前記第２の操作装置の各々は、前記第１の操作装置に対する前記音声による操作指示の入力操作を有効に設定するように構成される、請求項６に記載の音声操作システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムに関する。
【背景技術】
【０００２】
舞台機構に含まれる複数の舞台装置を操作するための操作装置が、たとえば、特開２０１６−１１８８１４号公報（特許文献１）に開示されている。特許文献１に記載された操作装置は、タッチスクリーンおよび操作卓が連結されて構成されており、通常、舞台装置の存在する舞台付近の現場から離れた操作室などに設けられる。
【０００３】
上記操作装置を操作する操作者は、現場で舞台機構を指揮する指揮者と音声通信を行なうことにより、指揮者から各舞台装置を操作するための指示を受け取る。操作者は、指示に基づいて操作装置に対する入力操作を行なうことにより、指揮者により指定された舞台装置を動作させる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１６−１１８８１４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した操作手順では、周囲の環境などに起因して、操作指示を出す指揮者と操作装置を操作する操作者との間で操作指示の聞き間違いが起こる場合がある。この場合、操作対象となる舞台装置は操作指示とは異なる動作を行なってしまう。
【０００６】
あるいは、指揮者の操作指示自体に誤りがある場合であっても、操作者がその誤りに気付くことなく、舞台装置を動作させる場合が起こり得る。いずれの場合にも、操作対象となる舞台装置が望ましくない動作を行なうことで、他の舞台装置に支障を及ぼす可能性がある。この結果、舞台機構の安全性が損なわれるおそれがある。
【０００７】
また、指揮者が操作指示が正確に操作者に伝わっていることを確認するためには、操作者との音声でのやり取りに頼らざるを得ないため、確認作業に手間がかかり、効率良く操作を行なうことができないという問題がある。
【０００８】
この発明は、このような問題点を解決するためになされたものであって、その目的は、舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器の操作を正確かつ安全に行なうことができる音声操作システムを提供することである。
【課題を解決するための手段】
【０００９】
本発明のある局面によれば、舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムは、第１の操作装置と、音声認識装置と、制御装置と、表示装置と、第２の操作装置とを備える。第１の操作装置は、操作者からの音声による操作指示を受け付けるように構成される。音声認識装置は、第１の操作装置に入力された音声による操作指示を、コマンドデータに変換するように構成される。制御装置は、音声認識装置により変換されたコマンドデータ、および複数の機器の状態を示すステータス情報を受けて、コマンドデータおよびステータス情報を表す文字情報を生成するように構成される。表示装置は、制御装置により生成された文字情報を表示するように構成される。第２の操作装置は、操作者からの手動による操作指示を受け付けるように構成される。上記構成において、制御装置は、さらに、第２の操作装置に入力された手動による操作指示と、コマンドデータとに従って、各複数の機器を制御するように構成される。
【００１０】
上記音声操作システムによれば、音声認識装置に登録された音声指示は、コマンドデータに変換されて制御装置に伝送されると、制御装置によって文字等の情報に逆変換されて表示装置に表示される。操作者から与えられた音声指示は、文字等の情報となって操作者にフィードバックされることにより、操作者は、文字等の情報に基づいて、自己が発した音声指示が正しく登録されているか否かを確認することができる。また、表示装置にはステータス情報が文字等の情報として表示されるため、操作者は、操作対象となる機器を音声指示に従って安全に動作させることができるか否かを、文字表示によって確認することができる。
【００１１】
また、操作対象となる機器の動作は、操作者による手動指示をトリガとして実行されるように構成されるため、音声指示が正しく登録されており、かつ、操作対象となる舞台装置の安全動作が保証されている状態で、操作対象となる機器を動作させることができる。これにより、操作対象となる機器の安全かつ正確な動作を実現できる。
【００１２】
また、上記音声操作システムによれば、操作者は音声で指示を発し、その指示内容を文字等の情報の形で視覚を通じて確認するため、指示と確認とを混乱せずに並行して行なうことができる。これにより、操作者は、操作を効率良く行なうことができる。
【００１３】
好ましくは、音声による操作指示は、操作対象となる機器を識別するための識別情報、および操作対象となる機器に対する操作内容を示す操作情報を含む。音声認識装置は、識別情報および操作情報を、制御装置が実行可能なコマンドコードで表現されたコマンドデータに変換するように構成される。
【００１４】
このように構成すると、制御装置は、コマンドデータを受信することにより、識別情報および操作情報に基づいて、操作対象となる機器を制御することができる。また、制御装置は、コマンドデータを基に識別情報および操作情報を表す文字情報を生成することができる。
【００１５】
好ましくは、表示装置に表示される文字情報は、操作対象となる機器を識別するための識別情報、操作対象となる機器に対する操作内容を示す操作情報、および操作対象となる機器のステータス情報を含む。
【００１６】
このように構成すると、操作者は、文字情報に基づいて、自己が発した音声指示が正しく登録されているか否か、および、操作対象となる機器を音声指示に従って安全に動作させることができるか否かを確認することができる。
【００１７】
好ましくは、第２の操作装置は、機械式の操作部を含む。第２の操作装置は、操作部に対する手動による操作指示を受け付けるように構成される。
【００１８】
これによると、操作者による手動操作を、操作対象となる機器の動作のトリガとすることができる。よって、音声指示が正しく登録されており、かつ、操作対象となる舞台装置の安全動作が保証されている状態で、操作対象となる機器を動作させることができる。
【００１９】
好ましくは、制御装置は、コマンドデータが停止指示である場合には、手動による操作指示を待たずに、コマンドデータに従って複数の機器を停止させる。このように構成すると、例えば複数の機器のいずれかが故障したなどの異常が発生した状況には、複数の機器全体を迅速に停止させることができる。
【００２０】
好ましくは、第１の操作装置、表示装置および第２の操作装置の少なくとも１つは、操作者が携帯または装着可能に構成される。このように構成すると、操作者の利便性を向上させることができる。
【００２１】
好ましくは、第１の操作装置は、複数の操作者にそれぞれ対応して複数設けられる。音声操作システムは音声伝送装置をさらに備える。音声伝送装置は、複数の第１の操作装置の各々に入力された音声による操作指示を受け付けて音声認識装置に伝送するように構成される。
【００２２】
このように構成すると、複数の操作者間の音声通信に使用されている既存の音声伝送装置を利用できるため、複数の音声式操作装置で１台の音声認識装置を共用することが可能となる。したがって、音声操作システムを低コストで構築することができる。
【００２３】
好ましくは、第２の操作装置は、複数の操作者にそれぞれ対応して複数設けられる。複数の第２の操作装置の各々は、第１の操作装置に対する音声による操作指示の入力操作を有効に設定するように構成される。
【００２４】
このように構成すると、複数の操作者間の音声通信に使用されている既存の音声伝送装置を利用する構成において、音声通信と音声指示とを容易に切り分けることができる。これにより、音声認識装置において高い認識精度を保つことができる。
【発明の効果】
【００２５】
本発明によれば、舞台機構または遊戯機構に含まれる複数の機器の操作を正確かつ安全に行なうことができる音声操作システムを提供することができる。
【図面の簡単な説明】
【００２６】
【図１】この発明の実施の形態に従う音声操作システムの概略構成図である。
【図２】図１に示した音声式操作装置、表示装置および機械式操作装置の一例を示す図である。
【図３】操作者、音声操作システムおよび舞台機構の間におけるデータの流れを説明するための図である。
【図４】音声認識装置におけるコード変換の一態様を説明する図である。
【図５】音声認識装置におけるコード変換の具体例を説明する図である。
【図６】表示装置に表示される画面の一例を説明する図である。
【図７】音声操作システムに適用し得る音声認識の第１の構成例を説明する図である。
【図８】音声操作システムに適用し得る音声認識の第２の構成例を説明する図である。
【図９】音声操作システムに適用し得る音声認識の第３の構成例を説明する図である。
【発明を実施するための形態】
【００２７】
本発明の実施の形態について、図面を参照しながら詳細に説明する。なお、図中の同一または相当する部分については、同一符号を付してその説明は繰り返さない。
【００２８】
［音声操作システムの構成］
図１は、この発明の実施の形態に従う音声操作システムの概略構成図である。本実施の形態に従う音声操作システム１００は、代表的には、舞台機構に含まれる複数の舞台装置６０＿１〜６０＿ｎ（ｎは２以上の整数）を操作するための操作システムに適用することができる。本実施の形態に従う音声操作システム１００は、また、スタジオ機構に含まれる複数の装置や遊技機構に含まれる複数の遊戯装置を操作するための操作システムにも適用することが可能である。
【００２９】
図１を参照して、舞台装置６０＿１〜６０＿ｎは、スタジオ、劇場、ホール、宴会場などの大規模な施設の舞台部分に設置される装置である。舞台装置には、舞台上部から吊り下げられた大道具、照明器具、スクリーン設備、緞帳および音響反射板などを、演出効果や格納のために昇降させる吊物機構や、大道具の搬出入や演出上の効果を得るために舞台床を動かす床機構などが含まれる。音声操作システム１００は、複数の舞台装置６０＿１〜６０＿ｎを一元的に制御することによって舞台を演出するために用いられる。
【００３０】
音声操作システム１００は、複数の舞台装置６０＿１〜６０＿ｎの各々を音声で操作するためのシステムである。音声操作システム１００は、音声式操作装置１０と、表示装置２０と、機械式操作装置３０と、音声認識装置４０と、舞台機構制御装置５０とを備える。
【００３１】
音声式操作装置１０、表示装置２０および機械式操作装置３０は、舞台装置が存在する舞台付近の現場に設置される。音声認識装置４０および舞台機構制御装置５０は、舞台付近の現場、もしくは現場から離れた操作室などに設置される。少なくとも音声式操作装置１０、表示装置２０および機械式操作装置３０は、現場で舞台機構を操作する操作者が利用することができるように設けられる。
【００３２】
舞台機構制御装置５０は、音声認識装置４０、表示装置２０および機械式操作装置３０の各々との間でデータの送受信を行なう。通信方式は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＬＡＮ（Local  Area  Network）等による無線通信であってもよいし、ＵＳＢ（Universal  Serial  Bus）バスなどを利用した有線通信であってもよい。
【００３３】
音声式操作装置１０は、操作者からの音声による操作指示（以下、「音声指示」とも称す。）を音声認識装置４０に登録するために用いられる。具体的には、音声式操作装置１０は、音声入力装置としてのマイクを含み、マイクが取得した音声を音声データに変換する。音声データに変換された音声指示は音声認識装置４０に伝送される。
【００３４】
表示装置２０は、文字、任意の図形、および画像等（以下、「文字等」と称す。）の情報を表示するための表示画面を含む。表示装置２０は、舞台機構制御装置５０からの指示に基づいて文字等の情報を表示する。
【００３５】
機械式操作装置３０は、操作者からの手動による操作指示（以下、「手動指示」とも称す。）を受け付けるように構成される。具体的には、機械式操作装置３０は、操作者により操作可能な操作部を含む。操作部は、機械式の操作ボタンにより構成される。機械式の操作ボタンには、例えば、操作者ＯＰが押圧操作が可能な押しボタン式スイッチ、レバースイッチ、スティックコントローラ、ジョグダイヤル、ロータリーエンコーダなどを用いることができる。機械式の操作ボタンは、操作対象となる舞台装置が動作を行なうための動作指令に対応する操作ボタンと、操作対象となる舞台装置の動作を停止するための停止指令に対応する操作ボタンとを少なくとも含む。
【００３６】
本実施の形態において、音声式操作装置１０は「第１の操作装置」の一実施例に対応し、機械式操作装置３０は「第２の操作装置」の一実施例に対応する。
【００３７】
図２は、音声式操作装置１０、表示装置２０および機械式操作装置３０の一例を示す図である。図２を参照して、音声式操作装置１０、表示装置２０および機械式操作装置３０の各々は、操作者ＯＰが携帯または装着することが可能に構成されている。
【００３８】
音声式操作装置１０は、例えば、ヘッドセット（マイク付きヘッドフォン）である。
表示装置２０は、例えば、ウエアラブル機器である。図２の例では、ウエアラブル機器は眼鏡形状を有している。表示装置２０は、眼鏡のレンズ部分に表示画面が設けられている。なお、ウエアラブル機器の形状は、操作者ＯＰが表示画面を見ることができれば、眼鏡形状に限定されるものではない。また、表示装置２０は、ウエアラブル機器以外に、操作者ＯＰが携帯可能な端末であってもよいし、現場に固設されていてもよい。
【００３９】
機械式操作装置３０は、図２に示されるような操作者ＯＰが携帯可能な端末であってもよいし、現場に固設されていてもよい。また、音声式操作装置１０、表示装置２０および機械式操作装置３０は、少なくとも２つが一体化されていてもよい。
【００４０】
図１に戻って、音声認識装置４０は、音声式操作装置１０から入力された音声データを音声指示として、装置内部のメモリに格納する（登録する）。音声認識装置４０は、登録された音声指示をコマンドデータに変換するように構成される。生成されたコマンドデータは、舞台機構制御装置５０が実行可能なコマンドコードを含んでいる。コマンドデータの詳細な構成については後述する。
【００４１】
舞台機構制御装置５０は、複数の舞台装置６０＿１〜６０＿ｎとの間で通信可能に構成される。通信方式は有線あるいは無線のいずれの通信も可能である。なお、本実施の形態においては、舞台機構制御装置５０が各舞台装置と直接通信する場合について説明するが、ネットワークを介して各舞台装置と通信する方式としてもよい。
【００４２】
舞台機構制御装置５０は、一例として、ＣＰＵ（Central  Processing  Unit）と、ＲＯＭ（Read  Only  Memory）やＲＡＭ（Random  Access  Memory）などのメモリとを含むマイクロコンピュータを主体として構成される。舞台機構制御装置５０は、メモリに格納されているプログラムをＣＰＵが実行することにより、複数の舞台装置６０＿１〜６０＿ｎを統括的に制御する。
【００４３】
具体的には、舞台機構制御装置５０は、音声認識装置４０からコマンドデータを受け付ける。上記のように、コマンドデータは、音声認識装置４０に登録された音声指示を表している。また、舞台機構制御装置５０は、機械式操作装置３０から手動指示を受け付ける。
【００４４】
舞台機構制御装置５０は、音声認識装置４０に登録された音声指示、および機械式操作装置３０からの手動指示に基づいて、複数の舞台装置６０＿１〜６０＿ｎの各々の運転を制御するための制御指令を生成する。舞台機構制御装置５０は、生成した制御指令を対応する舞台装置に送信する。舞台装置６０＿１〜６０＿ｎの各々は制御部（図示せず）を含んでいる。各舞台装置の制御部は、舞台機構制御装置５０からの制御指令を受信すると、制御指令に従って舞台装置の各部の動作を制御する。
【００４５】
舞台装置６０＿１〜６０＿ｎの各々は、定期的に自装置の状態を示す情報（以下、「ステータス情報」とも称す。）を舞台機構制御装置５０に送信する。ステータス情報は、自装置の運転状態、例えば、現在動作中であるか停止中であるかを示す情報、自装置の現在位置を示す情報、自装置が正常であるか、あるいは異常が発生したかを示す情報などを含んでいる。各舞台装置は、自装置を識別するための識別情報（装置名または装置番号など）とともにステータス情報を舞台機構制御装置５０に送信してもよい。
【００４６】
［音声操作システムの動作］
次に、本実施の形態に従う音声操作システム１００の動作について説明する。
【００４７】
図３は、操作者、音声操作システム１００および舞台機構の間におけるデータの流れを説明するための図である。
【００４８】
図３を参照して、まず、操作者は、音声式操作装置１０に対して音声指示を入力する（図中のＯＰ１）。音声式操作装置１０は、操作者からの音声指示を受け付けると、音声指示を示す音声データを音声認識装置４０に送信する。
【００４９】
音声認識装置４０は、音声式操作装置１０からの音声指示（音声データ）を受信すると、受信した音声指示を登録する。音声認識装置４０は、音声データである音声指示をコマンドデータに変換する。具体的には、操作者からの音声指示には、操作対象となる舞台装置を特定するために、舞台装置の識別情報が含まれている。音声指示には、さらに、操作対象となる舞台装置の操作内容を示す操作情報が含まれている。音声認識装置４０は、識別情報および操作情報を、舞台機構制御装置５０が実行可能なコマンドコードに変換する。
【００５０】
図４は、音声認識装置４０におけるコード変換の一態様を説明する図である。
図４を参照して、音声認識装置４０は複数のコマンドコードを格納している。複数のコマンドコードの各々は、識別情報または操作情報に関連付けられている。
【００５１】
図４の例では、複数のコマンドコードは、舞台装置の装置名に関連付けられたコード（例えば、コード００１〜１００）と、舞台装置の動作量に関連付けられたコード（例えば、コード１０１〜２００）と、舞台装置の動作方向に関連付けられたコード（例えば、コード２０１〜３００）とを含む。
【００５２】
舞台装置の装置名には、例えば、大道具、照明器具、スクリーン設備、緞帳および音響反射板などの名称またはこれらを昇降させる吊物機構、および床機構の名称などが含まれる。舞台装置の各々に対してコマンドコードを付与することができる。あるいは、複数の舞台装置が、一括操作が求められる２以上の舞台装置を１つのグループとしてグルーピングされている場合には、グループごとにコマンドコードを付与することができる。
【００５３】
舞台装置の動作量には、例えば、舞台装置の移動距離および回転角度などが含まれる。例えば、移動距離および回転角度の各々について、その許容範囲を細分化し、細分化された範囲ごとにコードを付与することができる。また、舞台装置の動作量には、例えば、舞台の床上からの高さ位置その他の舞台装置の目標位置が含まれる。目標位置ごとにコードを付与することができる。
【００５４】
舞台装置の動作方向には、例えば、上下方向、前後方向、左右方向、回転方向などが含まれる。これらの方向の各々にコードを付与することができる。
【００５５】
音声認識装置４０は、図４に示すような、識別情報および操作情報と複数のコマンドコードとの対応関係を示すテーブルを格納している。音声認識装置４０は、音声式操作装置１０から音声指示を受け付けると、当該テーブルを参照して、音声指示をコードに変換する。
【００５６】
ここで、例えば、図５に示すように、操作者からの音声指示が“緞帳を床上２２ｍまで上昇”である場合を想定する。この音声指示は、操作対象の識別情報である「緞帳」（装置名）と、操作対象の動作量である「床上２２ｍ」（目標位置）と、操作対象の動作方向である「上昇」との３つの語句で構成されている。この場合、音声認識装置４０は、テーブルを参照して、上記３つの語句の各々をコマンドコードに変換する。そして、音声認識装置４０は、変換されたコマンドコードを組み合わせることによりコマンドデータを生成する。
【００５７】
図５の例では、「緞帳」という語句はコマンドコード「００１」に変換され、「床上２２ｍ」という語句はコマンドコード「１２２」に変換され、「上昇」という語句はコマンドコード「２１０」に変換される。したがって、“緞帳を床上２２ｍまで上昇”という音声指示は、コマンドコード「００１，１２２，２１０」を含むコマンドデータに変換される。
【００５８】
なお、音声認識装置４０におけるコード変換処理の正確を期すために、音声指示の構文（語順）を予め定めておくことができる。例えば、図５に示したように、識別情報、操作情報（動作量）、操作情報（動作方向）の順番とすることができる。
【００５９】
または、音声指示の最初に、コード変換を開始するための指示を含めることができる。例えば、音声認識装置４０は、“命令”という音声指示を受け付けると、コード変換処理を開始し、“命令”に続いて入力される音声指示をコマンドコードに変換するようにしてもよい。
【００６０】
図３に戻って、舞台機構制御装置５０は、音声認識装置４０からのコマンドデータを受信すると、受信したコマンドデータを表す文字等の情報を生成する。具体的には、舞台機構制御装置５０は、図４のテーブルを参照することにより、受信したコマンドデータを文字等の情報に逆変換する。例えば、図５に示すコマンドデータ（コード「００１，１２２，２１０」）を受信した場合、舞台機構制御装置５０は、当該コマンドデータから「緞帳」、「床上２２ｍ」および「上昇」の３つの語句を抽出し、その抽出した３つの語句を含む文字等の情報を生成する。
【００６１】
舞台機構制御装置５０は、また、複数の舞台装置６０＿１〜６０＿ｎの各々からステータス情報を取得すると、取得したステータス情報のうち、操作対象となる舞台装置のステータス情報を抽出する。このとき、操作対象となる舞台装置に紐付けられた舞台装置のステータス情報を併せて抽出することができる。操作対象となる舞台装置に紐付けられた舞台装置とは、例えば、操作対象の舞台装置との間で可動範囲が重なり合っている舞台装置などである。
【００６２】
舞台機構制御装置５０は、抽出したステータス情報を文字等の情報に変換する。舞台機構制御装置５０は、生成した文字等の情報を表示装置３０に送信する。
【００６３】
表示装置３０は、舞台機構制御装置５０により生成された文字等の情報を表示画面に表示する。図６は、表示装置３０に表示される画面の一例を説明する図である。図６を参照して、表示装置３０の表示画面には、「装置名」、「属性名」、「速度」、「目標位置」、「現在位置」、「動作方向」および「ステータス」の計７項目が一覧表示されている。
【００６４】
「装置名」には、操作対象となる舞台装置の名称が表示される。当該舞台装置に付された装置番号であってもよい。「属性名」には、操作対象となる舞台装置が属するグループを特定する情報が表示される。
【００６５】
「速度」には、操作対象となる舞台装置が動作すべき目標速度が表示される。「目標位置」には、操作対象となる舞台装置の目標位置が表示される。「現在位置」には、操作対象となる舞台装置の現在位置が表示される。
【００６６】
「ステータス」には、操作対象となる舞台装置のステータス情報が表示される。例えば、操作対象となる舞台装置が現在動作中であるか停止中であるかを示す情報、舞台装置が正常か、あるいは異常が発生したかを示す情報などが表示される。「ステータス」にはまた、操作対象となる舞台装置に紐付けられた舞台装置のステータス情報が表示されてもよい。
【００６７】
このように、表示装置３０の表示画面には、操作者の音声入力ＯＰ１に基づいて登録された音声指示の内容と、音声指示で特定された操作対象となる舞台装置のステータス情報とが表示される。操作者は、表示画面を見ることで、自己の音声入力ＯＰ１と、登録された音声指示とが一致しているか否か、すなわち、自己の音声指示が正しく登録されているか否かを確認することができる（図３中のＯＰ２）。
【００６８】
また、操作者は、表示画面を見ることで、操作対象となる舞台装置の現在の状態を把握することができるため、音声指示通りに当該舞台装置を動作させることができるかどうかを確認することができる（図３中のＯＰ２）。
【００６９】
例えば、操作対象となる舞台装置の現在位置について操作者の誤解がある場合、音声指示通りに当該舞台装置を動作させると、操作者の意図とは異なる位置に舞台装置が移動し、操作対象外の舞台装置に支障を及ぼす可能性がある。あるいは、操作対象となる舞台装置が別の操作者からの音声指示に従って動作中である場合には、別の操作者の音声指示と自己の音声指示とがバッティングしてしまう可能性がある。操作者は、表示画面から操作対象となる舞台装置の現在の状態を把握することで、これらの不具合が生じる可能性を予見することができる。
【００７０】
図３に戻って、音声指示が正しく登録されており、かつ、操作対象の舞台装置を音声指示通りに動作させることができることが確認されると（図中のＯＰ２）、操作者は、機械式操作装置３０の操作部に対する入力操作を行なう（図中のＯＰ３）。操作者は、操作部に含まれる複数の機械式の操作ボタンのうち、操作対象となる舞台装置が動作を行なうための動作指令に対応する操作ボタンへの入力操作を行なう。
【００７１】
上記操作ボタンに対する入力操作が行なわれると、機械式操作装置３０は、動作指令を生成して舞台機構制御装置５０に出力する。舞台機構制御装置５０は、機械式操作装置３０からの動作指令に基づいて、操作対象となる舞台装置を制御するための制御指令（電気信号）を生成する。舞台機構制御装置５０は、生成した制御指令を操作対象となる舞台装置に出力する。この結果、音声指示に従って操作対象となる舞台装置が動作する。
【００７２】
なお、操作対象となる舞台装置の動作中、音声指示に反して当該舞台装置を停止させたい場合には、操作者は、機械式操作装置３０にて停止指令に対応する操作ボタンへの入力操作を行なうことができる。
【００７３】
これに対して、登録内容に間違いや漏れがある等、音声指示が誤って登録されていることが確認された場合、もしくは、音声指示が正しく登録されているが、音声指示通りに操作対象となる舞台装置を動作させることができないことが確認された場合には、操作者は、再度音声式操作装置１０に対して音声指示を入力することができる（図中のＯＰ１）。そして、操作者は、新たに入力した音声指示についても、表示装置３０の表示画面を基に、音声指示が正しく登録されているか、および、操作対象となる舞台装置を音声指示通りに動作させることができるか、を再度確認することができる（図中のＯＰ２）。
【００７４】
以上説明したように、本実施の形態に従う音声操作システム１００においては、音声認識装置４０に登録された音声指示は、コマンドデータに変換されて舞台機構制御装置５０に伝送される。その後、このコマンドデータは、舞台機構制御装置５０によって文字等の情報に逆変換されて表示装置２０の表示画面に表示される。すなわち、操作者から与えられた音声指示は、文字等の情報となって操作者にフィードバックされることになる。これにより、操作者は、文字等の情報に基づいて、自己が発した音声指示が音声操作システム１００に正しく登録されているか否かを確認することができる。
【００７５】
また、表示装置２０の表示画面には、音声指示に加えて、操作対象となる舞台装置のステータス情報が文字等の情報として表示されるため、操作者は、操作対象となる舞台装置を音声指示に従って安全に動作させることができるか否かを確認することができる。
【００７６】
さらに、音声指示が正しく登録されており、かつ、操作対象となる舞台装置を安全に動作させることができることが確認された場合、操作者は、機械式操作装置３０を操作することで、操作対象の舞台装置を動作させることができる。すなわち、操作対象となる舞台装置の動作は、操作者からの音声指示ではなく、操作者による手動指示をトリガとして実行される。このようにすると、音声指示が正しく登録されており、かつ、操作対象となる舞台装置の安全動作が保証されている状態で、操作対象となる舞台装置を動作させることができるため、操作対象となる舞台装置の安全かつ正確な動作を実現できる。
【００７７】
また、従来の操作装置では、通常、操作者は、現場から離れた操作室等で現場の指揮者からの指示に従って操作するため、操作対象となる舞台装置の状態を指揮者からの音声指示を通じてしか知ることができない状況が起こっていた。これに対して、本実施の形態に従う音声操作システム１００によれば、指揮者自身が操作者となって舞台装置を操作するため、操作者は操作対象となる舞台装置の状態を視認することができる。さらに、操作者は、機械式操作装置３０において複雑な手動操作が要求されないため、自身の視線を操作対象となる舞台装置に集中させることができる。この結果、操作者は、操作対象となる舞台装置の最新の状態を把握しながら、正確かつ安全に舞台装置を操作することが可能となる。
【００７８】
また、音声操作システム１００によれば、操作者は音声で指示を発し、その指示内容を文字等の情報の形で視覚を通じて確認するため、指示と確認とを混乱せずに並行して行なうことができる。これにより、操作者は、操作を効率良く行なうことができる。
【００７９】
詳細には、音声認識技術には、操作者が音声で指示を発すると、その指示内容を音声で操作者に通知することで、操作者に指示を確認させる方式がある。しかしながら、このような方式では、発音と聴音とが混在するため、指示と確認とを並行して行なうことが困難である。そのため、指示の後に確認を行なうことで、操作者の混乱を回避している。
【００８０】
これに対して、本実施の形態では、上述したように、聴覚を用いて指示を発し、視覚を用いて確認するため、操作者は混乱せずに、指示と確認とを並行して行なうことができる。よって、舞台機構の操作の効率を向上させることができる。
【００８１】
また、音声操作システム１００では、図６に示したように、表示装置３０の表示画面に、操作対象となる舞台装置の識別情報および操作情報を一覧として表示することで、操作者は、登録された音声指示に間違いや漏れがあることを容易に見つけることができる。
【００８２】
さらに、この表示画面の一覧を見ながら操作者が音声指示を発することで、音声指示を当該一覧に倣った構文の形式となるよう、操作者に促すことができる。例えば、図６の一覧に挙げられた複数の項目を、先頭の項目から順に音声入力することができる。これによれば、音声認識装置４０における認識精度を高めることができる。
【００８３】
ただし、本実施の形態による音声操作システム１００において、複数の舞台装置６０＿１〜６０＿ｎのいずれかが故障するなど、音声操作システム１００に異常が発生した場合には、複数の舞台装置６０＿１〜６０＿ｎ全体を緊急停止することが要求される。このような場合には、異常を検知した操作者は、音声式操作装置１０に対して、例えば“緊急停止”という音声指示を入力することができる。緊急停止の音声指示が音声認識装置４０によってコマンドデータに変換されて舞台機構制御装置５０に与えられると、舞台機構制御装置５０は、機械式操作装置３０からの手動指令を待つことなく、迅速に舞台装置６０＿１〜６０＿ｎ全体を停止させることができる。
【００８４】
［音声操作システムにおける音声認識］
以下、図７から図９を参照して、本実施の形態に従う音声操作システム１００における音声認識のための構成例について説明する。図７から図９の各図には、二人の操作者ＯＰＡ，ＯＰＢが互いに独立して音声指示を発する場合が例示されている。操作者は三人以上であってもよい。
【００８５】
図７は、音声操作システム１００に適用し得る音声認識の第１の構成例を説明する図である。図７を参照して、操作者ＯＰＡは、音声式操作装置１０Ａおよび機械式操作装置３０Ａを用いて、音声指示および手動指示をそれぞれ発することができる。操作者ＯＰＢは、音声式操作装置１０Ｂおよび機械式操作装置３０Ｂを用いて、音声指示および手動指示をそれぞれ発することができる。
【００８６】
図７では、音声式操作装置１０Ａ，１０Ｂにそれそれ対応して、音声認識装置４０Ａ，４０Ｂが設けられている。すなわち、音声式操作装置１０と音声認識装置４０とは一対一に対応している。
【００８７】
図８は、音声操作システム１００に適用し得る音声認識の第２の構成例を説明する図である。図８においても、図７と同様に、操作者ＯＰＡは、音声式操作装置１０Ａおよび機械式操作装置３０Ａを用いて、音声指示および手動指示をそれぞれ発することができる。操作者ＯＰＢは、音声式操作装置１０Ｂおよび機械式操作装置３０Ｂを用いて、音声指示および手動指示をそれぞれ発することができる。
【００８８】
図８では、複数の音声式操作装置１０Ａ，１０Ｂに対して１台の音声認識装置４０が設けられている。さらに、各音声式操作装置１０と音声認識装置４０との間には、音声伝送装置１５が設けられている。
【００８９】
第２の構成例では、各音声式操作装置１０に入力された音声指示は音声伝送装置１５を経由して音声認識装置４０に伝送される。舞台機構および遊戯機構などにおいては、通常、複数の操作者は各々がインターカムを所持しており、音声伝送装置を経由して操作者間で音声通信が行なわれる構成となっている。第２の構成例では、各操作者が所持しているインターカムを音声式操作装置１０として利用することができる。すなわち、各操作者は、インターカムを使って他の操作者と通信することができるとともに、音声指示を発することができる。第２の構成例によれば、既存の装置を活用することで、音声操作システム１００を低コストで実現することができる。
【００９０】
図９は、音声操作システム１００に適用し得る音声認識の第３の構成例を説明する図である。図９においても、図７および図８と同様に、操作者ＯＰＡは、音声式操作装置１０Ａおよび機械式操作装置３０Ａを用いて、音声指示および手動指示をそれぞれ発することができる。操作者ＯＰＢは、音声式操作装置１０Ｂおよび機械式操作装置３０Ｂを用いて、音声指示および手動指示をそれぞれ発することができる。また、図８と同様に、各音声式操作装置１０と音声認識装置４０との間には、音声伝送装置１５が設けられている。
【００９１】
図９では、機械式操作装置３０Ａ，３０Ｂにそれぞれ、音声ボタン３５Ａ，３５Ｂが設けられている。音声ボタン３５Ａ，３５Ｂは、音声式操作装置１０に対する音声指示の入力操作を有効に設定するための操作ボタンである。
【００９２】
ここで、音声式操作装置１０Ａ，１０Ｂはインターカムであり、操作者ＯＰＡ，ＯＰＢは音声伝送装置１５を経由して通信することができる状況を想定する。この状況において、操作者ＯＰＢが音声ボタン３５Ｂに対する入力操作を行なうと、音声認識装置４０には、音声式操作装置１０Ｂに対する音声入力を受け付けるための待ち受け状態となる。操作者ＯＰＢが自己の音声式操作装置１０に音声指示を入力すると、当該音声指示は音声伝送装置１５を経由して音声認識装置４０に伝送される。
【００９３】
第３の構成例によれば、各操作者が所持しているインターカムを音声式操作装置１０として利用する構成において、操作者間の通信と音声指示との切り分けが容易となる。
【００９４】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【００９５】
１０，１０Ａ，１０Ｂ  音声式操作装置、１５  音声伝送装置、２０  表示装置、３０，３０Ａ，３０Ｂ  機械式操作装置、３５Ａ，３５Ｂ  音声ボタン、４０  音声認識装置、５０  舞台機構制御装置、６０＿１〜６０＿ｎ  舞台装置、１００  音声操作システム、ＯＰ，ＯＰＡ，ＯＰＢ  操作者。
【図１】
2018097259.tif 000003
【図２】
2018097259.tif 000004
【図３】
2018097259.tif 000005
【図４】
2018097259.tif 000006
【図５】
2018097259.tif 000007
【図６】
2018097259.tif 000008
【図７】
2018097259.tif 000009
【図８】
2018097259.tif 000010
【図９】
2018097259.tif 000011
【手続補正書】
【提出日】平成30年4月2日(2018.4.2)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムであって、
操作者からの音声による操作指示を受け付けるように構成された第１の操作装置と、
前記第１の操作装置に入力された前記音声による操作指示を、コマンドデータに変換するように構成された音声認識装置と、
前記音声認識装置により変換された前記コマンドデータ、および前記複数の機器の状態を示すステータス情報を受けて、前記コマンドデータならびに、操作対象となる機器および前記操作対象となる機器に紐付けられた機器の前記ステータス情報を表す文字情報を生成するように構成された制御装置と、
前記制御装置により生成された前記文字情報を表示するように構成された表示装置と、
前記操作者からの手動による操作指示を受け付けるように構成された第２の操作装置とを備え、
前記制御装置は、さらに、前記第２の操作装置に入力された前記手動による操作指示と前記コマンドデータとに従って、各前記複数の機器を制御するように構成される、音声操作システム。
【請求項２】
前記音声による操作指示は、操作対象となる機器を識別するための識別情報、および前記操作対象となる機器に対する操作内容を示す操作情報を含み、
前記音声認識装置は、前記識別情報および前記操作情報を、前記制御装置が実行可能なコマンドコードで表現された前記コマンドデータに変換するように構成される、請求項１に記載の音声操作システム。
【請求項３】
前記表示装置に表示される前記文字情報は、前記操作対象となる機器を識別するための識別情報、前記操作対象となる機器に対する操作内容を示す操作情報、および前記操作対象となる機器および前記操作対象となる機器に紐付けられた機器の前記ステータス情報を含む、請求項１または２に記載の音声操作システム。
【請求項４】
前記第２の操作装置は、機械式の操作部を含み、前記操作部に対する前記手動による操作指示を受け付けるように構成される、請求項１から３のいずれか１項に記載の音声操作システム。
【請求項５】
前記第１の操作装置は、前記コマンドデータが停止指示である場合には、前記手動による操作を待たずに、前記コマンドデータに従って前記複数の機器を停止させる、請求項１から４のいずれか１項に記載の音声操作システム。
【請求項６】
前記第１の操作装置は、複数の操作者にそれぞれ対応して設けられ、
複数の前記第１の操作装置の各々に入力された前記音声による操作指示を受け付けて前記音声認識装置に伝送するように構成された音声伝送装置をさらに備える、請求項１から５のいずれか１項に記載の音声操作システム。
【請求項７】
前記第２の操作装置は、複数の操作者にそれぞれ対応して設けられ、
複数の前記第２の操作装置の各々は、前記第１の操作装置に対する前記音声による操作指示の入力操作を有効に設定するように構成される、請求項６に記載の音声操作システム。
【請求項８】
舞台機構、スタジオ機構または遊戯機構に含まれる複数の機器を音声で操作するための音声操作システムであって、
操作者からの音声による操作指示を受け付けるように構成された第１の操作装置と、
前記第１の操作装置に入力された前記音声による操作指示を、コマンドデータに変換するように構成された音声認識装置と、
前記音声認識装置により変換された前記コマンドデータ、および前記複数の機器の状態を示すステータス情報を受けて、前記コマンドデータおよび前記ステータス情報を表す文字情報を生成するように構成された制御装置と、
前記制御装置により生成された前記文字情報を表示するように構成された表示装置と、
前記操作者からの手動による操作指示を受け付けるように構成された第２の操作装置とを備え、
前記制御装置は、さらに、前記第２の操作装置に入力された前記手動による操作指示と前記コマンドデータとに従って、各前記複数の機器を制御するように構成され、
前記第１の操作装置は、複数の操作者にそれぞれ対応して設けられ、
複数の前記第１の操作装置の各々に入力された前記音声による操作指示を受け付けて前記音声認識装置に伝送するように構成された音声伝送装置をさらに備え、
前記第２の操作装置は、前記複数の操作者にそれぞれ対応して設けられ、
複数の前記第２の操作装置の各々は、前記第１の操作装置に対する前記音声による操作指示の入力操作を有効に設定するように構成される、音声操作システム。