(57)【要約】【課題】専用のマイクを設けることなく、会話をすることが容易なコンピュータシステム、Ｗｅｂ会議音声補助方法及びプログラムを提供することを目的とする。【解決手段】Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムは、前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続し、前記ユーザ端末のマイクから音を取得し、前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音とを合成し、前記合成した合成データを出力する。【選択図】図１
2019003357.tif 000002
【特許請求の範囲】
【請求項１】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムであって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続する接続手段と、
前記ユーザ端末のマイクから音を取得する取得手段と、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音とを合成する合成手段と、
前記合成した合成データを出力する出力手段と、
を備えることを特徴とするコンピュータシステム。
【請求項２】
前記接続手段は、接続を識別する近距離通信で、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項３】
前記接続手段は、接続を識別する２次元コードを利用して、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項４】
前記接続手段は、接続を識別するＰＩＮコードを入力することで、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項５】
前記合成手段は、前記Ｗｅｂ会議の音声データと、前記取得した音とを合成する際に、其々取得した時間を補正することで合成を行う、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項６】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用し、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムが実行するＷｅｂ会議音声補助方法であって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続するステップと、
前記ユーザ端末のマイクから音を取得するステップと、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音とを合成するステップと、
前記合成した合成データを出力するステップと、
を備えることを特徴とするＷｅｂ会議音声補助方法。
【請求項７】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用し、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムに、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続するステップ、
前記ユーザ端末のマイクから音を取得するステップ、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音とを合成するステップ、
前記合成した合成データを出力するステップ、
を実行させるためのコンピュータ読み取り可能なプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、このＷｅｂ会議システムの音声補助を行うコンピュータシステム、Ｗｅｂ会議音声補助方法及びプログラムに関する。
【背景技術】
【０００２】
近年、ディスプレイ、カメラ、マイク及びスピーカを備えるＷｅｂ会議システムにより、離れた場所にいる人物同士が、公衆回線網を介したＷｅｂ会議を行うようになっている。このようなＷｅｂ会議システムにおいて、参加者は、このＷｅｂ会議システムに使用するための専用のマイクにより音声を入力する。【０００３】
このようなＷｅｂ会議システムにおける音声入力方法の構成として、カメラの近傍に複数のマイクを設け、音源の方向を特定することにより、発言者を特定することが行われている（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１６−１００１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１の構成では、専用のマイクを設ける必要性や、発言者が必ずしも特定できないことから会話が困難になってしまうおそれがあった。【０００６】
本発明は、専用のマイクを設けることなく、会話をすることが容易なコンピュータシステム、Ｗｅｂ会議音声補助方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明では、以下のような解決手段を提供する。【０００８】
本発明は、Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムであって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続する接続手段と、
前記ユーザ端末のマイクから音を取得する取得手段と、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音とを合成する合成手段と、
前記合成した合成データを出力する出力手段と、
を備えることを特徴とするコンピュータシステムを提供する。【０００９】
本発明によれば、Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムは、前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続し、前記ユーザ端末のマイクから音を取得し、前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音とを合成し、前記合成した合成データを出力する。【００１０】
本発明は、コンピュータシステムのカテゴリであるが、方法及びプログラム等の他のカテゴリにおいても、そのカテゴリに応じた同様の作用・効果を発揮する。
【発明の効果】
【００１１】
本発明によれば、専用のマイクを設けることなく、会話をすることが容易なコンピュータシステム、Ｗｅｂ会議音声補助方法及びプログラムを提供することが可能となる。
【図面の簡単な説明】
【００１２】
【図１】図１は、Ｗｅｂ会議音声補助システム１の概要を示す図である。
【図２】図２は、Ｗｅｂ会議音声補助システム１の全体構成図である。
【図３】図３は、コンピュータ１０、ユーザ端末１００の機能ブロック図である。
【図４】図４は、コンピュータ１０、ユーザ端末１００が実行する接続処理を示すフローチャートである。
【図５】図５は、コンピュータ１０、ユーザ端末１００が実行する音声補助処理を示すフローチャートである。
【図６】端末側音声データと、ユーザ音声データとを比較した状態を模式的に示した一例である。
【発明を実施するための形態】
【００１３】
以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これらはあくまでも一例であって、本発明の技術的範囲はこれらに限られるものではない。
【００１４】
［Ｗｅｂ会議音声補助システム１の概要］
本発明の好適な実施形態の概要について、図１に基づいて説明する。図１は、本発明の好適な実施形態であるＷｅｂ会議音声補助システム１の概要を説明するための図である。Ｗｅｂ会議音声補助システム１は、コンピュータ１０、ユーザ端末１００から構成され、Ｗｅｂ会議に使用している端末であるコンピュータ１０以外のユーザ端末１００のマイクを利用して、このＷｅｂ会議システムの音声補助を行うコンピュータシステムである。
【００１５】
なお、図１において、コンピュータ１０、ユーザ端末１００の数は、適宜変更可能である。また、コンピュータ１０、ユーザ端末１００は、実在する装置に限らず、仮想的な装置であってもよい。また、後述する各処理は、コンピュータ１０、ユーザ端末１００のいずれか又は双方の組み合わせにより実現されてもよい。また、コンピュータ１０とユーザ端末１００とが、サーバ機能を有したコンピュータを介して接続されていてもよい。
【００１６】
コンピュータ１０は、Ｗｅｂ会議システムを構成するコンピュータ装置である。このコンピュータ１０には、カメラ、マイク、ディスプレイ、スピーカ等のＷｅｂ会議に必要な各種デバイスを有する。コンピュータ１０は、ユーザ端末１００とデータ通信可能に接続される。コンピュータ１０とユーザ端末１００とは、近距離通信、２次元コードの利用又はＰＩＮ（Ｐｅｒｓｏｎａｌ  ｉｄｅｎｔｉｆｉｃａｔｉｏｎ  ｎｕｍｂｅｒ）コードの入力により、データ通信可能な接続が実行される。
【００１７】
ユーザ端末１００は、コンピュータ１０とデータ通信可能に接続される端末装置である。ユーザ端末１００は、Ｗｅｂ会議の参加者が所持する端末装置である。ユーザ端末１００は、例えば、携帯電話、携帯情報端末、タブレット端末、パーソナルコンピュータに加え、ネットブック端末、スレート端末、電子書籍端末、携帯型音楽プレーヤ等の電化製品や、スマートグラス、ヘッドマウントディスプレイ等のウェアラブル端末や、その他の物品である。
【００１８】
はじめに、ユーザ端末１００は、コンピュータ１０とデータ通信可能に接続する（ステップＳ０１）。ユーザ端末１００は、接続を識別する近距離通信（Ｂｌｕｅｔｏｏｔｈによるペアリング）を実行することにより、コンピュータ１０とデータ通信可能に接続する。また、ユーザ端末１００は、接続を識別する２次元コードを利用して、コンピュータ１０とデータ通信可能に接続する（コンピュータ１０は、接続用の２次元コードを表示し、ユーザ端末１００がこれを読みとることにより接続する）。ユーザ端末１００は、接続を識別するＰＩＮコードを入力することで、コンピュータ１０とデータ通信可能に接続する（コンピュータ１０は、接続用のＰＩＮコードを表示し、ユーザ端末１００がこのＰＩＮコードの入力を受け付けることにより接続する）。
【００１９】
コンピュータ１０は、Ｗｅｂ会議を開始する（ステップＳ０２）。コンピュータ１０は、公衆回線網等を介して、図示していない遠隔地に存在するＷｅｂ会議システムとＷｅｂ会議データ（参加者を撮影した動画や静止画等の画像データ及び音声データ）を送受信する。
【００２０】
ユーザ端末１００は、自身が有するマイクから、ユーザの音声を取得する（ステップＳ０３）。ユーザは、マイクに向かって自身の音声を発声することにより、ユーザ端末１００に自身の音声を入力する。ユーザ端末１００は、この入力されたユーザの音声を、取得する。
【００２１】
ユーザ端末１００は、ユーザの音声を示す端末側音声データを、コンピュータ１０に送信する（ステップＳ０４）。
【００２２】
コンピュータ１０は、端末側音声データを受信するとともに、Ｗｅｂ会議データを取得する（ステップＳ０５）。このとき、コンピュータ１０は、Ｗｅｂ会議に参加しているユーザの全身や顔の静止画や動画等のユーザ画像を撮影するとともに、ユーザの音声を取得し、これらをＷｅｂ会議データとして取得する。コンピュータ１０が取得する音声は、ユーザ端末１００が取得した音声との間に、若干の時差が存在する。これは、ユーザからの距離がユーザ端末１００とコンピュータ１０との間が離れていることから発生する時差である。
【００２３】
コンピュータ１０は、自身が取得したＷｅｂ会議データと、端末側音声データとを合成し、合成後Ｗｅｂ会議データを生成する（ステップＳ０６）。コンピュータ１０は、自身が取得したＷｅｂ会議データと、端末側音声データとを合成する際、其々取得した時間を補正することにより、合成後Ｗｅｂ会議データを生成する。コンピュータ１０は、Ｗｅｂ会議データに含まれる音声データの振幅と、端末側音声データの振幅とを比較するとともに、この振幅間の時間差に基づいて、同じユーザが発した音声していた場合、複数の音声データを一の音声データとして合成することにより、合成後Ｗｅｂ会議データを生成する。
【００２４】
コンピュータ１０は、合成後Ｗｅｂ会議データを、遠隔地に存在する接続中の図示していないＷｅｂ会議システムに出力する（ステップＳ０７）。
【００２５】
以上が、Ｗｅｂ会議音声補助システム１の概要である。
【００２６】
［Ｗｅｂ会議音声補助システム１のシステム構成］
図２に基づいて、本発明の好適な実施形態であるＷｅｂ会議音声補助システム１のシステム構成について説明する。図２は、本発明の好適な実施形態であるＷｅｂ会議音声補助システム１のシステム構成を示す図である。Ｗｅｂ会議音声補助システム１は、コンピュータ１０、ユーザ端末１００から構成され、Ｗｅｂ会議に使用している端末（コンピュータ１０）以外のユーザ端末１００のマイクを利用して、Ｗｅｂ会議システムの音声補助を行うコンピュータシステムである。
【００２７】
なお、Ｗｅｂ会議音声補助システム１を構成する各装置類の数及びその種類は、適宜変更可能である。また、Ｗｅｂ会議音声補助システム１は、実在する装置に限らず、仮想的な装置類により実現されてもよい。また、後述する各処理は、Ｗｅｂ会議音声補助システム１を構成する各装置類のいずれか又は複数の組み合わせにより実現されてもよい。
【００２８】
コンピュータ１０は、後述の機能を備えた上述したコンピュータ装置である。
【００２９】
ユーザ端末１００は、後述の機能を備えた上述した端末装置である。
【００３０】
［各機能の説明］
図３に基づいて、本発明の好適な実施形態であるＷｅｂ会議音声補助システム１の機能について説明する。図３は、コンピュータ１０、ユーザ端末１００の機能ブロック図を示す図である。
【００３１】
コンピュータ１０は、制御部１１として、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）等を備え、通信部１２として、他の機器と通信可能にするためのデバイス、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉ―Ｆｉ（Ｗｉｒｅｌｅｓｓ―Ｆｉｄｅｌｉｔｙ）対応デバイスや近距離通信デバイス等を備える。また、コンピュータ１０は、記憶部１３として、ハードディスクや半導体メモリ、記録媒体、メモリカード等によるデータのストレージ部を備える。また、コンピュータ１０は、処理部１４として、各種計算、処理等を実行する各種デバイス等を備える。
【００３２】
コンピュータ１０において、制御部１１が所定のプログラムを読み込むことにより、通信部１２と協働して、機器接続モジュール２０、Ｗｅｂ会議モジュール２１、音声受信モジュール２２、合成データ出力モジュール２３を実現する。また、コンピュータ１０において、制御部１１が所定のプログラムを読み取ることにより、記憶部１３と協働して、記憶モジュール３０を実現する。また、コンピュータ１０において、制御部１１が所定のプログラムを読み込むことにより、処理部１４と協働して、表示モジュール４０、Ｗｅｂ会議データ取得モジュール４１、音声比較モジュール４２、音声合成モジュール４３を実現する。
【００３３】
ユーザ端末１００は、コンピュータ１０と同様に、制御部１１０として、ＣＰＵ、ＲＡＭ、ＲＯＭ等を備え、通信部１２０として、他の機器と通信可能にするためのデバイスを備える。また、ユーザ端末１００は、入出力部１４０として、制御部１１０で制御したデータや画像を出力表示する表示部や、ユーザからの入力を受け付けるタッチパネルやキーボード、マウス等の入力部や、ユーザからの音声を集音するマイク等の収音装置、音声を報知するスピーカ等の放音装置等の各種デバイスを備える。
【００３４】
ユーザ端末１００において、制御部１１０が所定のプログラムを読み込むことにより、通信部１２０と協働して、機器登録モジュール１５０、音声送信モジュール１５１を実現する。また、ユーザ端末１００において、制御部１１０が所定のプログラムを読み込むことにより、入出力部１４０と協働して、端末側音声取得モジュール１７０を実現する。
【００３５】
［接続処理］
図４に基づいて、Ｗｅｂ会議音声補助システム１が実行する接続処理について説明する。図４は、コンピュータ１０、ユーザ端末１００が実行する接続処理のフローチャートを示す図である。上述した各装置のモジュールが実行する処理について、本処理に併せて説明する。
【００３６】
機器登録モジュール１５０は、コンピュータ１０とデータ通信可能に接続するための機器登録を受け付け、コンピュータ１０に登録要求を送信する（ステップＳ１０）。ステップＳ１０において、機器登録モジュール１５０が実行する処理について、以下に説明する。
【００３７】
機器登録モジュール１５０は、接続を識別する近距離通信により、コンピュータ１０に登録要求を送信する。機器登録モジュール１５０は、コンピュータ１０とＢｌｕｅｔｏｏｔｈペアリングを実行することにより、登録要求を送信する。
【００３８】
また、機器登録モジュール１５０は、接続を識別する２次元コードを利用して、コンピュータ１０に登録要求を送信する。機器接続モジュール２０は、接続に関する情報を格納した２次元コードを生成し、表示モジュール４０は、この生成した２次元コードを表示する。機器登録モジュール１５０は、この２次元コードを読み取ることにより、登録要求を送信する。
【００３９】
また、機器登録モジュール１５０は、接続を識別するＰＩＮコードの入力を受け付けることにより、登録要求を送信する。機器接続モジュール２０は、接続に必要なＰＩＮコードを生成し、表示モジュール４０は、この生成したＰＩＮコードを表示する。機器登録モジュール１５０は、このＰＩＮコードの入力を受け付けることにより、コンピュータ１０に登録要求を送信する。
【００４０】
なお、コンピュータ１０とユーザ端末１００とは、上述した構成以外の方法により、データ通信可能に接続するための登録要求を受け付けてもよい。
【００４１】
機器接続モジュール２０は、登録要求を受信する。機器接続モジュール２０は、登録要求の送信元のユーザ端末１００を、自身とデータ通信可能に登録する（ステップＳ１１）。
【００４２】
記憶モジュール３０は、機器登録を受け付けたユーザ端末１００の識別子を記憶する（ステップＳ１１）。ステップＳ１１において、記憶モジュール３０は、ユーザ端末１００の識別子として、ＭＡＣアドレス、電話番号、機器番号等のユーザ端末１００を一意に特定可能な情報を識別子として記憶する。
【００４３】
なお、Ｗｅｂ会議音声補助システム１において、複数のユーザ端末１００が存在する場合、各ユーザ端末１００において、これらの処理が行われる。
【００４４】
以上が、接続処理である。
【００４５】
［音声補助処理］
図５に基づいて、Ｗｅｂ会議音声補助システム１が実行する音声補助処理について説明する。図５は、コンピュータ１０、ユーザ端末１００が実行する音声補助処理のフローチャートを示す図である。上述した各装置のモジュールが実行する処理について、本処理に併せて説明する。
【００４６】
はじめに、Ｗｅｂ会議モジュール２１は、図示していない、遠隔地に存在するＷｅｂ会議システムとＷｅｂ会議を開始する（ステップＳ２０）。Ｗｅｂ会議モジュール２１は、参加者の動画や静止画等の撮影した画像データと、参加者の音声データとを遠隔地に存在するＷｅｂ会議システムに送信するとともに、遠隔地に存在するＷｅｂ会議システムの画像データと、音声データとを受信する。
【００４７】
端末側音声取得モジュール１７０は、ユーザからの音声を取得する（ステップＳ２１）。ステップＳ２１において、音声取得モジュール１７０は、マイクから、ユーザの音声を取得する。
【００４８】
音声送信モジュール１５１は、取得した音声を、端末側音声データとして、コンピュータ１０に送信する（ステップＳ２２）。
【００４９】
音声受信モジュール２２は、端末側音声データを受信する。Ｗｅｂ会議データ取得モジュール４１は、Ｗｅｂ会議データを取得する（ステップＳ２３）。ステップＳ２３において、Ｗｅｂ会議データ取得モジュール４１が取得するＷｅｂ会議データは、Ｗｅｂ会議に参加しているユーザの全身や顔の静止画や動画等のユーザ画像を撮影したユーザ画像データと、このユーザの音声を集音したユーザ音声データとを合わせたものである。ユーザからの音声は、上述したステップＳ２１における端末側音声取得モジュール１７０が取得する音声と略同様の音声である。ステップＳ２１乃至Ｓ２３の処理は、一のユーザが、音声を発声した際、ユーザ端末１００のマイクとコンピュータ１０のマイクとが、其々音声を取得することを意味する処理でもある。
【００５０】
音声比較モジュール４２は、受信した端末側音声データと、取得したＷｅｂ会議データに含まれるユーザ音声データとを比較する（ステップＳ２４）。ステップＳ２４において、音声比較モジュール４２は、端末側音声データと、ユーザ音声データとの其々のユーザの音声に該当する波形パターンを抽出する。音声比較モジュール４２は、この波形パターンのうち、振幅の大きさは異なるものの、類似した形状を有する波形パターンの箇所を、同一ユーザの音声として認識し、振幅が大きい方を、出力する音声データとして判断する。
【００５１】
図６に基づいて、音声比較モジュール４２が実行する処理について説明する。図６は、端末側音声データと、ユーザ音声データとを比較した状態を模式的に示した一例である。
図６において、ユーザ２００は、ユーザ端末１００に向かって音声を発声するとともに、コンピュータ１０もユーザ端末１００に向かって発生した音声を取得する。ユーザ端末１００は、このときの音声を、端末側音声データとして、コンピュータ１０に送信する。コンピュータ１０は、端末側音声データを受信し、音声比較モジュール４２は、この端末側音声データと、ユーザ音声データとを比較する。
【００５２】
音声比較モジュール４２は、端末側音声データから、振幅２１０を抽出する。また、音声比較モジュール４２は、ユーザ音声データから、振幅２２０を抽出する。振幅２１０と振幅２２０とは、その大きさが異なるものの、波形パターンは、略同様であることから、振幅２１０と振幅２２０とは、同一のユーザ２００が発声した音声であると判断する。このとき、振幅２１０と振幅２２０とには、同一のユーザ２００が発声した音声であるが、ユーザ端末１００に音声が到達する時間と、コンピュータ１０に音声が到達する時間との間に時間差Ｓが存在する。
【００５３】
音声合成モジュール４３は、Ｗｅｂ会議データと、端末側音声データとを合成する（ステップＳ２５）。ステップＳ２５において、音声合成モジュール４３は、Ｗｅｂ会議データに含まれるユーザ音声データと、端末側音声データとを合成する。このとき、音声合成モジュール４３は、ユーザ音声データと、端末側音声データとの間に存在する時間差Ｓを補正し、合成する。例えば、音声合成モジュール４３は、端末側音声データ又はユーザ音声データのうち、所定間隔（例えば、１秒間隔や会話の切れ目まで）で、振幅が大きい方の音声を選択し、振幅が小さい方の音声を削除する。これは、音声合成モジュール４３は、所定間隔に、時間差Ｓを補正することにより（例えば、１秒間隔である場合、１秒間隔に時間差Ｓを加算した間隔を所定間隔とする。また、会話の切れ目までである場合、会話の切れ目に時間差Ｓを加算したタイミングを所定間隔とする）、振幅が大きい方の音声を選択し、振幅が小さい方の音声を削除する。このようにすることにより、例えば、１０秒程度の音声で、ユーザ２００が、ユーザ端末１００を遠ざかり、コンピュータ１０の近くへ移動する際に、最初は、ユーザ端末１００の音声を取得し、振幅を比較し、ユーザ端末１００の音声の振幅が大きいため、ユーザ端末１００の音声を選択する。その後、コンピュータ１０が取得した音声の振幅が、ユーザ端末１００の音声の振幅よりも大きくなるため、コンピュータ１０が取得した音声を選択する。このように、結果として、コンピュータ１０が取得する音声とユーザ端末１００が取得する音声とが合成される。
【００５４】
合成データ出力モジュール２３は、Ｗｅｂ会議データと、端末側音声データとを合成した合成後Ｗｅｂ会議データを、遠隔地に存在する接続中の図示していないＷｅｂ会議システムに出力する（ステップＳ２６）。
【００５５】
なお、上述した処理において、Ｗｅｂ会議データと、端末側音声データとを合成する処理は、コンピュータ１０に限らず、ユーザ端末１００が実行してもよい。また、Ｗｅｂ会議システムが、図示してないサーバ機能を有したコンピュータを介して行われる場合、このコンピュータが実行してもよい。
【００５６】
以上が、音声補助処理である。
【００５７】
上述した手段、機能は、コンピュータ（ＣＰＵ、情報処理装置、各種端末を含む）が、所定のプログラムを読み込んで、実行することによって実現される。プログラムは、例えば、コンピュータからネットワーク経由で提供される（ＳａａＳ：ソフトウェア・アズ・ア・サービス）形態で提供される。また、プログラムは、例えば、フレキシブルディスク、ＣＤ（ＣＤ−ＲＯＭなど）、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭなど）等のコンピュータ読取可能な記録媒体に記録された形態で提供される。この場合、コンピュータはその記録媒体からプログラムを読み取って内部記憶装置又は外部記憶装置に転送し記憶して実行する。また、そのプログラムを、例えば、磁気ディスク、光ディスク、光磁気ディスク等の記憶装置（記録媒体）に予め記録しておき、その記憶装置から通信回線を介してコンピュータに提供するようにしてもよい。
【００５８】
以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。
【符号の説明】
【００５９】
１  Ｗｅｂ会議音声補助システム、１０  コンピュータ、１００  ユーザ端末
【図１】
2019003357.tif 000003
【図２】
2019003357.tif 000004
【図３】
2019003357.tif 000005
【図４】
2019003357.tif 000006
【図５】
2019003357.tif 000007
【図６】
2019003357.tif 000008
【手続補正書】
【提出日】平成30年1月29日(2018.1.29)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムであって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続する接続手段と、
前記ユーザ端末のマイクから音を取得する取得手段と、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、一方の振幅の音声を選択し、他方の振幅の音声を削除することにより合成する合成手段と、
前記合成した合成データを出力する出力手段と、
を備えることを特徴とするコンピュータシステム。
【請求項２】
前記接続手段は、接続を識別する近距離通信で、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項３】
前記接続手段は、接続を識別する２次元コードを利用して、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項４】
前記接続手段は、接続を識別するＰＩＮコードを入力することで、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項５】
前記合成手段は、前記Ｗｅｂ会議の音声データと、前記取得した音とを合成する際に、其々取得した時間を補正することで合成を行う、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項６】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用し、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムが実行するＷｅｂ会議音声補助方法であって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続するステップと、
前記ユーザ端末のマイクから音を取得するステップと、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、一方の振幅の音声を選択し、他方の振幅の音声を削除することにより合成するステップと、
前記合成した合成データを出力するステップと、
を備えることを特徴とするＷｅｂ会議音声補助方法。
【請求項７】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用し、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムに、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続するステップ、
前記ユーザ端末のマイクから音を取得するステップ、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、一方の振幅の音声を選択し、他方の振幅の音声を削除することにより合成するステップ、
前記合成した合成データを出力するステップ、
を実行させるためのコンピュータ読み取り可能なプログラム。
【手続補正書】
【提出日】令和2年1月7日(2020.1.7)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムであって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続する接続手段と、
前記ユーザ端末のマイクから音を取得する取得手段と、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、所定間隔で、振幅が大きい方の振幅の音声を選択し、振幅が小さい方の振幅の音声を削除することにより合成する合成手段と、
前記合成した合成データを出力する出力手段と、
を備えることを特徴とするコンピュータシステム。
【請求項２】
前記接続手段は、接続を識別する近距離通信で、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項３】
前記接続手段は、接続を識別する２次元コードを利用して、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項４】
前記接続手段は、接続を識別するＰＩＮコードを入力することで、前記Ｗｅｂ会議システムと、前記ユーザ端末とを接続する、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項５】
前記合成手段は、前記Ｗｅｂ会議の音声データと、前記取得した音とを合成する際に、其々取得した時間を補正することで合成を行う、
ことを特徴とする請求項１に記載のコンピュータシステム。
【請求項６】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用し、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムが実行するＷｅｂ会議音声補助方法であって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続するステップと、
前記ユーザ端末のマイクから音を取得するステップと、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、所定間隔で、振幅が大きい方の振幅の音声を選択し、振幅が小さい方の振幅の音声を削除することにより合成するステップと、
前記合成した合成データを出力するステップと、
を備えることを特徴とするＷｅｂ会議音声補助方法。
【請求項７】
Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用し、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムに、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続するステップ、
前記ユーザ端末のマイクから音を取得するステップ、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、所定間隔で、振幅が大きい方の振幅の音声を選択し、振幅が小さい方の振幅の音声を削除することにより合成するステップ、
前記合成した合成データを出力するステップ、
を実行させるためのコンピュータ読み取り可能なプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明は、Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムであって、
前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続する接続手段と、
前記ユーザ端末のマイクから音を取得する取得手段と、
前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、所定間隔で、振幅が大きい方の振幅の音声を選択し、振幅が小さい方の振幅の音声を削除することにより合成する合成手段と、
前記合成した合成データを出力する出力手段と、
を備えることを特徴とするコンピュータシステムを提供する。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明によれば、Ｗｅｂ会議に使用している端末以外のユーザ端末のマイクを利用して、当該Ｗｅｂ会議システムの音声補助を行うコンピュータシステムは、前記Ｗｅｂ会議システムと、前記ユーザ端末とをデータ通信可能に接続し、前記ユーザ端末のマイクから音を取得し、前記Ｗｅｂ会議システムのＷｅｂ会議データと、前記取得した音との振幅を比較し、所定間隔で、振幅が大きい方の振幅の音声を選択し、振幅が小さい方の振幅の音声を削除することにより合成し、前記合成した合成データを出力する。
【国際調査報告】
2019003357.tif 000009
2019003357.tif 000010
2019003357.tif 000011
2019003357.tif 000012