(57)【要約】【課題】ライブのマルチパーティ通信会議の参加者の活動、または記録された出力に関連する、得られた話し手を示す表示の制御されたアプリケーションを可能にするためのシステムを提供する。【解決手段】システムは、会議ブリッジングスイッチ、ソフトウェア、またはその組合せをホストする第１のノードと、会議ブリッジングスイッチ、ソフトウェア、またはその組合せの少なくとも１つの出力信号ポートへのデータアクセスを有する第２のノードと、第１もしくは第２のノードに全体的に分散されているか、または第１および第２のノードに部分的に分散されたソフトウェアアプリケーションとを含む。このアプリケーションは、会議参加者のうちの１人、選択された一部、または組合せ、非参加の第三者、および１つまたは複数の記憶設備に転送される、通信、データファイル、またはデータストリームを出力するように、話し手を示す表示を適用するために使用される。【選択図】図３
2007189671.tif 000002
【特許請求の範囲】
【請求項１】
ライブのマルチパーティ通信会議の参加者の活動またはその記録された出力に関連する、得られた話し手を示す表示の制御されたアプリケーションを可能にするためのシステムであって、
複数の会議入力チャネルを有する会議ブリッジングスイッチ、ソフトウェア、または会議ブリッジングスイッチおよびソフトウェアの組合せをホストする第１のノードと、
会議ブリッジングスイッチ、ソフトウェア、または会議ブリッジングスイッチおよびソフトウェアの組合せの少なくとも１つの出力信号ポートへのデータアクセスを有する第２のノードと、
第１もしくは第２のノードに全体的に分散されているか、または第１および第２のノードに部分的に分散されたソフトウェアアプリケーションとを含み、ソフトウェアアプリケーションが、会議参加者のうちの１人、選択された一部、または組合せ、非参加の第三者、および１つまたは複数の記憶設備に転送される、通信、データファイル、またはデータストリームを出力するように、話し手を示す表示を適用するために使用されるシステム。
【請求項２】
話し手を示す表示が、識別情報に加えて、識別情報に関連するプレゼンス情報またはそのロケータを含む、請求項１に記載のシステム。
【請求項３】
複数の会議入力チャネルを有する会議ブリッジングスイッチ、ソフトウェア、または会議ブリッジングスイッチおよびソフトウェアの組合せによって可能にされるマルチパーティ会議セッションから、ライブまたは記録されたスピーチの注釈を付けられたテキストの文字起こしをレンダリングし、かつ文字起こしされたテキストファイルに、話し手を示すデータを用いて注釈を付けるための、音声コンテントの文字起こしおよび注釈システムであって、
音声コンテントを受信するための入力ポートと、
会議セッションの実行時間に関連する、チャネル活動信号における変化の時間オフセットを記録するための時間同期化モジュールと、
チャネル対話し手関係モジュールと、
テキスト注釈エンジンとを含み、
文字に起こされたテキストファイルが、信号変化の間に存在する時間間隔の範囲内で見つけ出される、コンテントのうちの聞き取れる言葉、フレーズ、または区分に関して、時間内の信号変化を示す表示にしたがって注釈を付けられることを特徴とするシステム。
【請求項４】
話し手を示す表示は、識別情報に加えて、識別情報に関連するプレゼンス情報またはそのロケータを含む、請求項３に記載のシステム。
【請求項５】
１つまたは複数の会議セッションの期間に記録された、識別された参加者の活動から、全体的にまたは部分的に得られたより高度なプレゼンス情報またはそのロケータをさらに含む、請求項４に記載のシステム。
【請求項６】
複数の会議入力チャネルを有する会議ブリッジングスイッチ、ソフトウェア、またはその組合せによって可能にされるマルチパーティ会議セッションから、ライブまたは記録されたスピーチを文字に起こしかつ注釈を付けるための方法であって、誰が話しているのかを示す注釈が、
（ａ）テキストの文字起こしのためにスピーチファイルを受信するステップと、
（ｂ）スピーチファイルに時間的に関連するチャネル活動信号にアクセスするステップと、
（ｃ）ドキュメント内の発生時間にしたがって挿入されるフィールドまたはプレースホルダを、テキストの文字起こしの間にドキュメントに挿入するステップと、
（ｄ）チャネル対話し手関係データを各フィールドまたはプレースホルダのために取り出すステップと、
（ｅ）適切なフィールドに注釈を挿入するステップとを含む、方法。
【請求項７】
ステップ（ｅ）で、注釈は、話し手についてのプレゼンス情報、またはそのロケータをさらに含み、プレゼンス情報が、連絡先情報を含むが、連絡先情報に限定されるわけではない、請求項６に記載の方法。
【請求項８】
ステップ（ｅ）で、注釈は、話し手についてのより高度なプレゼンス情報、またはそのロケータをさらに含み、より高度なプレゼンス情報が、１つの会議または２つ以上の会議期間の話し手の活動に関連する統計値を含むが、統計値に限定されるわけではない、請求項７に記載の方法。
【請求項９】
マルチパーティ会議の記録されたコンテントに関連する情報を求めて、会議アーカイブを検索するためのシステムであって、話し手の識別およびその他の情報、またはそのロケータを用いて時間的に注釈を付けられた記録が、
検索エンジンとインタフェースとをホストする第１のノードと、
ネットワークを介して第１のノードにアクセスすることが可能な第２のノードと、
適切なマルチメディア音声ファイルまたは音声／映像ファイルにリンクされているか、またはリンクされていない、文字起こしされたテキストファイルの形態をとる会議記録を含む、少なくとも１つのレポジトリとを含み、
検索される情報が、入力としてコンテントのキーワードまたはフレーズを使用する話し手の識別と、入力として話し手識別パラメータとコンテントキーワードまたはフレーズとの組合せを使用する話し手によって言われた反復コンテントのインスタンスと、入力として話し手識別を使用する統計値を含むより高度なプレゼンス情報とを含んでよいことを特徴とするシステム。
【請求項１０】
検索される情報が、結果に関連する追加情報へのさらなる双方向リンクによってさらに最適化された、１つまたは複数の対話結果のリストとして返信される、請求項９に記載のシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、アナログおよびデジタル通信分野に含まれ、詳細には、通信会議中に誰が話しているのかについてのデータを使用するシステムおよび方法に関する。本発明は、業務上使用する、ライブまたは記録された会議参加者のリアルタイムの識別を向上させる。
【背景技術】
【０００２】
電話通信分野は、ソフトウェア製品とハードウェア製品との両方を含め、改良された通信アプリケーションの品質および有用性に関して、大きな発展および改良をこれまでに成し遂げてきており、また成し遂げ続けている。
【０００３】
そうした発展の１つは、様々なネットワーク場所から、および場合によっては異種のネットワークセグメントから、ネットワークに接続された様々なデバイスを利用する参加者を含む、マルチパーティ通信会議を可能にするために開発された会議ブリッジが出現したことである。参加者の入力信号の集合物であってもよい出力信号が、各参加者に送り返されるように、１つまたは複数の参加者の入力を混合することによって、複数の入力／出力チャネルを利用して会議参加者を互いに橋渡しするために、当技術分野では会議ブリッジが知られている。このように、セッションの間、接続されたすべての当事者は、すべての他の接続された当事者の声を聞いてもよい。会議ブリッジは、純粋なデータパケットネットワークと合わせて、またはハードスイッチとソフトスイッチとの組合せを使用するアナログ搬送と合わせて実行されてもよい。例えば、ある当事者は、インターネットプロトコル（ＩＰ）電話を使用するか、またはコンピューティングデバイス内のＩＰ電話アプリケーションを使用してブリッジにアクセスしてもよく、その一方で他の当事者は、携帯電話を使用し、さらに別の当事者は、プレーンオールドテレフォンサービス（ＰＯＴＳ）の電話を使用して会議セッションにアクセスする。
【０００４】
従来技術の状態におけるネットワーク通信ゲートウェイサービスは、接続されたデバイスが双方向音声通信を支援するものとして、シームレス通信を可能とするまでに発達している。さらに参加者は、例えばデスクトップコンピュータおよび電話機などの２つ以上のデバイスに関与することもできる。電話およびコンピュータは、データの協力等のために、音声および画像とともに動作するマルチリンク機能を提供する。多くの場合、電話会議は、構内交換（ＰＢＸ）システムまたは構内アクセス交換（ｐｒｉｖａｔｅ  ａｃｃｅｓｓ  ｂｒａｎｃｈ  ｅｘｃｈａｎｇｅ）（ＰＡＢＸ）システムなどのコンピュータ電話統合（ＣＴＩ）電話のアクセスポイントを使用して実行される。デジタル信号処理（ＤＳＰ）は、参加者に、それらの参加者がアナログ搬送ネットワークからアクセスしているのか、それともデジタル搬送ネットワークからアクセスしているのかを出力するために、データを結合するのに使用されることが可能である。
【０００５】
図１は、簡単な入力信号構造１００と、典型的な会議ブリッジで使用される信号処理とを示す。構造１００は、図１の中でｎ個の信号の信号Ｓ１、Ｓ２、およびＳｎとも表される、複数の入力１０１（１−ｎ）からの複数の信号を含む。ブリッジに利用可能なチャネルの数によって、会議ブリッジへの多数の独立した入力信号があってもよい。１つの会議ブリッジは、平行して動作する、複数の同時に行われる会議セッションを支援することができるが、通常、１つの会議の参加者は、別の会議の参加者の声を聞くことはできない。
【０００６】
実際には、各々のアナログ入力信号１０１（１−ｎ）は、ＤＳＰ設備１０２またはリアルタイムのコンピューティングエンジンを使用して、個別の時間信号としてデジタル化され、標準化され、結合されるか、または一緒に合計される。結果として生じる出力信号は、それらの入力が生じた参加者全員からのすべての入力を含む、混合信号１０３である。続いて信号１０３は、電話ネットワーク上で送信されるアナログ信号への、またはデジタル信号への変換を介して、または一部の場合では、データパケットネットワーク（ＤＰＮ）上で送信されるデジタルパケットストリームとして、セッションの様々な参加者に送られる。一部の場合では、会議ブリッジへの入力ストリームは、デジタルストリームであってもよい。正確な状態と（アナログからデジタル、またはデジタルからアナログへの）変換プロセスとは、会議参加者によって使用される搬送ネットワークと端末デバイスとによって決まる。
【０００７】
図２は、簡単な入力信号構造２００と、会議の入力のすべてではなく、少数の最も強い入力信号のみが一緒に合計される、典型的な会議ブリッジで使用される信号処理とを示す。この場合、ＤＳＰ設備２０２は、セッション中の所与の時間で、最も強いＭ個の入力またはチャネルのみを保持するためにフィルタを有する。少数の最も強い入力は結合され（結合されたＭ）、その後参加者全員に出力される。この簡略化された（ｓｔｒｅａｍｌｉｎｅｄ）方法では、セッションの所与の時間に、１人かまたは２、３人しか活発に会話していないということにもなりかねない。背景のノイズおよび、より弱い入力信号は、セッションの出力ストリームの全体的な可聴音質を高めるために、フィルタにかけられて除去される。
【０００８】
現在の技術のシステムにおいて、電話会議の実行に関して存在する課題は、会議の参加者全員に、セッションにおける実行中の会議の間の任意の時点で現在話している人を示す、信頼できる、適時のリアルタイム表示を提供するということである。実際に、ブリッジの入力側で、識別可能な会議チャネルと識別可能な会議ユーザとの間の関連付けが行われてもよい。しかしながら、一旦複数のユーザが話をしたならば、セッションの間の任意の時間に、誰によって、何が言われたのか、または話されたのかということに関して、それらの個別のアイデンティティを、混合された信号の結果生じるストリームから正確に区別することは難しい。
【０００９】
さらに、その他の問題点は、文字に起こされたセッションのテキスト、または実際にアーカイブされたセッションの音声録音などの会議セッションの記録を見直す間に、誰が、いつ、何を言ったのかということに関連する。ライブであるにせよ、記録であるにせよ、ライブのマルチパーティ会議セッションの間の特定の時間に、誰が何を言うのか、または「誰が話しているのか（ＷＩＳ）」、または誰が話していたのかを、確実に、かつ時間を配慮して判定することは、複雑なアルゴリズム機能に応じる複雑なプロセスになるであろうということが、発明者には理解される。同様に、会議ユーザに対するチャネルの割当などの事前に判定を行う技術は、最も信頼できる情報、またはその情報を必要としてもよいもの、もしくはそれとは別に情報を得る許可を受けたものに伝達するための方法を必ずしも提供するわけではない。
【００１０】
発明者は、会議でのＷＩＳの判定が、単にリアルタイムのデータ集成および提供の機能ではなく、例えばセッションが実施され、アーカイブされた後に、ＷＩＳ情報を使用するかもしれない他のアプリケーションの必要性をも満たすことを認識する。アーカイブされたセッションの第三者分析は、従業員の訓練用、または法的な研究等のために必要とされるかもしれない。さらにセッション参加者の各々は、話された特定の情報、またはその情報を正確には誰が言ったのかについて「知ること」を等しく許可されているわけではないかもしれない。従来技術の会議システムは、進行中、または既に行われた会議セッションの結果として利用可能とされる、「誰が話しているか」についての情報のすべてを完全に利用することができない。
【発明の開示】
【発明が解決しようとする課題】
【００１１】
したがって当技術分野では、会議参加者の間でネットワークを介して実施される実行中のマルチパーティ会議の結果として生じる、誰が話しているかについての情報および関連のプレゼンス情報を、業務上でより良く活用するためのシステムおよび方法が、明らかに必要とされている。このようなシステムは、当技術分野における上述の問題を解決し、会議の生産性を高め、多数の会議後の実務を改善し、合理化する。
【課題を解決するための手段】
【００１２】
本発明の実施形態によって、ライブのマルチパーティ通信会議の参加者の活動、またはその記録された出力に関連する、得られた話し手を示す表示の制御されたアプリケーションを可能にするためのシステムが提供される。システムは、複数の会議入力チャネルを有する会議ブリッジングスイッチ、ソフトウェア、またはその組合せをホストする第１のノードと、会議ブリッジングスイッチ、ソフトウェア、またはその組合せの少なくとも１つの出力信号ポートへのデータアクセスを有する第２のノードと、第１もしくは第２のノードに全体的に分散されているか、または第１および第２のノードに部分的に分散されたソフトウェアアプリケーションとを含み、そのアプリケーションは、会議参加者のうちの１人、選択された一部、または組合せ、非参加の第三者、および１つまたは複数の記憶設備に転送される、通信、データファイル、またはデータストリームを出力するように、話し手を示す表示を適用するために使用される。
【００１３】
一実施形態で、第１のノードは、専用の会議ブリッジングのための設備であり、第２のノードは、デスクトップコンピュータまたはデータサーバのうちの１つである。別の実施形態で、第１のノードは、ＰＢＸスイッチであり、第２のノードは、デスクトップコンピュータである。また一実施形態で、システムは、デジタルネットワークでホストされる。一実施形態で、話し手を示す表示は、識別情報に加え、プレゼンス情報またはそのロケータを含み、プレゼンス情報は、識別情報に関連している。この実施形態の変更例で、システムは、さらにより高度な話し手を示す情報またはそのロケータを含み、より高度な話し手を示す情報は、全体的または部分的に、１つまたは複数の会議セッションの間に識別された参加者の記録された活動から得られる。
【００１４】
一実施形態で、出力される通信は、会議内容のテキストを含むインスタントメッセージである。一実施形態で、データファイルは、会議出力のテキストの文字起こしである。一実施形態で、データストリームは、リアリーシンプルシンジケーション（ｒｅａｌｌｙ  ｓｉｍｐｌｅ  ｓｙｎｄｉｃａｔｉｏｎ）（ＲＳＳ）フィードである。別の実施形態で、データストリームは、音声ストリームか、または音声／映像ストリームである。
【００１５】
本発明の別の態様によって、複数の会議入力チャネルを有する、会議ブリッジングスイッチ、ソフトウェア、またはその組合せによって可能にされるマルチパーティ会議セッションから、ライブまたは記録のスピーチの注釈を付けられたテキストの文字起こしをレンダリングするため、および話し手を示すデータを用いて文字で起こされたテキストファイルに注釈を付けるために、音声コンテントの文字起こしおよび注釈システムが提供される。システムは、音声コンテントを受信するための入力ポート、会議セッションの実行時間に関連するチャネルアクティブ信号での変化の時間的オフセットを記録するための時間同期化モジュール、チャネル対話し手関係モジュール、およびテキスト注釈エンジンを含む。好ましい実施形態で、文字に起こされたテキストファイルは、信号変化の間に存在する時間間隔の範囲内で見つけ出される、コンテントのうちの聞き取れる言葉、フレーズ、または区分に関して、時間内の信号変化を示す表示によって注釈を付けられる。
【００１６】
一実施形態で、話し手を示す表示は、識別情報に加え、プレゼンス情報またはそのロケータを含み、プレゼンス情報は、識別情報に関連している。この実施形態の改良された変更例で、システムは、より高度な話し手を示す情報またはそのロケータを含み、より高度な話し手を示す情報は、全体的または部分的に、１つまたは複数の会議セッションの間に識別された参加者の記録された活動から得られる。
【００１７】
本発明のさらに別の態様で、複数の会議入力チャネルを有する、会議ブリッジングスイッチ、ソフトウェア、またはその組合せによって可能にされるマルチパーティ会議セッションから、ライブまたは記録のスピーチを文字に起こす、およびそれに注釈を付けるための方法が提供され、注釈は誰が話しているのかを表す。方法は、（ａ）テキストを文字に起こすためにスピーチファイルを受信するステップと、（ｂ）スピーチファイルに時間的に関連するチャネルアクティブ信号にアクセスするステップと、（ｃ）ドキュメント内の発生時間によって挿入されるフィールドまたはプレースホルダを、テキストの文字起こしの間にドキュメントに挿入するステップと、（ｄ）チャネル対話し手関係データを各フィールドまたはプレースホルダのために取り出すステップと、（ｅ）適切なフィールドに注釈を挿入するステップとを含む。
【００１８】
この方法の１つの態様で、ステップ（ｅ）の注釈は、話し手についてのプレゼンス情報またはそのロケータをさらに含み、プレゼンス情報は、連絡先情報を含むが、これに限定されるわけではない。この態様の拡張によって、ステップ（ｅ）の注釈は、より高度な、話し手についての話し手を示す情報またはそのロケータをさらに含み、より高度な話し手を示す情報は、１つ以上の会議期間の話し手の活動に関連する統計を含むが、これに限定されるわけではない。
【００１９】
本発明のさらに別の実施態様で、マルチパーティ会議の記録されたコンテントに関連する情報の会議アーカイブを検索するためのシステムが提供され、記録は、話し手の識別およびその他情報、またはそのロケータを用いて時間的に注釈を付けられる。システムは、検索エンジンとインタフェースとをホストする第１のノードと、ネットワークを介して第１のノードにアクセスすることが可能な第２のノードと、適切なマルチメディア音声ファイルまたは音声／映像ファイルにリンクされているか、またはリンクさていない、文字に起こされたテキストファイルの形態をとる会議記録を含む、少なくとも１つのレポジトリとを含み、検索される情報が、コンテントのキーワードまたはフレーズを入力として使用する話し手識別、話し手識別パラメータとコンテントのキーワードまたはフレーズとの組合せを入力として使用する、話し手によって言われた反復コンテントのインスタンスと、話し手識別を入力として使用する統計値とを含むより高度なプレゼンス情報とを含んでもよいことを特徴とする。
【００２０】
一実施形態で、検索される情報は、結果に関する追加情報への追加の双方向リンクによってさらに最適化された、１つまたは複数の対話結果のリストとして返送される。一実施形態で、結果リストは、識別された話し手のリンクを含み、各結果のためにリンクされた追加情報は、連絡先情報、資格情報、およびその人の過去の会議行動より編集された話し手に関する統計情報のうちのすべてか、または一部を含む。一実施形態で、結果は、文字に起こされたテキストの実際の会議区分、または実際のマルチメディアファイルにリンクする。
【発明を実施するための最良の形態】
【００２１】
本発明は、ネットワークを介して実行されるマルチパーティ会議セッションの活動の結果として生じる、話し手を示す情報および高度なまたはシステム強化されたプレゼンス情報のリアルタイムの識別、ならびにマルチユースの伝達を可能にする、システムおよびソフトウェアアプリケーションを提供する。本発明のシステムおよび方法は、以下で詳細に説明される。
【００２２】
図３は、マルチパーティ会議、および話し手を示すデータの使用が、本発明の実施形態によって支援される通信ネットワーク３００の構造の概観である。通信ネットワーク３００は、サブネットワークを通じて集まった関係者間のシームレスな音声ベース通信を可能とするために、互いに橋渡しされた通信サブネットワークの集合である。例えば、この例にはワイドエリアネットワーク（ＷＡＮ）３０１が示されており、任意の社内専用または公衆のデータパケットネットワーク（ＤＰＮ）を表している。ＷＡＮ３０１は、よく知られているインターネットネットワークを表すものであってもよい。ネットワーク３０１は、本発明の精神および範囲から逸脱することなく、無線または有線のメトロポリタンエリアネットワーク（ＭＡＮ）区分であってもよい。発明者は、アクセス特性の公衆性が高く、規格化された通信プロトコルが多数あることから、ＷＡＮ３０１の１つの好ましい例としてインターネットを選択する。
【００２３】
この例にはローカルエリアネットワーク（ＬＡＮ）３０２が示されており、この場合は議論を目的として、伝送制御プロトコル／インターネットプロトコル（ＴＣＰ／ＩＰ）のために利用可能とされた、任意の社内専用または公衆のＬＡＮを表している。ＬＡＮ３０２は、有線または無線でアクセスされてもよく、キャンパスエリアネットワーク、または機関や会社に接続されたその他の別のネットワークであってもよい。ＬＡＮ３０２は、また、個人の家庭用ネットワーク、またはその他の種類の安全なネットワークであってもよい。ＬＡＮ３０２は、図中でＩＰＲ３３１と示されるインターネットプロトコルルータ（ＩＰＲ）と、図中でＩＳＰ３０５と示されるインターネットサービスプロバイダ（ＩＳＰ）とを通る、ＷＡＮ３０１への通信アクセスを有する。したがって、ＬＡＮ３０２に接続されるノードは、ＷＡＮ３０１内のネットワークバックボーン３１０に接続する、ＩＰＲ３３１、ネットワークアクセス回線３３２、ＩＳＰ３０５、およびネットワークケーブル３１２を経由して、ＷＡＮ３０１内の任意のサービスまたはノードにアクセスしてもよい。通信のためにＬＡＮバックボーン３２７に接続されて示されているノードは、ＩＰ電話３２９とＬＡＮコンピュータ３２８とを含む。好ましい実施形態で、バックボーン３１０は、全体としてＷＡＮ３０１を形成しているすべての回線、機器、およびアクセスポイントを表す。ＷＷＷの実施形態の中では、本発明の実行に対する地理的制限はない。
【００２４】
この例には公衆交換電話網（ＰＳＴＮ）３０３が示されており、ローカル電話切換え（ＬＳＷ）スイッチ３２０とインターネットサービスプロバイダ（ＩＳＰ）３０６とを経由するＷＡＮ３０１へのアクセスを有している。ＩＳＰ３０６は、ＷＡＮ３０１内でネットワークアクセスケーブル３１３を経由してバックボーン３１０に接続する。ＰＳＴＮ３０３からＷＡＮ３０１へのアクセスは、電話モデム、ＳＳ−７ベルコアゲートウェイ（不図示）、ケーブルモデム、デジタル加入者回線（ＤＳＬ）等を含む複数の異なる方法で達成されてもよいが、これらに限定されるわけではない。
【００２５】
この例には無線ネットワーク３０４が示されており、電話またはデータ通信のための任意の無線アナログおよびまたはデジタル搬送ネットワークを表している。ネットワーク３０４は、携帯電話ネットワーク、無線ローカルネットワーク、または衛星によって利用可能となるネットワークであってよい。ネットワーク３０４は、それぞれネットワークケーブル３１５と電話ケーブル３１６とを通る、無線インターネットサービスプロバイダ（ＷＩＳＰ）設備３１４を経由するネットワーク３０１とＰＳＴＮネットワーク３０３とへの通信アクセスを有する。適切なネットワークブリッジング設備は、図示されている任意のネットワークから通信する、互いに接続している関係者の間で標準的な通信を可能とするためにあるとみなされてもよい。この例における異種のネットワークの図示は、本発明の精神および範囲から逸脱することなく、本発明が、音声およびマルチメディアアプリケーション、ならびに適切なブリッジング設備、ならびにネットワークサービスを使用して、暗示される（ｉｍｐｌｉｅｄ）ネットワーク境界を介して実行されてよいことを示すことになるということは、データおよび電話通信の当業者には理解される。
【００２６】
会議ブリッジ（Ｃ−ブリッジ）ハードウェア／ソフトウェア設備３０７は、ＷＡＮ３０１の範囲内に示される。ブリッジ３０７は、ＷＡＮ３０１を通してアクセス可能なサービス、および任意の別の図示されたネットワークからアクセスするものにとってアクセス可能なサービスによってホストされてもよい。ブリッジ３０７へのアクセスは、この例ではバックボーン３１０を通る。したがって、ブリッジ３０７は、ネットワークアドレスを有し、そのネットワークアドレスは、ブリッジにダイヤルするため電話機を使用するもののために、電話番号に関連していてもよい。ブリッジ３０７は、ソフトスイッチ方式を使用してマルチパーティ会議セッションをホストするように構成されており、それによって最大数の会議チャネルが、ブリッジを使用して会議に参加する者に利用可能となる。
【００２７】
ブリッジ３０７は、先に述べたような通信サービスとして、企業によってホストされてもよい。管理ワークステーション（ＡＤＭＩＮ）３１１は、バックボーン３１０に接続されて示されており、設定、操作、および場合によっては、ブリッジ３０７によってスケジュールされるか、またはそうでなければ促進される、マルチパーティのマルチメディア会議の議長を務めるための管理ステーションであるとみなされてもよい。ステーション３１１は、管理とメンテナンスの両方の観点からブリッジ３０７を操作するために必要とされるタスクを実行するための、すべての必要なツールおよびインタフェースを提供するものとみなされてもよい。
【００２８】
マスデータレポジトリ３０９は、ＷＡＮ３０１の範囲内に示されており、アクセスのためにバックボーン３１０への接続を有している。レポジトリ３０９は、会社の（ｈｏｕｓｅ）マルチパーティ会議アーカイブのために構成されている。そのようなアーカイブは、ブリッジ３０７でホストされたセッションのテキストの文字起こし、および／または音声および任意の関連のマルチメディア表現、会議の間に示された映像または表示を含む、会議のマルチメディア記録を含んでもよい。会議サービスのホストは、本発明を実行するために最低限で、ブリッジ３０７、ステーション３１１、およびレポジトリ３０９を含んでもよい。しかしながら、データサーバ、（ソフトウェアまたはハードウェアの）自動音声アテンダント、ネットワークブリッジング設備等のその他の機器が、本発明の精神および範囲から逸脱することなく、このシステム構造の中にあってよいことは当業者には理解される。
【００２９】
本発明の一実施形態で、ブリッジ３０７によってホストは、説明したようなマルチパーティ会議を可能にし、それによってサービスは、様々なデバイスおよび端末プロトコルを使用して、上述のネットワーク３０１〜３０４のうちの任意のものからブリッジに接続しているユーザにとって利用可能となる。例えばネットワーク３０４内で、ネットワークを使用できるラップトップコンピュータ３１７と無線通信ネットワークを使用できる電話機３１８とは、ネットワーク３０４内でアクセスポイントから会議ブリッジ３０７に接続するためにユーザが用いてもよいデバイスとして示されている。電話機３１８は、アナログ通信とデジタル通信の両方が可能な携帯電話であってもよい。電話機３１８は、また一部の実施形態では衛星電話であってもよく、または別の実施形態では第３世代（３ｇ）のスマート電話であってもよい。例えば、電話機３１８は、デジタル方式でＷＩＳＰ３１４に接続し、その後ボイスオーバインターネットプロトコル（ＶｏＩＰ）を使用して、ネットワーク回線３１５を経由してブリッジ３０７に経路指定されてもよい。同様に、電話機３１８は、アナログ方式で、アナログ信号をデータパケットに変換するように構成されたベルコアゲートウェイ、およびシームレス音声通信のための逆（ｒｅｖｅｒｓｅ）を通ってブリッジ３０７に接続されてもよい。
【００３０】
ラップトップ３１７は、ＩＰ電話アプリケーションとともに装備されている場合、ブリッジ３０７への音声接続を確立してもよい。一実施形態で、ユーザは、会議の一部であるマルチメディア表現を表示するためにラップトップ３１７を使用する間、ブリッジ３０７との音声通信を可能にするために電話機３１８を用いてもよい。同様に、デバイスによって支援される別個のチャネルを介して同時に起こされる音声およびマルチメディアのデータ転送が可能なように構成された第３世代のスマート電話など、同じデバイスに関して多くの組合せが存在する。
【００３１】
ＰＳＴＮ３０３内のユーザは、顧客構内機器（ＣＰＥ）として示されている。この例では、ＣＰＥ電話機３２１とＣＰＥ電話機３２２とが示されており、標準の接続型交換電話（ｃｏｎｎｅｃｔｉｏｎ  ｏｒｉｅｎｔｅｄ  ｓｗｉｔｃｈｅｄ  ｔｅｌｅｐｈｏｎｙ）（ＣＯＳＴ）、またはプレーンオールドテレフォンサービス（ＰＯＴＳ）の電話機を表している。電話機３２１および３２２は、ベルコア信号方式などの適切な信号変換を使用して、回線３１９を介してそれらの呼び出しをブリッジ３０７に経路指定する、ＬＳＷ３２０に接続している。ＣＰＥ３２１およびＣＰＥ３２２のポイントからブリッジ３０７への接続は、少なくともＬＳＷ３２０からそれぞれの電話機への専用のＣＯＳＴ接続である。デスクトップコンピュータＣＰＥ３２４および関連の電話機３２３もまた、ＷＡＮ３０１の範囲内でブリッジ３０７との通信接続をつくることができる通信デバイスとして、ＰＳＴＮ３０３の範囲内に示されている。電話機３２３は、ＣＯＳＴ電話機か、またはＩＰ電話機であってよく、ＬＳＷ３２０は、通信を経路指定するように構成されたローカルスイッチを表す。ＣＰＥ３２４および電話機３２３は、ＬＳＷ３２０、ＩＳＰ３０６を通って、ネットワークアクセス回線３１３およびバックボーン３１０を介してＷＡＮ３０１に接続し、続いてブリッジ３０７に接続してもよい。接続のデジタルおよびアナログ部分を含む正確な経路は、本明細書では図示しない別のルータ、スイッチ等を含んでもよいことは、当業者には理解される。発明者は、接続されるネットワーク構造の単純な例を、単に説明の目的で示しており、その他の可能性も存在する。
【００３２】
ＷＡＮベースのコンピュータステーション３１１は、ソフトウェアアプリケーションとして内部で提供され、実行可能な、「話し手は誰か」の使用マネージャ（ＷＩＳ  Ｕ−ＭＧＲ）３３３ａを有する。ＷＩＳ  Ｕ−ＭＧＲ３３３ａは、会議セッションを設定するためにアドミニストレータを利用可能にし、会議セッションの間に誰が話しているのかについての情報の、様々な異なる使用法を可能にするように構成されている。ＷＩＳ  Ｕ−ＭＧＲ３３３ａは、セッションが行われているときのリアルタイムでも、第三者のサービスか、または会議セッションの管理上の議長によって実行されるかもしれないセッション後の作業でも、両方で使用されることが可能である。
【００３３】
Ｃ−ブリッジ３０７は、内部で提供され、実行可能なＷＩＳソフトウェア（ＳＷ）アプリケーション３０８ａを有する。この実施形態で、ＷＩＳ  ＳＷ３０８ａは、ＷＳＩ  Ｕ−ＭＧＲ３３３ａに対する顧客アプリケーションとして構成され、１つの会議セッション、または平行して行われる２つ以上の会議セッションの実行時間の間にＷＩＳ情報を処理し、伝達することに関連した作業の実行を生じさせるか、または直接的な特定の作業を生じさせてもよい。ＳＷアプリケーション３３３ａと３０８ａとはともに、アルゴリズム的デジタル信号処理と、時間基準のＷＩＳ信号についての識別情報との関連付けを通して、実行中の会議セッションから得られるＷＩＳ信号の業務上の効率的な使用法を可能にする。
【００３４】
ＷＩＳ  Ｕ−ＭＧＲ３３３ｂのバージョンは、ＬＡＮノード３２８上にインストールされ、そこから実行可能なものとして示されている。同じく、ＷＩＳ  ＳＷ３０８ｂのバージョンは、ＩＰＲ３３１上にインストールされ、そこから実行可能なものとして示されている。マスレポジトリ３３０は、データの記憶およびアクセスのためにＬＡＮバックボーン３２７に接続されたものとして示されている。Ｕ−ＭＧＲ３３３ｂ、ＷＩＳ  ＳＷ３０８ｂ、およびレポジトリ３３０は、ＷＡＮ３０１の範囲内に示される要素３３３ａ、３０８ａ、および３０９のコピー、または同様のインスタンスを表す。したがって、本発明の方法は、会議ブリッジ３０７のものとよく似たやり方で、会議参加者がＩＰＲ３３１内で橋渡しされてもよい、ＩＰ  ＷＡＮに接続されたＬＡＮ上でホストされてもよい。実際の実行では、ＩＰＲ３３１は、一実施形態で、ルータおよび会議ブリッジとして構成されてもよい。多くの可能な実装形態が存在する。
【００３５】
一実施形態で、ＷＩＳ  Ｕ−ＭＧＲ３３３ｃのバージョンとＷＩＳ  ＳＷ３０８ｃのバージョンとは、ＰＳＴＮ３０３の範囲内に提供されてもよく、例えばＷＩＳ  ＳＷ３０８ｃは、ＬＳＷ３２０にインストールされ、Ｕ−ＭＧＲ３３３ｃは、ＣＰＥコンピュータ３２４にインストールされることにも留意されたい。この場合、ＬＳＷは、改良型ＣＴＩであり、企業から制御される。構内交換機（ＰＢＸ）などの企業のスイッチはまた、ＷＩＳデータを提供するために改良されてもよい。したがって本発明は、会議ブリッジとしても構成されているＬＳＷ３２０か、または企業内でホストされるＰＢＸによってホストされる会議で、ＰＳＴＮ３０３の範囲内で実行されてもよい。さらに、１つのネットワークに基礎をおくＷＩＳ  Ｕ−ＭＧＲのインスタンスは、物理的に別のネットワークに配置されたスイッチ、ルータ、またはその他の会議設備にインストールされたＷＩＳ  ＳＷのインスタンスと相互作用してもよい。遠隔から管理するシナリオを含め、多くの可能性が存在する。
【００３６】
好ましい実施形態で、（ａ、ｂ、またはｃの）Ｕ−ＭＧＲ３３３のバージョンを使用するホストは、実行時のアプリケーションおよびセッション後のアプリケーションのためにＷＩＳ情報を使用する様々な態様を制御してもよい。一実施形態は、実行時の会議セッションの映像および音声出力と時間的に同期化されても（時間記録されても）よいプレゼンス情報（ＰＩ）出力として、ＷＩＳ情報を伝達することを含む。この場合プレゼンス情報は、会議のホスト設備（ブリッジ、ルータ、またはスイッチ）の点で、事前に決定されかつ事前にフォーマット化され、情報が、ＣＰＥで着信する会議ストリームと自動的に結合させられる。
【００３７】
用語プレゼンス情報（ＰＩ）は、会議の出力ストリームに埋め込まれてリアルタイムで提供されるか、または会議の出力ストリームに関連して提供される話し手を示す情報が、任意の所与の時間での話し手のプレゼンスを示しているので、頭字語ＷＩＳと緩やかに関連している。ＷＩＳデータは、デフォルトによって、適用可能である場合には、話し手の氏名のみ、話し手の肩書き、および話し手の組織を含むことがある。話し手の、より高度な話し手を示すデータ（ＲＷＩＳ）は、電話番号ならびに内線および／または電子メールアドレスなどの、１つまたは複数の連絡先パラメータを含んでもよい。追加情報は、ウェブサイトアドレスか、または他の第２の連絡先、もしくは間接的な連絡先の情報を含んでもよい。
【００３８】
ＷＩＳデータがうまく利用される前に、当然のことながら、（１人または複数の活動中の話し手を示す）より強いチャネルの信号と、それらの話し手の認識との間で関連付けが行われなければならない。話し手の識別は、複数の方法で達成されてもよい。例えば、予定された会議に参加するために電話をかける各人は、利用可能な会議チャネルまたはシートに自動的に割り当てられてもよい。割り当てられたチャネルに対する特定の話し手の識別および関連付けは、自動番号識別（ＡＮＩ）を使用して達成されうるので、話し手は、話し手が電話をかけている発信番号によって識別される。別の例で、セッションへの参加を勧められる各参加者は、会議に参加するための固有のパスワードまたはアクセスコードを与えられ、シート（チャネル）は、各アクセスコードに関連付けられることが可能である。その他の場合、参加者と特定のチャネルとを関連付けるために、宛先番号識別サービス（ＤＮＩＳ）のバージョンが使用されてもよい。さらに別の実施形態で、ライブオペレータまたは対話型音声応答（ＩＶＲ）サービスが、予定された会議に登録する各参加者にチャネルまたはシートを割り当ててもよく、割当を行うときに、参加者の識別が記録され、割り当てられたシートに関連付けられてもよい。
【００３９】
一旦識別とチャネルまたはシートとの関連付けが、各参加者のために設定されると、続いて話し手が識別されたチャネルは、会議の間にアクティブとなり、それらの信号の時間サインは、発言されたこと、またはセッションの内容を関連させるために使用されてもよい。いくつかの実施形態によって、ＷＩＳ  Ｕ−マネージャ３３３（ａ〜ｃ）は、会議参加者の全員、または選択された一部にＷＩＳデータを返信するために使用されてもよい。例えば、リアルタイムのインスタントメッセージ（ＩＭ）またはショートメッセージサービス（ＳＭＳ）のメッセージは、話し手の変更がある度に、参加者リストに送信されてもよい。一実施形態で、そのようなメッセージは、現在の話し手を示すだけであってもよく、音声は、話し手変更の表示が、受信される発言の音声コンテントとほぼリアルタイムである、コンテントを提供する。別の例で、ＣＰＥインタフェース、または受信されるＩＭもしくはＳＭＳメッセージは、現在の話し手を示す表示に加えて、発言の文字起こしを含んでもよい。この実施形態は、音声または映像／音声セッションの場合、ほぼリアルタイムのセッションの文字起こしを必要とする。さらに別の実施形態で、ＷＩＳ表示を伴う文字起こしは、任意の参加者によって同意されたリアリーシンプルシンジケーション（ＲＳＳ）フィードとしてフォーマット化されている。ここで、誰が何を言ったかについての埋め込まれた表示を伴うセッションの文字で起こされた音声の受信は、多少遅延させられてもよく、またはほぼリアルタイムで表示されてもよいことに注意されたい。表現は、実行中のテキストの会話の文字起こしに類似した形態をとることができる。
【００４０】
一実施形態で、それらの文字起こしおよびＷＩＳ注釈は、プレイバックモジュール、およびセッションのプレイバックと同時に再生されるチャネルアクティブ信号の実行時間記録を用いて、実行時の後で生じてもよい。この場合、ＷＩＳ  Ｕ−ＭＧＲ３３３（ａ〜ｃ）は、ＷＩＳ  ＳＷ３０８（ａ〜ｃ）のバージョンを含んでもよく、ＷＩＳ  ＳＷ３０８（ａ〜ｃ）のバージョンは、セッションが行われ、セションを文字に起こし、かつセッションの間に誰が話していたのかを判定するために記録された後の任意の時に用いられてもよい。データは、別々に記憶されてもよく、または注釈を付けられた文字起こしとして組み合わせられてもよく、または今後マルチメディアファイルをプレイバックするときの参照として、マルチメディアファイル自体に埋め込まれてもよい。
【００４１】
一実施形態で、会議参加者は、テキスト表示、音声表示、または映像表示としてＷＩＳ表示を受信するために、優先順位を設定することができてもよい。映像表示については、Ｍ個のチャネルまたは会議シートを表すアイコンは、形状、色、形態、またはその他の視覚的表示が、非アクティブ状態からアクティブ状態に変えられて、誰が話しているのかを示してもよい。当然のことながら、表示されるアイコンは、アイコンに関連する氏名などの何らかのやり方で、話し手の識別を伴う。セッションは、最初の人が話すと直ぐに表示されかつ識別される、１つのみのアイコンで始まってもよい。２人の話し手が、掛け合いながら互いに会話する場合など、表示画面を占めるアイコン数のもととなる、より多くの話し手は増加してもよいが、任意の所与の時間の現在の話し手のアイコンによって実行されるアイコンのモーフィング（ｍｏｒｐｈｉｎｇ）または視覚的表示のみが、活動中である現在の話し手を反映する。
【００４２】
会議が、ＬＳＷ３２０などのＬＳＷでホストされる実施形態で、例えばＣＯＳＴ対応型の遠隔地間会議の間に、ＷＩＳ表示を受信するためにネットワークが利用できるデバイスまたは周辺機器を使用して会議参加者に達するために、企業内でホストされるＣＴＩ−ＰＢＸからスイッチへの例えば適切なＣＴＩネットワークデータリンクが必要とされてもよい。ＰＢＸはまた、ＣＴＩリンクを経由するか、または代替の信号通信方法を経由して、ＷＩＳ情報を提供することがある。
【００４３】
マスレポジトリ３０９および３３０は、上述のような実際のマルチメディア記録かまたは文字に起こされたテキストバージョンであってもよい、会議アーカイブの記憶およびアクセスのために構成されている。会議は、後のアクセスのために記録され、文字に起こされ、記憶されてもよい。テキストレンダリングに対するスピーチを伴う実行時間に近い文字起こしと、ＷＩＳ表示とを使用して、会議セッションの文字起こしは、文字に起こされた各フレーズ、またはより多くのグラニュラリティ（ｇｒａｎｕｌａｒｉｔｙ）で、セッションの間に文字に起こされた各単語のためのＷＩＳ表示を含むために、注釈を付けられてもよい。１つの好ましい実施形態で、そのような記録は、ＷＩＳまたは「誰が話していたか」についての入力、およびコンテント、時間記録等を含むその他のパラメータによって、特定のサウンドバイトまたはテキスト部分のために検索されてもよい。ここで、会議アーカイブの検索において、特定の話し手が発言したことのすべて、または一部を含む結果を返すために、ＷＩＳデータが提出されてもよいことに注意されたい。同様に、ＷＩＳデータを含む結果を返すために、コンテントそのものが入力として使用されてもよい。さらに、適切な結果を返すために、入力の組合せが使用されてもよい。
【００４４】
一旦ＷＩＳ  ＳＷインスタンス３０８（ａ〜ｃ）が事前に構成されると、それらはその後、ＷＩＳデータを判定し、かつそのデータを計画にしたがって参加者に伝達するための背景で、自動的に動作してもよい。さらに別の実施形態で、より高度なプレゼンス情報は、セッションの間か、またはセッションが生じた後に送られるセッション後パッケージの中で、ＷＩＳデータを受信することを許可された参加者に対してアクセス可能とされてもよい。この場合、ＷＩＳ  ＳＷ３０８（ａ〜ｃ）は、情報を受信することに関心を持っているか、またはそれ以外に情報を受信することを許可されているユーザのために、より高度なプレゼンス情報を提供するためにプレゼンス情報とともに編集されてもよい特定の統計を算定するために、セッションのＷＩＳ結果を検査することが可能であってもよい。ここで、本発明のシステムに関連する特定の機能またはタスクは、ＷＩＳ  ＳＷ（３０８）を使用することで可能とされるか、またはＷＩＳ  Ｕ−ＭＧＲ（３３３）を使用することで可能とされるか、またはそれらのタスクまたは機能をアプリケーション間で戦略的に共有することによって可能とされてもよいことに注意することが重要である。ＷＩＳデータの使用法についてのさらなる詳細は、本明細書で後に示される。
【００４５】
図４は、本発明の実施形態による、構成要素の対話を含むＷＩＳ構造４００を示す構成図である。構造４００は、先に図３を参照して説明された、会議ブリッジ３０７、ＷＩＳ  ＳＷ３０８ａ、ＷＩＳ  Ｕ−ＭＧＲ（３３３）、およびマスレポジトリ３０９を含む。この例では、会議ブリッジ、ＷＩＳの改良、および会議のアーカイビングが、顧客にサービスを提供するホスト役の企業によって実行されると仮定されてもよい。しかしながら、本発明のシステムは、社内会議およびミーティングに関する企業の環境で、教育などの公的な環境で、または何らかの共通の社会的環境によってまとめられていない、いかなる会社、組織等に特に関与していないユーザのネットワークによってシステムが使用されてもよい特別な実施形態で実行されてもよいように、これが制限として解釈されるべきではない。
【００４６】
この例で、会議ブリッジ３０７は、参加者がブリッジに接続されている場合、各参加者からの会議入力（Ｃ−インプット）および追加情報のデータを受け取る。それぞれの参加者は、実際に予定通りに会議が始まる前に、いくつかの識別パラメータとチャネルの割当とを有している。誰かが後から会議に加わる場合、次いでその識別、およびその人のためのチャネルまたはシート割当は、会議の中でその人物がアクティブになる前に記録される。一実施形態で、会議ブリッジ３０７の中のＷＩＳ  ＳＷ３０８ａは、会議の開始が予定される前か、または実行中の会議セッションにユーザが加わる任意の時間で、任意の有益なデータ、および入力側の各ユーザのためのチャネルまたはシート割当データを単純に収集するように構成されてもよい。この実施形態で、次いでＷＩＳ  ＳＷ３０８ａは、現在のユーザ／話し手／チャネル割当を維持するように構成されたチャネル話し手テーブル（ＣＳＴ）４０６に、データリンク４０８を介して情報を送信してもよい。ＣＳＴデータ４０６は、苗字、氏名、およびチャネルまたはシート割当を含んでよいが、当然これらに限定されるわけではない。情報は、後のアクセスのために、対をなすタプルとして記憶されてもよい。この実施形態では、参加するために登録を行った各ユーザが、セッション期間のために自分のチャネル割当を保持すべきであることを仮定している。１人のユーザが最初の方で離れる場合、特にセッションのアーカイブで履歴データの検索が後で行われるのであれば、その人のチャネルまたはシートは再度割り当てられるべきではない。しかしながら、ＷＩＳ  ＳＷ３０８ａが、チャネルまたはシート割当に対して責任を負うのであれば、セッションから抜けた人がいるかどうかを確認するために周期的にチェックを行うことが可能であり、その後、そのユーザのための前の対をなすタプルを削除することによって、ＣＳＴデータ４０６をアップデートすることが可能である。新たなユーザが加わる場合、チャネルまたはシートは、今後のタスクをもたらすことなく、再度割り当てられてもよい。一実施形態で、ＣＳＴテーブル４０６はまた、連絡先情報などの追加のデータと、話し手と関連してもよいその他のデータとを含んでもよく、または参照してもよい。この追加データは、話し手についてのさらなる情報か、またはより高度な話し手を示す（ＲＷＩＳ）データを提供することによって、単純なＷＩＳデータを改良するために使用されてもよい。
【００４７】
この実施形態で、会議セッションのライブ出力４０９は、ＷＩＳ  Ｕ−ＭＧＲ（３３３）に与えられる。出力は、いかなる追加データまたはユーザ識別も含んでいない。ライブ出力は、割り当てられたチャネルのうちのどれが、現在アクティブであるかということについての時間的な表示（現在話しているのはそのチャネルを割り当てられた人であるということを示す表示）を含む。この場合、ＷＩＳ  Ｕ−ＭＧＲ（３３３）は、アクティブのチャネルまたは複数のチャネルの信号を取得し、ＣＳＴデータ４０６で探索を実行し、話し手のチャネル識別を取得し、信号のタイムスパンにしたがって、その情報の時間を記録する。すなわち、出力の中で特定のチャネルが現在アクティブであれば、そのチャネルに割り当てられた正しい話し手が識別され、話し手識別をその特定のチャネルに関連させて、時間記録された記録が作り出される。そのチャネルが、別のチャネルに置き換えられる場合、そのチャネル等のための探索が再度実行される。出力がサンプリングされることが可能な周波数は、探索を可能にし、例えば１００ミリ秒毎の記録を可能にする。したがって、ＷＩＳ表示におけるいかなる変更も、任意の会議シナリオのために十二分に適切なグラニュラリティで表されてもよい。ＷＩＳ表示が、１人の話し手から別の話し手に変わってもよい例示的な周波数は、毎秒数回から１０回か、またはそれ以上である。
【００４８】
話し手に応じる音声認識の場合、話し手に応じる訓練データは、システムに提供され、したがってシステムに知られ、音声対テキストの文字起こしを補助するために導入されることが可能である。この場合、ＷＩＳ  Ｕ−ＭＧＲは、時間に応じて、話し手に応じる訓練データを適切に選択するために、時間に応じる話し手を示す情報を利用する。
【００４９】
ＷＩＳ  Ｕ−ＭＧＲ（３３３）は、参照された話し手のＲＷＩＳ情報に不連続な時間記録を追加するかまたは添えて、エンドユーザが、双方向リンクとの対話を通してそのデータを取り出せるようにしてもよい。ＷＩＳ  Ｕ−ＭＧＲ（３３３）からの出力は分割され、出力ストリームを受信するために使用されるＣＰＥデバイスによって多少異なってもよい予定された配信フォーマットにしたがって、ネットワーク４０１を介して参加者全員かまたはその選択された一部に、出力ストリーム４１１とともに配信される出力ストリーム４１２として、レポジトリ３０９に記録されてもよい。
【００５０】
より高度な話し手を示すデータという用語は、「誰が話しているのか」を判断するために必要とされる最小限の識別の他にも、話し手についての任意のデータと緩やかに関連している。一部のＲＷＩＳデータは、予定されていた会議が開始する（ｒｕｎ）前に、システムに既に知られていてもよい。一部のＲＷＩＳデータは、会議セッションの期間の処理の間に、ＷＩＳ  Ｕ−ＭＧＲ（３３３）によって得られてもよい。先にシステムに知られているＲＷＩＳデータは、話し手または話し手を後援する組織が利用可能とされてもよい、任意の情報を含んでもよい。苗字と氏名の他に、話し手の肩書き、電子メールアドレス、電話番号および内線、ＩＭハンドル、ウェブアドレス、会社名、政治的アイデンティティ、専門知識の陳述、参照リスト、著作出版物のリスト等がある。そのようなＲＷＩＳデータは、メタデータタグまたは双方向ハイパーリンクとして埋め込まれて、セッションのテキスト記録の注釈として、または埋め込まれた視覚的グラフィックとして、またはアイコンの変形として、話し手の視覚的表示と対話するものが、同一か、またはいくらか異なるインタフェースまたはアプリケーション媒体の中で、マウス上のクリックによって追加情報を得られるようにしてもよい。
【００５１】
さらに詳しく述べると、ＣＰＥ−１（４０２）は、出力ストリーム４１１を受信する１つのＣＰＥデバイスとして示されている。ＣＰＥ−１（４０２）は、デスクトップコンピュータまたはラップトップコンピュータのスクリーンを占める、デスクトップグラフィカルユーザインタラクティブディスプレイ（ＧＵＩＤ）であってよい。この例ので、会議ディスプレイインタフェース４１０が示されており、会議セッションの間に、話し手に割り当てられたチャネルを表すＡからＨのアイコンを含む。アイコンＧは、チャネルＧがアクティブであることを示して現在太字で表されており、話し手は、議題に関係する会社のＩＰ顧問であるスミス氏である。ポップアップメッセージ４１６は、テキストメッセージ、電子メールの送信、ウェブサイトまでの案内、および現在の話し手はスミス氏です、などの双方向のＲＷＩＳデータのオプションを含む。アイコンＤは、最後のアクティブチャネル、および双方向ポップアップメッセージ４１５を使用する話し手を表す。最後の話し手は、ＲＡＤ社のＣＥＯであるジョーンズ氏であった。参加者は、ジョーンズ氏にテキストメッセージもしくは電子メールを送信するために、または場合によってはＲＡＤ社のウェブサイトに案内するためにクリックしてもよい。ポップアップメッセージ４１５は、スミス氏が話す前の最後の話し手がジョーンズ氏であったことを示す。
【００５２】
別の実施形態には、ＣＰＥ−２デバイス（４０３）上で動作するインスタントメッセージインタフェース４１３が示されている。デバイス４０３は、ＰＤＡ、携帯電話、またはテキストおよび一部のケースではグラフィックを表示することができるディスプレイを備えた任意のネットワークを使用できるコンピュータボディを含む、インスタントメッセージングを支援する任意の種類のデバイスであってよい。ＩＭインタフェース４１３は、文字に起こされたコンテントについて注釈を付けられたＷＩＳ表示を含む、会議の出力の実行中の文字起こしを示す。この場合スミス氏は、彼の発言の文字起こしが続く話をした日時とともに、最後の話し手であると表示される。ジョーンズ氏は、進行中である彼の話していることの文字起こしが続く目に見える（ｖｉｓｉｂｌｅ）日時とともに、現在の話し手として識別される。ＩＭインタフェース４１３は、対話の証拠４１４、スミス氏とジョーンズ氏のいずれかまたは両者についてのＲＷＩＳデータまたはオプションを取り出すための、分類された取り出しＲＷＩＳデータまたはオプションを含む。マウスによって、一方または両方の話し手表示を選択、または強調し、続いて証拠４１４を選択することによって、その話し手に関連するより高度な情報の取り出しが可能になってもよい。一実施形態で、リンクを選択することによって、ＲＷＩＳデータが利用できるものの双方向のリストが作り出されてもよい。次に、通信リンクを含んでもよいＲＷＩＳデータは、適切な提示を選択することによって、デバイス４０３の性能および設定されたサービスのために用いられ、フォーマット化されてもよい。
【００５３】
一実施形態で、ＣＰＥ−３（４０４）は、バックボーン４０１へのアクセスを持ち、したがって会議アーカイブ３０９へのアクセスを持つように示されている。ＣＰＥ−３（４０４）は、日時、セッションＩＤ、話し手ＩＤ、およびチャネルＩＤなどのデータパラメータに加えて、それらデータパラメータとは別個に、またはそれらデータパラメータと組み合わせて、ＷＩＳデータを入力することの結果として回収可能な任意のデータまたはコンテントのために、レポジトリ３０９のコンテントの検索を操作するユーザを可能にするように構成され、ＣＰＥ−３（４０４）に提供された顧客ソフトウェアアプリケーション４０５を有する。実際のＲＷＩＳデータは、対象の話し手について既に知られていてもよいデータ、または会議参加者によってシステムに配信されるか、もしくは第三者のエンティティによって求められてもよいデータを含んでもよい。図４の例を用いて、ＩＰ顧問または弁護士であるスミス氏に関するＲＷＩＳデータは、教育用参考文献またはその他の再開情報を含んでもよい。
【００５４】
スミス氏のＲＷＩＳデータは、訴訟勝利の記録および顧客リストを含んでもよい。一実施形態で、本発明のシステムを使用して、最適化された話し手を示すデータ（ＯＷＩＳ）が提供されてもよい。本明細書の目的のために、ＯＷＩＳデータは、本来統計的または履歴的なものであり、会議への参加、または会議への参加の間の話し手の活動もしくはシステム観察に関連付けられる１つまたは複数の会議セッションの間にＷＩＳ処理を通して得られるデータであって、そうでなければ会議前に利用することはできない。例えばジョーンズ氏は、１つまたは複数の会議セッションの間に議論されるかまたは論点となっていてもよい、特定の政治的もしくは倫理的立場または意見の主張の会議履歴を有してもよい。そうしたＯＷＩＳデータは、会議アーカイブの検索の主題であってもよい。例えば支持グループは、ライブのイベントで話をすることができる、弁護士である精力的な話し手を見つけたいと思ってもよい。論点および参加者のタイトル、ならびに賛成または反対などの何らかの適切なキーワードを入力することによって、グループは、アーカイブの検索を行ってもよく、そこで戻ってくる結果は、論点に対して賛成を唱える、または反対を唱える弁護士である会議の話し手を含んでおり、それらの戻ってくる結果のうちの１人はスミス氏である。検索の主題として、または適切な情報を求めてアーカイブを検索するための変数として、ＷＩＳ情報、ＲＷＩＳ情報、およびＯＷＩＳ情報を使用する機能から利益を得られる業務プロセスは数多く存在する。
【００５５】
さらに別の実施形態で、ＯＷＩＳ情報は、同一の話し手のうちでも他の部分よりも熱がこもっているか、または他の話し手の弁論部分よりも熱のこもっている、会議の間の話し手の集合的な弁論のうちの識別された部分を含んでもよい。この点に関して、信号のデシベル監視は、怒り、恐れ、喜び、もしくは単に情熱的な弁論として、閾値表または表現エンジンを用いて判定されてもよい、そうした情熱または感情を示してもよい。会議の音声へのアクセスは持たないが、実行中のテキストのインタフェースを持っている会議参加者は、それらの部分（ＯＷＩＳ）をすべて大文字のかたちで、インタフェースに現れる特定のテキストの中に含むことによって、話し手から感情を判定することが可能とされてもよい。参加者の異なる感情を表現するために会話インタフェースで一般に使用される感情アイコンは、段落、フレーズ、または単語内で感情を識別するために、（リアルタイムまたは記録された）会議の文字起こしの特定の区分または部分に埋め込まれてもよい。
【００５６】
本発明の一実施形態で、ＷＩＳ  Ｕ−ＭＧＲ（３３３）は、特定の他の参加者に関連する話し手出力の修正、緩和（ｍｏｄｅｒａｔｉｏｎ）、または変更を可能にして、プレイバックの間に広がることがないように、またはそれとは別に、ライブセッションの間に会議参加者全員かまたはその選択された一部にとって、部分的または全体的に認識不可能となるように、信号処理を改良するためのデータ処理を使用してもよい。例えば、モデレータは、ＷＩＳデータを使用して、会議中のスミス氏とジョーンズ氏との会話を、参加者Ａ〜Ｃ、Ｅ、ＦおよびＨにはわからないか、または聞こえないようにしてもよい。例えば、会議は、Ｒ＆Ｄポートフォリオに関するジョーンズ氏の業務へのデューデリジェンスの質問を含む許可ミーティングであってもよいし、スミス氏は、任意の可能な合意の中で会社の利害関係を代表するために選ばれた、ジョーンズ氏のＩＰ弁護士であってもよい。
【００５７】
上述の実施形態で、スミス氏とジョーンズ氏の会話に関して、何が言われて、それを誰が言っているのかということは、何が聞こえて、何が聞こえないかということと同じくらい極めて重要であるかもしれない。モデレータが、他のチャネルに関してほぼリアルタイムでジョーンズ氏とスミス氏との間の行動を変更することが可能となるために、必要とされるもののすべては、会議の間のスミス氏の唯一の役割が、ジョーンズ氏に助言を与えることであることを示す表示である。したがって、スミス氏のチャネルがアクティブになるときはいつでも、ジョーンズ氏を除く他の参加者への信号出力は、直ちに、スミス氏のチャネルがアクティブである期間、送信前に歪められる。その後、ジョーンズ氏のチャネルが、（ジョーンズ氏への応答を示す）スミス氏の話す後の所定の期間内でアクティブになると、信号出力は、チャネルがアクティブ状態の間、スミス氏を除く他の参加者への送信の前に歪められる。したがって、出力信号は、一般に、コンテントを聞くことを許可された１人の人、または複数の人に返信される信号を除く、ブリッジから参加者全員への出力の間、変形され、歪められるか、またはそれ以外では中断される。
【００５８】
セキュリティ対策を確実にするために、説明されたチャネルのための出力には若干の遅延がある。一実施形態で、この性能は、ＷＩＳ−Ｕ  ＭＧＲ（３３３）か、またはＷＩＳ  ＳＷ（３０８）のいずれかによる監視および実施に関して自動的に動作するように、事前にプログラムされていてもよい。さらに、ライブセッションの間に試みられる任意の文字起こしは、スミス氏とジョーンズ氏との間で往き来する会話に関して、起こらないようにプログラムされている。しかしながら、その他の会議参加者は、まだ、ライブの対話の間に会話のコンテントを広めることができなくても、セッション間の時間で私的な会話が生じていることを、自分たちのインタフェースを通して目で見てわかってもよい。前述の実施形態は、また、２人以上の会議参加者が、コンテストの審査員であり、参加者が互いに競い合っているというシナリオでも実用的である。審査員間の会話は、別の審査員にしか聞こえず、参加者には聞こえないということが望まれてもよい。可能なアプリケーションおよび変形アプリケーションが数多く存在する。
【００５９】
一実施形態で、改良型の信号処理は、会議参加者によりクリアな出力を返信するための品質制御手段を含んでもよい。利得均一化およびノイズ消去も、会議の間の１人の話し手または選択された複数の話し手に関して、すべて制御されてもよい。信号のアクティビティは、会議参加者に割り当てられているか、またはそれ以外に会議参加者に関連しているチャネルに関係するので、話していないにも関わらず、ノイズの多い入力信号を有する参加者は、出力全体から自動的に削除されてもよい。
【００６０】
会議後の記録または音声トラックに関して、改良型デジタル信号処理は、ＷＩＳデータを使用して、記録または記録のバッチ内の区分で行われる迅速な「クリーニング」または「音声改良」を可能にしてもよい。１つの例で、目標は、記録から特定の話し手の音声出力を削除することであってもよい。埋め込まれたＷＩＳタグまたは参照に索引を付けることができるデジタル信号処理エンジンを使用する、バリューシステムが用いられてもよい。例えば、複数のアクティブのチャネルで記録された所与の音声ファイルまたはトラックは、ＷＩＳデータにしたがって分割されてもよい。単純な例で、記録が、４人の異なる話し手（チャネル）、および記録の測定可能な音声区分または部分を有するということが、それらの話し手のうちの１つの特徴であると識別されてもよいとする。目標がこのことだとすると、４人の話し手のうちの話し手２が、全体の記録から除去される必要がある。
【００６１】
ＤＳＰエンジンは、話し手２の出力として識別される記録の中の任意の区分または音声部分で、音声ボリュームを基準値の「１」から値「０」に設定するように事前にプログラムされてもよい。完了された記録は、話し手２に帰する部分に関しては、第三者に聞くことはできない。同じく、ボリュームのレベルは、特定の話し手のために増減されることが可能である。例えば、共通の値「１」を２倍に増やすと、話し手のためのボリュームは２倍になり、値「１」を半減すると、レベルが半減する。ＷＩＳタグを参照することができることによって、ＤＳＰエンジンは、記録に素早く目を通し（ｒｕｎ  ｔｈｒｏｕｇｈ）、スタジオのオペレータにとって関心のある部分について、一連の事前プログラムされた変更を行うことができる。変更は、ノイズ除去、音声ディストーションの実施、ならびに低音域レベル、高音域レベル、利得、エコー、およびその他の音声特性の制御を含んでもよいが、これらに限定されるわけではない。本発明の精神および範囲から逸脱することなく、その他の方式が使用されてもよい。
【００６２】
図５は、本発明の実施形態による、ＷＩＳ  Ｕ−マネージャ（３３３）によって可能になる情報検索構造５００を示す構成図である。構造５００は、一般にこの実施形態で、会議ブリッジ５０８、第三者サービスまたはホストノード５０７、およびＣＰＥユーザ５０１によって支援される。この例で、ＣＰＥ５０１は、一般に普及したネットワークにアクセスすることができるデスクトップコンピュータである。ＣＰＥ５０１は、コンピュータのグラフィックモニタが表示された検索エンジンインタフェース５０２を有する。ＣＰＥ５０１は、通常の環境を通してオンラインのサーバであってもよい、第三者ノード５０７に接続してもよい。この例で、ノード５０７は、ほとんどの場合は会議参加者に送信される出力と同時に、会議ブリッジ５０８からの会議出力を処理しかつ記録するように構成されている。
【００６３】
ノード５０７は、それぞれの識別された話し手の会議信号、時間によって信号と相互に関連可能な（ｃｏ−ｒｅｌａｔａｂｌｅ）ＷＩＳデータ記録、および、もし利用可能であればＲＷＩＳデータを受信する。ＷＩＳ−Ｕ  ＭＧＲ（３３３）は、得られてもよい任意のＯＷＩＳデータのために、着信する信号およびデータを処理するために統計プロセッサ／サーバ５１１を導入する。処理の一部は、記録されたアーカイブに埋め込まれるか、または組み合わせられたＷＩＳデータを反映するために、記録に注釈を付けることを含む。この情報は、レポジトリ５０９に記憶されてもよい。さらに、ＣＳＴは参照のために、レポジトリ５１０に記憶されてもよい。任意の活動中の話し手に関連する任意のＯＷＩＳデータは、参照のために、会議の識別された話し手に相互に関連可能であるＲＷＩＳおよびＯＷＩＳアーカイブを記憶するように構成されたレポジトリ５０６に記憶されてもよい。ＯＷＩＳデータは、例えば、識別された話し手の各人の参加入力の、特定の会議または一連のアーカイブされた会議の進行の間に活動中であったすべてのその他の識別された話し手に対する比率を記載するデータを含んでもよい。割合は、会議毎に分析されてもよく、また複数あるのであれば、それらの話し手について多くの会議で、またはそれらの話し手を特徴とするアーカイブされた２つ以上の会議で平均にされてもよい。
【００６４】
記録されかつ注釈を付けられた会議情報が、検索のためにアーカイブされてもよい、異なる方法がある。例えば音声会議の完成した会議の文字起こしは、含まれているテキストの作成者（話し手）を識別する注釈と、話し手に結び付くそれらの注釈に含まれるタグとともに記憶されてもよい。そうした注釈は、話し手の氏名、タイトル、会議データ、および会議の日付に注釈を付けられたテキストが話し手によって話された時間（期間）を含んでもよい。このＷＩＳ情報は、その部分のすべて、１つ、またはそれらの組合せによって検索可能である。そのため会議の日付、および１人の話し手または複数の話し手がその日付に、その時間の範囲内で話をした特定の時間範囲を入力することは、識別可能なので、発言されたことの文字起こしは識別可能であり、さらに、検索された文字起こしを表すマルチメディア区分を返信するために使用されることが可能である。パワーポイント（商標）またはその他のプレゼンテーションなどの第２のプレゼンテーションもまた、時間によって会議記録と相互に関連可能であり、そのため話し手または話し手の文字起こしに関連するプレゼンテーションの部分は、返信される検索結果の一部をなすことが可能である。
【００６５】
ノード５０７によってＣＰＥ５０１に用いられてもよいインタフェース５０２は、１つまたは複数の検索用語データ入力フィールドを有している。この場合、ＲＰＩ型の判定基準を入力するための１つのフィールド５０３と、キーワードおよびフレーズの記述を入力するためのフィールド５０４との２つの入力フィールドがある。アーカイブの検索を絞り込むか、または細かく区別するためのさらなるフィールドが、本発明の精神および範囲から逸脱することなく与えられてもよい。例えばユーザが操作するインタフェース５０２は、会議の識別番号、会議が開かれた日時、または単に会議のタイトルを入力することによって、特定の会議アーカイブの検索を絞り込んでもよい。２つ以上の会議アーカイブは、会議のタイトルまたは識別番号をリストアップすることによって行われる１回の検索か、または指定される領域の範囲内にあるすべての会議アーカイブを含むように日時範囲を指定することによって行われる１回の検索に含まれることが可能である。ユーザは、すべての会議アーカイブを検索することもまた可能である。
【００６６】
ＷＩＳ判定基準とキーワードとの例を用いて、ユーザは、話し手の氏名を求めてすべての会議アーカイブを検索するために、入力フィールド５０４に「話し手」を、入力フィールド５０３に「５０％を超えて活動」を入力してもよい。すべての会議アーカイブを平均して５０％の閾値を超えて参加する、すべての話し手へのリンクを含む結果リスト５０５が、返信される。話し手についての結果は、連絡先情報、参加した会議のリスト、各会議について話し手によって作成された文字起こしテキストへのリンク、およびその話し手を特徴とする会議アーカイブの音声および、または音声／映像クリップへのリンクを含んでもよい。
【００６７】
別の実施形態で、ＣＰＥ５０１にインストールされたマルチメディアソフトウェアプレイヤで見ることができるようなやり方で、実際の会議のマルチメディアプレゼンテーションから求められるクリップを準備するために、スタジオアプリケーションが使用される。好ましい実施形態で、会議からの実際のテキストは、フレーズまたはキーワードによって検索可能であり、ここではＷＩＳ情報（話し手識別）が、検索の判定基準としても使用されてよい。例えば投資コンプライアンスの監査人は、特定の売買人が、特定の株式の売却を主張しているのか、それとも単に入手可能性を述べているだけなのかを判定するために、１つの会議アーカイブ、または一連のアーカイブを検索してもよい。例えば「ナショナル」というキーワードまたは株式銘柄と、売買人の名称とは、ＷＩＳ注釈が、テキスト結果の作成者として特定の売買人を識別する、ナショナルという言葉を含むすべてのテキストを返信するために使用されることが可能である。「ナショナル」という名称は含むが、作成者としてその売買人を認識するＷＩＳデータに関連しない文字起こしされたテキストは、返信されることはない。
【００６８】
一実施形態で、ＷＩＳ  Ｕ−ＭＧＲ（３３３）は、入力された判定基準に対して文字起こしされた会議データを検索し、考慮された各結果のために見つけられたテキストに対してどの会議チャネルが責任を負うのかを判定するために、テキストの選択について注釈を付けられたチャネル信号情報にアクセスする。次いで結果の最適化として、ソフトウェアは、検索の判定基準で参照される話し手の、チャネルと話し手との関係を判定するためにＣＳＴ５１０を参照し、適切なチャネル表示に関連しないすべての結果を除去し、参照される話し手のチャネルを示す結果のみを返信する。別の実施形態で、すべての情報は、注釈によって言及されかつ注釈を付けられた文字起こしとして記憶される、各々の識別可能な文字起こしに添付されるメタデータとして含まれる。参照される話し手について利用可能なＰＩは、取り出しとプレイバックとのための実際のマルチメディア区分へのリンクと同様に、結果の中でも利用可能であってよい。可能性は数多く存在する。
【００６９】
図６は、本発明の別の実施形態による、図３のＷＩＳ使用マネージャによって可能となるテキスト文字起こしシステム６００へのスピーチを示す構成図である。システム６００は、会議出力へのアクセスと、会議出力の注釈を付けられた文字起こしを記憶するように構成されたマスレポジトリなどの記憶媒体へのアクセスとを備えた、コンピューティングハードウェアの適切な部分上で実行可能なＷＩＳ  Ｕ−ＭＧＲ（３３３）の一部であってよい。システム６００は、会議のマルチメディア記録のアクセスおよび取り出しが可能となるように構成された、入力／出力（Ｉ／Ｏ）データポート６０１を有する。ソフトウェアプレイバックモジュール６０２は、システム６００の一部として提供され、会議後の文字起こしのためにダウンロードされた会議ファイルを再生するように構成されている。
【００７０】
この実施形態で、ＷＩＳ信号および会議音声／映像は、システム６００内に提供される時間同期化モジュール６０４に転送される。時間同期化モジュール６０４は、チャネルまたはシート表示における各変更の時間オフセットに注目し、会議音声／映像プレイバックに同期化されることが可能な記録を作成する。音声／映像は、システム６００内に提供されるテキスト文字起こしモジュール６０３へのスピーチに送信され、音声認識技術（ＶＲＴ）と適切な意味論的データベース（不図示）とによって改良される。同期化モジュール６０４は、チャネル活動の各々の変更のために時間オフセットデータを提供する。時間オフセットデータは、記録された会議の始まり（会議の開始時間）に関するアクティブのチャネルの識別を示し、時間（ｔ）０では、チャネルＡがアクティブであってもよく、ｔ６０秒の時点では、チャネルＢがそれに代わり、ｔ９０秒の時点では、再びチャネルＡに代わってもよい、などという具合である。ここで、話し手が重複するか、または２人以上の話し手が同時に話している場合、２つ以上のチャネルが同時にアクティブであってよいことに注意することが重要である。この場合、ｔ２：３０秒で、チャネルＡＢの両方がアクティブであってもよく、ここでの変更は、２つのチャネルのうちの１つが、残りのもう一方を残しながら中断することを意味しうる。したがってｔ３：００には、チャネルＡは、時間ベースの文字起こしに対応する時間変更を示して、消滅してもよい。ここで、実際に２人以上の話し手が、同時に話をしていてもよく、したがって、文字起こしは、時間ベースの表示によって重複したスピーチを反映することに注意したい。
【００７１】
システム６００は、チャネル対話し手（ＣＳＴ）関係モジュール６０５を含む。モジュール６０５は、話し手表示を、テキスト注釈エンジン６０８へ提出するためのＷＩＳデータ部分を完成させるＷＩＳ信号の中で示される各々のチャネルまたはシート参照に関連させるように構成されている。文字起こしモジュール６０３は、時間オフセットデータを含む文字起こしされたファイルを、テキストファイル６０７として出力する。ファイル６０７は、この目的のために構成されたメモリ（ＭＥＭ）の中に一時的に記憶される。時間オフセットデータは、埋込みマーカもしくはプレースホルダ、または注釈を挿入するための適切な挿入ポイントを参照するファイル索引の一部として提供されてもよい。テキスト注釈エンジン６０８は、文字起こしされたファイルに順次アクセスし、各ファイルの適切なポイントで、適切な話し手（ＷＩＳ）表示を用いてそれらのファイルに注釈を付ける。次いで、注釈ファイルは、完成した、検索可能な会議記録のテキスト文字起こしとして記憶装置にオフロードされる。ＷＩＳ情報を用いて文字起こしされたファイルに注釈を付けることに加えて、注釈エンジン６０８は、メタデータまたはリンクを、各話し手について知られているＲＷＩＳデータに添付してもよく、そのデータは、ファイル上で実行される検索操作の間に、単純なＷＩＳ表示に加えて返信されてもよい。ＯＷＩＳデータもまた、添付されるメタデータに含まれてもよい。
【００７２】
一実施形態で、システム６００は、「実行時」モードで、ライブの会議セッションの間に動作するように事前にプログラムされていてもよい。この実施形態では、入力ストリームが会議ブリッジのライブの出力信号になるので、プレイバックソフトウェア６０２は必要とされない。この実施形態でもまた、注釈を付けられたテキストファイルは、ブリッジの音声／映像出力と比べて多少の伝送遅延を伴って、会議参加者全員またはその選択された一部に送られてもよい。これは、参加者のうちの１人または複数が、耳が不自由である場合、またはテキストファイルを受信するのにより相応しいデバイスを操作する場合、特に役立つであろう。一実施形態で、受信されるテキストファイルは、話し手に関するさらなるＲＰＩデータを求めるために、またはその話し手と接触して通信するために、挿入された注釈の上をクリックやマウス操作（ｍｏｕｓｉｎｇ）することによって、オンラインでやり取りされてもよい。この実施形態の一部の変更例で、注釈に関連するデータのうちの一部またはすべては、ドキュメントに埋め込まれられることができるが、ユーザが注釈と対話するまでは視界から隠されていてもよく、そうすることによって、関連のデータが、ポップアップメッセージ、または何らかの他の映像画面、データボックス、またはツールバー上などのドキュメントのスペースとして、ユーザのディスプレイ画面に飛び出してくるようにしてもよい。本発明の精神および範囲から逸脱することなく実施されてもよい、多くの可能性が存在する。
【００７３】
本発明のシステムが、単一のノード上にあるソフトウェアの実装として、または各部分が同じノード上にあるか、もしくは分離しているが接続されているノードに分散されている、ソフトウェアの２つ以上の協働する部分として、本発明の精神および範囲から逸脱することなく提供されてよいことは、当業者には明白であろう。ＭＥＭ６０６、ポート６０１、および６０９などの特定の構成要素は、実行される様々な作業の行程でこれらの構成要素を導入する、ソフトウェアをホストするノードにとって一般的なものであってよい。
【００７４】
図７は、本発明の態様による、会議のマルチメディア資料の注釈または文字起こしのためのステップを示す、プロセスフロー図７００である。ステップ７０１で、図６のシステム６００に類似する注釈システムは、会議記録にアクセスする。一実施形態で、システムは、ライブの会議ストリームを取り入れてもよい。別の実施形態で、システムおよびソフトウェア、またはそれらの機能部分は、会議ブリッジに存在してもよく、それらは本発明を実行するために変更されてもよい。会議出力がアクセスされてよい限り、ライブであるにせよ記録であるにせよ、コンテントの文字起こしおよび注釈は実行されてよい。
【００７５】
ステップ７０３で、チャネルまたは「ＷＩＳ」信号は、好ましくはコンテント信号と同期でアクセスされる。ＷＩＳ信号は、アクティブチャネルの表示のみを含んでいてもよく、または、例えば話し手に応じるアルゴリズムが、話し手を識別するために使用され、それらの話し手が、彼らを識別するために使用されてもよい事前に提出された音声サンプルを有する場合、ＷＩＳデータを含んでもよい。この場合、事前に割り当てられたチャネルまたはシートは、ＷＩＳデータを得る必要はないことがある。この例は、混合信号の中の信号として識別可能なシートまたはチャネルを、会議参加者に事前に割り当てられていることを仮定している。
【００７６】
ステップ７０２で、システムは、会議のマルチメディア音声コンテントの文字起こしを開始する。ステップ７０４で、システムは、ＷＩＳチャネル信号表示を利用して、識別可能なアクティブチャネルを、文字起こしされたテキストのコンテントに個別の時間信号にしたがって関連させる。例えば、音声コンテントに入ってからのｔ５分で、テキストに文字起こしされた、発言された言葉は、その時にアクティブであると認められる少なくとも１つのチャネルに対応し、文字起こしされたコンテントを作成したのは、どのシートまたはチャネルであるのかを示す。この活動の中で、システムは、ある話し手がいつ終わり、別の話し手がいつ開始するのかを示す時間の変化を記録する。この関連付けは、タグ付け方法によってか、または注釈の間に後に置かれる注釈フィールドまたはプレースホルダを挿入することによって達成されてもよい。関連付けは、本発明の精神および範囲から逸脱することなく、実際的または仮想的であってよい。
【００７７】
ステップ７０４で、コンテントは文字起こしされ、注釈の準備が行われる。このステップで、注釈エンジン、または一実施形態におけるライブ注釈オペレータは、適切な話し手を、注釈フィールドまたはプレースホルダによって示されるチャネル信号表示に関連させるために、先に図４を参照して説明されたＣＳＴ４０６に類似するデータテーブルを使用して、一連のデータベース探索を実行する。このプロセスは、好ましい実施形態ですべて自動化されていてもよい。一実施形態で、注釈を付けられたフィールドは、その話し手によって作成されたと判断された、文字起こしされたテキストに関連する話し手識別のみを含む。これは、注釈プロセスを完了するために十分であり、そのために提供するＷＩＳ情報は、この場合では発言され、文字に起こされたコンテントとの関係である。
【００７８】
ステップ７０６で、注釈エンジンは、任意に、単なる識別だけでなく、識別された話し手についての情報にリンクする、プレゼンス情報のメタデータをさらに提供してもよい。このメタデータは、適切な話し手の識別データと同じ注釈フィールドまたはプレースホルダの場所を占めてもよい。このように、このフィールドをマウス操作する（ｍｏｕｓｅ−ｏｖｅｒ）ことによって、文字起こしされたドキュメントを用いて作業するユーザに対して、連絡先情報、会社情報等の追加情報（ＲＷＩＳデータ）が何らかの目に見える形で現れるようにしてもよい。ステップ７０５およびステップ７０６は、１つのドキュメント、または一連のドキュメントの中の各々異なる注釈フィールドのために行われる、事前の注釈ステップであってよい。
【００７９】
ステップ７０７で、注釈エンジンは、適切な話し手情報、および任意でメタデータに注釈を付けるか、またはそれらを各々の見つけ出されたフィールド、もしくは文字起こしされたテキストで見つけ出されたプレースホルダに挿入する。一実施形態で、さらなる注釈ステップ７０８は、ステップ７０７と合わせて実行され、それによってプレゼンス情報の各メタデータのセットは、タグを付けられるか、またはそれ以外では、テキストの文字起こしからは独立して記憶されるが、注釈の個々のものとのやり取りを通してアクセスされてもよい、追加情報（ＯＷＩＳデータ）にリンクされる。ＯＷＩＳは、話し手が識別された１つの会議、または一連の会議の期間を含む時間における会議の話し手のために、システムによって収集された会議参加統計値などを含んでもよい。ＯＷＩＳデータの１つの例は、他の会議参加者によって判断されたとき、話し手の関与するコンテントの問題に対する合意、または確認に関して、平均で９０％の承認率を誇る特定の話し手であってもよい。その他の統計値は、特定の話し手は、１回の会議の間か、または複数の会議の期間で話をしたときに、他の会議参加者の６０％から反対されているということでもよい。可能性は数多く存在する。一実施形態で、会議中にコンテントを作成した任意の話し手のために、説明されたようなＯＷＩＳデータにアクセスすることは、今後の対話に向けての話し手の訓練を補助するために使用されることが可能である。さらに、ＯＷＩＳデータは、会議セッションの間に観察されかつ記録されてもよい行動を含んでもよい。怒り、恐れ、喜び等の特定の感情は、音声の抑揚分析、ボリュームの監視等を使用することで、リアルタイムで感知されてもよい。その後、編集されたデータは、例えば怒号によってカバーされるテキスト部分を表す、すべて大文字で示される文字など、文字起こしされた記録の中で視覚的表示としてレンダリングされることが可能である。感情アイコンもまた、感情がほのめかされるか、または認められる特定の区分での埋込みＷＩＳデータによるものとされてよい。もしあるとすれば、話し手の感情状態を記録に取り入れることの利点は、会議アーカイブの検索の間に、感情を含む区分が速やかに分離されることが可能であるということである。
【００８０】
上述の性能は、事後の分析において、例えば、記録された音声または文字起こしされたテキストファイルから、すなわち会議の主題であったかもしれない提案、または提案された解決策群、または方針変更の最大の論点と同等と見られてよい、会議中に生じた最も激しい議論のやり取りを分離するために役立つことがある。同様にこの性能は、リアルタイムでの会議の音声部分へのアクセスを持たない人にとって、有益であるかもしれない。このように、その人たちもまた、自分たちのテキストインタフェースを通して感情的な態様を体験してもよい。
【００８１】
ステップ７０９で、完成されかつ注釈を付けられた記録は、この目的のために構成されたレポジトリに記憶されてもよく、このレポジトリは、改良された検索方法によって、いつ、誰が何を言ったか、どれだけのインスタンスが言われたのかなどを素早く判定することなどの業務上の用途のために、他の関係者にアクセス可能とされてもよい。
【００８２】
この例のステップの厳密な順序および内容は、本発明の精神および範囲から逸脱することなく、事前のプログラムの間に選択されるオプション、または注釈プロセスの指示の準備、および求められてもよい最終結果によって多少変わってもよいことは、当業者には明らかであろう。本質的に基本的な必要条件とは、システムが、（記録またはライブの）マルチメディア会議信号の音声部分の文字起こしされた場面のすべてのうち、どの部分を誰が話したのかを判定し、その表示を文字起こしされたテキストの正確な部分に挿入するか、または関連させるということである。
【００８３】
さらに別の実施形態で、プロセス７００は、セキュリティ、プライバシー、またはその他の懸念事項のために、特定の部分が記録から削除されるべきであること、または記録はされるが、文字起こしの中で判別できないようにレンダリングされるべきであることを命じる場合、音声コンテントの特定部分の文字起こしを変更する、変化させる、または単にレンダリングしないための１つまたは複数のステップを含んでもよい。同様に、このプロセスは、文字起こしの前に、伝送中のサービス操作の品質または信号の変更によって、記録プロセスかまたはライブストリームで実行されてもよい。
【００８４】
図８は、本発明の実施形態による、ＷＩＳ関連情報のために会議アーカイブの情報検索を準備しかつ提出するためのステップを示すプロセスフロー図８００である。ステップ８０１で、ユーザは、キーワード、フレーズ、時間データ、ＷＩＳデータ、およびプレゼンス情報のうちの任意の１つ、またはそれらの組合せを使用して、会議アーカイブを検索するように構成された検索エンジンインタフェースを起動する。インタフェースは、会議サービスもホストしている第三者サービスによってホストされるものであってよい。ユーザは、インタフェースにアクセスするために、例えばウェブサイトまで進んでも（ｎａｖｉｇａｔｅ）よい。
【００８５】
ステップ８０２で、ユーザは、検索すべき会議アーカイブを識別するデータを入力するか、または発表された会議アーカイブのリストからそれらを情報検索の中に含むために単に選択してもよい。このステップで、会議アーカイブは、１つまたは複数の会議記録が記憶されている１つのレポジトリ、またはその部分もしくは区分を示すことになる。複数の期間のアーカイブは、会議記録を保有する複数のデータベース区分、部分、またはレポジトリを示す。例えば、１つの領域の中に研究開発会議が記憶される一方で、別の領域の中に販売および顧客サービス会議が記憶されてもよい。さらに、実際のマルチメディア記録は、同じコンテントのテキスト注釈から分離されて記憶されかつそこへリンクされてもよい。
【００８６】
ステップ８０３で、ユーザは、会議のタイトル、会議の日時および時間帯などの会議イベントパラメータを指定してもよい。例えば、ユーザは、会議記録の中に何回も存在しており、または情報のインスタンスが２つ以上の会議にまたがっている情報を検索してもよい。したがって、アーカイブを選択し、その後データを指定することによって、そのアーカイブに記憶されたデータのうちのすべての会議記録は、その検索の中に含まれる。一実施形態で、利用可能なすべての会議記録は、１つの検索操作を使用することで、情報のために検索されてもよい。
【００８７】
ステップ８０５で、検索エリアを規定した後、ユーザは、規定されたエリア内で検索を始めるために、フレーズまたは１つまたは複数のキーワードを入力してもよい。一実施形態で、特定の話し手によって作成されたコンテントに範囲を限定することによって、ユーザは、検索のエリアをさらに細く分けてもよい。ステップ８０６で、ユーザは、「Ａｄｏｂｅ（商標）の発行者によって承認される形式で返信せよ」などの、返信パラメータを求めてもよい。別の実施形態で、ユーザは、オンデマンドで音声クリップを再生するために命令を出してもよく、このクリップは、文字起こしされたテキスト区分または部分にリンクすることによって関連付けられている。ステップ８０７で、ユーザは、検索をホストしている第三者ノードにクエリを出してもよい。返信される結果は、情報検索の目標によって異なってもよい。情報検索の目標は、多面的なものであってもよい。例えば、結果は、１つまたは複数の会議記録の中で、「ナショナルを売却せよ」と言ったのは誰で、話し手はどれだけ多くのインスタンスを言ったのかということを示してもよい。別の検索結果は、特定の研究開発会議の記録に含まれてもよい特定のフレーズの中で、「順序とシステムと」と言った話し手を示してもよい。入力として話し手を指定することによって、検索操作は、その検索のために規定されたエリア内の話し手の発言のすべてを返信してもよい。
【００８８】
結果データとして返信される特定の情報を所有するために、クエリ入力を結合する方法は数多く存在することが、情報検索の当業者には認識されよう。当業者はまた、特定の入力によって結果の範囲が広げられるか、または狭められてもよいことも認識するであろう。一実施形態で、ユーザに返信される結果は、返信される結果に関連して記憶される別の情報へのリンクを含む。例えば、「アルファ株を推薦します」などの特定のフレーズが、２人以上の話し手によって複数の会議記録にわたり話されている場合、検索のための入力としてフレーズを使用することは、このフレーズまたはその変形を使用したすべての話し手に戻ることになり、各結果は、連絡先情報、要約データ、雇用期間（ｅｍｐｌｏｙｍｅｎｔ  ｌｏｎｇｅｖｉｔｙ）、または任意のその他の事前に関連付けられた情報など、識別される話し手についての追加の情報を提供してもよい。さらに、統計データは、会議の話し手の各々について編集されてもよく、追加情報が、統計データ、または少なくとも、即時アクセスを可能にするための案内可能なリンクまたはタグを含むように、ＷＩＳデータに添付されてもよい。
【００８９】
改良型の情報検索性能およびスピーチ対テキストの文字起こし性能に加え、本発明の実行から理解されてもよい、その他の拡張機能およびサービスがあることを、当業者には理解されよう。例えばスピーチ対テキストの文字起こしは、話し手がすべて同じ言語を話すわけではない場合に、マルチパーティ会議の出力の認識が可能となるように、言語に応じる翻訳を含むように改良されてもよい。この実施形態で、Ｍ人の話し手のための会議の入力は、それらの話し手の自然言語の中にあることが可能である。話し手対言語（ＳＴＬ）テーブルは、会議の出力がリアルタイムで翻訳されるか、または文字起こしの中で翻訳され、受信された会議出力が翻訳された合成音声であるにせよ、インスタントメッセージインタフェースで、またはＲＳＳフィード等を経由して受信された、翻訳されたテキストであるにせよ、受信側から見ると、すべての他の話し手がその人の言語を話しているかのように見えるようにしてもよいように、話し手を識別するだけでなく、その話し手の自然言語も識別するために、さらに前に説明されたＣＳＴ４０６などのＣＳＴに加えて、またはそれらに組み込まれて提供されてもよい。
【００９０】
ＷＩＳデータを記憶し、その後データを取り出して、音声／映像の、または文字起こしされた会議のコンテントとともに効果的にそれを参照するために開発されるか、そうでなければ導入されてもよい様々な方法があることは、データ記憶の当業者には理解されよう。そのようなアプリケーションの１つにおいて、ＷＩＳ信号は、別々の時間信号、同期して関連付けられる２つの独立のファイルとして、会議記録の音声映像信号から分離して記憶される。
【００９１】
別の実施形態で、ＷＩＳデータは、一連のチャンクタグ値として、会議の音声／映像ファイル内に埋め込まれてもよい。チャンクは、各話し手について変化する可変長さで表されてもよい。各チャンクは、適切なＷＩＳデータでタグを付けられる。さらに別の実施形態で、ＷＩＳデータを含むために、損失ビットシグナリングが、音声波形で使用されることが可能である。この場合、ＷＩＳデータは、音声信号よりもずっと低い速度で変化するので、ファイルのデータ部分の最下位ビットが、適切なＷＩＳデータに稀に反映される場合がある。
【００９２】
ＷＩＳ信号を２４ビットとして、８ＫＨｚの速度でサンプルされた８ビットの単語を使用して音声部分を保存すると、例えば３２フレーム毎に１回の音声信号の実際の変更は、ＷＩＳ信号全体を適切に表し、プレイバックの品質に聞き取れるほどの影響を与えることはない。さらに、音声を再生するためのプレイバックソフトウェアは、変更を必要としない。埋め込まれた音声からＷＩＳ信号を抽出するために、独立のデコーダが提供されてもよい。多重視覚ソフトウェアのウィンドウの中などに表示するようにフレームを操作することによって、１つのウィンドウ中で音声が聞かれ、現在の話し手の画像が表示されることが可能になり、任意のグラフィック表現のうちの視覚的な部分は、プレイバックソフトウェアの別のウィンドウに表示されてよいようにするために、映像もまた、この方法で扱われてもよい。
【００９３】
本発明の方法、システム、および装置は、本発明の精神および範囲から逸脱することなく、様々な異なるデバイスを使用して、様々な異なる通信構造において実行されることが可能である。同様に本発明は、説明された構成要素のうちの一部、それらの組合せ、またはそれらのすべてを使用して、本発明の精神および範囲から逸脱することなく提供されてもよい。ＷＩＳ決定および適用のための業務上の多様な用途は、それらのうちの多くが本明細書で既に説明されているが、制御の単一のポイントから可能とされるその選択された一部、または全体が考案されてもよい。上で述べた多くの実用的な実施形態および説明された実施形態を考慮して、本発明には、審査中に最も広い範囲を与えられるべきである。本発明は、特許請求の範囲によってのみ、範囲を制限されるものとする。
【図面の簡単な説明】
【００９４】
【図１】先行技術による、典型的な会議ブリッジの入力／出力信号処理を示す構成図である。
【図２】先行技術による、最も強い信号のみが混合されかつ出力として提供される、典型的な信号処理を示す構成図である。
【図３】マルチパーティ会議、および話し手を示すデータの使用が、本発明の実施形態によって支援される通信ネットワークの構造の概観を示す図である。
【図４】本発明の実施形態による、図３のＷＩＳ使用マネージャの１つの機能を示す構成図である。
【図５】本発明の実施形態による、図４のＷＩＳ使用マネージャによって可能になる情報検索プロセスを示す構成図である。
【図６】本発明の別の実施形態による、図３のＷＩＳ使用マネージャによって可能になるスピーチ対テキスト文字起こしサービスを示す構成図である。
【図７】本発明の態様による、会議のマルチメディア資料の注釈または文字起こしのためのステップを示すプロセスフロー図である。
【図８】本発明の実施形態による、ＷＩＳ関連情報のために会議アーカイブの情報検索を準備しかつ提出するステップを示すプロセスフロー図である。
【符号の説明】
【００９５】
１００、２００  入力信号構造
１０１（１−ｎ）  入力
１０２、２０２  ＤＳＰ設備
１０３  混合信号
Ｓ１、Ｓ２  信号
３００  通信ネットワーク
３０１  ワイドエリアネットワーク（ＷＡＮ）
３０２  ローカルエリアネットワーク（ＬＡＮ）
３０３  公衆交換電話網（ＰＳＴＮ）
３０４  無線ネットワーク
３０５、３０６  インターネットサービスプロバイダ（ＩＳＰ）
３０７  会議ブリッジ（Ｃ−ブリッジ）ハードウェア／ソフトウェア設備
３０８ａ、３０８ｂ、３０８ｃ  ＷＩＳソフトウェア（ＳＷ）アプリケーション（ＷＩＳ  ＳＷ）
３０９  マスデータレポジトリ
３１０  ネットワークバックボーン
３１１  管理ワークステーション（ＡＤＭＩＮ）
３１２、３１５  ネットワークケーブル
３１３  ネットワークアクセスケーブル
３１４  無線インターネットサービスプロバイダ（ＷＩＳＰ）設備
３１６  電話ケーブル
３１７  ラップトップコンピュータ
３１８、３２３  電話機
３１９  回線
３２０  ローカル電話切換え（ＬＳＷ）スイッチ
３２１、３２２  ＣＰＥ電話機
３２４  デスクトップコンピュータＣＰＥ（顧客構内機器）
３２７  ＬＡＮバックボーン
３２８  ＬＡＮコンピュータ
３２９  ＩＰ電話
３３０  マスレポジトリ
３３１  インターネットプロトコルルータ（ＩＰＲ）
３３２  ネットワークアクセス回線
３３３ａ、３３３ｃ、３３３ｂ  「話し手は誰か」の使用マネージャ（ＷＩＳ  Ｕ−ＭＧＲ）
４０１  バックボーン
４０２  ＣＰＥ（顧客構内機器）−１
４０３  ＣＰＥ−２デバイス
４０４  ＣＰＥ−３
４０５  顧客ソフトウェアアプリケーション
４０６  チャネル話し手テーブル（ＣＳＴ）
４０８  データリンク
４０９  ライブ出力
４１０  会議ディスプレイインタフェース
４１１、４１２  出力ストリーム
４１３  インスタントメッセージインタフェース
４１４  対話の証拠
４１５、４１６  ポップアップメッセージ
４００  ＷＩＳ構造
５００  情報検索構造
５０１  ＣＰＥユーザ
５０２  検索エンジンインタフェース
５０３、５０４  フィールド
５０５  結果リスト
５０８  会議ブリッジ
５０７  第三者サービスまたはホストノード
５１０  チャネル話し手テーブル（ＣＳＴ）
５１１  統計プロセッサ／サーバ
５０９、５０６  レポジトリ
６００  テキスト文字起こしシステム
６０１、６０９  入力／出力（Ｉ／Ｏ）データポート
６０２  ソフトウェアプレイバックモジュール
６０３  テキスト文字起こしモジュール
６０４  時間同期化モジュール
６０６  メモリ（ＭＥＭ）
６０５  チャネル対話し手（ＣＳＴ）関係モジュール
６０８  テキスト注釈エンジン
６０７  テキストファイル
７００、８００  プロセスフロー図
７０１、７０２、７０３、７０４、７０５、７０６、７０７、７０８、７０９、８０１、８０２、８０３、８０４、８０５、８０６、８０７  ステップ
【図１】
2007189671.tif 000003
【図２】
2007189671.tif 000004
【図３】
2007189671.tif 000005
【図４】
2007189671.tif 000006
【図５】
2007189671.tif 000007
【図６】
2007189671.tif 000008
【図７】
2007189671.tif 000009
【図８】
2007189671.tif 000010
【外国語明細書】
2007189671.tif 000011
2007189671.tif 000012
2007189671.tif 000013
2007189671.tif 000014
2007189671.tif 000015
2007189671.tif 000016
2007189671.tif 000017
2007189671.tif 000018
2007189671.tif 000019
2007189671.tif 000020
2007189671.tif 000021
2007189671.tif 000022
2007189671.tif 000023
2007189671.tif 000024
2007189671.tif 000025
2007189671.tif 000026
2007189671.tif 000027
2007189671.tif 000028
2007189671.tif 000029
2007189671.tif 000030
2007189671.tif 000031
2007189671.tif 000032
2007189671.tif 000033
2007189671.tif 000034
2007189671.tif 000035
2007189671.tif 000036
2007189671.tif 000037
2007189671.tif 000038
2007189671.tif 000039
2007189671.tif 000040
2007189671.tif 000041
2007189671.tif 000042
2007189671.tif 000043
2007189671.tif 000044
2007189671.tif 000045
2007189671.tif 000046
2007189671.tif 000047
2007189671.tif 000048
2007189671.tif 000049
2007189671.tif 000050
2007189671.tif 000051
2007189671.tif 000052
2007189671.tif 000053
2007189671.tif 000054