(57)【要約】【課題】音声認識による文書作成において、各々の文書化された発言に対して発言者の名前または識別名を付加し、後日発言者が特定できる文書を自動的に作成可能な文書自動作成装置を提供すること。【解決手段】映像を入力するための映像入力部と、入力された映像から人間の顔を抽出し、予め登録された顔データと比較を行う顔認識部と、入力された音声を文字符号に変換する音声認識部と、該音声認識部からの文字符号から文書を作成し、該顔認識部からの識別名を付加する文書作成部と、文書を出力する文書出力部と、映像信号を出力する映像出力部と、該音声入力部からの音声信号を切換えて出力する音声出力部と、該音声認識部と該顔認識部からの信号により音声切換え部と映像入力部の制御をおこなう制御部により構成される。【選択図】        図１
2004184712.tif 000002
【特許請求の範囲】
【請求項１】
音声を文字変換して文書を作成する文書自動作成装置において、映像を入力する影像入力手段と、入力された影像から発言者を識別する顔認識手段と、音声を入力する音声入力手段と、入力された音声を音声認識し、前記顔認識手段により識別された発言者の識別名を付加し文書化する手段を備えたことを特徴とする文書自動作成装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は音声認識により議事録等の文書を作成する文書自動作成装置に関するものである。
【０００２】
【従来の技術】
従来の文書自動作成装置の例を図３に示す。同図において、マイクロフォンや録音された音声の再生機器から音声入力部１に入力された音声を音声認識部２で文字符号に変換し、文書作成部３で文書として予め決められた書式に従って文書化し、これを文書出力部４より出力する。
【０００３】
【発明が解決しようとする課題】
しかしながら、上記従来例では、例えば会議の議事録作成等に使用するような場合、発言者の識別機能を有していないので、全ての発言が同じように文書化されてしまい、発言者の区別がないため、後日発言者が判らなくなってしまうという欠点があった。
【０００４】
本発明は、音声認識による文書作成において、各々の文書化された発言に対して発言者の氏名または識別名を付加し、後日発言者が特定できる文書を作成することを目的とする。
【０００５】
【課題を解決するための手段】
上記目的を達成するために、本出願に係る発明は、音声を入力するための音声入力部と、該音声入力部からの音声信号を受け、文字符号に変換する音声認識部と、該音声認識部からの文字符号から文書を作成する文書作成部と、該文書作成部からの文書を出力する文書出力部と、映像を入力するための映像入力部と、該映像入力部からの映像信号より人間の顔を抽出し、予め登録された顔データとの比較を行い、該当するデータを検索する顔認識部と、該映像入力部からの映像信号を出力する映像出力部と、該音声入力部からの音声信号を切換えるための音声切換え部と、該音声切換え部により切り換えられた音声信号を出力する音声出力部と、該音声認識部と顔認識部からの信号により該音声切換え部と該映像入力部の制御をおこなう制御部を備えることを特徴とする。
【０００６】
【発明の実施の形態】
（実施例）
図１は本発明の特徴を最もよく表す図面であり、同図において１ａと１ｂは音声認識部２と音声切換え部６に接続され、音声を入力するための音声入力部、２は該音声入力部１ａと１ｂからの音声信号を文字符号に変換する音声認識部、３は該音声認識部２からの文字符号を受け、文書出力部４へ文書を出力する文書作成部、４は該文書作成部で作成された文書を出力する文書出力部、８は映像を入力するための映像入力部、９は該映像入力部からの映像信号を受け、顔認識をおこなう顔認識部、１０は該映像入力部からの映像信号を出力する映像出力部、６は該音声入力部１ａと１ｂからの音声信号を切換える音声切換え部、７は該音声切換え部で切り換えられた音声信号を出力する音声出力部、５は該音声認識部２と該顔認識部６からの信号を受け、該音声切換え部６と該映像入力部８の制御をおこなう制御部である。
【０００７】
次に、上記構成において、マイクロフォンなどにより構成された音声入力部１ａと１ｂに入力された音声は音声信号として音声認識部２と音声切換え部６に出力される。該音声認識部２は入力された該音声信号を文字符号に変換して文書作成部３に出力する。該文書作成部３は該文字符号を文書に変換し、作成された文書は文書出力部４より出力される。
【０００８】
ビデオカメラなどにより構成された映像入力部８から出力された映像信号は顔認識部９に入力され、人間の顔の部分が抽出される。この抽出された顔データは、予め登録されている顔データと比較され、該当するデータが検索される。予め登録する項目としては、顔データの他に氏名、会社名、所属名、電話番号等の必要と思われる情報が考えられる。会議室全体を映し出すか、あるいはビデオカメラを自動的にあるいは手動でパンさせることで出席者全員を映し出し、一人ひとりの顔を抽出し、顔認識および検索をおこなうことで自動的に出席者名簿の作成を可能とする。
【０００９】
さらに該映像入力部８からの映像信号は映像出力部１０により出力され、映像内容の確認または遠隔地でのモニターを可能とする。該制御部５は該映像入力部８と該音声認識部２からの信号により該音声切換え部６と映像入力部８の制御をおこなう。議長等が発言者を指名した場合に、指名した氏名を音声認識し、該音声切換え部６を最適な音声入力部に切り換え、最適な該音声入力部からの音声により音声認識および文書作成をおこない、後日、作成文書を読んだ場合に、その発言が誰のものであるかが判るように発言者の氏名等を発言内容と共に記録する。
【００１０】
また、音声認識により発言者が特定された場合、該映像入力部８を構成するビデオカメラを該制御部５により、パンあるいはズームすることで、自動的に発言者を画各中心にもってゆく、あるいは、ズームアップすることを可能とする。上述の発言者の特定は、音声認識によるものだけでなく、外部からの操作、あるいは、該映像入力部によりとらえられた顔の口の動きを検出して発言者を特定するなどの方法でも良い。
【００１１】
該制御部５に制御され該音声切換え部６により切り換えられた音声信号は該音声出力部７により出力され、音声内容の確認または遠隔地でのモニターを可能とする。音声入力部がひとつの場合は、音声切換え部は不要となる。また、３つあるいは４つ以上の音声入力部により構成される場合は、入力数に適した構成の入力切換え部とする。該映像入力部８はビデオカメラだけでなくデジタルカメラなどの映像を扱うことのできる装置であれば何でも良く、２つあるいは３つ以上のビデオカメラ等で構成されていても良い。
【００１２】
図２は文書出力例であり、  同図において出席者欄には映像入力部８から取り込まれた映像信号を顔認識し、登録された顔データから検索をおこなった結果として出席者の所属名および氏名が記載されている。発言者の発言は音声認識部２および文書作成部３により文書化され、発言内容の後に発言者の氏名を記載している。
【００１３】
以上説明したように、音声認識による文書作成において、各々の文書化された発言に対して発言者の氏名または識別名を付加し、後日発言者が特定できる文書を作成することが可能で、会議中においては、発言者をズームアップしたり、発言者の発言が聞き取り易いように音声入力を切り換えることができる文書自動作成装置を提供することが可能である。
【００１４】
【発明の効果】
以上説明したように、本発明によれば、音声認識による文書作成において、各々の文書化された発言に対して発言者の氏名または識別名を付加し、後日発言者が特定できる文書を自動的に作成可能な文書自動作成装置を提供することができる。
【図面の簡単な説明】
【図１】本発明の実施例に係る文書自動作成装置を説明するブロック図である。
【図２】本発明の実施例に係る文書自動作成装置を説明する文書出力例である。
【図３】従来の文書自動作成装置を説明するブロック図である。
【符号の説明】
１        …        音声認識部
１ａ    …        音声入力部ａ
１ｂ    …        音声入力部ｂ
２        …        音声認識部
３        …        文書作成部
４        …        文書出力部
５        …        制御部
６        …        音声切換え部
７        …        音声出力部
８        …        映像入力部
９        …        顔認識部
１０    …        映像出力部
【図１】
2004184712.tif 000003
【図２】
2004184712.tif 000004
【図３】
2004184712.tif 000005