(57)【要約】【課題】音声認識して文字変換した文字と、もとになった発言者の音声とを同時に認識することにより、会話の内容および口調や感情をより正確に理解することができる文字表示機能付き補聴システムを提供する。【解決手段】提供する音を集音および送信する集音手段と、集音した音を受信して再生する補聴手段とを有し、集音手段は、集音マイクで収集した音に基づいてＦＭ変調波を生成するＦＭ変調回路と、ＦＭ変調波を送信する送信アンテナと、を備え、補聴手段は、ＦＭ変調波を受信する補聴用受信アンテナと、受信したＦＭ変調波に基づいて補聴用復調音声信号を生成する補聴用ＦＭ復調回路と、生成した補聴用復調音声信号に基づいて補聴用音声を再生する補聴用音再生部と、ＦＭ変調波に基づいて補聴用文字情報を生成して表示する補聴用文字表示部と、備える、ことを特徴とする。【選択図】図１
0003227725.tif 000002
【実用新案登録請求の範囲】
【請求項１】
微弱無線方式を用いて、文字の表示と音の提供とをする文字表示機能付き補聴システムであって、
提供する前記音を集音および送信する集音手段と、
集音した前記音を管理する管理手段と、
集音した前記音を受信して再生する補聴手段と
を有し、
前記集音手段は、前記音を収集する集音マイクと、前記集音マイクで収集した前記音に基づいてＦＭ変調波を生成するＦＭ変調回路と、前記ＦＭ変調回路で生成した前記ＦＭ変調波を送信する送信アンテナと、を備え、
前記管理手段は、前記送信アンテナで送信した前記ＦＭ変調波を受信する受信アンテナと、前記受信アンテナで受信した前記ＦＭ変調波に基づいて復調音声信号を生成するＦＭ復調回路と、前記ＦＭ復調回路で生成した前記復調音声信号に基づいて音声を認識して文字情報を生成する音声認識部と、前記音声認識部で生成した前記文字情報を表示する文字表示部と、備え、
前記補聴手段は、前記送信アンテナで送信した前記ＦＭ変調波を受信する補聴用受信アンテナと、前記補聴用受信アンテナで受信した前記ＦＭ変調波に基づいて補聴用復調音声信号を生成する補聴用ＦＭ復調回路と、前記補聴用ＦＭ復調回路で生成した前記補聴用復調音声信号に基づいて補聴用音声を再生する補聴用音再生部と、前記ＦＭ変調波に基づいて補聴用文字情報を生成して表示する補聴用文字表示部と、備える、
ことを特徴とする文字表示機能付き補聴システム。
【請求項２】
前記音声認識部で生成した前記文字情報を記録する音声記録手段をさらに有し、
前記音声認識部と前記音声記録手段とはインターネットを介して通信され、
前記補聴用文字表示部と前記音声記録手段とは、インターネットを介して通信され、
前記補聴用文字表示部は、前記音声記録手段が記録している前記文字情報に基づいて前記補聴用文字情報を生成して表示する、
ことを特徴とする、請求項１に記載の文字表示機能付き補聴システム。
【請求項３】
複数の前記補聴手段を有し、
複数の前記補聴手段は、前記補助音声および前記補聴用文字情報を複数の使用者に提供する、
ことを特徴とする、請求項１または請求項２に記載の文字表示機能付き補聴システム。
【考案の詳細な説明】
【技術分野】
【０００１】
本考案は、音声を認識して文字変換した文字と、その元となった発言者の音声とを同時に認識することにより、会話の内容および口調や感情をより正確に理解することができ、文字と音声との相乗効果で会話を理解し易くすることができる文字表示機能付き補聴システムに関する。
【背景技術】
【０００２】
難聴者と健常者、または、難聴者同士の会話において、手話や筆記が一般的である。また、近年、会話が通じない人同士の通訳を目的に、音声文字変換技術が進み、難聴者への応用が求められている。特許文献１では、補聴器がきかない難聴者であるが、喋ることと文字認識ができる人向けに、誰でも簡単に使いこなせる専用の可搬式同時音声・文字変換装置を開発し、難聴者が話し相手と直接及び電話で会話できるようにする技術を開示している。特許文献２では、伝言等を表示色を指定して入力する入力部と、表示色の色データを記憶する記憶部と、現在時刻を刻む時計部と、前記入力部よりの伝言等に指定した色データを付し、時計部よりの時刻と共に記録するメモリ部と、メモリ部より読出したデータに基づき伝言等を入力時刻と共に指定した色で表示する表示部と、前記入力部、記憶部、時計部、メモリ部および表示部を制御する制御部とからなり、前記制御部によりメモリ部に記録された入力時刻をサーチし、所定の時間が経過した伝言等を消去するようにした電子伝言板システムに関する技術を開示している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−２３６８７号公報
【特許文献２】特開２０００−２４２２５４号公報
【考案の概要】
【考案が解決しようとする課題】
【０００４】
文字変換ソフトによる文字通訳では、手話と同じ視覚だけの情報伝達であり、難聴者の聴覚は利活用されていない。また、今までの文字だけに頼る会話では感情伝達性が乏しく、口調や感情などの雰囲気を十分に伝えることができない場合があった。
【０００５】
本考案は、音声認識して文字変換した文字と、もとになった発言者の音声とを同時に認識することにより、会話の内容および口調や感情をより正確に理解できる文字表示機能付き補聴システムを提供することを目的とする。また、本考案は、文字と音声との相乗効果で、使用者の会話理解力が向上する文字表示機能付き補聴システムを提供することを目的としてもよい。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本考案の一つの実施形態は、微弱無線方式を用いて、文字の表示と音の提供とをする文字表示機能付き補聴システムであって、提供する前記音を集音および送信する集音手段と、集音した前記音を管理する管理手段と、集音した前記音を受信して再生する補聴手段とを有し、前記集音手段は、前記音を収集する集音マイクと、前記集音マイクで収集した前記音に基づいてＦＭ変調波を生成するＦＭ変調回路と、前記ＦＭ変調回路で生成した前記ＦＭ変調波を送信する送信アンテナと、を備え、前記管理手段は、前記送信アンテナで送信した前記ＦＭ変調波を受信する受信アンテナと、前記受信アンテナで受信した前記ＦＭ変調波に基づいて復調音声信号を生成するＦＭ復調回路と、前記ＦＭ復調回路で生成した前記復調音声信号に基づいて音声を認識して文字情報を生成する音声認識部と、前記音声認識部で生成した前記文字情報を表示する文字表示部と、備え、前記補聴手段は、前記送信アンテナで送信した前記ＦＭ変調波を受信する補聴用受信アンテナと、前記補聴用受信アンテナで受信した前記ＦＭ変調波に基づいて前記補聴用復調音声信号を生成する補聴用ＦＭ復調回路と、前記補聴用ＦＭ復調回路で生成した前記補聴用復調音声信号に基づいて補聴用音声を再生する補聴用音再生部と、前記ＦＭ変調波に基づいて補聴用文字情報を生成して表示する補聴用文字表示部と、備える、ことを特徴とする文字表示機能付き補聴システムを提供する。
【０００７】
本考案の他の実施形態は、上記の文字表示機能付き補聴システムであって、前記音声認識部で生成した前記文字情報を記録する音声記録手段をさらに有し、前記音声認識部と前記音声記録手段とはインターネットを介して通信され、前記補聴用文字表示部と前記音声記録手段とは、インターネットを介して通信され、前記補聴用文字表示部は、前記音声記録手段が記録している前記文字情報に基づいて前記補聴用文字情報を生成して表示する、ことを特徴とする、文字表示機能付き補聴システムであってもよい。
【０００８】
本考案の他の実施形態は、上記のいずれかの文字表示機能付き補聴システムであって、複数の前記補聴手段を有し、複数の前記補聴手段は、前記補助音声および前記補聴用文字情報を複数の使用者に提供する、ことを特徴とする、文字表示機能付き補聴システムであってもよい。
【考案の効果】
【０００９】
本考案に係る文字表示機能付き補聴システムによれば、音声認識して文字変換した文字と、もとになった発言者の音声とを同時に認識することにより、会話の内容および口調や感情をより正確に理解することができる。また、本考案に係る文字表示機能付き補聴システムによれば、構造が単純で、製造が容易で、操作が容易であり、小型化、高性能化および低コスト化とすることができる。
【図面の簡単な説明】
【００１０】
【図１】本考案の実施形態に係る文字表示機能付き補聴システムの一例を説明する説明図である。
【図２】本考案の実施形態に係る文字表示機能付き補聴システムの一例を説明する説明図である。
【図３】本考案の実施形態に係る補聴用音再生部の一例を説明する説明図である。
【考案を実施するための形態】
【００１１】
実施形態に係る文字表示機能付き補聴システムの例を用いて、本考案を説明する。なお、本考案は、以後に説明する文字表示機能付き補聴システム以外でも、補聴器、マイク、集音器、発音器、発声器、録音機などの音響機器（部品、装置、機器、器具など）であれば、いずれのものにも用いることができる。なお、文字表示機能付き補聴システムの素材、色は、特に限定されない。文字表示機能付き補聴システムの色は、例えば使用者の趣味趣向に合わせた柄のもの（例えば透明、絵柄、広告宣伝表記など）であってもよい。
【００１２】
以後に、本考案を説明する。
【００１３】
図１乃至図３を用いて、本考案の実施形態に係る文字表示機能付き補聴システムの構成を説明する。ここで、図１は、本考案の実施形態に係る文字表示機能付き補聴システム１００の一例を説明する説明図である。図２は、本考案の実施形態に係る文字表示機能付き補聴システム１００Ｕの一例を説明する説明図である。図３は、本考案の実施形態に係る補聴用音再生部１３ｃの一例を説明する説明図である。なお、図１等に示す文字表示機能付き補聴システムの構成等は一例であり、本考案は図１等に示す文字表示機能付き補聴システム等に限定されるものではない。
【００１４】
以下にて、各構成を具体的に説明する。
【００１５】
図１に示すように、本考案に係る文字表示機能付き補聴システム１００は、微弱無線方式を用いて、文字の表示と音の提供とをするものである。文字表示機能付き補聴システム１００は、提供する音を集音および送信する集音手段１１と、集音した音を管理する管理手段１２と、集音した音を受信して再生する補聴手段１３とを有する。本考案に係る文字表示機能付き補聴システム１００は、マイクロフォンから集音する会話、ＴＶ等の音、スマホや携帯電話等の音声などから音に関する情報（たとえば音声に関する信号）を受信して、微弱無線方式を用いて所望の機器に送信するものであってもよい。また、本考案に係る文字表示機能付き補聴システム１００は、微弱無線方式を用いて送信した音に関する情報から音声を文字に変換して、変換した文字を表示する。これにより、本考案に係る文字表示機能付き補聴システム１００によれば、使用者は音声認識して文字変換した文字と集音した音声とを同時に認識することにより、会話の内容および口調や感情をより正確に理解することができる。ここで、微弱無線方式は、電波法第４条に規定する免許を要しない無線局で発射する電波が著しく微弱な方式を用いてもよい。本考案に係る音に関する情報は、音に関する情報を定義できるものであれば、いずれの方式・規格なども用いることができる。
【００１６】
図１に示すように、制御手段１０は、本実施形態では、文字表示機能付き補聴システム１００の各構成に動作を指示し、文字表示機能付き補聴システム１００の動作を制御する手段である。制御手段１０は、例えばＣＰＵ及びメモリで構成される演算装置を用いることができる。また、制御手段１０は、文字表示機能付き補聴システム１００に予め搭載されている演算装置、コントローラ又はその他制御手段を利用する構成であってもよい。
【００１７】
図１および図２に示すように、集音手段１１は、本実施形態では、音を収集する集音マイク１２ａと、集音マイク１２ａで収集した音に基づいてＦＭ変調波（ＦＭ電波）を生成するＦＭ変調回路１１ｂと、ＦＭ変調回路１１ｂで生成したＦＭ変調波を送信する送信アンテナ１１ｃと、を備える。なお、集音マイク１２ａが音を収集する方法、ＦＭ変調回路１１ｂがＦＭ変調波を生成する方法および送信アンテナ１１ｃがＦＭ変調波を送信する方法は公知の技術を用いることができる。また、送信するＦＭ変調波の周波数帯は、設計、実験、計算などで予め定められる周波数帯とすることができる。本考案に係る文字表示機能付き補聴システム１００は、たとえば周波数帯８０〜１００ＭＨｚのＦＭ微弱無線を用いることができる。
【００１８】
図１および図２に示すように、管理手段１２は、本実施形態では、送信アンテナ１１ｃで送信したＦＭ変調波を受信する受信アンテナ１２ａと、受信アンテナ１２ａで受信したＦＭ変調波に基づいて復調音声信号（たとえば音に関する電気信号）を生成するＦＭ復調回路１２ｂと、ＦＭ復調回路１２ｂで生成した復調音声信号に基づいて音声を認識して文字情報（たとえばテキストデータ）を生成する音声認識部１２ｃと、音声認識部１２ｃで生成した文字情報を表示する文字表示部１２ｄと、備える。なお、受信アンテナ１２ａがＦＭ変調波を受信する方法、ＦＭ復調回路１２ｂが復調音声信号を生成する方法、音声認識部１２ｃが音声を認識して文字情報を生成する方法および文字表示部１２ｄが文字情報を表示する方法は公知の技術を用いることができる。なお、使用者（発言者など）は、良質な文字情報を得るために、文字表示部１２ｄの表示結果を参考に、発声方法などを変更・改善してもよい。
【００１９】
図１および図２に示すように、補聴手段１３は、本実施形態では、送信アンテナ１１ｃで送信したＦＭ変調波を受信する補聴用受信アンテナ１３ａと、補聴用受信アンテナ１３ａで受信したＦＭ変調波に基づいて補聴用復調音声信号（たとえば音に関する電気信号）を生成する補聴用ＦＭ復調回路１３ｂと、補聴用ＦＭ復調回路１３ｂで生成した補聴用復調音声信号に基づいて補聴用音声（再生する音声）を再生する補聴用音再生部１３ｃと、ＦＭ変調波に基づいて補聴用文字情報（たとえばテキストデータ）を生成して表示する補聴用文字表示部１３ｄと、備える。なお、補聴用受信アンテナ１３ａがＦＭ変調波を受信する方法、補聴用ＦＭ復調回路１３ｂが補聴用復調音声信号を生成する方法、補聴用音再生部１３ｃが補聴用復調音声信号に基づいて補聴用音声を再生する方法および補聴用文字表示部１３ｄが補聴用文字情報を表示する方法は公知の技術を用いることができる。
【００２０】
図２に示すように、本考案に係る文字表示機能付き補聴システム１００Ｕは、本実施形態では、音声認識部１２ｃで生成した文字情報を記録する音声記録手段２０をさらに有する。文字表示機能付き補聴システム１００Ｕは、音声認識部１２ｃと音声記録手段２０とはインターネットを介して通信され、補聴用文字表示部１３ｄと音声記録手段２０とはインターネットを介して通信される。また、文字表示機能付き補聴システム１００Ｕは、補聴用文字表示部１３ｄを用いて、音声記録手段２０が記録している文字情報に基づいて補聴用文字情報を生成して表示する。なお、音声認識部１２ｃと音声記録手段２０とがインターネットを介して通信する方法および補聴用文字表示部１３ｄと音声記録手段２０とがインターネットを介して通信する方法は公知の技術を用いることができる。
【００２１】
図３に示すように、本考案に係る補聴用音再生部１３ｃは、本実施形態では、難聴者などが最も聴き取りやすい音量・音質・左右バランスに調整する機能を備える。音量・音質・左右バランスなどを調整する方法は、設計、実験、計算などで予め定められる方法とすることができる。また、本考案に係る補聴用音再生部１３ｃは、使用者（発言者など）補聴用文字表示部１３ｄの表示結果を参考に、音量・音質・左右バランスなどを調整してもよい。使用者は、例えば雑音の多い場所での発言の場合には、音量を下げて大声で発声することで認識・表示ミスを低減できる。
【００２２】
以上のとおり、本考案に係る文字表示機能付き補聴システムによれば、音声認識して文字変換した文字と、もとになった発言者の音声とを同時に認識することにより、会話の内容および口調や感情をより正確に理解することができる補聴システムを提供することができる。また、本考案に係る文字表示機能付き補聴システムによれば、「有線で接続」する方法と比較して、配線コードがなく、構造が単純で、製造が容易で、操作が容易である。
【００２３】
また、本考案に係る文字表示機能付き補聴システムによれば、電波法のＦＭ微弱無線方式を利用することができるので、目的の音声をＦＭ電波に乗せて送信することができ、ＦＭ受信機を内蔵する集音器でその電波を受信し復調することで（ノイズのない）クリアな音声を提供することができる。また、本考案に係る文字表示機能付き補聴システムによれば、電波法のＦＭ微弱無線方式を利用することができるので、デジタル信号処理がなく、送信受信間の時間遅延が無いため、違和感のない自然な音環境を提供することができる。また、本考案に係る文字表示機能付き補聴システムによれば、電波法のＦＭ微弱無線方式を利用することができるので、ＴＶなど一般的なアナログ音源装置と補聴用集音器間の配線コードを無くすことができ、テレビやスマホなどの必要な音声だけを、遅延も環境騒音も無い、クリアな音声を伝送することができる。また、本考案に係る文字表示機能付き補聴システムによれば、電波法のＦＭ微弱無線方式を利用することができるので、特殊無線方式を利用する際に必要な使用認定料やプログラム開発費などが不要で、安価な製品を提供することができる。また、本考案に係る文字表示機能付き補聴システムによれば、電波法のＦＭ微弱無線方式を利用することができるので、電波法認定の微弱電波なので、人体や環境に無害とすることができる。
【００２４】
「ブルートゥース（登録商標）」によるデジタル無線方式では、A/D変換、デジタル演算処理、FH（周波数ホッピング）拡散電波、D/A変換、などのプロセスを経て伝達されるため遅延や時間ズレ（エコー）などが生じ、良質な補聴音を提供する事ができない場合があった。また、「ブルートゥース（登録商標）」によるデジタル無線方式では、ペアリングという接続操作が必要であり、高齢難聴者には容易に利用する事ができない（老齢難聴者には使いこなせない製品になってしまう）場合があった。また、「磁気誘導ループ」の通信方式は、送信側ループコイルの装備などが複雑で、簡便に利用することができない場合があった。また、「IMSバンド（産業科学医療用バンド）」の通信は、医療機器でないと利用できないため、安価な集音器で応用することができない。本考案に係る文字表示機能付き補聴システムによれば、電波法のＦＭ微弱無線方式を利用することができるので、「ブルートゥース（登録商標）」や「磁気誘導ループ」、「IMSバンド（産業科学医療用バンド）」の通信方式と比較して、構造が単純で、製造が容易で、操作が容易であり、小型化、高性能化および低コスト化とすることができる。
【００２５】
本考案に係る聴力補助システムは、複数の補聴手段（図１の１３）を有し、複数の補聴手段が補助音声および補聴用文字情報を複数の使用者に提供するものであってもよい。これにより、本考案に係る聴力補助システムは、送受信した音に関する情報に基づいて、複数の使用者（聴覚障害者など）の聞き取りを補助する音声を提供することができ、集合会場、映画館や講演会場などで多数で同時に受信も可能であり、一つの音源を複数の聴者で聞くことができる。また、本考案に係る聴力補助システムは、音声記録手段２０が記録している文字情報を複数の使用者で共有することにより、円滑なコミュニケーションを実現することができる。
【００２６】
以上のとおり、本考案に係る実施形態について説明したが、本考案は上記の実施形態に限定されるものではない。すなわち、本考案は、実用新案登録請求の範囲に記載の内容に基づいて、様々に変形、変更又はその他任意に改変され得る。
【符号の説明】
【００２７】
１００，１００Ｕ  ：  文字表示機能付き補聴システム
１０  ：  制御手段
１１  ：  集音手段
１１ａ：  集音マイク
１１ｂ：  ＦＭ変調回路
１１ｃ：  送信アンテナ
１２  ：  管理手段
１２ａ：  受信アンテナ
１２ｂ：  ＦＭ復調回路
１２ｃ：  音声認識部
１２ｄ：  文字表示部
１３  ：  補聴手段
１３ａ：  補聴用受信アンテナ
１３ｂ：  補聴用ＦＭ復調回路
１３ｃ：  補聴用音再生部
１３ｄ：  補聴用文字表示部
２０  ：  音声記録手段（クラウド型音声認識サーバ、など）
【図１】
0003227725.tif 000003
【図２】
0003227725.tif 000004
【図３】
0003227725.tif 000005
【手続補正書】
【提出日】令和2年6月18日(2020.6.18)
【手続補正１】
【補正対象書類名】実用新案登録請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【実用新案登録請求の範囲】
【請求項１】
微弱無線方式を用いて、文字の表示と音の提供とをする文字表示機能付き補聴システムであって、
提供する前記音を集音および送信する集音手段と、
集音した前記音を管理する管理手段と、
集音した前記音を受信して再生する補聴手段と
を有し、
前記集音手段は、前記音を収集する集音マイクと、前記集音マイクで収集した前記音に基づいてＦＭ変調波を生成するＦＭ変調回路と、前記ＦＭ変調回路で生成した前記ＦＭ変調波を送信する送信アンテナと、を備え、
前記管理手段は、前記送信アンテナで送信した前記ＦＭ変調波を受信する受信アンテナと、前記受信アンテナで受信した前記ＦＭ変調波に基づいて復調音声信号を生成するＦＭ復調回路と、前記ＦＭ復調回路で生成した前記復調音声信号に基づいて音声を認識して文字情報を生成する音声認識部と、前記音声認識部で生成した前記文字情報を表示する文字表示部と、備え、
前記補聴手段は、前記送信アンテナで送信した前記ＦＭ変調波を受信する補聴用受信アンテナと、前記補聴用受信アンテナで受信した前記ＦＭ変調波に基づいて補聴用復調音声信号を生成する補聴用ＦＭ復調回路と、前記補聴用ＦＭ復調回路で生成した前記補聴用復調音声信号に基づいて補聴用音声を再生する補聴用音再生部と、前記ＦＭ変調波に基づいて補聴用文字情報を生成して表示する補聴用文字表示部と、備える、
ことを特徴とする文字表示機能付き補聴システム。
【請求項２】
前記音声認識部で生成した前記文字情報を記録する音声記録手段をさらに有し、
前記音声認識部と前記音声記録手段とはインターネットを介して通信され、
前記補聴用文字表示部と前記音声記録手段とは、インターネットを介して通信され、
前記補聴用文字表示部は、前記音声記録手段が記録している前記文字情報に基づいて前記補聴用文字情報を生成して表示する、
ことを特徴とする、請求項１に記載の文字表示機能付き補聴システム。
【請求項３】
複数の前記補聴手段を有し、
複数の前記補聴手段は、補聴用音声および前記補聴用文字情報を複数の使用者に提供する、
ことを特徴とする、請求項１または請求項２に記載の文字表示機能付き補聴システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本考案の他の実施形態は、上記のいずれかの文字表示機能付き補聴システムであって、複数の前記補聴手段を有し、複数の前記補聴手段は、補聴用音声および前記補聴用文字情報を複数の使用者に提供する、ことを特徴とする、文字表示機能付き補聴システムであってもよい。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
本考案に係る聴力補助システムは、複数の補聴手段（図１の１３）を有し、複数の補聴手段が補聴用音声および補聴用文字情報を複数の使用者に提供するものであってもよい。ここで、補聴用音声とは、聴力補助システムが使用者に提供する音声である。これにより、本考案に係る聴力補助システムは、送受信した音に関する情報に基づいて、複数の使用者（聴覚障害者など）の聞き取りを補助する音声を提供することができ、集合会場、映画館や講演会場などで多数で同時に受信も可能であり、一つの音源を複数の聴者で聞くことができる。また、本考案に係る聴力補助システムは、音声記録手段２０が記録している文字情報を複数の使用者で共有することにより、円滑なコミュニケーションを実現することができる。