(57)【要約】【課題】近くにいる人のニーズに合わせた情報を表示するデジタルサイネージ装置等を提供すること。【解決手段】デジタルサイネージ装置は、ハーフミラーにより覆われた表示部３５と、前記表示部３５の近傍から音声を取得するマイク３６と、前記マイク３６が取得した音声に基づくテキストを取得するテキスト取得部と、前記テキスト取得部が取得した前記テキストに基づくコンテンツを前記表示部３５に出力する出力部とを備える。前記出力部は、前記テキストをキーとする検索結果を出力する。【選択図】図１
2019153160.tif 000002
【特許請求の範囲】
【請求項１】
ハーフミラーにより覆われた表示部と、
前記表示部の近傍から音声を取得するマイクと、
前記マイクが取得した音声に基づくテキストを取得するテキスト取得部と、
前記テキスト取得部が取得した前記テキストに基づくコンテンツを前記表示部に出力する出力部と
を備えるデジタルサイネージ装置。
【請求項２】
前記出力部は、前記テキストをキーとする検索結果を出力する
請求項１に記載のデジタルサイネージ装置。
【請求項３】
前記マイクが取得した音声に基づいて言語を判定する言語判定部を備え、
前記テキスト取得部は、前記言語判定部が特定した言語に対応する前記テキストを取得する
請求項１または請求項２に記載のデジタルサイネージ装置。
【請求項４】
マイクを介して音声を取得し、
取得した音声に基づくテキストを取得し、
取得した前記テキストに基づくコンテンツを、前記マイクの近傍に配置されておりハーフミラーにより覆われた表示部に出力する
処理をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルサイネージ装置およびプログラムに関する。
【背景技術】
【０００２】
工事現場に設置される仮囲い用の壁にディスプレイを設けたデジタルサイネージ装置が提案されている（特許文献１）。工事現場周辺の歩行者および近隣住民等に、工事情報、地域情報および広告等の情報を提供できる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−２２７１１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１のデジタルサイネージ装置においては、装置の近くにいる人のニーズに合わせた情報を表示することはできない。
【０００５】
一つの側面では、近くにいる人のニーズに合わせた情報を表示するデジタルサイネージ装置等を提供することを目的とする。
【課題を解決するための手段】
【０００６】
デジタルサイネージ装置は、ハーフミラーにより覆われた表示部と、前記表示部の近傍から音声を取得するマイクと、前記マイクが取得した音声に基づくテキストを取得するテキスト取得部と、前記テキスト取得部が取得した前記テキストに基づくコンテンツを前記表示部に出力する出力部とを備える。
【発明の効果】
【０００７】
一つの側面では、近くにいる人のニーズに合わせた情報を表示するデジタルサイネージ装置等を提供できる。
【図面の簡単な説明】
【０００８】
【図１】デジタルサイネージシステムの概要を説明する説明図である。
【図２】デジタルサイネージシステムの構成を示す説明図である。
【図３】問合先ＤＢのレコードレイアウトを説明する説明図である。
【図４】プログラムの処理の流れを説明するフローチャートである。
【図５】コンテンツ取得のサブルーチンの処理の流れを説明するフローチャートである。
【図６】実施の形態２のデジタルサイネージシステムの概要を説明する説明図である。
【図７】実施の形態２のデジタルサイネージシステムの概要を説明する説明図である。
【図８】実施の形態２のプログラムの処理の流れを説明するフローチャートである。
【図９】議事録表示のサブルーチンの処理の流れを説明するフローチャートである。
【図１０】実施の形態３のデジタルサイネージ装置の機能ブロック図である。
【図１１】実施の形態４のデジタルサイネージシステムの構成を示す説明図である。
【発明を実施するための形態】
【０００９】
［実施の形態１］
図１は、デジタルサイネージシステム１０の概要を説明する説明図である。デジタルサイネージシステム１０は、壁に取り付けられた表示部３５、マイク３６およびスピーカ３７を含む。表示部３５は、たとえば液晶表示パネルまたは有機ＥＬ（electro-luminescence）表示パネルである。
【００１０】
表示部３５の表面は、アクリル板またはガラス板等の、透光性板により覆われている。透光性板は、一面に薄い反射膜を有するハーフミラーである。表示部３５の表示面と、透光性板とは、いわゆるダイレクトボンディングにより接合しても良い。表示面と透光性板とを、空気層を介さずに直接接合することにより、透光性板と表示面との間の光の反射による画質低下を防止できる。
【００１１】
マイク３６は、複数のマイクロフォンを含むアレイマイクであり、感度および音声検出領域を適宜調整できる。スピーカ３７の音量も適宜調整できる。マイク３６およびスピーカ３７は、表示部３５に一体に構成されていても良い。
【００１２】
表示部３５を覆う透光性板に、表示部３５よりも大きい板を使用し、透光性板の裏面の表示部３５で覆われていない部分にエキサイターを固定してスピーカ３７を構成しても良い。表示部３５全体から、音を発生するスピーカ３７を実現できる。マイク３６およびスピーカ３７は、天井等に取り付けられていても良い。
【００１３】
本実施の形態のデジタルサイネージシステム１０は、たとえば駅のコンコース、バス停、公共施設の内壁、または、道路に面した建物の外壁等の、様々な場所に設置して使用される。
【００１４】
図１Ａは、動作していない場合のデジタルサイネージシステム１０を示す。表示部３５を覆う透光性板により光が反射され、表示部３５は鏡の機能を果たす。これにより、空間を広く見せる演出が可能である。
【００１５】
図１Ｂは、動作している場合のデジタルサイネージシステム１０を示す。図１Ｂにおいては表示部３５の前に立ったユーザが「天気」と発声した場合を示す。マイク３６がユーザの声を検出して、天気情報を取得し、表示部３５に表示する。さらにスピーカ３７から「現在の天気は曇りです」という音声が出力される。
【００１６】
たとえばユーザが「札幌の天気」と発声した場合には、札幌の天気が表示部３５およびスピーカ３７から出力される。ユーザが「明日の大阪の天気」と発声した場合には、翌日の大阪の天気が表示部３５およびスピーカ３７から出力される。同様に、ユーザの発声に応じて、たとえば株価、交通機関の運行情報、地図、ニュース等の、様々なコンテンツが表示部３５およびスピーカから出力される。
【００１７】
以上のように、本実施の形態のデジタルサイネージシステム１０は、個々のユーザに対してニーズに応じた情報を提供し、非使用時には鏡になる。
【００１８】
図２は、デジタルサイネージシステム１０の構成を示す説明図である。デジタルサイネージシステム１０は、インターネット、公衆通信回線またはＬＡＮ（Local Area Network）等のネットワークを介して接続されたデジタルサイネージ装置１１、音声認識サーバ３０および分野サーバ４２を備える。
【００１９】
デジタルサイネージ装置１１は、前述の表示部３５、マイク３６およびスピーカ３７に加えて情報処理装置２０を備える。本実施の形態の情報処理装置２０は、表示部３５の背面に固定可能な小型コンピュータである。情報処理装置２０は、汎用のパソコン、タブレットまたはスマートフォン等であっても良い。
【００２０】
情報処理装置２０は、第１ＣＰＵ（Central Processing Unit）２１、主記憶装置２２、補助記憶装置２３、通信部２４、表示Ｉ／Ｆ（Interface）２５、マイクＩ／Ｆ２６、スピーカＩ／Ｆ２７およびバスを備える。
【００２１】
第１ＣＰＵ２１は、本実施の形態にかかるプログラムを実行する演算制御装置である。第１ＣＰＵ２１には、一または複数のＣＰＵまたはマルチコアＣＰＵ等が使用される。第１ＣＰＵ２１は、バスを介して情報処理装置２０を構成するハードウェア各部と接続されている。
【００２２】
主記憶装置２２は、ＳＲＡＭ（Static Random Access Memory）、ＤＲＡＭ（Dynamic Random Access Memory）、フラッシュメモリ等の記憶装置である。主記憶装置２２には、第１ＣＰＵ２１が行なう処理の途中で必要な情報および第１ＣＰＵ２１で実行中のプログラムが一時的に保存される。
【００２３】
補助記憶装置２３は、ＳＲＡＭ、フラッシュメモリ、ハードディスクまたは磁気テープ等の記憶装置である。補助記憶装置２３には、第１ＣＰＵ２１に実行させるプログラム、問合先ＤＢ５１およびプログラムの実行に必要な各種情報が保存される。
【００２４】
問合先ＤＢ５１は、ネットワーク等を介して情報処理装置２０に接続された別の記憶装置に記憶されても良い。問合先ＤＢ５１の詳細については後述する。通信部２４は、ネットワークとの通信を行なうインターフェイスである。
【００２５】
表示Ｉ／Ｆ２５は、表示部３５とバスとを接続するインターフェイスである。マイクＩ／Ｆ２６は、マイク３６とバスとを接続するインターフェイスである。スピーカＩ／Ｆ２７は、スピーカ３７とバスとを接続するＩ／Ｆである。
【００２６】
表示部３５と表示Ｉ／Ｆ２５との間、マイク３６とマイクＩ／Ｆ２６との間、および、スピーカ３７とスピーカＩ／Ｆ２７との間は、ケーブル、または、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線通信により接続される。
【００２７】
音声認識サーバ３０は、ネットワークを介して音声データを取得し、音声認識によりテキストデータに変換するサーバである。音声認識サーバ３０は、第２ＣＰＵ３１、主記憶装置３２、補助記憶装置３３および通信部３４を有する。
【００２８】
第２ＣＰＵ３１は、本実施の形態にかかるプログラムを実行する演算制御装置である。第２ＣＰＵ３１には、一または複数のＣＰＵまたはマルチコアＣＰＵ等が使用される。第２ＣＰＵ３１は、バスを介して音声認識サーバ３０を構成するハードウェア各部と接続されている。
【００２９】
主記憶装置３２は、ＳＲＡＭ、ＤＲＡＭ、フラッシュメモリ等の記憶装置である。主記憶装置３２には、第２ＣＰＵ３１が行なう処理の途中で必要な情報および第２ＣＰＵ３１で実行中のプログラムが一時的に保存される。
【００３０】
補助記憶装置３３は、ＳＲＡＭ、フラッシュメモリ、ハードディスクまたは磁気テープ等の記憶装置である。補助記憶装置３３には、第２ＣＰＵ３１に実行させるプログラム、およびプログラムの実行に必要な各種情報が保存される。
【００３１】
本実施の形態の音声認識サーバ３０は汎用のパーソナルコンピュータ、サーバマシン等の情報処理装置である。また、本実施の形態の音声認識サーバ３０は、大型計算機上で動作する仮想マシンでも良い。
【００３２】
分野サーバ４２は、たとえば天気サーバ４２１、株価サーバ４２２、図示を省略する、交通機関の運行情報サーバ、地図サーバ、ニュースサーバ等の、様々なコンテンツ提供サーバを含む。それぞれの分野サーバ４２は、インターネットを介して一般ユーザに公開されたサーバであっても、本実施の形態のデジタルサイネージシステム１０の運営事業者が管理するサーバであっても良い。
【００３３】
図３は、問合先ＤＢ５１のレコードレイアウトを説明する説明図である。問合先ＤＢ５１は、デジタルサイネージシステム１０が出力するコンテンツの分野と、コンテンツを取得する取得元とを関連づけて記録するデータベースである。
【００３４】
問合先ＤＢ５１は、分野フィールド、取得元フィールドおよび書式フィールドを有する。分野フィールドにはコンテンツの分野が記録されている。取得元フィールドには、コンテンツを取得する取得元の分野サーバ４２のＵＲＬ（Uniform Resource Locator）が記録されている。書式フィールドには、分野サーバから必要な情報を取得する際に用いるパラメータ等の書式が記録されている。
【００３５】
なお、問合先ＤＢ５１には、コンテンツを取得する際に用いるＡＰＩ（Application Programming Interface）とパラメータ等が記録されていても良い。
【００３６】
図４は、プログラムの処理の流れを説明するフローチャートである。なお、プログラムを開始する段階では、表示部３５にはコンテンツが出力されておらず、鏡にみえる状態である。
【００３７】
第１ＣＰＵ２１は、マイク３６を介して音声データを取得する（ステップＳ５０１）。なお、前述のとおりマイク３６は、複数のマイクロフォンを含むアレイマイクである。マイク３６は、音声をＡ／Ｄ（Analog/Digital）変換した音声データをバスに出力する。マイク３６は、それぞれのマイクロフォンが受信した音声の波形を所定の時間差で合成することにより、表示部３５の正面の所定の領域で発声された音声を増幅して取得できる。マイク３６は、それぞれのマイクロフォンが受信した音声をＡ／Ｄ変換した音声データをバスに出力し、第１ＣＰＵが所定の時間差で音声データを合成しても良い。
【００３８】
第１ＣＰＵ２１は取得した音声データを主記憶装置２２または補助記憶装置２３に一時的に記憶する。第１ＣＰＵ２１は、音声データを解析して日本語、英語、または、中国語等、どの言語の音声であるかを判定する言語判定を行なう（ステップＳ５０２）。言語判定を行なう方法は、従来から知られているため、詳細な説明については省略する。
【００３９】
第１ＣＰＵ２１は、言語判定が成功したか否かを判定する（ステップＳ５０３）。たとえば、取得した音声の音量が小さい場合、または、車の騒音等言語以外の音声である場合には、どの言語であるかの判定を行なえないため、第１ＣＰＵ２１は、言語判定は失敗したと判定する。言語判定が失敗したと判定した場合（ステップＳ５０３でＮＯ）、第１ＣＰＵ２１はステップＳ５０１に戻る。
【００４０】
言語判定に成功したと判定した場合（ステップＳ５０３でＹＥＳ）、第１ＣＰＵ２１は主記憶装置２２または補助記憶装置２３に一時的に記憶した音声データ、および、ステップＳ５０２で判定した言語の種類を音声認識サーバ３０に送信する（ステップＳ５０４）。
【００４１】
第２ＣＰＵ３１は、送信された音声データおよび言語を受信する（ステップＳ６０１）。第２ＣＰＵ３１は、送信された音声データの言語認識を行い、テキストデータに変換する（ステップＳ６０２）。言語認識は従来から広く行なわれているため、詳細な説明については省略する。なお、音声データと共に取得した言語種類に基づいて言語認識を行なうことにより、第２ＣＰＵ３１は短い処理時間で、正確が言語認識を行なえる。第２ＣＰＵ３１は、ステップＳ６０１で受信した音声データに対応するテキストデータを、情報処理装置２０に送信する（ステップＳ６０３）。
【００４２】
第１ＣＰＵ２１は、テキストデータを受信する（ステップＳ５１０）。第１ＣＰＵ２１は、テキストデータの意味を解析する（ステップＳ５１１）。意味の解析は、たとえば形態素解析等の自然言語処理手法により行なわれる。テキストの意味解析を行なう方法は、従来から知られているため、詳細な説明については省略する。
【００４３】
第１ＣＰＵ２１は、意味解析に成功したか否かを判定する（ステップＳ５１２）。たとえば、ステップＳ５１０で受信したテキストに、ステップＳ５０２で判定した言語の単語が含まれていない場合に、第１ＣＰＵ２１は意味解析に成功していないと判定する。意味解析に成功していないと判定した場合（ステップＳ５１２でＮＯ）、第１ＣＰＵ２１はステップＳ５０１に戻る。
【００４４】
意味解析に成功したと判定した場合（ステップＳ５１２でＹＥＳ）、第１ＣＰＵ２１はコンテンツ取得のサブルーチンを起動する（ステップＳ５１３）。コンテンツ取得のサブルーチンは、テキストデータに基づいて表示部３５およびスピーカ３７から出力するコンテンツを取得するサブルーチンである。コンテンツ取得のサブルーチンの処理の流れは後述する。
【００４５】
第１ＣＰＵ２１は、取得したコンテンツを表示部３５およびスピーカ３７から出力する（ステップＳ５１４）。第１ＣＰＵ２１は、処理を終了するか否かを判定する（ステップＳ５１５）。たとえば、あらかじめ設定された運用終了時刻になった場合、または、ネットワークを介して管理者から運用終了の指示を受け付けた場合に、第１ＣＰＵ２１は処理を終了すると判定する。
【００４６】
処理を終了すると判定した場合（ステップＳ５１５でＹＥＳ）、第１ＣＰＵ２１は処理を終了する。処理を終了しないと判定した場（ステップＳ５１５でＮＯ）、第１ＣＰＵ２１はステップＳ５０１に戻る。
【００４７】
図５は、コンテンツ取得のサブルーチンの処理の流れを説明するフローチャートである。コンテンツ取得のサブルーチンは、テキストデータに基づいて表示部３５およびスピーカ３７から出力するコンテンツを取得するサブルーチンである。
【００４８】
第１ＣＰＵ２１は、テキストを意味解析した結果に基づいて表示するコンテンツの分野を判定する（ステップＳ５２１）。たとえば、天気に関する質問であると判定した場合に、第１ＣＰＵ２１は分野は天気であると判定する。
【００４９】
第１ＣＰＵ２１は、判定した分野をキーとして問合先ＤＢ５１を検索して、レコードを抽出する。第１ＣＰＵ２１は、抽出したレコードの書式フィールドに基づいて、コンテンツを取得するコマンドを生成する（ステップＳ５２２）。なお第１ＣＰＵ２１は、ユーザが使用した言語を用いたコンテンツを取得するコマンドを生成することが望ましい。
【００５０】
第１ＣＰＵ２１は、抽出したレコードの取得元フィールドに記録されたＵＲＬ宛にコマンドを送信する。第１ＣＰＵ２１は、コマンドを受信した分野サーバ４２は、コマンドに基づいて検索処理を行い、検索結果であるコンテンツを送信する。第１ＣＰＵ２１は、コンテンツを取得する（ステップＳ５２３）。第１ＣＰＵ２１は、処理を終了する。
【００５１】
第１ＣＰＵ２１が取得するコンテンツは、「現在の天気は曇りです」のようなテキスト情報、天気図のような静止画、過去２４時間の天気図の移り変わり等の動画等、任意の形式のコンテンツを使用できる。どのような形式のコンテンツを取得するかの指定を、ステップＳ５２２で作成するコマンドに含めても良い。
【００５２】
スピーカ３７は、鋭い指向性を持ち特定の位置にいる人だけに音が聞こえるようにするパラメトリック・スピーカであっても良い。たとえば図書館または美術館等の、静粛な場所に設置可能なデジタルサイネージシステム１０を提供できる。
【００５３】
デジタルサイネージ装置１１は、人感センサを備えても良い。たとえば、一定時間以上表示部の前で立ち止まっているユーザを検知した場合、第１ＣＰＵ２１は「御質問があれば、話して下さい」等の文字および音声を出力して、ユーザに入力を促しても良い。
【００５４】
表示部３５は、表面にタッチセンサを備えるタッチパネルであっても良い。音声に加えて、タッチ操作によりユーザが入力を行なえるデジタルサイネージ装置１１を提供できる。
【００５５】
本実施の形態によると、近くにいる人のニーズに合わせた情報を表示するデジタルサイネージ装置を提供できる。本実施の形態によると、非使用時には鏡にみえて、空間を広く見せる効果を有するデジタルサイネージ装置１１を提供できる。
【００５６】
本実施の形態によると、図４を使用して説明したステップＳ５０２においてどの言語の音声であるかを判定した後に、音声認識サーバ３０において言語認識を行なう。これにより、言語以外の音を処理するため、および、様々な言語である場合の処理を行なうため音声認識サーバ３０のリソースが消費されることを防ぐことができる。以上により、ユーザの発声から、コンテンツの表示までの時間が短く、ユーザが快適に使用できるデジタルサイネージシステム１０を提供できる。
【００５７】
本実施の形態によると、ネットワークを介して様々な分野サーバ４２からコンテンツを取得するため、ユーザの使用する言語に応じたコンテンツを表示できる。マイク３６にアレイマイクを使用することにより、騒音のある環境であっても表示部３５の前にいるユーザの声を増幅して取得するデジタルサイネージシステム１０を提供できる。
【００５８】
［実施の形態２］
本実施の形態は、ユーザの声をテキストに変換して表示部３５に表示する議事録モードを有するデジタルサイネージシステム１０に関する。実施の形態１と共通する部分については、説明を省略する。
【００５９】
図６および図７は、実施の形態２のデジタルサイネージシステムの概要を説明する説明図である。図６は、二人のユーザが表示部３５の前に立って日本語で会話をしている。会話の内容がテキストに変換されて、表示部３５に表示される。
【００６０】
図７においては、ユーザは英語で会話をしている。表示部３５には、英語のテキストが表示されている。なお、表示部３５に表示されたテキストは、議事録モードの終了後、メール等によりユーザに送信される。
【００６１】
図８は、実施の形態２のプログラムの処理の流れを説明するフローチャートである。ステップＳ５１２までは、図１を使用して説明した実施の形態１のプログラムの処理の流れと同一であるため、説明を省略する。
【００６２】
意味解析に成功していないと判定した場合（ステップＳ５１２でＮＯ）、第１ＣＰＵ２１はステップＳ５０１に戻る。意味解析に成功したと判定した場合（ステップＳ５１２でＹＥＳ）、第１ＣＰＵ２１は、テキストが議事録モードの起動を意味するか否かを判定する（ステップＳ５３１）。
【００６３】
議事録モードの起動を意味すると判定した場合（ステップＳ５３１でＹＥＳ）、第１ＣＰＵ２１は議事録表示のサブルーチンを起動する（ステップＳ５３２）。議事録表示のサブルーチンは、ユーザの音声をテキスト変換して、表示部３５に表示するサブルーチンである。議事録表示のサブルーチンの処理の流れについては、後述する。
【００６４】
議事録モードの起動を意味しないと判定した場合（ステップＳ５３１でＮＯ）、第１ＣＰＵ２１はコンテンツ取得のサブルーチンを起動する（ステップＳ５１３）。コンテンツ取得のサブルーチンは、図５を使用して説明したサブルーチンと同一のサブルーチンである。
【００６５】
第１ＣＰＵ２１は、取得したコンテンツを表示部３５およびスピーカ３７から出力する（ステップＳ５１４）。ステップＳ５１４またはステップＳ５３２の終了後、第１ＣＰＵ２１は、処理を終了するか否かを判定する（ステップＳ５１５）。
【００６６】
処理を終了すると判定した場合（ステップＳ５１５でＹＥＳ）、第１ＣＰＵ２１は処理を終了する。処理を終了しないと判定した場（ステップＳ５１５でＮＯ）、第１ＣＰＵ２１はステップＳ５０１に戻る。
【００６７】
図９は、議事録表示のサブルーチンの処理の流れを説明するフローチャートである。議事録表示のサブルーチンは、ユーザの音声をテキスト変換して、表示部３５に表示するサブルーチンである。
【００６８】
第１ＣＰＵ２１は、マイク３６を介して音声データを取得する（ステップＳ５４１）。第１ＣＰＵ２１は取得した音声データを主記憶装置２２または補助記憶装置２３に一時的に記憶する。第１ＣＰＵ２１は、音声データを解析して日本語、英語、または、中国語等、どの言語の音声であるかを判定する言語判定を行なう（ステップＳ５４２）。
【００６９】
第１ＣＰＵ２１は、言語判定が成功したか否かを判定する（ステップＳ５４３）。言語判定が失敗したと判定した場合（ステップＳ５４３でＮＯ）、第１ＣＰＵ２１はステップＳ５４１に戻る。
【００７０】
言語判定に成功したと判定した場合（ステップＳ５４３でＹＥＳ）、第１ＣＰＵ２１は音声の話者を識別する（ステップＳ５４４）。ここで識別とは、表示部３５の前にいる数名程度の話者のうち、どの話者が発声したかを識別することを意味する。
【００７１】
たとえば、第１ＣＰＵ２１は声紋解析等により話者を識別できる。また、第１ＣＰＵ２１はマイク３６のマイクアレイを構成する各マイクロフォンの出力に基づいて、話者の位置を推定することにより、話者を識別してもよい。
【００７２】
第１ＣＰＵ２１は主記憶装置２２または補助記憶装置２３に一時的に記憶した音声データ、および、ステップＳ５０２で判定した言語の種類を音声認識サーバ３０に送信する（ステップＳ５４５）。
【００７３】
第２ＣＰＵ３１は、送信された音声データおよび言語を受信する（ステップＳ６２１）。第２ＣＰＵ３１は、送信された音声データの言語認識を行い、テキストデータに変換する（ステップＳ６２２）。第２ＣＰＵ３１は、テキストデータを情報処理装置２０に送信する（ステップＳ６２３）。
【００７４】
第１ＣＰＵ２１は、テキストデータを受信する（ステップＳ５５０）。第１ＣＰＵ２１は、受信したテキストデータを、主記憶装置２２または補助記憶装置２３に一時的に記憶する。第１ＣＰＵ５５０は、表示部３５にテキストデータを表示する（ステップＳ５５１）。
【００７５】
なお、ステップＳ５５１において第１ＣＰＵは、図６および図７に例示するように吹き出しの向きで区別して表示する。第１ＣＰＵは、吹き出しの向きの代わりに、吹き出しの色、文字の色またはフォント等、任意の形式で話者を区別して表示しても良い。第１ＣＰＵ２１は、話者を区別せずにテキストデータを表示しても良い。
【００７６】
第１ＣＰＵ２１は、処理を終了するか否かを判定する（ステップＳ５５５）。たとえば、所定の時間音声データが検出されない場合に、第１ＣＰＵ２１は処理を終了すると判定する。処理を終了しないと判定した場合（ステップＳ５５５でＮＯ）、第１ＣＰＵ２１はステップＳ５４１に戻る。
【００７７】
処理を終了すると判定した場合（ステップＳ５５５でＹＥＳ）、第１ＣＰＵ２１は処理を終了する。なお第１ＣＰＵ２１は、処理を終了する前に主記憶装置２２または補助記憶装置２３に記憶したテキストをユーザにより指定されたメールアドレス等に送信しても良い。第１ＣＰＵ２１は、処理を終了する前に主記憶装置２２または補助記憶装置２３に記憶したテキストを所定のサーバに保存し、アクセス用のＵＲＬを表示部３５に表示しても良い。
【００７８】
本実施の形態によると、自動的に議事録を作成するデジタルサイネージシステム１０を提供できる。ユーザは、議事録モードを一人で使用しても良い。いわゆる口述筆記を行なうデジタルサイネージシステム１０を提供できる。
【００７９】
なお、図９を使用して説明した議事録表示のサブルーチンにおいて、ステップＳ５５０で受信したテキストデータを機械翻訳した後に、ステップＳ５５１で表示しても良い。たとえば、日本語の話者による発言を図７に示すように英語で、英語の話者による発言を図６に示すように日本語で表示することにより、異なる言語を使用するユーザ同士のコミュニュケーションを支援するデジタルサイネージシステム１０を提供できる。
【００８０】
［実施の形態３］
図１０は、実施の形態３のデジタルサイネージ装置１１の機能ブロック図である。デジタルサイネージ装置１１は、前述のマイク３６と表示部３５とに加えて、テキスト取得部８１および出力部８２を備える。
【００８１】
表示部３５は、ハーフミラーにより覆われている。マイク３６は、表示部３５の近傍から音声を取得する。テキスト取得部８１は、マイク３６が取得した音声に基づくテキストを取得する。出力部８２は、テキスト取得部８１が取得したテキストに基づくコンテンツを表示部３５に出力する。
【００８２】
［実施の形態４］
本実施の形態は、汎用のコンピュータとプログラム９７とを組み合わせて動作させることにより、本実施の形態のデジタルサイネージシステム１０を実現する形態に関する。図１１は、実施の形態４のデジタルサイネージシステム１０の構成を示す説明図である。なお、実施の形態１と共通する部分の説明は省略する。
【００８３】
本実施の形態のデジタルサイネージシステム１０は、ネットワークを介して接続されたデジタルサイネージ装置１１、音声認識サーバ３０および分野サーバ４２を備える。デジタルサイネージ装置１１は、コンピュータ９０、表示部３５、マイク３６およびスピーカ３７を備える。
【００８４】
コンピュータ９０は、第１ＣＰＵ２１、主記憶装置２２、補助記憶装置２３、通信部２４、表示Ｉ／Ｆ２５、マイクＩ／Ｆ２６、スピーカＩ／Ｆ２７、読取部９５およびバスを備える。
【００８５】
プログラム９７は、可搬型記録媒体９６に記録されている。第１ＣＰＵ２１は、読取部９５を介してプログラム９７を読み込み、補助記憶装置２３に保存する。また第１ＣＰＵ２１は、コンピュータ９０に実装されたフラッシュメモリ等の半導体メモリ９８に記憶されたプログラム９７を読出しても良い。さらに、第１ＣＰＵ２１は、通信部２４および図示しないネットワークを介して接続される図示しない他のサーバコンピュータからプログラム９７をダウンロードして補助記憶装置２３に保存しても良い。
【００８６】
プログラム９７は、コンピュータ９０の制御プログラムとしてインストールされ、主記憶装置２２にロードして実行される。これにより、コンピュータ９０は上述した情報処理装置２０として機能する。
【００８７】
各実施例で記載されている技術的特徴（構成要件）はお互いに組合せ可能であり、組み合わせすることにより、新しい技術的特徴を形成することができる。
今回開示された実施の形態はすべての点で例示であって、制限的なものでは無いと考えられるべきである。本発明の範囲は、上記した意味では無く、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【００８８】
１０  デジタルサイネージシステム
１１  デジタルサイネージ装置
２０  情報処理装置
２１  第１ＣＰＵ
２２  主記憶装置
２３  補助記憶装置
２４  通信部
２５  表示Ｉ／Ｆ
２６  マイクＩ／Ｆ
２７  スピーカＩ／Ｆ
３０  音声認識サーバ
３１  第２ＣＰＵ
３２  主記憶装置
３３  補助記憶装置
３４  通信部
３５  表示部
３６  マイク
３７  スピーカ
４２  分野サーバ
４２１  天気サーバ
４２２  株価サーバ
５１  問合先ＤＢ
８１  テキスト取得部
８２  出力部
９０  コンピュータ
９５  読取部
９６  可搬型記録媒体
９７  プログラム
９８  半導体メモリ
【図１】
2019153160.tif 000003
【図２】
2019153160.tif 000004
【図３】
2019153160.tif 000005
【図４】
2019153160.tif 000006
【図５】
2019153160.tif 000007
【図６】
2019153160.tif 000008
【図７】
2019153160.tif 000009
【図８】
2019153160.tif 000010
【図９】
2019153160.tif 000011
【図１０】
2019153160.tif 000012
【図１１】
2019153160.tif 000013