(57)【要約】      （修正有）【課題】共同作業における作業者間の共感度を推定する精度を向上させることができる出力装置及び出力方法を提供する。【解決手段】出力装置は、共同して作業を行う２人の作業者それぞれの視線に関する視線データから、一方の作業者がいる位置を起点とした一方の作業者の視線の向きと、他方の作業者がいる位置を起点とした他方の作業者の視線の向きとを関連付けて特定する特定部１２１と、特定部１２１が特定した結果である複数の視線状態から、２人の作業者の視線が合った状態を示す相互視線状態と、２人の作業者が共通の物体に視線を向けた状態を示す共同視線状態とを選択する選択部１２２と、作業全体の期間に対する、相互視線状態の期間と、共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出する算出部１２３と、合計視線量に対応する指標を出力する出力部１２６と、を有する。【選択図】図２
2020046767.tif 000002
【特許請求の範囲】
【請求項１】
共同して作業を行う２人の作業者それぞれの視線に関する視線データから、一方の前記作業者がいる位置を起点とした前記一方の作業者の視線の向きと、他方の前記作業者がいる位置を起点とした前記他方の作業者の視線の向きとを関連付けて特定する特定部と、
前記特定部が特定した結果である複数の視線状態から、前記２人の作業者の視線が合った状態を示す相互視線状態と、前記２人の作業者が共通の物体に視線を向けた状態を示す共同視線状態とを選択する選択部と、
前記作業全体の期間に対する、前記相互視線状態の期間と、前記共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出する算出部と、
前記合計視線量に対応する指標を出力する出力部と、
を有する出力装置。
【請求項２】
前記算出部は、前記作業全体の期間に対する前記相互視線状態の期間の割合を示す相互視線量と、前記作業全体の期間に対する前記共同視線状態の期間の割合を示す共同視線量とを算出し、前記作業の内容に応じて定められる重要度に基づいて重み付けした前記相互視線量と、前記作業の内容に応じて定められる重要度に基づいて重み付けした前記共同視線量とを合計した前記合計視線量を算出する、
請求項１に記載の出力装置。
【請求項３】
前記算出部は、前記選択部が選択した前記視線状態ごとに、期間が長くなるほど数値が大きくなるように前記選択部が選択した前記視線状態の期間の長さに重み付けする、
請求項１又は２に記載の出力装置。
【請求項４】
前記算出部は、前記選択部が選択した前記視線状態ごとに、前記２人の作業者の発話を含む音声データから発話の状況を解析することによって特定された発話の有無に基づいて、解析された前記発話の状況に対応する前記視線状態の期間の長さに重み付けする、
請求項１から３のいずれか一項に記載の出力装置。
【請求項５】
前記算出部は、前記選択部が選択した前記視線状態ごとに、前記作業の内容に応じて定められる前記物体の重要度に基づいて、前記共同視線状態の期間の長さに重み付けする、
請求項１から４のいずれか一項に記載の出力装置。
【請求項６】
前記算出部は、前記相互視線状態の期間及び前記共同視線状態の期間それぞれの長短を示す第１統計量と、前記相互視線状態の期間及び前記共同視線状態の期間それぞれのばらつきを示す第２統計量とを算出し、
前記出力部は、前記相互視線状態及び前記共同視線状態それぞれに関連付けて前記第１統計量と前記第２統計量とにさらに対応する前記指標を出力する、
請求項１から５のいずれか一項に記載の出力装置。
【請求項７】
前記出力部は、前記選択部が選択した前記相互視線状態の回数と、前記選択部が選択した前記共同視線状態の回数とにさらに対応する前記指標を出力する、
請求項１から６のいずれか一項に記載の出力装置。
【請求項８】
前記出力部は、前記選択部が選択した前記視線状態において、前記２人の作業者の発話を含む音声データから発話の状況を解析することによって特定された前記２人の作業者それぞれの発話が重複した重複発話の期間が所定の閾値を超える場合に、前記作業の状況を示す情報をさらに出力する、
請求項１から７のいずれか一項に記載の出力装置。
【請求項９】
コンピュータが実行する、
共同して作業を行う２人の作業者それぞれの視線に関する視線データから、前記２人の作業者それぞれの視線を検出するステップと、
一方の前記作業者がいる位置を起点とした、検出した前記一方の作業者の視線の向きと、他方の前記作業者がいる位置を起点とした、検出した前記他方の作業者の視線の向きとを関連付けて特定するステップと、
特定した結果である複数の視線状態から、前記２人の作業者の視線が合った状態を示す相互視線状態と、前記２人の作業者が共通の物体に視線を向けた状態を示す共同視線状態とを選択するステップと、
前記作業全体の期間に対する、前記相互視線状態の期間と、前記共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出するステップと、
前記合計視線量に対応する指標を出力するステップと、
を有する出力方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、作業者間の共感度に関する情報を出力する出力装置及び出力方法に関する。
【背景技術】
【０００２】
従来、インタラクションにおける被験者の共感度を推定する装置が知られている。特許文献１には、コールセンターにおけるオペレータと顧客との対話において、顧客の音声を解析することによって推定した顧客の感情の時間変化パターンに基づいて、顧客が共感又は反感したオペレータの発話箇所を推定する技術が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−９９３０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１のような技術によって推定された感情の時間変化パターンを用いることにより、共同して作業を行う作業者間の共感度を推定することができるようにも思える。ところで、対面して行われる共同作業では、発話のほかに、資料に文字を書き込んだり、資料を示したりする動作を伴うことがある。そのため、特許文献１のような技術では、共同作業の内容によっては、発話が少なくなり、音声に基づく作業者間の共感度を推定する精度が悪くなりかねない。
【０００５】
そこで、本発明はこれらの点に鑑みてなされたものであり、共同作業における作業者間の共感度を推定する精度を向上させることができる出力装置及び出力方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の第１の態様に係る出力装置は、共同して作業を行う２人の作業者それぞれの視線に関する視線データから、一方の前記作業者がいる位置を起点とした前記一方の作業者の視線の向きと、他方の前記作業者がいる位置を起点とした前記他方の作業者の視線の向きとを関連付けて特定する特定部と、前記特定部が特定した結果である複数の視線状態から、前記２人の作業者の視線が合った状態を示す相互視線状態と、前記２人の作業者が共通の物体に視線を向けた状態を示す共同視線状態とを選択する選択部と、前記作業全体の期間に対する、前記相互視線状態の期間と、前記共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出する算出部と、前記合計視線量に対応する指標を出力する出力部と、を有する。
【０００７】
前記算出部は、前記作業全体の期間に対する前記相互視線状態の期間の割合を示す相互視線量と、前記作業全体の期間に対する前記共同視線状態の期間の割合を示す共同視線量とを算出し、前記作業の内容に応じて定められる重要度に基づいて重み付けした前記相互視線量と、前記作業の内容に応じて定められる重要度に基づいて重み付けした前記共同視線量とを合計した前記合計視線量を算出してもよい。
【０００８】
前記算出部は、前記選択部が選択した前記視線状態ごとに、期間が長くなるほど数値が大きくなるように前記選択部が選択した前記視線状態の期間の長さに重み付けしてもよい。
前記算出部は、前記選択部が選択した前記視線状態ごとに、前記２人の作業者の発話を含む音声データから発話の状況を解析することによって特定された発話の有無に基づいて、解析された前記発話の状況に対応する前記視線状態の期間の長さに重み付けしてもよい。
前記算出部は、前記選択部が選択した前記視線状態ごとに、前記作業の内容に応じて定められる前記物体の重要度に基づいて、前記共同視線状態の期間の長さに重み付けしてもよい。
【０００９】
前記算出部は、前記相互視線状態の期間及び前記共同視線状態の期間それぞれの長短を示す第１統計量と、前記相互視線状態の期間及び前記共同視線状態の期間それぞれのばらつきを示す第２統計量とを算出してもよいし、前記出力部は、前記相互視線状態及び前記共同視線状態それぞれに関連付けて前記第１統計量と前記第２統計量とにさらに対応する前記指標を出力してもよい。
【００１０】
前記出力部は、前記選択部が選択した前記相互視線状態の回数と、前記選択部が選択した前記共同視線状態の回数とにさらに対応する前記指標を出力してもよい。
前記出力部は、前記選択部が選択した前記視線状態において、前記２人の作業者の発話を含む音声データから発話の状況を解析することによって特定された前記２人の作業者それぞれの発話が重複した重複発話の期間が所定の閾値を超える場合に、前記作業の状況を示す情報をさらに出力してもよい。
【００１１】
本発明の第２の態様に係る出力方法は、コンピュータが実行する、共同して作業を行う２人の作業者それぞれの視線に関する視線データから、前記２人の作業者それぞれの視線を検出するステップと、一方の前記作業者がいる位置を起点とした、検出した前記一方の作業者の視線の向きと、他方の前記作業者がいる位置を起点とした、検出した前記他方の作業者の視線の向きとを関連付けて特定するステップと、特定した結果である複数の視線状態から、前記２人の作業者の視線が合った状態を示す相互視線状態と、前記２人の作業者が共通の物体に視線を向けた状態を示す共同視線状態とを選択するステップと、前記作業全体の期間に対する、前記相互視線状態の期間と、前記共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出するステップと、前記合計視線量に対応する指標を出力するステップと、を有する。
【発明の効果】
【００１２】
本発明によれば、共同作業における作業者間の共感度を推定する精度を向上させることができるという効果を奏する。
【図面の簡単な説明】
【００１３】
【図１】出力装置の概要を説明するための図である。
【図２】出力装置の構成を示す図である。
【図３】共同作業における２人の作業者の視線状態を模式的に表した図である。
【図４】出力部が出力した出力画面の一例を示す図である。
【図５】出力装置の処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００１４】
［出力装置１の概要］
図１は、出力装置１の概要を説明するための図である。本願の発明者は、様々な共同作業における作業者間のインタラクションを分析したところ、共感度が高いとみられる状態においては、２人の作業者の視線が合ったり、２人の作業者の視線が共通の物体に向いたりする状態が多いことを見出した。そこで、本実施の形態では、上記の現象を利用して、共同作業中の２人の作業者の視線状態を解析することによって推定した作業者間の共感度に関する情報を提供する。
【００１５】
出力装置１は、共同して作業を行う作業者間の共感度に関する情報を出力する装置であり、例えばコンピュータである。出力装置１には、共同して作業を行う２人の作業者それぞれの視線に関する視線データが予め記憶されている。視線データは、例えば、不図示の視線センサを介して検出した作業者の視線の向きと、作業者がいる空間（部屋）に存在する物体（人を含む）の位置を示す空間情報に基づいて特定される作業者の視線先に含まれる物体とを関連付けたデータである。
【００１６】
「視線先に含まれる物体」は、例えば、作業者がいる空間に存在する物体の領域と、作業者の視線先の領域とが重なった領域に含まれる物体である。作業者の視線先の領域の大きさと、作業者がいる空間に存在する物体ごとの領域の大きさとにおいては、予め設定がされている。
【００１７】
出力装置１は、例えば、赤外光を用いたプルキニエ検出による手法を用いて話者の視線の向きを検出してもよいし、画像処理による黒眼領域及び白眼領域の検出を用いた手法を用いて作業者の視線の向きを検出してもよい。また、出力装置１は、作業者の頭部の向きに基づいて視線の向きを推定してもよい。この場合、出力装置１は、モーションキャプチャー装置、赤外線センサ、又は加速度センサ等を用いて頭部の動作を検出してもよい。出力装置１は、不図示の通信部を介してリアルタイムに視線データを取得してもよい。
【００１８】
まず、出力装置１は、作業者Ｘ及び作業者Ｙそれぞれの視線の向きを関連付けた視線状態を特定する（図１の（１））。出力装置１は、特定した複数の視線状態から、図１に示すような相互視線状態と、図１に示すような共同視線状態とを選択する（図１の（２））。
【００１９】
出力装置１は、相互視線状態の期間と、共同視線状態の期間とに基づいて、合計視線量を算出する（図１の（３））。具体的には、出力装置１は、共同作業全体の期間に対する、相互視線状態の期間と、共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出する。
【００２０】
出力装置１は、共同作業において相互視線状態の期間及び共同視線状態の期間が長くなるほど、合計視線量が示す数値が大きくなり、作業者Ｘ及び作業者Ｙの共感度が高いと推定する。そして、出力装置１は、合計視線量に対応する指標を出力する（図１の（４））。
【００２１】
このように、出力装置１は、共同作業中の２人の作業者の視線状態に基づいて作業者間の共感度を推定する。発話においては、共同作業の内容によって多かったり少なかったりする場合があるが、視線においては、このような共同作業の内容による影響が少ない。そのため、出力装置１は、共同作業中の２人の作業者の視線状態に基づいて作業者間の共感度を推定することにより、共同作業の内容による作業者間の共感度を推定する精度のばらつきを低減することができる。その結果、出力装置１は、共同作業における作業者間の共感度を推定する精度を向上することができる。
以下、出力装置１の構成について説明する。
【００２２】
［出力装置１の構成］
図２は、出力装置１の構成を示す図である。出力装置１は、記憶部１１と、制御部１２とを有する。記憶部１１は、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）及びハードディスク等の記憶媒体である。記憶部１１は、制御部１２が実行するプログラムを記憶している。また、記憶部１１は、視線データを記憶している。
【００２３】
制御部１２は、例えばＣＰＵ（Central Processing Unit）である。制御部１２は、記憶部１１に記憶されたプログラムを実行することにより、特定部１２１、選択部１２２、算出部１２３、及び出力部１２６として機能する。
【００２４】
特定部１２１は、２人の作業者それぞれの視線の向きを関連付けた視線状態を特定する。具体的には、特定部１２１は、視線データから、一方の作業者がいる位置を起点とした一方の作業者の視線の向きと、他方の作業者がいる位置を起点とした他方の作業者の視線の向きとを関連付けた視線状態を特定する。
【００２５】
特定部１２１は、例えば、２人の作業者それぞれに対応する視線データから、２人の作業者のうちのいずれかの視線の向きが変化するごとに、一方の作業者の視線先に含まれる物体と、他方の作業者の視線先に含まれる物体とを関連付けて特定する。このように、特定部１２１は、２人の作業者それぞれの視線の向きを関連付けた視線状態を特定する。特定部１２１は、特定した結果である複数の視線状態を選択部１２２に入力する。
【００２６】
選択部１２２は、特定部１２１が特定した結果である複数の視線状態から、相互視線状態と共同視線状態とを選択する。相互視線状態は、２人の作業者の視線が合った状態を示す。共同視線状態は、２人の作業者が共通の物体に視線を向けた状態を示す。
【００２７】
図３は、共同作業における２人の作業者（作業者Ｘ及び作業者Ｙ）の視線状態を模式的に表した図である。図３に示す視線状態Ｍ１、Ｍ２、Ｍ３は、作業者Ｘ及び作業者Ｙの視線が合った状態である相互視線状態に属する。図３に示す視線状態Ｓ１、Ｓ２、Ｓ３は、作業者Ｘ及び作業者Ｙが共通の物体（資料）に視線を向けた状態である共同視線状態に属する。図３に示すように、特定部１２１が、視線データから、作業者Ｘ及び作業者Ｙのうちのいずれかの視線の向きが変化するごとに、「作業者Ｘの視線」欄に示す作業者Ｘの視線先に含まれる物体（作業者Ｙ又は資料）と、「作業者Ｙの視線」欄に示す作業者Ｙの視線先に含まれる物体（作業者Ｘ又は資料）とを関連付けて特定したとする。
【００２８】
この場合において、選択部１２２は、相互視線状態として、視線状態Ｍ１、Ｍ２、Ｍ３を選択する。また、選択部１２２は、共同視線状態として、視線状態Ｓ１、Ｓ２、Ｓ３を選択する。選択部１２２は、選択した各視線状態の期間と、視線状態の種類（相互視線状態又は共同視線状態）とを関連付けて算出部１２３に入力する。
【００２９】
算出部１２３は、重み付け部１２４と、視線量算出部１２５とを有する。重み付け部１２４は、相互視線量と共同視線量とを算出し、作業の内容に応じて定められる重要度に基づいて相互視線量と共同視線量とを重み付けする。相互視線量は、作業全体の期間に対する相互視線状態の期間の割合を示す。共同視線量は、作業全体の期間に対する共同視線状態の期間の割合を示す。
【００３０】
相互視線量及び共同視線量それぞれの重要度は、共同作業の内容に応じて設定される。例えば、共同作業が、ブレインストーミング又はディベート等のように発話を中心とした作業である場合、共同視線状態よりも相互視線状態の方が重視されるため、共同視線量よりも相互視線量の方が重要度が高く設定される。また、例えば、共同作業が、資料等の作成を中心とした作業である場合、相互視線状態よりも共同視線状態の方が重視されるため、相互視線量よりも共同視線量の方が重要度が高く設定される。
【００３１】
相互視線量及び共同視線量それぞれの重要度は、重要度が示す修正係数を管理する係数管理データベースに予め記憶されている。係数管理データベースは、重要度が示す修正係数を、視線状態の種類ごとに関連付けて記憶している。重要度には、視線状態の種類ごとに異なる修正係数が設定されている。
【００３２】
図３に示す例において、重み付け部１２４は、まず、相互視線状態である視線状態Ｍ１、Ｍ２、Ｍ３の期間と、共同視線状態である視線状態Ｓ１、Ｓ２、Ｓ３の期間とをそれぞれ合計する。重み付け部１２４は、相互視線状態の合計期間及び共同視線状態の合計期間それぞれを作業全体の期間で正規化することにより、相互視線量と共同視線量とを算出する。そして、重み付け部１２４は、係数管理データベースに記憶されている相互視線状態の重要度が示す修正係数を相互視線量に乗じ、係数管理データベースに記憶されている共同視線状態の重要度が示す修正係数を共同視線量に乗じる。
【００３３】
このようにして、重み付け部１２４は、作業の内容に応じて定められる重要度に基づいて相互視線量と共同視線量とを重み付けする。このようにすることで、重み付け部１２４は、共同作業の内容による作業者間の共感度を推定する精度のばらつきを低減することができる。
【００３４】
ここで、作業者Ｘをｘとし、作業者Ｙをｙとし、選択部１２２が選択した相互視線状態の数をｖとし、選択部１２２が選択した共同視線状態の数をｗとした場合において、ある相互視線状態（１＜ｊ＜ｖ）の期間をｔ（ｍ（ｊ，ｘ，ｙ））とし、ある相互視線状態（１＜ｋ＜ｗ）の期間をｔ（ｓ（ｋ，ｘ，ｙ））としたとする。また、共同作業の期間をｔ（I）としたとする。
【００３５】
この場合において、重み付け部１２４は、以下の式（１）、（２）を用いて相互視線量Ｍ（ｘ，ｙ）及び共同視線量Ｓ（ｘ，ｙ）を算出することができる。
【数１】
2020046767.tif 000003
【００３６】
ところで、本願の発明者は、共同作業における作業者間の共感度と、１つの視線状態（相互視線状態又は共同視線状態）の期間とが相関する関係にあることを見出した。具体的には、作業者間の共感度が高い場合においては、１つの視線状態の期間が長くなる傾向にあることを本願の発明者は見出した。そこで、重み付け部１２４は、選択部１２２が選択した視線状態ごとに、期間が長くなるほど数値が大きくなるように選択部１２２が選択した視線状態の期間の長さに重み付けしてもよい。
【００３７】
この場合、重み付け部１２４は、選択部１２２が選択した視線状態ごとに、期間が長くなるほど数値が大きくなるように選択部１２２が選択した視線状態の期間の長さに重み付けした後に、相互視線量と共同視線量とを算出する。このように、重み付け部１２４は、共同作業中に変動する作業者間の共感度を考慮することにより、作業者間の共感度を推定する精度を向上させることができる。
【００３８】
また、共同作業における作業者間の共感度と、選択部１２２が選択した視線状態（相互視線状態又は共同視線状態）における発話の有無とが相関する関係にあることを本願の発明者は見出した。具体的には、作業者間の共感度が高い場合においては、選択部１２２が選択した視線状態においてコミュニケーションが取られる傾向にあることを本願の発明者は見出した。そこで、重み付け部１２４は、選択部１２２が選択した視線状態ごとに、２人の作業者の発話を含む音声データから発話の状況を解析することによって特定された発話の有無に基づいて、解析された発話の状況に対応する視線状態の期間の長さに重み付けしてもよい。
【００３９】
具体的には、重み付け部１２４は、１より大きな実数である修正係数を、解析結果が発話ありを示す視線状態の期間の長さに乗じることにより重み付けしてもよい。また、重み付け部１２４は、１より小さな実数である修正係数を、解析結果が発話なしを示す視線状態の期間の長さに乗じることにより重み付けしてもよい。このように、重み付け部１２４は、選択部１２２が選択した視線状態におけるコミュニケーションの有無を考慮することにより、共感度を推定する精度を向上させることができる。
【００４０】
共同作業においては、作業者がいる空間に存在する物体それぞれの重要度が異なる。例えば、２人の作業者が共同して書き込みを行っている資料は、作業者がいる空間（部屋）の壁にかけられている時計又はカレンダー等よりも重要度が高いことが考えられる。そこで、重み付け部１２４は、選択部１２２が選択した視線状態ごとに、作業の内容に応じて定められる物体（人を除く）の重要度に基づいて、共同視線状態の期間の長さに重み付けしてもよい。
【００４１】
物体の重要度は、予め設定されていてもよいし、作業者による物体への指示量、接触量、又は注視量に基づいて算出されてもよいし、２人の作業者との平均距離に基づいて算出されてもよい。このように、重み付け部１２４は、共同作業の内容に応じた物体の役割（重要性）を考慮することにより、共感度を推定する精度を向上させることができる。重み付け部１２４は、重み付けした相互視線量と、重み付けした共同視線量とを視線量算出部１２５に入力する。
【００４２】
視線量算出部１２５は、作業全体の期間に対する、相互視線状態の期間と、共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出する。具体的には、視線量算出部１２５は、重み付け部１２４が作業の内容に応じて定められる重要度に基づいて重み付けした相互視線量と、重み付け部１２４が作業の内容に応じて定められる重要度に基づいて重み付けした共同視線量とを合計した合計視線量を算出する。視線量算出部１２５は、算出した合計視線量を出力部１２６に入力する。
【００４３】
ここで、相互視線量をＭ（ｘ，ｙ）とし、共同視線量をＳ（ｘ，ｙ）とし、相互視線状態の重要度が示す修正係数をＱとし、共同視線状態の重要度が示す修正係数をＲとしたとする。この場合において、視線量算出部１２５は、以下の式（３）を用いて合計視線量Ｅ（ｘ，ｙ）を算出することができる。
【数２】
2020046767.tif 000004
【００４４】
視線量算出部１２５は、相互視線状態の期間及び共同視線状態の期間それぞれの長短を示す第１統計量と、相互視線状態の期間及び共同視線状態の期間それぞれのばらつきを示す第２統計量とをさらに算出してもよい。第１統計量は、例えば、各視線状態の平均期間又は最頻値等である。第１統計量は、数値が大きいほど、作業者間の共感度が高いことを示す。第２統計量は、例えば、不偏分散又は標本分散等である。第２統計量は、数値が小さいほど、共同作業全体における共感度の変動が小さいことを示す。
【００４５】
視線量算出部１２５は、例えば、第１統計量として、相互視線状態の平均期間と、共同視線状態の平均期間をさらに算出してもよい。また、視線量算出部１２５は、例えば、第２統計量として、相互視線状態の不偏分散と、共同視線状態の不偏分散とをさらに算出してもよい。
【００４６】
出力部１２６は、視線量算出部１２５が算出した合計視線量に対応する指標を出力する。指標は、合計視線量に基づいて推定される作業者間の共感度を示す共感情報である。出力装置１には、例えば、複数の段階に分類された共感度の各段階に対応する共感情報が記憶されている。
【００４７】
図４は、出力部１２６が出力した出力画面の一例を示す図である。図４に示すグラフは、２段階に分類された共感度における合計視線量の位置を示す。図４に示すように、出力部１２６は、出力画面において、視線量算出部１２５が算出した合計視線量をグラフに描画するとともに、当該合計視線量に対応する共感情報を吹き出しに表示する。出力部１２６は、例えば、作業者が３人以上である場合、２人１組の組み合わせごとに算出された合計視線量を図４に示すグラフに並べて表示してもよい。
【００４８】
出力部１２６は、視線量算出部１２５が、第１統計量及び第２統計量を算出した場合、相互視線状態及び共同視線状態それぞれに関連付けて第１統計量と第２統計量とにさらに対応する指標を出力してもよい。また、出力部１２６は、選択部１２２が選択した相互視線状態の回数と、選択部１２２が選択した共同視線状態の回数とにさらに対応する指標を出力してもよい。
【００４９】
共同作業において２人の作業者に反感が生じている場合にも、相互視線状態が多くなることを本願の発明者は見出した。また、２人の作業者に反感が生じている状況における相互視線状態において、２人の作業者の発話がオーバーラップする傾向にあることを本願の発明者は見出した。そこで、出力部１２６は、選択部１２２が選択した視線状態において、２人の作業者の発話を含む音声データから発話の状況を解析することによって特定された２人の作業者それぞれの発話が重複した重複発話の期間が所定の閾値（例えば４００ミリ秒）を超える場合に、作業の状況を示す情報をさらに出力してもよい。
【００５０】
所定の閾値は、共感を示す相槌及び笑い声を除外するための基準値である。出力部１２６は、例えば、重複発話の期間が所定の閾値を超える相互視線状態の割合が半数以上である場合に、２人の作業者に反感が生じている可能性があることを、合計視線量に対応する指標とともに出力してもよい。
【００５１】
［出力装置１の処理の流れ］
続いて、出力装置１の処理の流れについて説明する。図５は、出力装置１の処理の流れを示すフローチャートである。本フローチャートは、例えば、出力装置１を利用する利用者が、記憶部１１に視線データを格納し、作業者間の共感度の推定処理を実行する操作を行ったことを契機として開始する。
【００５２】
特定部１２１は、２人の作業者それぞれの視線の向きを関連付けた視線状態を特定する（Ｓ１）。具体的には、特定部１２１は、視線データから、一方の作業者がいる位置を起点とした一方の作業者の視線の向きと、他方の作業者がいる位置を起点とした他方の作業者の視線の向きとを関連付けた視線状態を特定する。特定部１２１は、特定した複数の視線状態を選択部１２２に入力する。
【００５３】
選択部１２２は、特定部１２１が特定した結果である複数の視線状態から、相互視線状態と共同視線状態とを選択する（Ｓ２）。選択部１２２は、選択した各視線状態の期間と、視線状態の種類（相互視線状態又は共同視線状態）とを関連付けて重み付け部１２４に入力する。
【００５４】
重み付け部１２４は、相互視線量と共同視線量とを算出し、作業の内容に応じて定められる重要度に基づいて相互視線量と共同視線量とを重み付けする。具体的には、重み付け部１２４は、まず、選択部１２２が選択した複数の相互視線状態の期間と、選択部１２２が選択した複数の共同視線状態の期間とをそれぞれ合計することにより、相互視線状態の合計期間と共同視線状態の合計期間とを算出する（Ｓ３）。
【００５５】
重み付け部１２４は、相互視線状態の合計期間と共同視線状態の合計期間とを算出すると、相互視線状態の合計期間及び共同視線状態の合計期間それぞれを作業全体の期間で正規化することにより、相互視線量と共同視線量とを算出する（Ｓ４）。そして、重み付け部１２４は、係数管理データベースに記憶されている相互視線状態の重要度が示す修正係数を相互視線量に乗じ、係数管理データベースに記憶されている共同視線状態の重要度が示す修正係数を共同視線量に乗じることにより、相互視線量と共同視線量とを重み付けする（Ｓ５）。重み付け部１２４は、重み付けした相互視線量と、重み付けした共同視線量とを視線量算出部１２５に入力する。
【００５６】
視線量算出部１２５は、作業全体の期間に対する、相互視線状態の期間と、共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出する（Ｓ６）。具体的には、視線量算出部１２５は、重み付け部１２４が作業の内容に応じて定められる重要度に基づいて重み付けした相互視線量と、重み付け部１２４が作業の内容に応じて定められる重要度に基づいて重み付けした共同視線量とを合計した合計視線量を算出する。視線量算出部１２５は、算出した合計視線量を出力部１２６に入力する。そして、出力部１２６は、視線量算出部１２５が算出した合計視線量に対応する指標を出力する（Ｓ７）。
【００５７】
［本実施の形態における効果］
以上説明したとおり、出力装置１は、視線データから特定された複数の視線状態から相互視線状態と共同視線状態とを選択する。そして、出力装置１は、作業全体の期間に対する、相互視線状態の期間と、共同視線状態の期間とを合計した合計期間の割合を示す合計視線量を算出し、算出した合計視線量に対応する指標を出力する。このように、出力装置１は、共同作業中の２人の作業者の視線状態に基づいて作業者間の共感度を推定することにより、共同作業の内容による作業者間の共感度を推定する精度のばらつきを低減することができる。その結果、出力装置１は、共同作業における作業者間の共感度を推定する精度を向上することができる。出力装置１が出力した指標においては、グループ内のチームワーク評価、及び作業グループ編成のための支援等に用いることができる。
【００５８】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の分散・統合の具体的な実施の形態は、以上の実施の形態に限られず、その全部又は一部について、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を合わせ持つ。
【符号の説明】
【００５９】
１  出力装置
１１  記憶部
１２  制御部
１２１  特定部
１２２  選択部
１２３  算出部
１２４  重み付け部
１２５  視線量算出部
１２６  出力部
【図１】
2020046767.tif 000005
【図２】
2020046767.tif 000006
【図３】
2020046767.tif 000007
【図４】
2020046767.tif 000008
【図５】
2020046767.tif 000009