(57)【要約】【課題】表示させる画像について、利用者に応じた色情報の調整を行う色情報調整装置を提供する。【解決手段】撮影画像を解析して、当該撮影画像に関する基準画像色情報を取得する画像解析部１１と、画像解析部１１が取得した基準画像色情報と、利用者に応じた、色情報の調整パターンを示す調整パターン情報とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定する表示形態決定部１３と、表示形態決定部１３が決定したパラメータを用いて、コンテンツ画像の色情報を調整した調整画像を作成する調整画像作成部１４とを備えた。【選択図】図１
2019220748.tif 000002
【特許請求の範囲】
【請求項１】
撮影画像を解析して、当該撮影画像に関する基準画像色情報を取得する画像解析部と、
前記画像解析部が取得した前記基準画像色情報と、利用者に応じた、色情報の調整パターンを示す調整パターン情報とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定する表示形態決定部と、
前記表示形態決定部が決定した前記パラメータを用いて、前記コンテンツ画像の色情報を調整した調整画像を作成する調整画像作成部
とを備えた色情報調整装置。
【請求項２】
前記撮影画像に前記調整画像作成部が作成した調整画像を重畳させた重畳画像を表示させる表示制御部
を備えた請求項１記載の色情報調整装置。
【請求項３】
前記色情報は、色相および明度を含む
ことを特徴とする請求項１または請求項２記載の色情報調整装置。
【請求項４】
前記調整パターン情報の候補となる複数の調整パターン情報を表示させるパターン提示部と、
前記パターン提示部が表示させた前記複数の調整パターン情報のうちから、前記利用者に応じた調整パターン情報を受け付けるパターン受付部とを備え、
前記表示形態決定部は、
前記基準画像色情報と、前記パターン受付部が受け付けた調整パターン情報とに基づき、前記パラメータを決定する
ことを特徴とする請求項１から請求項３のうちのいずれか１項記載の色情報調整装置。
【請求項５】
前記パターン受付部が受け付けた前記利用者に応じた調整パターン情報を、前記利用者を特定する利用者情報と対応付けて設定済パターン記憶部に記憶させるパターン設定部と、
前記利用者情報を受け付ける利用者情報受付部と、
前記利用者情報受付部が受け付けた前記利用者情報が前記設定済パターン記憶部に記憶されているか否かを判定する設定済パターン判定部とを備え、
前記パターン提示部は、
前記設定済パターン判定部が、前記利用者情報受付部が受け付けた前記利用者情報が前記設定済パターン記憶部に記憶されていないと判定した場合に、前記調整パターン情報の候補となる前記複数の調整パターン情報を表示させる
ことを特徴とする請求項４記載の色情報調整装置。
【請求項６】
画像解析部が、撮影画像を解析して、当該撮影画像に関する基準画像色情報を取得するステップと、
表示形態決定部が、前記画像解析部が取得した前記基準画像色情報と、利用者に応じた、色情報の調整パターンを示す調整パターン情報とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定するステップと、
調整画像作成部が、前記表示形態決定部が決定した前記パラメータを用いて、前記コンテンツ画像の色情報を調整した調整画像を作成するステップ
とを備えた色情報調整方法。
【請求項７】
前記撮影画像を撮影する撮像装置と、
請求項１から請求項５のうちのいずれか１項記載の色情報調整装置
前記調整画像作成部が作成した調整画像を表示する表示装置と、
とを備えた色情報調整システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、画像の色情報を調整する色情報調整装置、色情報調整方法、および、色情報調整システムに関するものである。
【背景技術】
【０００２】
従来、表示装置に表示される情報の視認性の低下を抑制する技術が知られている。
例えば、特許文献１には、端末周囲の周囲光の色情報を検出し、検出した周囲光の色情報に基づき、表示されるコンテンツの色情報を調整する色情報調整システムが開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５−２５２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に開示されているような色情報調整システムに代表される技術は、表示されるコンテンツを視認する利用者（以下単に「利用者」という。）に応じた色情報の調整を行うものではないという課題があった。
【０００５】
この発明は、上記のような課題を解決するためになされたもので、表示させる画像について、利用者に応じた色情報の調整を行う色情報調整装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
この発明に係る色情報調整装置は、撮影画像を解析して、当該撮影画像に関する基準画像色情報を取得する画像解析部と、画像解析部が取得した基準画像色情報と、利用者に応じた、色情報の調整パターンを示す調整パターン情報とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定する表示形態決定部と、表示形態決定部が決定したパラメータを用いて、コンテンツ画像の色情報を調整した調整画像を作成する調整画像作成部とを備えたものである。
【発明の効果】
【０００７】
この発明によれば、表示させる画像について、利用者に応じた色情報の調整を行うことができる。
【図面の簡単な説明】
【０００８】
【図１】実施の形態１に係る色情報調整装置の構成例について説明するための図である。
【図２】実施の形態１において、調整パターン情報記憶部に記憶されているパターン画像のイメージの一例を示す図である。
【図３】図３Ａ，図３Ｂは、実施の形態１に係る色情報調整装置のハードウェア構成の一例を示す図である。
【図４】実施の形態１に係る色情報調整装置における「パターン画像設定処理」の動作を説明するためのフローチャートである。
【図５】実施の形態１に係る色情報調整装置における「画像表示処理」の動作を説明するためのフローチャートである。
【図６】実施の形態１において、利用者が視覚正常者である場合に、表示装置に表示される画面の一例を示す図である。
【図７】実施の形態１において、利用者が視覚異常者である場合に、表示装置に表示させる画面の一例を示す図である。
【発明を実施するための形態】
【０００９】
以下、この発明をより詳細に説明するために、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１．
実施の形態１に係る色情報調整装置は、カメラ等の撮像装置で現実空間を撮影した撮影画像に、コンテンツを表示したコンテンツ画像を重畳表示させることができる。
なお、コンテンツ画像は、撮影画像上の予め決められた領域に重畳表示される。撮像画像上のどの領域にコンテンツ画像が重畳表示されるかは、コンテンツ毎に予め決められている。
このとき、色情報調整装置１は、利用者の色覚に応じて、当該利用者が、撮影画像に重畳表示されたコンテンツ画像を、撮影画像と区別して認識することができるように、コンテンツ画像の色情報を調整する。実施の形態１において、「色情報」には、色相および明度が含まれる。「色情報を調整する」とは、色相および明度を調整することをいう。
なお、コンテンツの詳細については、後述する。
【００１０】
図１は、実施の形態１に係る色情報調整装置１の構成例について説明するための図である。
図１に示すように、色情報調整装置１は、撮像装置２、表示装置３、および、入力装置４と接続される。色情報調整装置１、撮像装置２、表示装置３、および、入力装置４で、色情報調整システムを構成する。
【００１１】
色情報調整装置１は、撮像装置２から撮影画像を取得する。色情報調整装置１が撮像装置２から取得した撮影画像は、当該撮影画像にコンテンツ画像を重畳表示させる場合の、当該コンテンツ画像の色情報を調整するためのパラメータを決定する際の基準となる。
色情報調整装置１は、撮像装置２から取得した撮影画像を解析し、撮影画像の色情報（以下「基準画像色情報」という。）を取得する。
そして、色情報調整装置１は、基準画像色情報と、利用者毎に設定された調整パターン情報とに基づき、コンテンツ画像を表示させる際の、当該コンテンツ画像の色情報を調整するためのパラメータを決定し、決定したパラメータを用いて、色情報を調整したコンテンツ画像を作成する。実施の形態１において、色情報を調整したコンテンツ画像を、「調整画像」ともいう。色情報調整装置１は、撮影画像に、調整画像を重畳させて表示装置３に表示させる。実施の形態１において、撮影画像に調整画像を重畳させた画像を、「重畳画像」ともいう。
利用者は、入力装置４を操作して、調整パターン情報を選択することが可能であり、色情報調整装置１は、利用者によって選択された調整パターン情報に基づき、コンテンツ画像の色情報を調整するためのパラメータを決定することができる。調整パターン情報の詳細については、後述する。
【００１２】
なお、実施の形態１において、利用者とは、表示装置３において表示された重畳画像を視認する人のことをいう。
【００１３】
撮像装置２は、周囲の画像を撮影する。実施の形態１において、周囲とは、利用者の視野の範囲をいう。例えば、撮像装置２は、利用者の頭にマウントされ、当該利用者が視界相当の範囲を撮影する。撮像装置２は、撮影した撮影画像を、色情報調整装置１に送信する。
表示装置３は、例えば、ディスプレイである。
入力装置４は、例えば、マウスまたはキーボードである。
【００１４】
色情報調整装置１は、画像解析部１１と、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５と、パターン記憶部１６と、コンテンツデータ記憶部１７とを備える。
調整パターン設定制御部１２は、利用者情報受付部１２１と、設定済パターン判定部１２２と、パターン提示部１２３と、パターン受付部１２４と、パターン設定部１２５を備える。
パターン記憶部１６は、調整パターン情報記憶部１６１と、設定済パターン記憶部１６２を備える。
【００１５】
画像解析部１１は、撮像装置２から撮影画像を取得し、取得した撮影画像を解析して、基準画像色情報を取得する。
画像解析部１１は、基準画像色情報を、表示形態決定部１３および表示制御部１５に出力する。
【００１６】
調整パターン設定制御部１２は、利用者に応じた調整パターン情報を設定する。調整パターン設定制御部１２は、設定した調整パターン情報を、利用者を特定する利用者情報と対応付けて、パターン記憶部１６の設定済パターン記憶部１６２（後述する）に記憶させる。
【００１７】
ここで、調整パターン情報について説明する。
調整パターン情報とは、色情報を調整する調整パターンを示す情報である。色情報調整装置１は、当該調整パターン情報によって、利用者がどのような色覚を有しているかを判別する。
実施の形態１では、一例として、調整パターン情報は画像（以下「パターン画像」という。）とする。そして、パターン記憶部１６の調整パターン情報記憶部１６１（後述する）には、標準的なパターン画像と、当該パターン画像の色情報を調整した、少なくとも１つのパターン画像とを含む、複数パターンのパターン画像が記憶されている。標準的なパターン画像とは、色情報を調整していないパターン画像である。
色覚異常には、１型色覚、２型色覚、３型色覚、または、１色覚等、種々の分類がある。色情報調整システムの管理者等は、予め、これらの種々の分類に応じて、それぞれの色覚で最も見やすい色の組み合わせを模式的に示したパターン画像を作成し、調整パターン情報記憶部１６１に記憶させておく。
なお、どのような画像をパターン画像とするかは、適宜設定可能であり、あるパターン画像について、色情報を異ならせた、複数のパターン画像が、調整パターン情報記憶部１６１に記憶されているようになっていればよい。
【００１８】
図２は、実施の形態１において、調整パターン情報記憶部１６１に記憶されているパターン画像のイメージの一例を示す図である。
図２では、パターン画像を、草原で気球が浮かんでいる画像とし、予め、第１のパターン画像２０１、第２のパターン画像２０２、第３のパターン画像２０３、および、第４のパターン画像２０４の４種類のパターン画像が、調整パターン情報記憶部１６１に記憶されているものとしている。
図２では、便宜上、色の違いを、白黒で表現している。
【００１９】
例えば、調整パターン設定制御部１２は、図２に示すような４種類のパターン画像を表示装置３に表示させ、利用者に、４種類のパターン画像のうち、どれが自身にとって最適かを選択させることで、利用者に応じた色情報のパターン画像を設定する。
なお、図２に示すパターン画像は一例に過ぎない。パターン画像は、どのような画像であってもよい。ただし、パターン画像は、白黒画像ではなく、複数種類の色を含む画像であることが好ましい。
また、図２では、パターン画像は４種類としたが、予め設定されているパターン画像の種類はこれに限らない。パターン画像は、上述のとおり、色覚異常の種々の分類にあわせ、個人差も考慮して、適宜の種類数、記憶され得る。少なくとも、色情報を異ならせた２つのパターン画像が設定されているようにすればよい。
【００２０】
図１の説明に戻る。
調整パターン設定制御部１２の利用者情報受付部１２１は、利用者を特定する利用者情報を受け付ける。
例えば、利用者は、入力装置４を操作して、表示装置３に表示された利用者情報入力部から、利用者ＩＤ等、自身を特定する利用者情報を入力する。利用者情報受付部１２１は、入力装置４から入力された利用者情報を受け付ける。
例えば、表示制御部１５は、色情報調整装置１の電源投入時に、表示装置３に対して、利用者情報入力部を表示させる。また、例えば、表示装置３には、利用者情報入力画面呼出ボタンが表示されるようにし、利用者が、入力装置４を操作して当該利用者情報入力部呼出ボタンを押下等すると、表示制御部１５が、利用者情報入力部を表示させるようにしてもよい。
利用者情報受付部１２１は、受け付けた利用者情報を、設定済パターン判定部１２２に出力する。
【００２１】
調整パターン設定制御部１２の設定済パターン判定部１２２は、利用者情報受付部１２１が受け付けた利用者情報が、設定済パターン記憶部１６２に記憶されているか否かを判定する。
設定済パターン判定部１２２は、利用者情報が設定済パターン記憶部１６２に記憶されているか否かの判定結果を、パターン提示部１２３（後述する）またはパターン設定部１２５（後述する）に出力する。
【００２２】
調整パターン設定制御部１２のパターン提示部１２３は、設定済パターン判定部１２２が、利用者情報が設定済パターン記憶部１６２に記憶されていないと判定した場合に、表示装置３に対して、複数のパターン画像を表示させる。ここでパターン提示部１２３が表示させる複数のパターン画像は、この後、利用者が、自身に応じたパターン画像を選択するための、候補（以下「パターン画像候補」という。）となる。具体的には、パターン提示部１２３は、表示制御部１５（後述する）を介して、調整パターン情報記憶部１６１に記憶されている複数のパターン画像（図２参照）を、パターン画像候補として、一覧表示させる。
【００２３】
調整パターン設定制御部１２のパターン受付部１２４は、パターン提示部１２３が表示装置３に表示させた、パターン画像候補のうちから、利用者に応じたパターン画像を受け付ける。具体的には、利用者は、入力装置４を操作して、表示装置３に表示された、パターン画像候補のうち、自身にとって最適なパターン画像を選択する。パターン受付部１２４は、利用者によって選択されたパターン画像を受け付ける。
パターン受付部１２４は、受け付けたパターン画像を、パターン設定部１２５に出力する。
【００２４】
調整パターン設定制御部１２のパターン設定部１２５は、パターン受付部１２４から、受け付けたパターン画像が出力された場合、当該パターン画像を、利用者に応じたパターン画像に設定する。
そして、パターン設定部１２５は、設定したパターン画像を、当該パターン画像を選択した利用者を特定する利用者情報と対応付けて、設定済パターン記憶部１６２に記憶させる。パターン設定部１２５は、利用者情報を、利用者情報受付部１２１から取得するようにすればよい。
また、パターン設定部１２５は、設定済パターン判定部１２２から、利用者情報が設定済パターン記憶部１６２に記憶されているとの判定結果が出力された場合は、既に利用者に応じたパターン画像は設定済であると判断し、利用者に応じたパターン画像の設定は行わない。
【００２５】
表示形態決定部１３は、画像解析部１１が取得した基準画像色情報と、利用者に応じたパターン画像とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定する。具体的には、表示形態決定部１３は、例えば、コンテンツ画像が、撮像装置２から取得した撮影画像を重畳表示された場合に、利用者が、当該コンテンツ画像を撮影画像と区別して見やすい画像となるよう、色情報を調整するためのパラメータを決定する。
表示形態決定部１３は、利用者に応じた調整パターンをパターン記憶部１６の設定済パターン記憶部１６２を参照して判断すればよい。具体的には、例えば、利用者情報受付部１２１が、利用者情報を受け付け、受け付けた利用者情報を表示形態決定部１３に出力する。表示形態決定部１３は、設定済パターン記憶部１６２において、利用者情報受付部１２１から出力された利用者情報と対応付けられているパターン画像を、利用者に応じたパターン画像と判断する。
表示形態決定部１３は、決定したパラメータを、調整画像作成部１４に出力する。
【００２６】
調整画像作成部１４は、表示形態決定部１３が決定したパラメータを用いて、コンテンツデータ記憶部１７に記憶されているコンテンツを表示したコンテンツ画像の色情報を調整した調整画像を作成する。
なお、コンテンツデータ記憶部１７に記憶されているコンテンツは、１つに限らず、複数のコンテンツが記憶されていてもよい。その場合、色情報調整装置１の表示指示受付部（図示省略）が、どのコンテンツを表示させるかの指示を受け付け、調整画像作成部１４に出力する。調整画像作成部１４は、表示指示受付部が受け付けた指示に従ったコンテンツを表示したコンテンツ画像の色情報を調整した調整画像を作成するようにする。表示指示受付部が受け付ける指示は、例えば、色情報調整装置１の外部に備えられている装置から送信される。また、例えば、利用者が入力装置４を操作して、どのコンテンツを表示させるかの指示を入力するようにしてもよい。
調整画像作成部１４は、作成した調整画像を、表示制御部１５に出力する。
【００２７】
表示制御部１５は、各種情報を表示装置３に表示させる。
具体的には、表示制御部１５は、表示装置３に対して、パターン画像候補を表示させる。
また、表示制御部１５は、画像解析部１１が撮像装置２から取得した撮影画像に、調整画像作成部１４が作成した調整画像を重畳させた重畳画像を、表示装置３に表示させる。
その他にも、表示制御部１５は、様々な情報を表示させることができる。
【００２８】
パターン記憶部１６は、パターン画像に関する情報を記憶する。
パターン記憶部１６の調整パターン情報記憶部１６１は、複数パターンのパターン画像を記憶する。
パターン記憶部１６の設定済パターン記憶部１６２は、利用者情報と、パターン画像とを対応付けて記憶する。
なお、実施の形態１では、図１に示すように、パターン記憶部１６は、色情報調整装置１に備えられるものとするが、これは一例に過ぎない。パターン記憶部１６は、色情報調整装置１の外部の、色情報調整装置１が参照可能な場所に備えられるようにしてもよい。
【００２９】
コンテンツデータ記憶部１７は、コンテンツの情報を記憶する。
実施の形態１において、コンテンツとは、予め、ユーザ等によって、撮影画像に重畳させることができる情報として決められた情報である。コンテンツには、動画像、静止画像、または、文字列等が含まれる。
なお、実施の形態１では、図１に示すように、コンテンツデータ記憶部１７は、色情報調整装置１に備えられるものとするが、これは一例に過ぎない。コンテンツデータ記憶部１７は、色情報調整装置１の外部の、色情報調整装置１が参照可能な場所に備えられるようにしてもよい。
【００３０】
図３Ａ，図３Ｂは、実施の形態１に係る色情報調整装置１のハードウェア構成の一例を示す図である。
実施の形態１において、画像解析部１１と、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５の機能は、処理回路３０１により実現される。すなわち、色情報調整装置１は、撮影画像に調整画像を重畳表示させた重畳画像を表示させる制御を行うための処理回路３０１を備える。
処理回路３０１は、図３Ａに示すように専用のハードウェアであっても、図３Ｂに示すようにメモリ３０６に格納されるプログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）３０５であってもよい。
【００３１】
処理回路３０１が専用のハードウェアである場合、処理回路３０１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）、またはこれらを組み合わせたものが該当する。
【００３２】
処理回路３０１がＣＰＵ３０５の場合、画像解析部１１と、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５の機能は、ソフトウェア、ファームウェア、または、ソフトウェアとファームウェアとの組み合わせにより実現される。すなわち、画像解析部１１と、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５の各部は、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）３０２、メモリ３０６等に記憶されたプログラムを実行するＣＰＵ３０５、またはシステムＬＳＩ（Ｌａｒｇｅ−Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ）等の処理回路により実現される。また、ＨＤＤ３０２、またはメモリ３０６等に記憶されたプログラムは、画像解析部１１と、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５の各部の手順や方法をコンピュータに実行させるものであるとも言える。ここで、メモリ３０６とは、例えば、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）等の、不揮発性もしくは揮発性の半導体メモリ、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、またはＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）等が該当する。
【００３３】
なお、画像解析部１１と、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５の機能について、一部を専用のハードウェアで実現し、一部をソフトウェアまたはファームウェアで実現するようにしてもよい。例えば、画像解析部１１については専用のハードウェアとしての処理回路３０１でその機能を実現し、調整パターン設定制御部１２と、表示形態決定部１３と、調整画像作成部１４と、表示制御部１５については処理回路がメモリ３０６に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
また、色情報調整装置１は、撮像装置２、表示装置３、または、入力装置４等との通信を行う、入力インタフェース装置３０３、および出力インタフェース装置３０４を有する。
また、パターン記憶部１６およびコンテンツデータ記憶部１７は、例えば、ＨＤＤ３０２を使用する。なお、これは一例にすぎず、パターン記憶部１６およびコンテンツデータ記憶部１７は、ＤＶＤ、またはメモリ３０６等によって構成されるものであってもよい。
【００３４】
実施の形態１に係る色情報調整装置１の動作について説明する。
色情報調整装置１は、「パターン画像設定処理」と「画像表示処理」とを行う。
以下、「パターン画像設定処理」および「画像表示処理」について、それぞれ説明する。なお、以下の説明において、調整パターン情報記憶部１６１には、図２で示した４種類のパターン画像が記憶されているものとする。
【００３５】
図４は、実施の形態１に係る色情報調整装置１における「パターン画像設定処理」の動作を説明するためのフローチャートである。
調整パターン設定制御部１２の利用者情報受付部１２１は、利用者を特定する利用者情報を受け付ける（ステップＳＴ４０１）。
利用者情報受付部１２１は、受け付けた利用者情報を、設定済パターン判定部１２２に出力する。
【００３６】
調整パターン設定制御部１２の設定済パターン判定部１２２は、利用者に応じたパターン画像が設定済であるかどうかを判定する（ステップＳＴ４０２）。具体的には、設定済パターン判定部１２２は、ステップＳＴ４０１にて利用者情報受付部１２１が受け付けた利用者情報が、設定済パターン記憶部１６２に記憶されているか否かを判定する。
設定済パターン判定部１２２は、利用者情報が設定済パターン記憶部１６２に記憶されているか否かの判定結果を、パターン提示部１２３またはパターン設定部１２５に出力する。
【００３７】
ステップＳＴ４０２において、設定済パターン判定部１２２が、利用者情報が設定済パターン記憶部１６２に記憶されていないと判定した場合（ステップＳＴ４０２の“ＮＯ”の場合）、調整パターン設定制御部１２のパターン提示部１２３は、表示装置３に対してパターン画像候補を表示させる（ステップＳＴ４０３）。
【００３８】
調整パターン設定制御部１２のパターン受付部１２４は、ステップＳＴ４０３にてパターン提示部１２３が表示装置３に表示させたパターン画像候補のうちから、利用者に応じたパターン画像を受け付ける（ステップＳＴ４０４）。
パターン受付部１２４は、受け付けたパターン画像を、調整パターン設定制御部１２のパターン設定部１２５に出力する。
【００３９】
パターン設定部１２５は、ステップＳＴ４０４にてパターン受付部１２４から出力されたパターン画像を、利用者に応じたパターン画像に設定する。
そして、パターン設定部１２５は、設定したパターン画像を、当該パターン画像を選択した利用者を特定する利用者情報と対応付けて、設定済パターン記憶部１６２に記憶させる（ステップＳＴ４０５）。
【００４０】
一方、ステップＳＴ４０２において、設定済パターン判定部１２２が、利用者情報が設定済パターン記憶部１６２に記憶されていると判定した場合（ステップＳＴ４０２の“ＹＥＳ”の場合）、設定済パターン判定部１２２は、利用者情報が設定済パターン記憶部１６２に記憶されている旨の判定結果をパターン設定部１２５に出力し、パターン設定部１２５は、既に利用者に応じたパターン画像は設定済であると判断して、処理終了する。
これにより、利用者は、何度も自身に応じた調整パターン画像を設定する作業を行わなくて済む。
【００４１】
図５は、実施の形態１に係る色情報調整装置１における「画像表示処理」の動作を説明するためのフローチャートである。
以下の説明では、「画像表示処理」よりも前に、図４を用いて説明した「パターン画像設定処理」が行われていることを前提とする。
「画像表示処理」と「パターン画像設定処理」とが連続して行われるようにしてもよい。
なお、利用者は、「画像表示処理」を行う際には、自身の利用者情報を設定しておくようにする。具体的には、利用者は、入力装置４を操作して、表示装置３に表示された利用者情報入力部から、利用者ＩＤ等、自身を特定する利用者情報を入力し、利用者情報受付部１２１が、入力装置４から入力された利用者情報を受け付けるようにしておく。
【００４２】
画像解析部１１は、撮像装置２から撮影画像を取得し、取得した撮影画像を解析して、基準画像色情報を取得する（ステップＳＴ５０１）。
画像解析部１１は、基準画像色情報を、表示形態決定部１３および表示制御部１５に出力する。
【００４３】
表示形態決定部１３は、ステップＳＴ５０１にて画像解析部１１が取得した基準画像色情報と、利用者に応じたパターン画像とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定する（ステップＳＴ５０２）。
表示形態決定部１３は、利用者に応じた調整パターンをパターン記憶部１６の設定済パターン記憶部１６２を参照して判断すればよい。
表示形態決定部１３は、決定したパラメータを、調整画像作成部１４に出力する。
【００４４】
調整画像作成部１４は、ステップＳＴ５０２にて表示形態決定部１３が決定したパラメータを用いて、コンテンツデータ記憶部１７に記憶されているコンテンツを表示したコンテンツ画像の色情報を調整した調整画像を作成する（ステップＳＴ５０３）。
具体例を挙げると、例えば、利用者に応じたパターン画像として、第４のパターン画像２０４（図２参照）が設定されていたとする。当該第４のパターン画像２０４は、１型色覚者用に、予め作成されたパターン画像であったとする。この場合、表示形態決定部１３は、ステップＳＴ５０２にて、１型色覚者用に、赤成分の大きい色をより明るく、緑成分の大きい色をより暗く調整するためのパラメータを決定する。そして、調整画像作成部１４は、ステップＳＴ５０３にて、コンテンツ画像について、赤成分の大きい色をより明るく、緑成分の大きい色をより暗く調整した調整画像を作成する。１型色覚者は、赤成分の大きい色を明るく、緑成分の大きい色を暗くすることで、緑と赤とを区別して認識しやすくなる。
調整画像作成部１４は、作成した調整画像を、表示制御部１５に出力する。
【００４５】
調整画像作成部１４は、当該ステップＳＴ５０３において、ステップＳＴ５０２にて表示形態決定部１３が決定したパラメータを用いて、ステップＳＴ５０１にて画像解析部１１が撮像装置２から取得した撮影画像の色情報を調整した調整画像を作成してもよい。（ステップＳＴ５０３）。すなわち、調整画像作成部１４は、撮影画像をコンテンツ画像として扱い、当該撮影画像の色情報を調整した調整画像を作成する。
そして、調整画像作成部１４は、作成した調整画像を、表示制御部１５に出力する。
【００４６】
表示制御部１５は、ステップＳＴ５０１にて画像解析部１１が撮像装置２から取得した撮影画像に、ステップＳＴ５０３にて調整画像作成部１４が作成した調整画像を重畳させた重畳画像を、表示装置３に表示させる（ステップＳＴ５０４）。
なお、ステップＳＴ５０３において、調整画像作成部１４が、撮影画像の色情報を調整した調整画像を作成した場合、表示制御部１５は、当該調整画像を、表示装置３に表示させる。
【００４７】
このように、色情報調整装置１は、撮像装置２が撮影した撮影画像と、利用者に応じて設定されたパターン画像に基づいて、コンテンツを表示したコンテンツ画像の色情報を調整するためのパラメータを決定する。そして、色情報調整装置１は、決定したパラメータを用いて、コンテンツ画像について、利用者にとって、撮影画像と区別して見やすい色情報に調整した調整画像を作成し、当該調整画像を撮影画像と重畳させて表示する。利用者は、自身に応じた色情報に調整された調整画像を視認するため、例えば、色覚異常のある利用者に対しても、調整画像を、撮影画像と区別して明確に認識させることができる。
つまり、色覚異常のある利用者であっても、調整画像を見逃すことなく、健常者と同等に、当該調整画像で表示されたコンテンツの内容に対応することができる。
また、色情報調整装置１が、撮影画像の色情報を調整した調整画像を作成し、当該調整画像を表示させる場合は、例えば、色覚異常のある利用者に対しても、色情報を調整した撮影画像を、当該撮影画像中の色を区別しやすい画像として認識させることができる。
【００４８】
なお、「画像表示処理」と「パターン画像設定処理」とを連続して行う場合、図５のフローチャートにおいて、ステップＳＴ５０１の後に図４で説明したような動作が行われるようにすることもできる。または、ステップＳＴ５０１の前に、図４で説明したような動作が行われるようにしてもよいし、ステップＳＴ５０１の動作と図４で説明したような動作が並行して行われるようにしてもよい。
【００４９】
次に、実施の形態１に係る色情報調整装置１が用いられる現場での、当該色情報調整装置１の動作について、具体例をあげて説明する。
以下の説明では、一例として、色情報調整システムは、工場において、機械の稼動状況を監視する監視システムに適用されるものとする。
撮像装置２は、利用者が監視対象としている機械を撮影し、表示装置３は、撮像装置２が監視対象の機械を撮影した撮影画像を表示する。また、表示装置３は、機械の稼働状況が異常となった場合に、表示装置３に異常を通知するエラーメッセージ画像を、機械を撮影した撮影画像に重畳表示する。
具体的には、色情報調整装置１が、撮像装置２から撮影画像を取得し、表示装置３に表示させる。また、色情報調整装置１は、表示装置３に対して、撮影画像に重畳させて、エラーメッセージ画像（コンテンツ画像）を表示させる。この際、色情報調整装置１は、エラーメッセージ画像について、当該エラーメッセージ画像の色情報を調整した画像（調整画像）とする。色情報調整装置１のコンテンツデータ記憶部１７には、エラーメッセージ（コンテンツ）が記憶されている。
監視制御装置（図示省略）が、機械の稼動状況を監視しており、異常が発生したと判断した場合に、色情報調整装置１の表示指示受付部に、異常を通知するエラーメッセージを表示させる指示を送信する。色情報調整装置１は、受け付けた指示に従って、色情報を調整したエラ−メッセージ画像を表示させる。
【００５０】
例えば、監視システムにおいて、利用者は、利用者１と利用者２の二人がおり、利用者１は視覚に異常がない健常者、利用者２は、１型色覚の色覚異常者であるとする。
【００５１】
まず、利用者１が、表示装置３を確認して監視対象の機械の稼動状況を確認する作業を行っているとする。
この場合、利用者１は、予め、自身のパターン画像として、図２で示す第１のパターン画像２０１を選択しておく（図４参照）。
なお、ここでは、例えば、調整パターン情報記憶部１６１には図２に示したような４種類のパターン画像が予め記憶されており、利用者１および利用者２は、それぞれ、「パターン画像設定処理」において、図２に示したようなパターン画像に基づき、自身に応じたパターン画像の選択を行うものとしている。
【００５２】
ここで、監視対象の機械に異常が発生したとする。
そうすると、色情報調整装置１において画像解析部１１は、撮像装置２から取得した撮影画像に関する基準画像色情報を取得し（図５のステップＳＴ５０１参照）、表示形態決定部１３は、基準画像色情報と、利用者１に応じた第１のパターン画像２０１とに基づき、エラーメッセージ画像を表示させる際の、色情報を調整するためのパラメータを決定する（図５のステップＳＴ５０２参照）。
【００５３】
利用者１に応じたパターン画像には、色情報の調整を行っていない第１のパターン画像２０１が設定されているので、表示形態決定部１３は、色情報を調整するためのパラメータには、色情報を調整せず、初期設定されている色情報とするパラメータを決定する。
そして、調整画像作成部１４は、表示形態決定部１３が決定した、初期設定されている色情報とするパラメータを用いて、エラーメッセージを表示したエラーメッセージ画像を作成する（図５のステップＳＴ５０３参照）。表示制御部１５は、撮像装置２から取得した撮影画像と、初期設定されている色情報としたエラーメッセージ画像を重畳させた重畳画像を、表示装置３に表示させる（図５のステップＳＴ５０４参照）。
【００５４】
その結果、表示装置３には、図６に示すような画面が表示される。
図６に示すように、表示装置３には、監視対象の機械を撮影した撮影画像（図６の６０１）に、エラーメッセージ画像（図６の６０２）が重畳して表示される。
エラーメッセージ画像は、エラーメッセージを表示した画像であり、初期設定として、背景はピンク色で表示されるものとされている。したがって、エラーメッセージ画像の背景はピンク色で表示される。なお、図６では、便宜上、ピンク色の背景を、斜線で示している。
利用者１は、エラーメッセージ画像６０２を視認することで、監視対象の機械の稼動状況に異常が発生していることを認識し、当該異常に対する対応を行う。
【００５５】
一方、利用者２が、表示装置３を確認して監視対象の機械の稼動状況を確認する作業を行っているとする。
この場合、利用者２は、予め、自身のパターン画像として、図２で示す第４のパターン画像２０４を選択しておく（図４参照）。
【００５６】
ここで、監視対象の機械に異常が発生したとする。
そうすると、色情報調整装置１において画像解析部１１は、撮像装置２から取得した撮影画像に関する基準画像色情報を取得し（図５のステップＳＴ５０１参照）、表示形態決定部１３は、基準画像色情報と、利用者２に応じた第４のパターン画像２０４とに基づき、エラーメッセージ画像を表示させる際の、色情報を調整するためのパラメータを決定する（図５のステップＳＴ５０２参照）。
【００５７】
利用者２に応じたパターン画像には、１型色覚の人にとって最適となるよう、色情報を調整した画像である第４のパターン画像２０４が設定されている。そのため、表示形態決定部１３は、色情報を調整するためのパラメータには、色情報を調整し、例えば、利用者２が見やすいよう、赤成分の大きい色をより明るく、緑成分の大きい色をより暗く調整した色情報とするパラメータを決定する。
通常であれば、上述のとおり、ピンク色の背景でエラーメッセージ画像が表示されることになるが、利用者２は赤色を感じる色覚に異常があり、撮影画像中の機械の色である灰色とピンク色との区別が困難である。
そこで、例えば、表示形態決定部１３は、エラーメッセージ画像が表示される際に、利用者２が撮影画像と区別がしやすいよう、エラーメッセージ画像について、背景色を、赤成分の大きい色をより明るく、緑成分の大きい色をより暗く調整した調整画像とするためのパラメータを決定する。
そして、調整画像作成部１４は、表示形態決定部１３が決定したパラメータを用いて、色情報を調整したエラーメッセージ画像を作成する（図５のステップＳＴ５０３参照）。表示制御部１５は、撮像装置２から取得した撮影画像と、色情報を調整したエラーメッセージ画像を重畳させた重畳画像を表示装置３に表示させる（図５のステップＳＴ５０４参照）。
【００５８】
その結果、表示装置３には、図７に示すような画面が表示される。
図７に示すように、表示装置３には、監視対象の機械を撮影した撮影画像（図７の６０１）に、エラーメッセージ画像（図７の６０３）が重畳して表示される。
エラーメッセージ画像は、背景が赤成分の大きい色をより明るく、緑成分の大きい色をより暗く調整した色で表示される。なお、図７では、便宜上、ピンク色（図６参照）から、赤成分の大きい色をより明るく、緑成分の大きい色をより暗く調整した色とした背景を、水玉模様で示すようにしている。
【００５９】
利用者２は、エラーメッセージ画像６０３を視認することで、監視対象の機械の稼動状況に異常が発生していることを認識し、当該異常に対する対応を行う。
利用者１の場合のようなエラーメッセージ画像６０２が表示されると、利用者２は、当該エラーメッセージ画像６０２と撮影画像との区別ができず、当該エラーメッセージ画像６０２に気付かない可能性がある。
これに対し、色情報調整装置１は、上述のとおり、利用者２に対してエラーメッセージ画像を表示させる際には、利用者２が、撮影画像と区別して視認しやすい色情報に調整して表示させるようにする。
その結果、色覚に異常がある利用者２も、色覚に異常がない利用者１と同様に、監視対象の機械の監視動作を行い、機械の稼働状況に異常が発生した場合には、即時に対応することができる。
【００６０】
なお、以上の実施の形態１では、色情報調整装置１は、「パターン画像設定処理」と「画像表示処理」を行うものとした。
これに限らず、色情報調整装置１は、「パターン画像設定処理」を行わないようにしてもよい。例えば、予め、利用者は１人しか想定されず、当該利用者に応じたパターン画像が一意に決められる場合は、色情報調整装置１は、内部に当該パターン画像を記憶するようにしておけばよい。その場合、色情報調整装置１は、「パターン画像設定処理」を行わないようにすることができる。また、その場合、色情報調整装置１は、調整パターン設定制御部１２を備えない構成とすることができる。
【００６１】
また、以上の実施の形態１では、調整パターン情報は画像としたが、これは一例に過ぎない。例えば、調整パターン情報を、色相および明度を定義した情報としてもよい。
調整パターン情報は、利用者の色覚を判断できる情報であればよい。
【００６２】
以上のように、実施の形態１によれば、色情報調整装置１は、撮影画像を解析して、当該撮影画像に関する基準画像色情報を取得する画像解析部１１と、画像解析部１１が取得した基準画像色情報と、利用者に応じた、色情報の調整パターンを示す調整パターン情報とに基づき、コンテンツ画像を表示させる際に当該コンテンツ画像の色情報を調整するためのパラメータを決定する表示形態決定部１３と、表示形態決定部１３が決定したパラメータを用いて、コンテンツ画像の色情報を調整した調整画像を作成する調整画像作成部１４とを備えるように構成されている。そのため、表示させる画像について、利用者に応じた色情報の調整を行うことができる。
また、色情報調整装置１は、上記の構成に加え、撮影画像に調整画像作成部が作成した調整画像を重畳させた重畳画像を表示させる表示制御部１５を備えるように構成されている。そのため、表示させる重畳画像において撮影画像に重畳表示されるコンテンツ画像について、利用者に応じて、当該利用者が撮影画像と区別してみやすい色情報に調整した調整画像とすることができる。その結果、視覚異常者であっても、視覚正常者と同等に、表示された調整画像を、撮影画像と区別して視認することができる。
【００６３】
また、実施の形態１によれば、色情報調整装置１は、調整パターン情報の候補となる複数の調整パターン情報を表示させるパターン提示部１２３と、パターン提示部が表示させた複数の調整パターン情報のうちから、利用者に応じた調整パターン情報を受け付けるパターン受付部１２４と、パターン受付部１２４が受け付けた利用者に応じた調整パターン情報を、利用者を特定する利用者情報と対応付けて設定済パターン記憶部１６２に記憶させるパターン設定部１２５と、利用者情報を受け付ける利用者情報受付部１２１と、利用者情報受付部１２１が受け付けた利用者情報が設定済パターン記憶部１６２に記憶されているか否かを判定する設定済パターン判定部１２２とを備え、パターン提示部１２３は、設定済パターン判定部１２２が、利用者情報受付部１２１が受け付けた利用者情報が設定済パターン記憶部１６２に記憶されていないと判定した場合に、調整パターン情報の候補となる複数の調整パターン情報を表示させるように構成されている。
そのため、利用者は、何度も自身に応じた調整パターン情報を設定する作業を行わなくて済む。
【００６４】
なお、本願発明は、その発明の範囲内において、実施の形態の任意の構成要素の変形、もしくは、実施の形態の任意の構成要素の省略が可能である。
【符号の説明】
【００６５】
１  色情報調整装置、２  撮像装置、３  表示装置、４  入力装置、１１  画像解析部、１２  調整パターン設定制御部、１３  表示形態決定部、１４  調整画像作成部、１５  表示制御部、１６  パターン記憶部、１７  コンテンツデータ記憶部、１２１  利用者情報受付部、１２２  設定済パターン判定部、１２３  パターン提示部、１２４  パターン受付部、１２５  パターン設定部、３０１  処理回路、３０２  ＨＤＤ、３０３  入力インタフェース装置、３０４  出力インタフェース装置、３０５  ＣＰＵ、３０６  メモリ。
【図１】
2019220748.tif 000003
【図２】
2019220748.tif 000004
【図３】
2019220748.tif 000005
【図４】
2019220748.tif 000006
【図５】
2019220748.tif 000007
【図６】
2019220748.tif 000008
【図７】
2019220748.tif 000009