(57)【要約】【課題】測色対象画像の位置や測色器の操作方法を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにする。【解決手段】キャリブレーション処理では、（Ａ）に示すチャート用紙Ｐが用いられる。このチャート用紙Ｐには、チャート画像１０が形成されている。ユーザが、ＡＲ表示装置を通してチャート用紙Ｐを見ると、（Ａ）の符号４Ａで示す強調表示（四角い枠）のように、測色の対象となるチャート画像１０の位置を示す情報が、ＡＲ表示装置のディスプレイに表示される。【選択図】図４
2018017520.tif 000002
【特許請求の範囲】
【請求項１】
現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置と、
測色が行われる測色対象画像が形成された媒体を、ユーザが前記表示装置を通して見た場合の前記表示画像であって、当該測色対象画像の位置を示す情報を含んだ当該表示画像を生成する画像生成手段と、
を備える測色システム。
【請求項２】
前記画像生成手段は、前記測色対象画像を測色する測色器をユーザが移動させる際の当該測色器の移動方向および／または移動速度を示す情報を含んだ表示画像を生成することを特徴とする請求項１に記載の測色システム。
【請求項３】
前記測色対象画像は、複数のページに亘って存在し、
前記画像生成手段は、前記測色対象画像が位置するページを示す情報を含んだ表示画像を生成することを特徴とする請求項１又は２に記載の測色システム。
【請求項４】
前記測色対象画像の測色を行う測色器の位置を特定する位置特定手段をさらに備える請求項１乃至３の何れかに記載の測色システム。
【請求項５】
前記表示装置は、撮影画像を得る撮影手段をさらに備え、
前記位置特定手段は、前記表示装置の前記撮影手段により得られた撮影画像の中から前記測色器を検出して、当該測色器の位置を特定する請求項４に記載の測色システム。
【請求項６】
前記表示装置は、撮影画像を得る撮影手段をさらに備え、
前記位置特定手段は、前記表示装置により得られた、前記媒体の撮影画像の変化に基づき、前記測色器の位置を特定する請求項４に記載の測色システム。
【請求項７】
現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置と、
測色器による測色が行われる測色対象画像が形成された媒体を、ユーザが前記表示装置を通して見た場合の前記表示画像であって、当該測色器の操作方法を示す情報を含んだ当該表示画像を生成する画像生成手段と、
を備える測色システム。
【請求項８】
前記画像生成手段は、ユーザが前記測色器を移動させる際の当該測色器の移動方向および／または移動速度を示す情報を含んだ表示画像を生成する請求項７に記載の測色システム。
【請求項９】
現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色対象画像の位置を示す情報を含んだ当該表示画像を生成する画像生成手段と、
前記画像生成手段により生成された表示画像を前記表示装置に出力する出力手段と、
を備える画像生成装置。
【請求項１０】
現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色器による測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色器の操作方法を示す情報を含んだ当該表示画像を生成する画像生成手段と、
前記画像生成手段により生成された表示画像を前記表示装置に出力する出力手段と、
を備える画像生成装置。
【請求項１１】
現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色対象画像の位置を示す情報を含んだ当該表示画像を生成する画像生成機能と、
前記画像生成機能により生成された表示画像を前記表示装置に出力する出力機能と、
をコンピュータに実現させるためのプログラム。
【請求項１２】
現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色器による測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色器の操作方法を示す情報を含んだ当該表示画像を生成する画像生成機能と、
前記画像生成機能により生成された表示画像を前記表示装置に出力する出力機能と、
をコンピュータに実現させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、測色システム、画像生成装置、および、プログラムに関する。
【背景技術】
【０００２】
特許文献１には、撮像手段によって撮像された識別情報から作業機器の機能を認識し、この機能に対応する仮想アイコンを生成し、仮想アイコンを被投影領域に投影する処理が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−４３８７５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
画像形成装置では、測色が行われる測色対象画像を用紙などの媒体に形成し、次いで、測色器を用いてこの測色対象画像の測色を行い、この測色の結果に基づき、画像形成時のパラメータを変更することがある。
本発明の目的は、測色対象画像の位置や測色器の操作方法を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることにある。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は、現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置と、測色が行われる測色対象画像が形成された媒体を、ユーザが前記表示装置を通して見た場合の前記表示画像であって、当該測色対象画像の位置を示す情報を含んだ当該表示画像を生成する画像生成手段と、を備える測色システムである。
請求項２に記載の発明は、前記画像生成手段は、前記測色対象画像を測色する測色器をユーザが移動させる際の当該測色器の移動方向および／または移動速度を示す情報を含んだ表示画像を生成することを特徴とする請求項１に記載の測色システムである。
請求項３に記載の発明は、前記測色対象画像は、複数のページに亘って存在し、前記画像生成手段は、前記測色対象画像が位置するページを示す情報を含んだ表示画像を生成することを特徴とする請求項１又は２に記載の測色システムである。
請求項４に記載の発明は、前記測色対象画像の測色を行う測色器の位置を特定する位置特定手段をさらに備える請求項１乃至３の何れかに記載の測色システムである。
請求項５に記載の発明は、前記表示装置は、撮影画像を得る撮影手段をさらに備え、前記位置特定手段は、前記表示装置の前記撮影手段により得られた撮影画像の中から前記測色器を検出して、当該測色器の位置を特定する請求項４に記載の測色システムである。
請求項６に記載の発明は、前記表示装置は、撮影画像を得る撮影手段をさらに備え、前記位置特定手段は、前記表示装置により得られた、前記媒体の撮影画像の変化に基づき、前記測色器の位置を特定する請求項４に記載の測色システムである。
請求項７に記載の発明は、現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置と、測色器による測色が行われる測色対象画像が形成された媒体を、ユーザが前記表示装置を通して見た場合の前記表示画像であって、当該測色器の操作方法を示す情報を含んだ当該表示画像を生成する画像生成手段と、を備える測色システムである。
請求項８に記載の発明は、前記画像生成手段は、ユーザが前記測色器を移動させる際の当該測色器の移動方向および／または移動速度を示す情報を含んだ表示画像を生成する請求項７に記載の測色システムである。
請求項９に記載の発明は、現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色対象画像の位置を示す情報を含んだ当該表示画像を生成する画像生成手段と、前記画像生成手段により生成された表示画像を前記表示装置に出力する出力手段と、を備える画像生成装置である。
請求項１０に記載の発明は、現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色器による測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色器の操作方法を示す情報を含んだ当該表示画像を生成する画像生成手段と、前記画像生成手段により生成された表示画像を前記表示装置に出力する出力手段と、を備える画像生成装置である。
請求項１１に記載の発明は、現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色対象画像の位置を示す情報を含んだ当該表示画像を生成する画像生成機能と、前記画像生成機能により生成された表示画像を前記表示装置に出力する出力機能と、をコンピュータに実現させるためのプログラムである。
請求項１２に記載の発明は、現実空間に表示画像を合成した拡張現実空間をユーザに見せる表示装置に表示される当該表示画像を生成するとともに、測色器による測色が行われる測色対象画像が形成された媒体を当該表示装置を通してユーザが見た場合には、当該測色器の操作方法を示す情報を含んだ当該表示画像を生成する画像生成機能と、前記画像生成機能により生成された表示画像を前記表示装置に出力する出力機能と、をコンピュータに実現させるためのプログラムである。
【発明の効果】
【０００６】
請求項１の発明によれば、測色対象画像の位置を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることができる。
請求項２の発明によれば、測色器の移動方向や移動速度を示す情報を含んだ表示画像を生成しない場合に比べ、ユーザは、測色器の移動方向や移動速度をより明確に把握できる。
請求項３の発明によれば、測色対象箇所が位置するページを示す情報を含んだ表示画像を生成しない場合に比べ、ユーザはより速やかに測色対象画像にアクセスできる。
請求項４の発明によれば、測色器の位置に応じた表示を表示装置にて行える。
請求項５の発明によれば、測色器の位置を特定するための特別な機構を用いずに、測色器の位置を特定できる。
請求項６の発明によれば、測色器の位置を特定するためのマーカを測色器に付さないでも、測色器の位置を特定できる。
請求項７の発明によれば、測色器の操作方法を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることができる。
請求項８の発明によれば、測色器の移動方向や移動速度を示す情報を含んだ表示画像を生成しない場合に比べ、ユーザは、測色器の移動方向や移動速度をより明確に把握できる。
請求項９の発明によれば、測色対象画像の位置を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることができる。
請求項１０の発明によれば、測色器の操作方法を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることができる。
請求項１１の発明によれば、測色対象画像の位置を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることができる。
請求項１２の発明によれば、測色器の操作方法を示す情報を含んだ表示をユーザに対して行わない場合に比べ、測色作業をより行いやすいものにすることができる。
【図面の簡単な説明】
【０００７】
【図１】測色システムの全体構成を示した図である。
【図２】外部コントローラのハードウエアの構成を示した図である。
【図３】測色システムにて実行される処理の流れを示したフローチャートである。
【図４】（Ａ）、（Ｂ）は、図３のステップ１０５にて実行される測色処理の際にＡＲ表示装置に表示される表示画像を示した図である。
【図５】２行目のチャート画像の先頭に、測色器が位置した際のＡＲ表示装置の表示例を示した図である。
【図６】ＡＲ表示装置における表示例を示した図である。
【図７】（Ａ）、（Ｂ）は、ＡＲ表示装置における他の表示例を示した図である。
【図８】（Ａ）、（Ｂ）は、ＡＲ表示装置における他の表示例を示した図である。
【図９】（Ａ）、（Ｂ）は、ＡＲ表示装置の他の表示例を示した図である。
【図１０】従来の一般的な測色方法を示した図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。
図１は、本実施形態の測色システムの全体構成を示した図である。
本実施形態の測色システム１には、チャート用紙Ｐに形成されたチャート画像１０の測色を行う測色器２００が設けられている。チャート用紙Ｐは、媒体の一例である用紙に対してカラーのチャート画像１０が形成された用紙である。
さらに、測色システム１には、現実空間に表示画像を合成した空間である拡張現実空間をユーザに見せるＡＲ（Augmented Reality）表示装置３００が設けられている。また、測色システム１には、測色器２００、ＡＲ表示装置３００が接続される外部コントローラ１００が設けられている。
【０００９】
表示装置の一例としてのＡＲ表示装置３００は、モバイル端末により構成され、可搬型の装置となっている。ＡＲ表示装置３００には、ＣＣＤ（Charge-Coupled Device）などにより構成されるカメラ３２０が設けられている。撮影手段の一例であるこのカメラ３２０は、ＡＲ表示装置３００の周囲を撮影して撮影画像を得る。
また、ＡＲ表示装置３００には、ディスプレイ３１０が設けられている。画像表示部の一例としてのこのディスプレイ３１０は、表示画像を表示する。
【００１０】
本実施形態では、カメラ３２０により撮影された撮影画像が、ディスプレイ３１０に表示される。
さらに、本実施形態では、ユーザがＡＲ表示装置３００を通してチャート用紙Ｐを眺めた場合には、チャート用紙Ｐを撮影した撮影画像（現実空間の画像）と、他の画像（外部コントローラ１００により生成された生成画像）とが合わさった合成画像が、ＡＲ表示装置３００に表示され、ユーザは、ＡＲ表示装置３００を通し、拡張現実空間を見ることになる。
言い換えると、本実施形態のＡＲ表示装置３００では、現実空間の画像（撮影画像）に表示画像を合成した合成画像を生成し、この合成画像をディスプレイ３１０に映す。そして、ユーザは、この合成画像を視認することで、拡張現実空間を見ることになる。
【００１１】
なお、ＡＲ表示装置３００には、光透過型のディスプレイ３１０に画像を表示するＡＲ表示装置３００を用いてもよい。この場合、ユーザは、この光透過型のディスプレイ３１０を通して現実空間を視認する。言い換えると、光透過型のディスプレイ３１０では、ユーザが、ディスプレイ３１０の手前側からディスプレイ３１０を見た場合に、ディスプレイ３１０の背後に位置する現実空間がディスプレイ３１０を通して見え、ユーザは、ディスプレイ３１０の背後に位置する現実空間を、ディスプレイ３１０を通して視認する。さらに、このとき、ユーザは、この現実空間とともに、ディスプレイ３１０に表示される表示画像を視認する。
ここで、ＡＲ表示装置３００としては、専用装置であるヘッドマウントディスプレイ型のＡＲ表示装置３００を用いてもよいし、タブレット端末やスマートフォンを利用してＡＲ表示装置３００を構成してもよい。
【００１２】
測色器２００は、ユーザにより操作されることで、チャート用紙Ｐ上を移動する。
このとき、測色器２００は、測色対象画像の一例であるチャート画像１０の測色を行う。より具体的には、測色器２００は、チャート用紙Ｐに形成されたチャート画像１０を読み取り、チャート画像１０の測色を行う。そして、測色器２００による測色結果は、外部コントローラ１００に出力される。
外部コントローラ１００は、ＰＣ（Personal Computer）などにより構成される。外部コントローラ１００には、測色器２００およびＡＲ表示装置３００が接続される。
外部コントローラ１００と測色器２００とは、例えばＵＳＢにより接続される。また、外部コントローラ１００とＡＲ表示装置３００とは、例えば、Wi-Fi、Bluetooth（登録商標）などの無線通信回線により接続される。
【００１３】
図２は、外部コントローラ１００のハードウエアの構成を示した図である。
図２に示すように、外部コントローラ１００は、ＣＰＵ（Central Processing Unit）１０１、ＲＡＭ（Random Access Memory）１０２、ＲＯＭ（Read Only Memory）１０３、磁気記憶装置１０４を備える。
さらに、外部コントローラ１００は、外部との通信を行うための通信インタフェース（通信Ｉ／Ｆ）１０５、ディスプレイ等からなる表示機構１０６、キーボードやマウス等の入力デバイス１０７を備える。
【００１４】
ＲＯＭ１０３、磁気記憶装置１０４は、ＣＰＵ１０１により実行されるプログラムを記憶する。ＣＰＵ１０１は、ＲＯＭ１０３や磁気記憶装置１０４に記憶されているプログラムを読み出し、ＲＡＭ１０２を作業エリアにしてプログラムを実行する。
ＣＰＵ１０１により、ＲＯＭ１０３や磁気記憶装置１０４に格納されたプログラムが実行されることで、外部コントローラ１００は、図１に示すように、コントローラ制御部１１０、ネットワーク制御部１２０として機能する。
コントローラ制御部１１０は、測色器２００およびＡＲ表示装置３００の制御を行う。ネットワーク制御部１２０は、ＡＲ表示装置３００と外部コントローラ１００との間における通信、測色器２００と外部コントローラ１００との間における通信を制御する。
【００１５】
ここで、ＣＰＵ１０１によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記憶した状態で、外部コントローラ１００へ提供し得る。
また、ＣＰＵ１０１によって実行されるプログラムは、インターネットなどの通信手段を用いて外部コントローラ１００へダウンロードしてもよい。
【００１６】
図１に示すように、コントローラ制御部１１０には、測色器２００およびＡＲ表示装置３００を制御する機器制御部１１１が設けられている。
また、コントローラ制御部１１０には、画像生成手段の一例としての画像生成部１１２が設けられている。さらに、コントローラ制御部１１０には、出力手段の一例としての画像出力部１１３が設けられている。
【００１７】
画像生成部１１２は、ＡＲ表示装置３００のディスプレイ３１０に表示される表示画像を生成する。画像出力部１１３は、通信ＩＦ１０５（図２参照）を制御し、画像生成部１１２にて生成された表示画像をＡＲ表示装置３００に出力する。
ここで、本実施形態では、画像生成部１１２、画像出力部１１３が設けられている部分は、表示画像を生成して出力する画像生成装置として捉えることができる。
【００１８】
さらに、本実施形態では、図１に示すように、媒体の一例である用紙に対して画像形成を行う画像形成装置４００が設けられている。画像形成装置４００は、いわゆる電子写真方式や、インクジェット方式を用いて、用紙上に画像を形成する。
また、キャリブレーション処理が行われる場合、画像形成装置４００は、用紙上に、チャート画像１０を形成して、チャート用紙Ｐを出力する。ここで、キャリブレーション処理とは、画像形成装置４００の出力結果を期待値に補正するための処理である。
【００１９】
キャリブレーション処理では、画像形成装置４００から出力したチャート用紙Ｐ上のチャート画像１０を、測色器２００を用いて測色する。そして、測色器２００による測色値と、予め定められた期待値との差に基づき、補正用のパラメータを生成する。
そして、画像形成装置４００では、この補正用パラメータが用いられて調整処理が実行される。これにより、画像形成装置４００の出力結果を、期待値に近づけられる。
【００２０】
本実施形態では、画像形成装置４００にてチャート用紙Ｐが出力される場合、このチャート用紙Ｐについての情報（以下、「チャート情報」と称する）が、画像形成装置４００から、外部コントローラ１００に出力される。そして、外部コントローラ１００のコントローラ制御部１１０が、このチャート情報を取得する。
チャート情報には、チャート用紙Ｐ上に形成される画像の元となる画像データや、チャート用紙Ｐ上に形成される画像の各々の位置データ（チャート画像１０の位置データや後述する位置判別用マーカの位置データ）が含まれる。
【００２１】
図３は、測色システム１にて実行される処理の流れを示したフローチャートである。
本実施形態の測色システム１では、まず、ＡＲ表示装置３００がユーザにより操作され、ＡＲ表示装置３００にて、ユーザにより、キャリブレーション処理のためのアプリケーションが選択される（ステップ１０１）。次いで、ユーザによりＡＲ表示装置３００がさらに操作され、接続先の選択がなされる（ステップ１０２）。ここで、この例では、図１にて示した外部コントローラ１００が、接続先として選択される。
【００２２】
その後、ＡＲ表示装置３００がユーザによりさらに操作されて、キャリブレーション条件の設定がなされる（ステップ１０３）。
ここで、キャリブレーション条件としては、例えば、チャート用紙Ｐを生成する際に用いる原稿の種類、チャート画像１０の形成条件等を挙げることができる。また、その他に、画像形成装置４００の何れの用紙収容部（不図示）に収容されている用紙を用いるかなどの条件も挙げられる。
なお、ステップ１０１にて行われるアプリケーションの選択、ステップ１０２にて行われる接続先の選択、ステップ１０３にて行われるキャリブレーション条件の設定は、図１にて示した画像形成装置４００のＵＩ（User Interface）（不図示）や、外部コントローラ１００を操作して行ってもよい。
【００２３】
次いで、キャリブレーション条件が画像形成装置４００に送信され、その後、画像形成装置４００が、このキャリブレーション条件に基づき、用紙上にチャート画像１０を形成し、チャート用紙Ｐを出力する（ステップ１０４）。
なお、上記のとおり、画像形成装置４００にてチャート用紙Ｐが出力されると、チャート情報が、画像形成装置４００から、外部コントローラ１００に出力される。そして、外部コントローラ１００のコントローラ制御部１１０（図１参照）が、このチャート情報を取得する。
【００２４】
その後、ユーザが測色器２００を操作して、チャート画像１０の測色を行う（ステップ１０５）。
このとき、ユーザは、ＡＲ表示装置３００を装着している。より具体的には、ＡＲ表示装置３００が眼鏡型の場合、ユーザは、ＡＲ表示装置３００を装着している。また、ＡＲ表示装置３００がタブレット端末である場合には、ユーザは、自身とチャート用紙Ｐとの間にＡＲ表示装置３００を配置し、ＡＲ表示装置３００を通してチャート用紙Ｐを見る態勢をとっている。
その後、コントローラ制御部１１０の機器制御部１１１により、測色結果の確認が行われる（ステップ１０６）。より具体的には、機器制御部１１１は、測色器２００により得られた情報に基づき、測色がうまくいったか否かの確認を行う。
【００２５】
その後、本実施形態では、ＡＲ表示装置３００を通じて、測色を繰り返すか否かの確認がユーザに対して行われる（ステップ１０７）。そして、測色を繰り返すとの回答があった場合は、ステップ１０４以降の処理を再び行う。
これに対し、測色を繰り返さないとの回答があった場合は、測色結果を保存する（ステップ１０８）。その後、本実施形態では、この測色結果が用いられて上記補正用パラメータが生成される。
【００２６】
図４（Ａ）、（Ｂ）は、図３のステップ１０５にて実行される測色処理の際にＡＲ表示装置３００に表示される表示画像を示した図である。
本実施形態では、キャリブレーション処理を行うにあたり、図４（Ａ）に示すチャート用紙Ｐが用いられる。このチャート用紙Ｐには、チャート画像１０が形成されている。
チャート画像１０は、複数の矩形状のパッチ画像１０Ｐが、行方向および列方向に並べられることにより構成されている。言い換えると、チャート画像１０は、複数の行のチャート画像１０により構成されている。
【００２７】
ここで、本実施形態では、図４（Ａ）の符号４Ａで示す強調表示（四角い枠）のように、測色の対象となるチャート画像１０の位置を示す情報を、ＡＲ表示装置３００のディスプレイ３１０（図１参照）に表示する。
より具体的には、本実施形態では、画像生成部１１２（図１参照）が、上記チャート情報や既に行われた測色の結果に基づき、測色の対象となるチャート画像１０の位置を示す情報（次に測色を行うべきチャート画像１０の位置を示す情報）を含んだ表示画像を生成する。
【００２８】
より具体的には、画像生成部１１２（図１参照）は、表示画像の生成にあたり、まず、ＡＲ表示装置３００が有するカメラ３２０により得られた撮影画像の中から、位置判別用マーカＭ１（図４（Ａ）参照）を検出する。そして、画像生成部１１２は、検出したこの位置判別用マーカＭ１に基づき、上記強調表示を行うべき位置を決定する。
本実施形態では、チャート情報を参照することで、位置判別用マーカＭ１と各チャート画像１０（行毎のチャート画像１０）との位置関係を把握でき、画像生成部１１２は、検出した位置判別用マーカＭ１とチャート情報とに基づき、強調表示を行うべき位置を決定する。そして、画像生成部１１２は、決定したこの位置に強調表示を位置させる。
【００２９】
その後、本実施形態では、画像生成部１１２により生成された表示画像が、画像出力部１１３（図１参照）によって、ＡＲ表示装置３００に出力される。
これにより、ＡＲ表示装置３００では、次に測色を行うべきチャート画像１０の位置が示される。言い換えると、本実施形態では、図４（Ａ）に示すように、次に測色を行うべきチャート画像１０が、囲まれた状態で表示される。
ここで、図４（Ａ）に示す例では、１行目のチャート画像１０の測色が終了し、２行目のチャート画像１０の測色が行われる際の、ＡＲ表示装置３００の表示状態を示している。この場合、ユーザは、次に、２行目のチャート画像１０の測色を行うことを認識する。
【００３０】
より具体的には、本実施形態では、各行のチャート画像１０の測色が終了したか否かが、コントローラ制御部１１０（図１参照）の機器制御部１１１により判断され、終了したか否かの判断結果が、画像生成部１１２に出力される。この例では、１行目のチャート画像１０の測色が終了したとの判断結果が、機器制御部１１１から画像生成部１１２に出力される。
これに応じて、画像生成部１１２は、次の測色対象が、２行目のチャート画像１０であると判断し、２行目のチャート画像１０を囲む枠を有した表示画像を形成する。
【００３１】
図４（Ｂ）は、強調表示を行うべき位置の決定方法を説明する図である。
本実施形態では、画像生成部１１２は、次の計算式（１）を用いて、強調表示を行うべき強調位置Ｙを得てもよい。
強調位置Ｙ（基準からの距離）＝Ｈ（位置判別用マーカＭ１間の距離）÷（チャート画像１０の行の総数）×（（チャート画像１０の行の総数）−（測色が済んだ行数））…（１）
【００３２】
ここで、例えば、Ｈ（位置判別用マーカＭ１間の距離）が１６ｃｍであり、チャート画像１０の行の総数が４であり、測色が済んだ行の数が１である場合、
Ｙ＝１６÷４×３＝１２となり、この場合、画像生成部１１２は、図４（Ｂ）の符号４Ｂで示す基準から約１２ｃｍ離れた箇所に、強調表示を行う。
【００３３】
ここで、チャート画像１０の測色が行われる際、チャート用紙Ｐの天地が逆転された状態で、チャート用紙Ｐが置かれることも起こりうる。
このため、本実施形態では、図４（Ｂ）に示すように、用紙の天地、左右を判別するための２つの位置判別用マーカＭ１を、チャート用紙Ｐに形成している。
【００３４】
ここで、チャート用紙Ｐの天地を考慮せずに、上記強調表示を行う場合、誤った箇所に、強調表示がなされることが起こりうる。
本実施形態では、位置判別用マーカＭ１の検出結果に基づき、チャート用紙Ｐの天地を判別し、この判別の結果に基づき、強調表示を行う。これにより、誤った箇所に強調表示がなされることが抑制される。
【００３５】
なお、チャート用紙Ｐの天地が逆転している場合や、チャート用紙Ｐが回転している場合には、ＡＲ表示装置３００に、チャート用紙Ｐの向きが正しくない旨の警告表示を行ってもよい。
また、上記では、四角い枠でチャート画像１０を囲むことで、次に測色を行うべきチャート画像１０の位置を示したが、そのほかに、例えば、「２行目のチャート画像１０の測色を行ってください。」など、文字画像を表示して、次に測色を行うべきチャート画像１０の位置を示してもよい。また、例えば、２行目のチャート画像１０を指す矢印を表示して、次に測色を行うべきチャート画像１０の位置を示してもよい。
【００３６】
図５は、２行目のチャート画像１０の先頭に、測色器２００が位置した際のＡＲ表示装置３００の表示例を示した図である。
測色器２００には、測色器２００の位置を特定するための測色器マーカ２００Ｍが付されている。そして、本実施形態では、ＡＲ表示装置３００のカメラ３２０（図１参照）によって、この測色器マーカ２００Ｍが撮影される。
【００３７】
そして、本実施形態では、機器制御部１１１（図１参照）が、ＡＲ表示装置３００による撮影結果を解析して、測色器マーカ２００Ｍを検出し、測色器２００の位置を特定する。
より具体的には、位置特定手段として機能する機器制御部１１１が、カメラ３２０により得られた撮影画像の中から、２つの位置判別用マーカＭ１、測色器マーカ２００Ｍを検出し、チャート用紙Ｐに対する測色器２００の位置を特定する。
【００３８】
そして、本実施形態では、測色器２００が、２行目のチャート画像１０の先頭位置にあると特定され、さらに、ユーザによって開始ボタン（ＡＲ表示装置３００に設けられる開始ボタン（不図示））が押されると、ＡＲ表示装置３００にて、符号５Ａで示す矢印の画像が表示される。
【００３９】
より具体的には、本実施形態では、測色器２００が、２行目のチャート画像１０の先頭位置にあると特定された場合、画像生成部１１２（図１参照）が、測色器２００の移動方向および移動速度を示す情報を含んだ表示画像を生成する。言い換えると、画像生成部１１２は、測色器２００の操作方法を示す情報を含んだ表示画像を生成する。
そして、画像出力部１１３が、この表示画像をＡＲ表示装置３００に出力する。そして、ＡＲ表示装置３００がこの表示画像を表示する。
【００４０】
ここで、図５に示すこの表示例では、矢印が右方向を向いており、ユーザは、測色器２００を移動させる際の移動方向が右方向であることを把握する。付言すると、この例では、ユーザが、２行目のチャート画像１０が位置する箇所にて、測色器２００を何れかの方向に移動させようとしているが、本実施形態では、この際、測色器２００の移動方向が右方向である旨の表示がなされる。
さらに、この例では、測色器２００を移動させる際の移動速度の大きさを矢印の長さで示しており、ユーザは、この矢印の長さを参照することで、測色器２００を移動させる際の移動速度を把握する。
【００４１】
その後、ユーザは、２行目のチャート画像１０に沿って且つ図中右方向へ測色器２００を移動させて、測色作業を行う。本実施形態では、測色作業は行毎に行われ、１つの行の測色が行われる度に、機器制御部１１１によって、測色の良否が判定される。そして、良否の判定結果は、ＡＲ表示装置３００を通してユーザに通知される。
そして、測色が不良であるとの通知がなされた場合、ユーザによって、不良と判断された行についての測色が再び行われる。
【００４２】
なお、この表示例では、測色器２００の移動方向および移動速度の両者を表示したが、移動方向および移動速度の一方のみを表示してもよい。
また、移動方向を示すにあたり、「右方向へ測色器２００を移動してください」など、文字情報で、移動方向を示してもよい。
【００４３】
また、移動速度についても、「測色器２００が、○○秒につき○○ｃｍ程度移動するように、測色器２００を移動させてください」など、文字情報で、移動速度を示してもよい。
さらに、上記では、矢印の長さで移動速度を示したが、図６（ＡＲ表示装置３００における表示例を示した図）に示すように、矢印（符号６Ａ参照）を、右方向に順次移動させて、測色器２００の移動速度を示してもよい。
【００４４】
図７（Ａ）、（Ｂ）は、ＡＲ表示装置３００における他の表示例を示した図である。
この例では、チャート用紙Ｐに、位置特定用マーカＭ２が印字されている。より具体的には、各行のチャート画像１０の両脇に、位置特定用マーカＭ２が印字されている。
【００４５】
この例では、何れかの行のチャート画像１０の始点に、測色器２００が位置すると、この始点に位置する位置特定用マーカＭ２が、測色器２００の背後に隠れる。図７（Ａ）に示す例では、３行目のチャート画像１０の始点に位置する位置特定用マーカＭ２が、測色器２００の背後に位置し、３行目のチャート画像１０に対応した位置特定用マーカＭ２が隠れる。この場合、機器制御部１１１（図１参照）は、測色器２００が、３行目のチャート画像１０の始点に位置すると特定する。
そして、３行目のチャート画像１０が、次に測色が行われるべきチャート画像１０である場合には、上記と同様、測色器２００の移動方向および移動速度を示す矢印が表示される。
【００４６】
ここで、この例では、測色器２００によってチャート用紙Ｐが部分的に隠れるとともに、測色器２００が移動すると、チャート用紙Ｐのうちの、測色器２００により隠れる部分が変化する。
付言すると、この例では、測色器２００が移動すると、ＡＲ表示装置３００のカメラ３２０により得られる撮影画像（チャート用紙Ｐの撮影画像）が変化する。そして、図７にて示すこの処理例では、この撮影画像の変化に基づき、測色器２００の位置を特定する。
【００４７】
なお、測色器２００の位置の特定にあたっては、隠れていない位置特定用マーカＭ２の検出個数（撮影画像から検出された位置特定用マーカＭ２の検出個数）と、チャート画像１０の行の総数から１を減じた値（以下、「減算値」と称する）とが一致した場合に、隠れた位置特定用マーカＭ２の部分に測色器２００が位置すると判定し、検出個数と減算値とが一致しない場合には、測色器２００を検出できない（未検出）と判定してもよい。この場合、測色器２００の位置の特定精度を高められる。
【００４８】
ここで、図７（Ａ）にて示した例では、「３」、「４」の複数の位置特定用マーカＭ２が隠れており、測色器２００が、３行目あるいは４行目のチャート画像１０の始点に位置すると特定される。これに対し、上記のように、検出個数と減算値とが一致する場合にのみ、測色器２００の位置を特定する場合、１つの位置特定用マーカＭ２が隠れた場合にのみ、測色器２００の位置が特定され、測色器２００の位置の特定精度を高められる。
【００４９】
図７（Ｂ）は、３行目のチャート画像１０の終点に、測色器２００がある場合を示している。
測色器２００が、３行目のチャート画像１０の終点に位置すると、３行目のチャート画像１０の終点に位置する位置特定用マーカＭ２が隠れる。
そして、この場合、上記と同様、測色器２００の移動方向と、測色器２００の移動速度を示す表示が行われる。より具体的には、この場合、図中左方向を向く矢印が表示される。
【００５０】
上記では説明を省略したが、本実施形態では、各行のチャート画像１０の測色にあたり、測色器２００を往復移動させて、各行のチャート画像１０の測色を行う。
具体的には、本実施形態では、各行のチャート画像１０の始点から終点に向けて測色器２００を移動させて（往路に沿って測色器２００を移動させて）、チャート画像１０の測色を行う。このとき、本実施形態では、図７（Ａ）に示すように、チャート画像１０の強調表示、測色器２００の移動方向、移動速度を示す表示が行われる。
【００５１】
次いで、本実施形態では、ユーザは、各行のチャート画像１０の終点から始点に向けて測色器２００を移動させて（復路に沿って測色器２００を移動させて）、チャート画像１０の測色を行う。
このときにも、本実施形態では、図７（Ｂ）に示すように、チャート画像１０の強調表示、測色器２００の移動方向、移動速度を示す表示が行われる。
付言すると、本実施形態では、ＡＲ表示装置３００に表示処理を行うにあたり、測色器２００を往路に沿って移動させるときのみではなく、復路に沿って移動させるときにも、強調表示等を行う。
【００５２】
図８（Ａ）、（Ｂ）は、ＡＲ表示装置３００における他の表示例を示した図である。
この表示例では、チャート画像１０が複数ページにわたって形成され、さらに、各ページの各々には且つ各ページの上下には、各ページを識別するためのページ識別用マーカＭ３が印字されている。
【００５３】
この実施形態では、機器制御部１１１（図１参照）が、カメラ３２０により得られた撮影画像の中から、ページ識別用マーカＭ３を検出する。そして、検出したこのページ識別用マーカＭ３に基づき、各チャート用紙Ｐのページ番号を把握する。
そして、本実施形態では、図８（Ａ）にて、「２枚目のチャートを測色してください。」と表示しているように、次に測色を行うべきチャート画像１０が位置するページを示す情報を、ＡＲ表示装置３００に表示する。
【００５４】
そして、この例では、図８（Ｂ）に示すように、ユーザが、ＡＲ表示装置３００を通して２ページ目を見ると、この２ページ目の表示画像に、上記と同様、チャート画像１０を取り囲む強調表示がなされる。これにより、ユーザは、２ページ目に含まれるチャート画像１０のうちの何れのチャート画像１０の測色を行うべきかを把握する。
【００５５】
言い換えると、この例では、ユーザが、１ページ目のチャート用紙Ｐを見ると（測色が既に済んでいるチャート用紙Ｐを見ると）、ＡＲ表示装置３００には、測色の対象ではないページである旨の表示がなされる。そして、この場合、ユーザは、このページ以外のページに形成されたチャート画像１０の測色を行うことになる。
なお、この例では、文字画像を表示して、測色を行うべきチャート画像１０が位置するページを示したが、文字画像に限らず、例えば、下向きの矢印などの図形を表示して、測色を行うべきページを示してもよい。
【００５６】
図９（Ａ）、（Ｂ）は、ＡＲ表示装置３００の他の表示例を示した図である。
この例でも、チャート画像１０が複数ページにわたって形成されている。また、この例でも、２ページ目に位置するチャート画像１０の測色が必要な場合を示している。
さらに、この例では、各ページに位置判別用マーカＭ１を印字するとともに、位置判別用マーカＭ１の形状を互いに異ならせ、位置判別用マーカＭ１を読み取ることで、各ページを識別する。
【００５７】
具体的には、この例では、画像形成装置４００にてチャート用紙Ｐを出力する際に、各ページに付する位置判別用マーカＭ１とページ番号との対応関係を記した情報（以下、「対応関係情報」と称する）を生成する。そして、この対応関係情報を、機器制御部１１１（図１参照）に出力し、機器制御部１１１が、この対応関係情報を保持する。
そして、機器制御部１１１は、撮影画像の中から、位置判別用マーカＭ１を検出した場合には、上記対応関係情報を参照して、位置判別用マーカＭ１が位置するページのページ番号を把握する。
【００５８】
付言すると、図８にて示した処理例では、各ページ識別用マーカＭ３自体に、ページ番号を特定するための意味内容を持たせ、ページ識別用マーカＭ３を解析することで、各ページのページ番号の把握を行える。これに対し、図９にて示した処理では、各位置判別用マーカＭ１自体には、ページ番号を特定するための意味内容を持たせず、上記対応関係情報を参照することで、各ページのページ番号を把握する。
【００５９】
ここで、図９に示す処理例でも、上記と同様、ユーザがＡＲ表示装置３００を通して見ているページが、対象のページではない場合（既に測色が済んだページである場合）、図９（Ａ）に示すように、測色を行うべきチャート画像１０が位置するページを示す情報が、ＡＲ表示装置３００に表示される。
さらに、上記と同様、ユーザが、ＡＲ表示装置３００を通して、測色を行うべきチャート画像１０が位置するページを見ると、図９（Ｂ）に示すように、チャート画像１０の位置を示す強調表示がなされる。また、図示は省略するが、測色器２００の移動方向および移動速度を示す表示も行われる。
【００６０】
ここで、本実施形態では、測色器２００の校正が必要になった場合、ＡＲ表示装置３００に、測色器２００の校正が必要である旨を表示する。より具体的には、本実施形態では、予め定められた時間が経過する度や、予め定められた回数の測色が行われる度に、ＡＲ表示装置３００に、測色器２００の校正が必要である旨を表示する。
そして、この場合、ユーザは、校正装置（不図示）まで測色器２００を移動させ、校正装置を用いて測色器２００の校正を行う。これにより、測色器２００による測色の精度が保たれる。
【００６１】
ここで、ユーザへの情報表示に関する従来の技術を説明する。
ユーザへの情報表示は、例えば、固定式のディスプレイに情報を表示することで行う。ところで、この場合、可搬型のディスプレイに比べ、ユーザの利便性は低下しやすい。
ユーザが行う作業によっては、ディスプレイを見ながらでは行えない作業が存在し、このような場合、固定式のディスプレイを用いると、ユーザの利便性が低下しやすい。
【００６２】
また、ユーザへの情報表示は、抽象化されたグラフィックを表示することで行えるが、この場合、画一的な情報がユーザに提供され、ユーザに対して情報が伝わりにくい。
また、抽象化されたグラフィックでは、ユーザは、作業内容を直観的に理解しにくく、ユーザの作業性が低下しやすい。
【００６３】
ここで、本実施形態の測色処理においても、固定式のディスプレイに情報を表示して、作業手順等をユーザに示すことが可能である。
しかしながら、測色処理では、チャート画像１０に沿わせながらの測色器２００の移動など、ディスプレイを見ながらでは行えない作業があり、固定式のディスプレイを用いると、ユーザの作業性が低下しやすい。
【００６４】
さらに、固定式のディスプレイを用いる場合、測色作業と、測色結果の確認作業を行うために、ユーザは、測色器２００の操作とディスプレイの確認を交互に行う必要が生じる。
かかる場合、ユーザは、チャート画像１０から目を離さざるをえず、この場合、ユーザは、次に測色を行おうとした際に、次に測色を行うべきチャート画像１０を見失うおそれがある。
さらに、測色器２００の操作方法等を、上記のように、抽象化されたグラフィックで伝えることも考えられるが、測色作業の作業工程は複雑であり、抽象化されたグラフィック表示では、測色器２００の操作方法を伝えきれないおそれがある。
【００６５】
図１０は、従来の一般的な測色方法を示した図である。
この従来の測色方法では、上記と同様に、各行のチャート画像１０毎に、測色器２００を往復移動させて測色を行う。
また、この従来の測色方法では、固定式のディスプレイ（不図示）を確認しながら作業を進める。より具体的には、測色器２００を用いた測色作業と、ディスプレイでの結果確認とを交互に行う。この場合、ユーザは、チャート画像１０から目を離さざるをえず、ユーザは、次に測色を行うべきチャート画像１０を見失うおそれがある。
【００６６】
また、測色器２００を用いた測色では、測色器２００を予め定められた速度で且つ予め定められた方向に移動させる必要が生じるが、従来の一般的な測色方法では、速度や方向についての指示が何らなされず、ユーザに対し、測色器２００を動かす方向や速度が伝わりにくい。
この場合、測色器２００の移動速度が、予定されている速度よりも小さくなったり大きくなったりし、安定した測色を行えなくなるおそれがある。
【００６７】
これに対し、本実施形態では、可搬型のＡＲ表示装置３００に対して情報を表示する。これにより、測色作業を行う場所の傍に、表示装置が位置する形となり、固定型のディスプレイに比べ、作業効率が向上する。
特に、ヘッドマウント型のＡＲ表示装置３００の場合（ユーザに装着されるＡＲ表示装置３００の場合）は、ユーザは、視線をＡＲ表示装置３００に移す必要がなくなり、作業効率が高まる。
【００６８】
さらに、本実施形態では、ＡＲ表示装置３００に表示する情報が、一般的なグラフィックではなく、ユーザの実際の作業内容に合わせた表示となる。
言い換えると、本実施形態では、ユーザの作業内容に応じて表示内容が順次切り替わる。これにより、一般的なグラフィックに比べ、ユーザは、次に行うべき操作が把握しやすく、ユーザの利便性が高まる。
【００６９】
さらに、従来の測色方法では、測色器２００の校正を行うべきタイミングが分かりにくい。
測色器２００を用いた測色では、予め定められた間隔で測色器２００の校正を行う必要があるが、従来の測色方法では、校正のタイミングが何ら表示されず、ユーザは、校正のタイミングを把握しにくい。ここで、従来の測色方法では、測色がエラーになる原因の一つに校正の未実施があり、校正のタイミングを通知するようにすれば、校正の未実施に起因する測色エラーの発生を抑制できる。
【００７０】
これに対し、本実施形態では、ユーザの傍に、ＡＲ表示装置３００が設置される。このため、このＡＲ表示装置３００に、校正についての情報も表示するようにすれば、ユーザは、校正を行うべきタイミングの把握を行える。そして、この場合、校正の未実施に起因する測色エラーを減らせる。
【符号の説明】
【００７１】
１…測色システム、１０…チャート画像、１１１…機器制御部、１１２…画像生成部、１１３…画像出力部、２００…測色器、３００…ＡＲ表示装置、３２０…カメラ、Ｐ…チャート用紙
【図１】
2018017520.tif 000003
【図２】
2018017520.tif 000004
【図３】
2018017520.tif 000005
【図４】
2018017520.tif 000006
【図５】
2018017520.tif 000007
【図６】
2018017520.tif 000008
【図７】
2018017520.tif 000009
【図８】
2018017520.tif 000010
【図９】
2018017520.tif 000011
【図１０】
2018017520.tif 000012