(57)【要約】【課題】例えば、作業者に物品の情報を提供することができる撮像表示装置および物品情報表示システムを得る。【解決手段】実施形態の撮像表示装置は、撮像部と、表示部と、を備えた。撮像部は、撮像を行う。表示部は、撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、物品に関する情報であり予め記憶された物品情報と、を表示する。物品情報には、物品の重心を示す重心情報が含まれた。【選択図】図３
2018005772.tif 000002
【特許請求の範囲】
【請求項１】
撮像を行う撮像部と、
前記撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示する表示部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報が含まれた、撮像表示装置。
【請求項２】
前記撮像画像から特定される複数の前記物品が互いに離間していて、且つ前記複数の物品が一体化されるべき場合、複数の前記物品が互いに離間していることに関する第一の情報を報知する第一の報知部を備えた、請求項１に記載の撮像表示装置。
【請求項３】
前記物品情報は、前記撮像画像から特定された前記物品が運ばれる場合に当該物品の支持されるべき位置を示す位置情報を含む、請求項１または２に記載の撮像表示装置。
【請求項４】
前記撮像画像から特定された前記物品が規定の位置に配置されていない場合、前記物品が規定の位置に配置されていないことに関する第二の情報を報知する第二の報知部を備えた、請求項１〜３のうちいずれか一つに記載の撮像表示装置。
【請求項５】
撮像部の撮像によって得られた撮像画像から物品を特定する特定部と、
前記特定部によって特定された前記物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示部に表示させる表示制御部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報が含まれた、物品情報表示システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、撮像表示装置および物品情報表示システムに関する。
【背景技術】
【０００２】
従来、一般的に、エレベータは、建物等の現場で据付け作業が行われる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−１１１８２９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記据付け作業では、作業者が、エレベータの部品等の物品に関する情報を確認したい場合がある。そこで、作業者に物品の情報を提供することができれば、好ましい。
【課題を解決するための手段】
【０００５】
実施形態の撮像表示装置は、撮像部と、表示部と、を備えた。前記撮像部は、撮像を行う。前記表示部は、前記撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示する。前記物品情報には、前記物品の重心を示す重心情報が含まれた。
【図面の簡単な説明】
【０００６】
【図１】図１は、第１の実施形態の撮像表示装置の一例を示す斜視図である。
【図２】図２は、第１の実施形態の撮像表示装置と物品との一例を示す斜視図である。
【図３】図３は、第１の実施形態の撮像表示装置の画面の一例を示す図である。
【図４】図４は、第１の実施形態の撮像表示装置と物品との一例を示す斜視図である。
【図５】図５は、第１の実施形態の撮像表示装置の画面の一例を示す図である。
【図６】図６は、第１の実施形態の撮像表示装置と物品との一例を示す斜視図である。
【図７】図７は、第１の実施形態の撮像表示装置の画面の一例を示す図である。
【図８】図８は、第１の実施形態の物品情報表示システムが実行する物品情報表示処理の一例を示すフローチャートである。
【図９】図９は、第２の実施形態の撮像表示装置と物品との一例を示す斜視図である。
【図１０】図１０は、第３の実施形態の撮像表示装置と物品との一例を示す斜視図である。
【図１１】図１１は、第３の実施形態の撮像表示装置の画面の一例を示す図である。
【発明を実施するための形態】
【０００７】
以下、図面を参照して、実施形態について説明する。なお、以下の例示的な複数の実施形態には、同様の構成要素が含まれている。よって、以下では、同様の構成要素には共通の符号が付されるとともに、重複する説明が省略される。なお、これらの実施形態により本発明が限定されるものではない。
【０００８】
＜第１の実施形態＞
［物品情報表示システムの構成］
本実施形態の物品情報表示システムは、撮像および物品情報の表示を行う撮像表示装置１００（図１）と、撮像表示装置１００によって撮像された撮像画像に基づいて各種の処理を行うサーバ装置と、を備えている。本実施形態では、例えば、撮像表示装置１００は、エレベータの据付け現場で用いられ、サーバ装置は、本部等の据付け現場とは異なる場所に設置されている。撮像表示装置１００とサーバ装置とは、通信ネットワークを介して通信可能に接続されている。通信ネットワークは、撮像表示装置１００とサーバ装置とを互いに接続する機能を有し、例えば、インターネット、電話回線網（携帯端末回線網および一般電話回線網等）、イントラネット、電力線通信（ＰＬＣ（Power  Line  Communications））等を含む。
【０００９】
［撮像表示装置１００の構成］
図１は、本実施形態の撮像表示装置１００の一例を示す斜視図である。図１に示されるように、撮像表示装置１００は、眼鏡型の装着装置（ウェアラブル端末）として構成されている。撮像表示装置１００は、装着部１０１と、撮像部１０２と、表示部１０３と、制御部と、記憶部と、通信インターフェース部と、を備えている。撮像表示装置１００は、携帯装置（携帯端末）の一例である。
【００１０】
装着部１０１は、フレーム１０１ａと、フレーム１０１ａに固定された一対のレンズ１０１ｂと、を有し、眼鏡形状に形成されている。装着部１０１は、使用者の頭部（人体）に装着される。装着部１０１は、撮像部１０２および表示部１０３を支持している。
【００１１】
撮像部１０２は、フレーム１０１ａに固定されている。撮像部１０２は、使用者に装着されたときに使用者の前方を撮像可能な姿勢で、一方のレンズ１０１ｂの側方に配置されている。撮像部１０２は、例えば、エリアセンサを有したカメラによって構成されている。撮像部１０２は、撮像によって得られた撮像画像（フレームデータ、画像データ）を出力する。撮像部１０２は、例えば、物品４００Ａ〜４００Ｅ（図２，４，６）を撮像する。以後、複数の物品４００Ａ〜４００Ｅの総称として、物品４００を用いる場合がある。複数の物品４００は、例えば、エレベータを構成する複数の部品等である。複数の物品４００には、例えば、巻上機、マシンベース、カウンターウェイト、ヘッダーケース等が含まれる。物品４００は、用品とも称される。
【００１２】
表示部１０３は、一方のレンズ１０１ｂに固定されている。表示部１０３は、画面が使用者側に向く姿勢で配置されており、使用者による画面の視認が可能となっている。表示部１０３は、例えば、ＯＥＬＤ（Organic  Electroluminescent  Display）やＬＣＤ（Liquid  Crystal  Display）等のディスプレイである。なお、表示部１０３は、レンズ１０１ｂやスクリーンに映像を投影することにより、表示を行う投影装置であってもよい。
【００１３】
撮像表示装置１００の制御部は、例えば、ＣＰＵ（Central  Processing  Unit）と、記憶部とを有したコンピュータによって構成されている。撮像表示装置１００の記憶部は、ＲＯＭ（Read  Only  Memory）およびＲＡＭ（Random  Access  Memory）を含み、ＣＰＵが実行するプログラム等を記憶している。撮像表示装置１００の制御部は、ＣＰＵが記憶部に記憶されたプログラムを実行することにより、例えば、送信部、受信部、および表示制御部等として機能（動作）する。撮像表示装置１００の制御部には、撮像部１０２、表示部１０３、撮像表示装置１００の記憶部、および撮像表示装置１００の通信インターフェース部が接続されている。撮像表示装置１００の制御部は、撮像表示装置１００の各部の制御や各種の演算を実行する。撮像表示装置１００の制御部は、例えば、撮像表示装置１００の記憶部および撮像表示装置１００の通信インターフェース部とともに、撮像部１０２の筐体内に収容されている。なお、撮像表示装置１００の制御部、記憶部、および通信インターフェース部は、撮像部１０２とは別個に装着部１０１に固定されていてもよい。
【００１４】
撮像表示装置１００の記憶部は、例えば、ＳＲＡＭ（Static  Random  Access  Memory）等の記憶装置によって構成されている。なお、撮像表示装置１００の記憶部は、ＨＤＤ（Hard  Disk  Drive）やＳＳＤ(Solid  State  Drive)等の記憶装置によって構成されてもよい。
【００１５】
撮像表示装置１００の通信インターフェース部は、通信回線や電話回線等に接続されるアンテナやルータ等の通信装置（図示せず）に接続されるインターフェースであり、撮像表示装置１００と通信ネットワークとの間における通信制御を行う機能を有する。すなわち、撮像表示装置１００の通信インターフェース部は、サーバ装置と通信ネットワークを介してデータを通信する機能を有している。
【００１６】
［サーバ装置の構成］
サーバ装置は、制御部と、記憶部と、通信インターフェース部と、を備えている。
【００１７】
サーバ装置の制御部は、例えば、ＣＰＵ（Central  Processing  Unit）と、記憶部とを有したコンピュータによって構成されている。記憶部は、ＲＯＭ（Read  Only  Memory）およびＲＡＭ（Random  Access  Memory）を含み、ＣＰＵが実行するプログラム等を記憶している。サーバ装置の制御部は、ＣＰＵが記憶部に記憶されたプログラムを実行することにより、例えば、受信部、特定部、判定部、取得部、および送信部等として機能（動作）する。サーバ装置の制御部には、サーバ装置の記憶部およびサーバ装置の通信インターフェース部が接続されている。サーバ装置の制御部は、サーバ装置の各部の制御や各種の演算を実行する。
【００１８】
サーバ装置の記憶部は、ＨＤＤやＳＳＤ等の記憶装置によって構成されている。なお、サーバ装置の記憶部は、ＳＲＡＭ等の記憶装置によって構成されていてもよい。サーバ装置の記憶部は、パターンマッチング処理で用いられる物品４００のテンプレート画像を記憶している。また、サーバ装置の記憶部は、物品４００（物品４００の識別情報）毎に、物品４００の形状と、物品４００に関する情報である物品情報と、を記憶している。物品４００の形状は、例えば、予め物品４００を撮像して得られた撮像画像であってもよいし、ＣＡＤデータ（二次元ＣＡＤデータや三次元ＣＡＤデータ）であってもよい。なお、物品の形状を示す画像（データ）をテンプレート画像として使用してもよい。物品情報は、例えば、物品４００の重心を表す重心情報である。また、一例として、本実施形態では、サーバ装置の記憶部は、物品４００の形状と、物品４００に関する情報である物品情報と、を含んだ表示用画像を物品４００毎に記憶している。また、サーバ装置の記憶部は、複数の物品４００によって構成されるアッセンブリに関するアッセンブリ情報を記憶している。アッセンブリ情報は、アッセンブリの重心を表す重心情報を含む。また、アッセンブリ情報は、アッセンブリを構成する複数の物品４００（部品）と、複数の物品４００（部品）が一体化された状態での相対的な位置（正しい位置）を示す位置情報を含む。
【００１９】
サーバ装置の通信インターフェース部は、通信回線や電話回線等に接続されるアンテナやルータ等の通信装置（図示せず）に接続されるインターフェースであり、サーバ装置と通信ネットワークとの間における通信制御を行う機能を有する。すなわち、サーバ装置の通信インターフェース部は、撮像表示装置１００と通信ネットワークを介してデータを通信する機能を有している。
【００２０】
［物品情報表示処理］
次に、物品情報表示システムが実行する物品情報表示処理について説明する。物品情報表示処理では、撮像表示装置１００の撮像部１０２の撮像によって得られた撮像画像に応じて、サーバ装置が表示用画像を撮像表示装置１００に送信する。そして、撮像表示装置１００の表示部１０３が、表示用画像を画面に表示する。以下では、まず、撮像部１０２の撮像例および表示用画像の例を説明し、その次に、物品情報表示処理の詳細を説明する。
【００２１】
図２は、本実施形態の撮像表示装置１００と物品４００Ａとの一例を示す斜視図である。図３は、本実施形態の撮像表示装置１００の画面の一例を示す図である。図２に示されるように、撮像部１０２が、一つの物品４００Ａを撮像した場合、例えば、図３に示されるように、表示部１０３の画面には、表示用画像５００Ａが表示される。表示用画像５００Ａは、物品４００Ａの形状４００ａと、物品情報４００ｂと、を含む。図３の例では、物品４００Ａの形状４００ａは、物品４００Ａの外観の側面視であるが、物品４００Ａの形状４００ａは、斜視や正面視、平面視、底面視等で示されるものであってもよい。また、表示用画像５００Ａ中の物品４００Ａの形状４００ａは、撮像部１０２の撮像によって得られた撮像画像ではなく、サーバ装置の記憶部に記憶されたものである。また、物品情報４００ｂは、物品４００Ａの重心を示す重心情報４００ｂ１であり、例えば、黒丸で示されている。なお、撮像部１０２が、正しく組み付けられた複数の物品４００によって構成されたアッセンブリを撮像した場合には、アッセンブリの形状と、アッセンブリの物品情報（例えば、重心情報）とが、表示部１０３に表示される。すなわち、アッセンブリも物品の一例である。
【００２２】
図４は、本実施形態の撮像表示装置１００と物品４００Ｂ，４００Ｃとの一例を示す斜視図である。図５は、本実施形態の撮像表示装置１００の画面の一例を示す図である。図４の例は、撮像部１０２が、アッセンブリを構成する二つ（複数）の物品４００Ｂ，４００Ｃであって一体化されていない物品４００Ｂ，４００Ｃを撮像した場合の例である。この場合には、例えば、図５に示される表示用画像５００Ｂが、表示部１０３の画面に表示される。表示用画像５００Ｂは、物品４００Ｂの形状４００ａと、エラー情報４００ｃと、を含む。エラー情報４００ｃは、複数の物品４００が互いに離間していることに関する情報であり、例えば、「離れているためアッセンブリの重心を表示できません」等の文字情報によって構成される。エラー情報４００ｃは、例えば、サーバ装置の記憶部に記憶さている。なお、エラー情報４００ｃは、上記に限られない。エラー情報４００ｃは、エラーである旨を直接的または間接的に示すものであればよい。エラー情報４００ｃは、第一の情報の一例である。なお、図５の例において、各物品４００Ｂ，４００Ｃの重心情報を表示してもよい。
【００２３】
図６は、本実施形態の撮像表示装置１００と物品４００Ｄ，４００Ｅとの一例を示す斜視図である。図７は、本実施形態の撮像表示装置１００の画面の一例を示す図である。図６の例は、撮像部１０２が、一体化された二つ（複数）の物品４００Ｄ，４００Ｅであって組み付け位置が間違っている物品４００Ｄ，４００Ｅを撮像した場合の例である。この場合には、例えば、図７に示される表示用画像５００Ｃが、表示部１０３の画面に表示される。表示用画像５００Ｃは、正しい組み付け位置に配置された物品４００Ｄ，４００Ｅの形状４００ａと、エラー情報４００ｄと、を含む。エラー情報４００ｄは、物品４００Ｄ，４００Ｅが規定の位置に配置されていないことに関する情報であり、例えば、「上の通りに取付けて下さい」等の文字情報によって構成される。エラー情報４００ｄは、例えば、サーバ装置の記憶部に記憶さている。なお、エラー情報４００ｄは、上記に限られない。エラー情報４００ｄは、エラーである旨を直接的または間接的に示すものであってよい。上記例の場合、「上の通りに取付けて下さい」が、取り付けが間違っている旨（エラー）を間接的に示している。エラー情報４００ｄは、第二の情報の一例である。図７の例において、各物品４００Ｄ，４００Ｅの重心情報を表示してもよい。なお、以下では、表示用画像５００Ａ〜５００Ｃの総称として、表示用画像５００を用いる場合がある。
【００２４】
図８は、本実施形態の物品情報表示システムが実行する物品情報表示処理の一例を示すフローチャートである。図８に示されるように、物品情報表示処理では、まず、撮像表示装置１００の送信部が、撮像部１０２の撮像によって得られた撮像画像を、サーバ装置へ送信する（ステップＳ１）。
【００２５】
サーバ装置では、受信部が、送信された撮像画像を受信する（ステップＳ１１）。次に、サーバ装置の特定部が、撮像画像から物品４００を特定する（ステップＳ１２）。特定部は、撮像画像とサーバ装置の記憶部に記憶されたテンプレート画像とを用いたパターンマッチング処理を行うことによって、撮像画像中の物品４００を特定する。
【００２６】
次に、サーバ装置の判定部が、エラーの有無を判定する（ステップＳ１３）。このとき、判定部は、撮像画像中に、複数の物品４００があるかを判定する。判定部は、特定部によって特定された物品４００が一つの場合には、エラーは無いと判定する。
【００２７】
また、判定部は、特定部によって特定された物品４００が複数有る場合には、複数の物品４００が一体化されるべきものか（アッセンブリを構成するか）を、サーバ装置の記憶部に記憶されたアッセンブリ情報に基づいて判定する。判定部は、複数の物品４００が一体化されるべきものではないと判定した場合には、エラーは無いと判定する。一方、判定部は、複数の物品４００が一体化されるべきものであると判定した場合には、撮像画像に基づいて複数の物品４００が互いに離れているかを判定する。判定部は、複数の物品４００が離れている場合には、エラーが有ると判定し、当該内容をエラー報知対象としてサーバ装置の制御部の記憶部等に記憶させる。
【００２８】
また、判定部は、複数の物品が一体化されるべきであり且つ複数の物品４００が一体化されている（互いに離れていない）と判定した場合には、複数の物品４００の相対的な位置が正しいかを、サーバ装置の記憶部に記憶されたアッセンブリ情報に基づいて判定する。判定部は、複数の物品４００の相対的な位置が正しいと判定した場合には、エラーが無いと判定する。一方、判定部は、複数の物品４００の相対的な位置が間違っていると判定した場合には、エラーが有ると判定し、当該内容をエラー報知対象としてサーバ装置の制御部の記憶部等に記憶させる。
【００２９】
次に、サーバ装置の取得部が、表示用画像５００を取得する（ステップＳ１４）。取得部は、判定部によってエラーが無いと判定された場合には、特定部によって特定された物品４００の形状４００ａと、物品４００の物品情報４００ｂと、を含む表示用画像５００（表示用画像５００Ａ）を、サーバ装置の記憶部から取得する。一方、取得部は、判定部によってエラーが有ると判定された場合には、特定部によって特定された物品４００の形状４００ａと、エラーに応じたエラー情報４００ｃ，４００ｄと、をサーバ装置の記憶部から取得する。そして、取得部は、取得した物品４００の形状４００ａおよびエラー情報４００ｃ，４００ｄを含む表示用画像５００（表示用画像５００Ｂ，５００Ｃ）を生成することにより、表示用画像５００（表示用画像５００Ｂ，５００Ｃ）を取得する。なお、エラー情報４００ｃ，４００ｄを含んだ表示用画像５００Ｂ，５００Ｃが、サーバ装置の記憶部に予め記憶されていてもよい。この場合には、取得部は、サーバ装置の記憶部から表示用画像５００Ｂ，５００Ｃを取得することができるので、表示用画像５００Ｂ，５００Ｃを生成しなくてよい。
【００３０】
次に、サーバ装置の送信部が、取得部によって取得された表示用画像５００を撮像表示装置１００に送信する（ステップＳ１５）。
【００３１】
撮像表示装置１００では、受信部が、表示用画像５００を受信する（ステップＳ２）。そして、撮像表示装置１００の表示制御部が、表示用画像５００を表示部１０３に表示させる（ステップＳ３）。
【００３２】
以上のように、本実施形態では、表示部１０３は、撮像部１０２の撮像によって得られた撮像画像から特定された物品４００の予め記憶された形状４００ａと、予め記憶された物品情報４００ｂと、を表示する。よって、本実施形態によれば、例えば、作業者に、物品情報４００ｂを提供することができる。したがって、例えば、作業者が、物品情報４００ｂを資料等で調べる必要がないので、作業時間の短縮化が図られる。
【００３３】
また、本実施形態では、物品情報４００ｂには、物品４００の重心を示す重心情報４００ｂ１が含まれている。よって、本実施形態によれば、例えば、作業者に、物品４００の重心情報４００ｂ１を提供することができる。したがって、例えば、作業者は、物品４００の重心が分かるので、比較的重たい物品４００や形状が複雑な物品４００であっても、安全に持ち上げて、運搬や取り付けをすることができる。また、作業者は、比較的重たい物品４００や形状が複雑な物品４００であっても安全に運搬装置に取り付けたり載せたりすることができる。
【００３４】
また、本実施形態では、表示部１０３（第一の報知部）は、撮像画像から特定される複数の物品４００が互いに離間していて、且つ複数の物品４００が一体化されるべき場合、エラー情報４００ｃを報知する。よって、本実施形態によれば、例えば、作業者が、物品４００が一体化されるべきものだと認識することができる。
【００３５】
また、本実施形態では、表示部１０３（第二の報知部）は、撮像画像から特定された物品４００が規定の位置に配置されていない場合、エラー情報４００ｄを報知する。よって、本実施形態によれば、例えば、作業者が、物品４００の取り付け位置が間違っていることを認識することができる。また、例えば、物品４００の正しい位置が表示されることにより、作業者が、資料を確認することなく、物品４００を正しい位置に取り付けることができる。
【００３６】
＜第２の実施形態＞
図９は、本実施形態の撮像表示装置１００と物品４００Ａとの一例を示す斜視図である。本実施形態では、物品４００にコードシンボル４０１が付与されている。コードシンボル４０１は、例えば、二次元コードである。なお、コードシンボル４０１は、バーコードであってもよい。撮像部１０２は、コードシンボル４０１を撮像する。コードシンボル４０１は、物品４００の識別情報を含む。図９では、撮像表示装置１００の撮像部１０２が、コードシンボル４０１を撮像した例が示されている。
【００３７】
また、本実施形態のサーバ装置の特定部は、撮像部１０２によって撮像された撮像画像中にコードシンボル４０１が含まれている場合には、当該コードシンボル４０１が示す識別情報によって物品４００を特定する。なお、特定部は、第１の実施形態で説明したパターンマッチングによる物品４００の特定機能も有している。
【００３８】
以上のように、本実施形態では、物品４００は、撮像画像中のコードシンボル４０１から特定される。よって、例えば、特定部は、パターンマッチングでは、物品４００の特定ができない場合でも、コードシンボル４０１が撮像画像中にあれば、物品４００を特定することができる。
【００３９】
なお、本実施形態では、特定部は、パターンマッチングによる物品４００の特定機能を有さなくてもよい。この場合、撮像部１０２は、コードシンボル４０１を撮像できればよい。例えば、撮像部１０２は、エリアセンサやエリアセンサを有したスキャナによって構成されていてもよい。
【００４０】
＜第３の実施形態＞
図１０は、本実施形態の撮像表示装置１００と物品４００Ｆとの一例を示す斜視図である。図１１は、本実施形態の撮像表示装置１００の画面の一例を示す図である。本実施形態では、物品情報４００ｂが、撮像画像から特定された物品４００Ｆが運ばれる場合に当該物品４００Ｆの支持されるべき位置を示す位置情報４００ｂ２を含む。図１１の例では、位置情報４００ｂ２は、支持されるべき位置をハッチングで示している。物品４００Ｆの支持されるべき位置を示す位置情報４００ｂ２は、サーバ装置の記憶部に物品４００毎に予め記憶されている。物品４００Ｆの支持されるべき位置は、作業者が手で持つべき位置や、運搬装置が支持するべき位置等である。運搬装置の支持には、例えば、物品４００Ｆを吊す場合等が含まれる。なお、この場合、重心情報４００ｂ１も表示してよい。また、複数の物品４００によって構成されたアッセンブリの位置情報４００ｂ２を表示してもよい。アッセンブリの位置情報４００ｂ２もサーバ装置の記憶部に予め記憶されている。
【００４１】
以上のように、本実施形態では、物品情報４００ｂは、撮像画像から特定された物品４００が運ばれる場合に当該物品４００の支持されるべき位置を示す位置情報４００ｂ２を含む。よって、本実施形態によれば、例えば、作業者に、物品４００の支持されるべき位置を提供することができる。したがって、例えば、作業者は、物品４００の支持されるべき位置が分かるので、比較的重たい物品４００や形状が複雑な物品４００であっても安全に運搬することができる。また、作業者は、比較的重たい物品４００や形状が複雑な物品４００であっても安全に運搬装置に取り付けたり、載せたりすることができる。
【００４２】
＜他の実施形態＞
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【００４３】
例えば、撮像表示装置１００は、例えば、一般に市販されるデスクトップ型またはノート型のパーソナルコンピュータ等の情報処理装置であってもよい。また、撮像表示装置１００は、携帯電話、スマートフォン、ＰＨＳ（Personal  Handyphone  System）、ＰＤＡ（Personal  Digital  Assistant）等の携帯装置であってもよい。また、撮像表示装置１００は、人体の手首等に装着される装着端末であってもよい。
【００４４】
また、サーバ装置の特定部、判定部、および取得部が、撮像表示装置１００に設けられていてもよい。また、サーバ装置の記憶部に記憶されている各種のデータおよび情報が、撮像表示装置１００の記憶部に記憶されていてもよい。
【００４５】
また、第一の報知部および第二の報知部は、音声によって情報を報知するスピーカ等であってもよい。この場合、一つのスピーカが第一の報知部と第二の報知部とを兼ねてもよい。
【００４６】
また、物品情報４００ｂには、物品４００の重量が含まれていてもよい。
【００４７】
また、表示用画像５００中の物品４００が、撮像画像中の物品４００と略同じ姿勢（位置）となるようにしてもよい。この場合、例えば、表示用画像５００中の物品４００のデータは、三次元ＣＡＤデータに基づいて作成（生成）されてよい。
【００４８】
また、撮像表示装置１００およびサーバ装置が実行するプログラム（コンピュータプログラム）は、コンピュータで読み取り可能な記録媒体に記録されて、必要に応じて読み取られるものであってもよい。また、プログラムは、撮像表示装置１００およびサーバ装置に対して通信ネットワークを介して接続されたアプリケーションプログラムサーバに記憶されていてもよい。この場合、必要に応じてその全部または一部をダウンロードすることが可能であってもよい。ここで、上記「記録媒体」とは、任意の「可搬用の物理媒体」を含むものとする。可搬性の媒体は、例えば、メモリーカード、ＵＳＢ（Universal  Serial  Bus）メモリ、ＳＤ（Secure  Digital）カード等である。また、可搬性の媒体は、例えば、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＥＰ（Erasable  Programmable）ＲＯＭ、ＥＥＰ（Electrically  Erasable  and  Programmable）ＲＯＭ、ＣＤ−ＲＯＭ等である。また、可搬性の媒体は、例えば、ＭＯ（Magneto-Optical  disk）、ＤＶＤ（Digital  Versatile  Disk）、および、Ｂｌｕ−ｒａｙ（登録商標）  Ｄｉｓｃ等である。
【００４９】
また、「プログラム」とは、任意の言語や記述方法にて記述されたデータ処理方法であり、ソースコードやバイナリコード等の形式を問わない。なお、「プログラム」は必ずしも単一的に構成されるものに限られず、複数のモジュールやライブラリとして分散構成されるものや、ＯＳに代表される別個のプログラムと協働してその機能を達成するものをも含む。なお、実施形態に示した各装置において記録媒体を読み取るための具体的な構成、読み取り手順、あるいは、読み取り後のインストール手順等については、周知の構成や手順を用いることができる。
【００５０】
更に、装置の分散・統合の具体的形態は図示するものに限られず、その全部または一部を、各種の付加等に応じて、または、機能負荷に応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。すなわち、上述した実施形態を任意に組み合わせて実施してもよく、実施形態を選択的に実施してもよい。
【符号の説明】
【００５１】
１００…撮像表示装置、１０１…装着部、１０２…撮像部、１０３…表示部、４００，４００Ａ〜４００Ｆ…物品、４０１…コードシンボル、４００ａ…形状、４００ｂ…物品情報、４００ｂ１…重心情報、４００ｂ２…位置情報、４００ｃ…エラー情報（第一の情報）、４００ｄ…エラー情報（第二の情報）。
【図１】
2018005772.tif 000003
【図２】
2018005772.tif 000004
【図３】
2018005772.tif 000005
【図４】
2018005772.tif 000006
【図５】
2018005772.tif 000007
【図６】
2018005772.tif 000008
【図７】
2018005772.tif 000009
【図８】
2018005772.tif 000010
【図９】
2018005772.tif 000011
【図１０】
2018005772.tif 000012
【図１１】
2018005772.tif 000013
【手続補正書】
【提出日】平成29年5月31日(2017.5.31)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像を行う撮像部と、
前記撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示する表示部と、
前記撮像画像から特定される複数の前記物品が互いに離間していて、且つ前記複数の物品が一体化されるべき場合、複数の前記物品が互いに離間していることに関する第一の情報を報知する第一の報知部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報が含まれた、撮像表示装置。
【請求項２】
撮像を行う撮像部と、
前記撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示する表示部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報と、前記撮像画像から特定された前記物品が運ばれる場合に当該物品の支持されるべき位置を示す位置情報と、が含まれた、撮像表示装置。
【請求項３】
撮像を行う撮像部と、
前記撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示する表示部と、
前記撮像画像から特定された前記物品が規定の位置に配置されていない場合、前記物品が規定の位置に配置されていないことに関する第二の情報を報知する第二の報知部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報が含まれた、撮像表示装置。
【請求項４】
前記物品情報は、前記撮像画像から特定された前記物品が運ばれる場合に当該物品の支持されるべき位置を示す位置情報を含む、請求項１に記載の撮像表示装置。
【請求項５】
前記撮像画像から特定された前記物品が規定の位置に配置されていない場合、前記物品が規定の位置に配置されていないことに関する第二の情報を報知する第二の報知部を備えた、請求項１，２または４に記載の撮像表示装置。
【請求項６】
撮像部の撮像によって得られた撮像画像から物品を特定する特定部と、
前記特定部によって特定された前記物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示部に表示させる表示制御部と、
前記撮像画像から特定される複数の前記物品が互いに離間していて、且つ前記複数の物品が一体化されるべき場合、複数の前記物品が互いに離間していることに関する第一の情報を報知する第一の報知部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報が含まれた、物品情報表示システム。
【請求項７】
撮像部の撮像によって得られた撮像画像から物品を特定する特定部と、
前記特定部によって特定された前記物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示部に表示させる表示制御部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報と、前記撮像画像から特定された前記物品が運ばれる場合に当該物品の支持されるべき位置を示す位置情報と、が含まれた、
物品情報表示システム。
【請求項８】
撮像部の撮像によって得られた撮像画像から物品を特定する特定部と、
前記特定部によって特定された前記物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示部に表示させる表示制御部と、
前記撮像画像から特定された前記物品が規定の位置に配置されていない場合、前記物品が規定の位置に配置されていないことに関する第二の情報を報知する第二の報知部と、
を備え、
前記物品情報には、前記物品の重心を示す重心情報が含まれた、物品情報表示システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００５
【補正方法】変更
【補正の内容】
【０００５】
実施形態の撮像表示装置は、撮像部と、表示部と、第一の報知部と、を備えた。前記撮像部は、撮像を行う。前記表示部は、前記撮像部の撮像によって得られた撮像画像から特定された物品の予め記憶された形状と、前記物品に関する情報であり予め記憶された物品情報と、を表示する。前記第一の報知部は、前記撮像画像から特定される複数の前記物品が互いに離間していて、且つ前記複数の物品が一体化されるべき場合、複数の前記物品が互いに離間していることに関する第一の情報を報知する。前記物品情報には、前記物品の重心を示す重心情報が含まれた。