(57)【要約】【課題】顧客が実際の衣料品を着用したイメージを捉え易くする。【解決手段】実施形態の試着システムは、撮影手段と、選択手段と、判別手段と、表示手段と、を備える。前記撮影手段は、衣料品を試着する人物の動画像を撮影する。前記選択手段は、衣料品データを選択する。前記判別手段は、前記撮影手段により動画像を撮影した人物の向きを判別する。前記表示手段は、前記選択手段により選択された衣料品データを元に、前記判別手段により判別された向きと同じ向きに向けた場合の衣料品画像を前記撮影手段により撮影した人物の動画像に重ね合わせた合成画像を表示する。【選択図】図１２
2012108805.tif 000002
【特許請求の範囲】
【請求項１】
衣料品を試着する人物の動画像を撮影する撮影手段と、
衣料品データを選択する選択手段と、
前記撮影手段により動画像を撮影した人物の向きを判別する判別手段と、
前記選択手段により選択された衣料品データを元に、前記判別手段により判別された向きと同じ向きに向けた場合の衣料品画像を前記撮影手段により撮影した人物の動画像に重ね合わせた合成画像を表示する表示手段と、
を備えたことを特徴とする試着システム。
【請求項２】
前記判別手段は、前記撮影手段により動画像を撮影した人物の部分の配置関係から、前記撮影手段により動画像を撮影した人物の向きを判別することを特徴とする請求項１に記載の試着システム。
【請求項３】
前記表示手段は、前記選択した衣料品が商品である場合に、前記合成画像に加えて、前記選択した衣料品を示す商品情報を表示することを特徴とする請求項１または２に記載の試着システム。
【請求項４】
衣料品を試着する人物の画像を撮影する撮影手段と、
衣料品データを選択する選択手段と、
前記選択した衣料品データの衣料品画像を前記撮影した人物の画像に重ね合わせた合成画像、および前記選択した衣料品データと組み合わせて着用する衣料品データの衣料品画像を表示する表示手段と、
を備えたことを特徴とする試着システム。
【請求項５】
前記表示手段は、前記選択した衣料品データと組み合わせて着用する衣料品データのうち、店舗で商品として販売されている衣料品データの衣料品画像を表示することを特徴とする請求項４に記載の試着システム。
【請求項６】
前記表示手段は、前記選択した衣料品データと組み合わせて着用する衣料品データのうち、予め登録した衣料品データの衣料品画像を表示することを特徴とする請求項４に記載の試着システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、試着システムに関する。
【背景技術】
【０００２】
近年、人物を撮影した画像データに対して、衣料品を撮影した画像データを重ね合わせた合成画像を形成する技術が開示されている（特許文献１参照）。これにより、購入を検討している衣料品を顧客が実際に試着することなく、衣料品を着用したイメージを捉えることができるので、衣料品を試着する手間が省け、衣料品の購買を促すことができる。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
しかしながら、従来技術においては、予め設定された向きを向いて人物が衣料品を着用した場合の衣料品の画像データしか用意されていないため、人物を撮影した動画像データに対して衣料品の画像データを重ね合わせた合成画像を形成した場合、人物の向きが変化しているにも関わらず、衣料品の向きが変化しないため、顧客が実際に衣料品を着用したイメージを捕らえ難い、という課題がある。
【課題を解決するための手段】
【０００４】
実施形態の試着システムは、撮影手段と、選択手段と、判別手段と、表示手段と、を備える。前記撮影手段は、衣料品を試着する人物の動画像を撮影する。前記選択手段は、衣料品データを選択する。前記判別手段は、前記撮影手段により動画像を撮影した人物の向きを判別する。前記表示手段は、前記選択手段により選択された衣料品データを元に、前記判別手段により判別された向きと同じ向きに向けた場合の衣料品画像を前記撮影手段により撮影した人物の動画像に重ね合わせた合成画像を表示する。
【図面の簡単な説明】
【０００５】
【図１】図１は、本実施形態にかかる業務支援システムの構成を示すブロック図である。
【図２】図２は、ハンディーターミナルの構成を示すブロック図である。
【図３】図３は、試着室端末が設置されている試着室を示す斜視図である。
【図４】図４は、試着室端末のハードウェア構成を示すブロック図である。
【図５】図５は、商品ファイルのデータ構成を示す図である。
【図６】図６は、在庫ファイルのデータ構成を示す図である。
【図７】図７は、画像ファイルのデータ構成を示す図である。
【図８】図８は、顧客ファイルのデータ構成を示す図である。
【図９】図９は、合成画像の表示処理の流れを示すフローチャートである。
【図１０】図１０は、衣料品の試着開始の操作を受け付けるスタート画面の一例である。
【図１１】図１１は、顧客の動画像および衣料品画像のサムネイル画像を表示した画面の一例を示す図である。
【図１２】図１２は、顧客の動画像に生成した衣料品画像を重ね合わせた合成画像が表示された画面の一例である。
【図１３】図１３は、選択した衣料品に組み合わせて着用可能な衣料品の衣料品画像の他の表示例を示す図である。
【図１４】図１４は、選択した衣料品と組み合わせて着用する衣料品を選択する処理を説明するための図である。
【図１５】図１５は、選択した衣料品と組み合わせて着用する衣料品を選択する処理を説明するための図である。
【図１６】図１６は、合成画像に衣料品画像を重ね合わせた新たな合成画像が表示された画面の一例である。
【図１７】図１７は、合成画像および人型のシルエットを含む画面の一例を示す図である。
【図１８】図１８は、合成画像およびカウントダウン表示を含む画面の一例を示す図である。
【図１９】図１９は、合成画像およびカウントダウン表示を含む画面の一例を示す図である。
【図２０】図２０は、静止画を含む画面の一例を示す図である。
【図２１】図２１は、登録された商品の一覧が表示された画面の一例を示す図である。
【図２２】図２２は、商品登録処理の終了画面を示す図である。
【発明を実施するための形態】
【０００６】
本実施形態では、衣料品店の店舗に導入されている業務支援システムを構成する試着システムへの適用例である。図１は、本実施形態にかかる業務支援システムの構成を示すブロック図である。業務支援システム１１が導入されている店舗は、衣料品店であるため商品としての衣料品３１（図３参照）が多数陳列されている。
【０００７】
本実施形態では、業務支援システム１１は、有線または無線の通信回線（例えば、インターネット等）１５等を介して相互に電気的に接続されたコンピュータ３０１や、ＰＯＳ（Point  Of  Sale）端末５０１、試着室端末１０１、クライアント端末４０１、ハンディーターミナル６０１等を備えている。
【０００８】
この業務支援システム１１では、一つまたは複数のコンピュータ３０１が、所定のサービスを提供するサーバとして機能することができる。この業務支援システム１１では、例えばＳａａＳ(Software  as  a  Service)の形態で、サービスが提供されうる。
【０００９】
ＰＯＳ端末５０１は、店舗の出口付近に設けられたレジカウンタ（図示せず）に設定されている。ＰＯＳ端末５０１は、衣料品３１毎に固有の商品ＩＤを読み取って出力するスキャナ５０２を備えている。商品ＩＤは、衣料品３１（図３参照）に付されているタグ４１（図３参照）に、バーコードや２次元コード等のコードシンボルの形態で印刷されている。そして、ＰＯＳ端末５０１は、読み取られた情報に基づいて、商品販売データ処理を実行する。
【００１０】
このようなＰＯＳ端末５０１には、通信回線１５を介して、コンピュータ３０１、クライアント端末４０１、試着室端末１０１、およびハンディーターミナル６０１が接続されている。
【００１１】
コンピュータ３０１には、ストレージデバイスとしてＨＤＤ（Hard  Disk  Drive）等の記憶装置が内蔵され、この記憶装置には各種ファイルが記憶されている。
【００１２】
クライアント端末４０１は、業務支援システム１１が導入された店舗を利用する顧客の家に設定されている。クライアント端末４０１は、開閉自在の筐体を有するいわゆるノートパソコンであり、情報を表示するＬＣＤ（Liquid  Crystal  Display）４０２と、情報を入力するためのキーボード４０３と、ＬＣＤ４０２の画面上に表示されるマウスポインタを移動させるためのトラックパッド（図示せず）とを備えている。なお、クライアント端末４０１のその他の構成は、一般的なノートパソコンの構成と変わるところがないため、説明を省略する。
【００１３】
ハンディーターミナル６０１は、店舗に来店した顧客に貸し出され、顧客により操作される携帯端末であり、顧客が自ら商品の登録を行うことができる。図２は、ハンディーターミナルの構成を示すブロック図である。ハンディーターミナル６０１は、図２に示すように、スキャナ６０２、操作部６０３、表示部６０４、通信インタフェース６０５、記憶部６０６、および制御部６０７を備えている。
【００１４】
スキャナ６０２は、衣料品３１（図３参照）に付されているタグ４１に印刷されたバーコード４２（図３参照）から商品ＩＤを読み取る。操作部６０３は、各種キーやタッチパネル等の入力デバイスを有し、この入力デバイスの操作に応じた操作信号を制御部６０７に通知する。表示部６０４は、ＬＣＤ等の表示デバイスを有し、制御部６０７の制御に従い文字や図形を表示デバイスに表示する。通信インタフェース６０５は、中継装置１２を介してコンピュータ３０１と接続し、装置間で行われるデータ通信を制御する。
【００１５】
記憶部６０６は、例えばＨＤＤやＳＳＤ（Solid  State  Drive）、フラッシュメモリ等であって、制御部６０７が実行する各種プログラムや設定情報を予め記憶する。
【００１６】
制御部６０７は、ＣＰＵ、ＲＯＭ（Read  Only  Memory）、ＲＡＭ（Random  Access  Memory）等で構成され、記憶部６０６に記憶された所定のプログラムを実行することでハンディーターミナル６０１の各部の動作を統括的に制御する。
【００１７】
図１に戻り、試着室端末１０１は、顧客が商品である衣料品３１（図３参照）を試着する際に使用する試着室２１に設置されている。顧客は、試着室２１で試着してから衣料品３１（図３参照）の購入を検討する。
【００１８】
図３は、試着室端末が設置されている試着室を示す斜視図である。試着室２１は、図３に示すように、上面と正面の一部とが開口した直方体形状を有している。試着室２１の正面の開口部分は、顧客が出入するための出入口２２となっている。出入口２２には、布製のカーテン２３が図示しないカーテンレールによって開閉自在に取り付けられている。なお、試着室２１の出入口２２は、カーテン２３の代わりに、例えばスライド開閉自在な扉が設けられていても良い。図３では、カーテン２３を開いた状態の試着室２１を示しているため、試着室２１の中を視認できる。試着室２１の中の背面側の壁には、衣料品３１を試着した顧客の動画像の表示や、商品の登録を行う試着室端末１０１が取り付けられている。また、試着室端末１０１の上方位置には、蛍光灯である照明２５が取り付けられている。
【００１９】
図３に示すように、試着室端末１０１は、厚みのある平板状のハウジング１０２を備えている。このハウジング１０２には、表示部としてのＬＣＤ１０３、試着室２１に入って衣料品３１を試着する顧客（人物）の動画像を撮影するカメラ１０４、および試着室２１に入った顧客が音声を入力するためのマイク１０５（図４参照）が取り付けられている。
【００２０】
さらに、試着室端末１０１には、コンピュータ３０１やハンディーターミナル６０１等とデータ通信を実行するための通信インタフェース１６２（図４参照）が内蔵されている。
【００２１】
また、試着室端末１０１の下方位置には、タグ４１に印刷されたバーコード４２から商品ＩＤを読み取るスキャナ１８１が取り付けられている。スキャナ１８１は、試着室端末１０１との間でデータ通信可能に有線接続されている。スキャナ１８１は、商品タグ４１に印刷されたバーコード４２から商品ＩＤのデータを読み取って出力する。こうして出力された商品ＩＤのデータは、試着室端末１０１のＣＰＵ１５１（図４参照）に入力される。
【００２２】
また、図３に示すように、試着室２１の背面には、細長い円柱状のポール１９１が立設されている。ポール１９１の先端部には、青色と赤色と緑色とを選択的に発光可能な報知部としての発光部１９２が設けられている。発光部１９２は、ポール１９１を通る図示しないケーブルによって試着室端末１０１と接続されており、試着室端末１０１のＣＰＵ１５１（図４参照）によって動作制御を受ける。なお、ＣＰＵ１５１による動作制御を受けていない状態では、発光部１９２は発光動作をしていない。
【００２３】
また、図３に示すように、試着室２１の出入口２２の一方の側部には、出入口２２を通過する顧客を検出する人感センサとして赤外線センサ１７１が取り付けられている。この赤外線センサ１７１は、いわゆる焦電型赤外線センサである。つまり、赤外線センサ１７１は、出入口２２を通過する顧客の人体が発する赤外線を受光し、受光した赤外線を熱変換し、その熱を素子の焦電効果で電荷に変えて出力する。このような赤外線センサ１７１は、試着室端末１０１と図示しないケーブルによって接続されており、赤外線センサ１７１の出力は、試着室端末１０１のＣＰＵ１５１（図４参照）へと入力される。
【００２４】
図４は、試着室端末のハードウェア構成を示すブロック図である。試着室端末１０１は、各種演算処理を実行し各部を制御する情報処理部としてのＣＰＵ１５１を備えている。ＣＰＵ１５１には、コンピュータプログラム等の固定データを固定的に記憶保存するＲＯＭ１５２と、可変データを書き換え自在に記憶してワークエリアとして使用されるＲＡＭ１５３と、試着室端末１０１の電源を落としてもデータ内容を保持する不揮発性メモリであるフラッシュメモリ１５４とがバス接続されている。
【００２５】
ＣＰＵ１５１には、前述したＬＣＤ１０３、カメラ１０４、マイク１０５、通信インタフェース１６２、赤外線センサ１７１、スキャナ１８１、および発光部１９２が、いずれも各種の入出力回路を介して接続され、ＣＰＵ１５１によって動作制御される。
【００２６】
なお、本実施形態では、試着室端末１０１は、顧客からの操作入力を受け付けるためのタッチパネルや操作キーなどのハードウェアを備えておらず、ＣＰＵ１５１が、カメラ１０４により撮像された動画像内の顧客のジェスチャによる操作またはマイク１０５から入力された音声による操作を受け付けるものとする。なお、ジェスチャまたは音声による操作を受け付ける方法については、各種の公知手法を用いて実行するものとし、ここでは説明を省略する。
【００２７】
フラッシュメモリ１５４には、各種コンピュータプログラムおよび各種ファイルが記憶されている。このようなフラッシュメモリ１５４に記憶されている各種コンピュータプログラムおよび各種ファイルは、試着室端末１０１の起動時に、その全部または一部がＲＡＭ１５３にコピーされて使用される。
【００２８】
そして、試着室端末１０１のＣＰＵ１５１は、コンピュータプログラムに従って実行する処理中に各種のファイルにデータアクセスする。アクセスされるファイルは、コンピュータ３０１のＨＤＤ（図示せず）に格納されているファイルである。コンピュータ３０１は、通信回線１５を介して試着室端末１０１と接続されている。そのため、これらのファイルは、試着室端末１０１のＣＰＵ１５１によってデータアクセス可能となっている。
【００２９】
ここで、図５〜８を用いて、コンピュータ３０１のＨＤＤ（図示せず）に格納されている各種のファイル（商品ファイルＦ１、在庫ファイルＦ２、顧客ファイルＦ４、画像ファイルＦ３等）について説明する。
【００３０】
図５は、商品ファイルのデータ構成を示す図である。商品ファイルＦ１は、商品（衣料品３１）を特定する商品ＩＤに対応付けて、商品名と、単価と、当該商品ＩＤにより特定される商品と組み合わせて着用可能な商品のうちおすすめコーディネート商品の商品ＩＤと、を記憶するファイルである。本実施形態では、商品ＩＤは、８桁の数字で表され、例えば、三つボタンジャケットを特定する商品ＩＤは、「１２３４××××」である。「１２３４××××」における下四桁「××××」は任意の数字である。そのため、例えば、「１２３４５６７８」と「１２３４１２３４」とは、いずれも三つボタンジャケットを示す商品ＩＤである。
【００３１】
なお、商品ファイルＦ１は、ＰＯＳ端末５０１による商品販売データ処理の実行中にもデータアクセスされて、商品名と単価とが読み出される。つまり、商品販売データ処理は、スキャナ５０２によって読み取られた商品ＩＤに基づいて、商品ファイルＦ１から対応する商品名および単価のデータを読み出し、読み出した単価に基づいて決済金額を算出する処理である。
【００３２】
図６は、在庫ファイルのデータ構成を示す図である。在庫ファイルＦ２は、店舗に陳列されている商品（衣料品３１）について、商品名および在庫数を書き換え自在に記憶するファイルである。
【００３３】
また、在庫ファイルＦ２には、店舗にある全ての在庫についての商品ＩＤに対応付けて、商品ＩＤによって特定される個別の商品についての属性情報である色およびサイズが記憶されている。
【００３４】
さらに、在庫ファイルＦ２には、商品ＩＤに対応付けて場所が記憶されている。場所には、店舗におけるその商品の陳列場所が所定の場所記号（Ａ−１−ａ、Ｂ−２−ｃ等）で記憶される。場所記号は陳列場所毎に割り当てられている。なお、その商品が店舗に陳列されておらず倉庫にある場合に、場所には「倉庫」という情報が記憶される。
【００３５】
例えば、図６に示すように、三つボタンジャケットについては、在庫数＝９である。そして、この９つの在庫中、商品ＩＤ＝１２３４５６７８によって特定される三つボタンジャケットは、色＝ダークブラウン、サイズ＝Ｍ、場所＝Ａ−１−ａである。
【００３６】
図７は、画像ファイルのデータ構成を示す図である。画像ファイルＦ３は、図７に示すように、商品ＩＤに対応付けて、複数の向きの衣料品３１の衣料品画像を、衣料品３１の向きを付加して記憶する。なお、衣料品画像は、バーチャルな３Ｄ画像であっても良いし、２Ｄ画像であっても良い。
【００３７】
図８は、顧客ファイルのデータ構成を示す図である。顧客ファイルＦ４は、図８に示すように、顧客を特定する顧客ＩＤと対応付けて、顧客の氏名、顧客が着用する商品のサイズ、登録済み商品の商品ＩＤ、および顧客によってクライアント端末４０１から予め登録された衣料品画像を記憶する。ここで、登録済み商品の商品ＩＤとは、スキャナ６０２により読み取った商品ＩＤおよび試着室端末１０１において登録された商品の商品ＩＤである。
【００３８】
このような構成において、店舗に訪れた顧客は、店舗内に陳列されている１又は２以上の衣料品３１を選び、購入検討のために試着室２１に持ち込む。この際、試着室端末１０１において、衣料品３１の衣料品画像を、カメラ１０４により撮影された顧客の動画像に重ね合わせた合成画像を表示する処理について説明する。
【００３９】
図９は、合成画像の表示処理の流れを示すフローチャートである。ＲＯＭ１５２に記憶されているコンピュータプログラムには、合成画像の表示処理用のプログラムが含まれている。この合成画像の表示処理用のプログラムは、その起動時にＲＡＭ１５３にコピーされて使用される。図９に示すフローチャートの処理は、ＲＡＭ１５３にコピーされた合成画像の表示処理用のプログラムに従いＣＰＵ１５１が実行する処理内容を示している。
【００４０】
試着室端末１０１のＣＰＵ１５１は、赤外線センサ１７１の検出出力が入力されるのを待機している。ここで、顧客が衣料品３１を試着室２１の中に持ち込むに際しては、顧客は必ず出入口２２を通過する。このとき、赤外線センサ１７１は、出入口２２を通過する顧客の身体が発する赤外線を検出して出力する。そして、この検出出力は試着室端末１０１のＣＰＵ１５１に入力される。
【００４１】
ＣＰＵ１５１は、赤外線センサ１７１からの検出出力が入力された場合、衣料品３１の試着開始の操作を受け付けるスタート画面を、ＬＣＤ１０３に表示する。図１０は、衣料品の試着開始の操作を受け付けるスタート画面の一例である。本実施形態では、ＣＰＵ１５１は、図１０に示すように、衣料品３１の試着開始の操作を受け付けるためのスタートボタン１００１や、店舗名：「×××××」や、顧客名：「△△△△」や、顧客が試着室２１に持ち込んだ試着する衣料品３１に付された商品タグ４１に印刷されたバーコード４２のスキャナ１８１による読み取りを指示するメッセージなどが表示されたスタート画面１０００を、ＬＣＤ１０３に表示する。また、本実施形態では、ＣＰＵ１５１は、データベースサーバ３０１の顧客ファイルＦ４から、ハンディーターミナル６０１の操作部６０３から入力された顧客ＩＤと対応付けられた氏名を読み込み、読み込んだ氏名が顧客名として表示されたスタート画面１０００をＬＣＤ１０３に表示するものとする。
【００４２】
図１０に示すスタート画面１０００を表示した後、ＣＰＵ１５１は、スタートボタン１００１の操作を待つ。そして、スタートボタン１００１が操作されると、ＣＰＵ１５１は、カメラ１０４に撮影された顧客の動画像を取り込むとともに、コンピュータ３０１の画像ファイルＦ３から、スキャナ１８１により読み取った商品ＩＤと対応付けられた衣料品画像（正面を向かせた衣料品３１の衣料品画像）を読み込む。そして、ＣＰＵ１５１は、カメラ１０４から取り込んだ顧客の動画像、および商品ファイルＦ１から読み込んだ衣料品画像のサムネイル画像をＬＣＤ１０３に表示する。図１１は、顧客の動画像および衣料品画像のサムネイル画像を表示した画面の一例を示す図である。本実施形態では、ＣＰＵ１５１は、図１１に示すように、カメラ１０４から取り込んだ顧客の動画像１１０１、商品ファイルＦ１から読み込んだ衣料品画像のサムネイル画像１１０２、試着室２１を利用可能な残り時間等が表示された画面１１００をＬＣＤ１０３に表示する。顧客は、画面１１００内のサムネイル画像１１０２を操作することにより、試着する商品の選択を要求することができる。
【００４３】
画面１１００内のサムネイル画像１１０２が操作されると、ＣＰＵ１５１（選択部）は、スキャナ１８１により読み取った商品ＩＤから特定される商品のうち、サムネイル画像１１０２が操作された商品を顧客に試着させる衣料品３１（衣料品データ）として選択する（ステップＳ９０１）。顧客に試着させる衣料品３１が選択されると、ＣＰＵ１５１（判別部）は、カメラ１０４により動画像を撮影した顧客の向きを判別する（ステップＳ９０２）。本実施形態では、ＣＰＵ１５１は、各種の公知手法を用いて、カメラ１０４から取り込んだ動画像から、顧客の顔や肩や腕や足等の部分を抽出する。一例として、人の顔では、両目と口とがある範囲内で予め決められた配列をとるので、両目であろう部分と口であろう部分とを画像処理技術によって判別し、その配列がある範囲で予め決められた配列をとるのであれば、これを人の顔と判定する。両目であろう部分と口であろう部分とは、その画像上の各種の特徴量から推定することが可能である。そして、ＣＰＵ１５１は、各種の公知手法を用いて、抽出した顧客の顔や肩や腕等の部分から、顧客の向きを判別する。一例として、両目であろう部分と口であろう部分との配置関係、そのような配置関係から定まる顔の中心に対する顎であろう部分の左右バランス等から、推定することが可能である。
【００４４】
次に、ＣＰＵ１５１は、選択した衣料品３１を元に、判別した顧客の向きと同じ向きに向かせた場合の衣料品画像を生成する（ステップＳ９０３）。本実施形態では、ＣＰＵ１５１は、画像ファイルＦ３から、選択した商品の商品ＩＤと対応付けられ、かつ判別した向きが付加された衣料品画像を読み込むものとする。また、本実施形態では、ＣＰＵ１５１は、衣料品画像の読み込みと同時に、商品ファイルＦ１から、選択した商品の商品ＩＤと対応付けられた商品名、単価、おすすめコーディネート商品の商品ＩＤを読み込む。また、本実施形態では、ＣＰＵ１５１は、在庫ファイルＦ２から、選択した商品の在庫数およびサイズを読み込む。さらに、本実施形態では、ＣＰＵ１５１は、顧客ファイルＦ４から、ハンディーターミナル６０１の操作部６０３から入力された顧客ＩＤと対応付けられたサイズを読み込む。
【００４５】
なお、ＣＰＵ１５１は、カメラ１０４から取り込んだ動画像から抽出した顔や肩や腕や足の角度等に応じて、生成した衣料品画像を変形または拡大することも可能である。この場合に、画像ファイルＦ３は、顔や肩や腕や足の角度等を変化させた場合の衣料品画像を、衣料品画像の向き毎に記憶している必要がある。そして、ＣＰＵ１５１は、判別した向きが付加され、かつカメラ１０４から取り込んだ動画像から抽出した顔や肩や腕や足の角度と一致する衣料品画像を、画像ファイルＦ３から読み込むものとする。
【００４６】
次に、ＣＰＵ１５１（表示部）は、生成した衣料品画像を、カメラ１０４から取り込んだ顧客の動画像１１０１に重ね合わせた合成画像をＬＣＤ１０３に表示する（ステップＳ９０４）。図１２は、顧客の動画像に生成した衣料品画像を重ね合わせた合成画像が表示された画面の一例である。本実施形態では、ＣＰＵ１５１は、図１２に示すように、顧客の動画像１１０１のうち衣料品画像１２０６を重ね合わせる部分に当該部分の表示と異ならせる透過処理を施し、透過処理を施した部分に、生成した衣料品画像１２０６を重ね合わせた合成画像１２０１が表示された画面１１００をＬＣＤ１０３に表示する。なお、選択されたサムネイル画像１１０２に対応する衣料品３１を顧客が着用している場合は、ステップＳ９０１〜ステップＳ９０４での合成画像の重ね合わせは実施しないものとする。
【００４７】
また、本実施形態では、ＣＰＵ１５１は、現在試着中の衣料品３１（つまり、動画像１１０１に重ね合わせた衣料品画像１２０６の衣料品３１）のサムネイル画像１１０２の縁の色を他のサムネイル画像１１０２の縁の色と異なる色で表示したり、現在試着中の衣料品３１のサムネイル画像１１０２の上に試着中であることを示すメッセージを表示したりして、現在試着中の衣料品３１のサムネイル画像１１０２を強調表示する。
【００４８】
さらに、本実施形態では、ＣＰＵ１５１は、図１２に示すように、商品ファイルＦ１から読み込んだ商品名および単価や在庫ファイルＦ２から読み込んだサイズなどの商品情報、商品の登録を要求するボタン１２０３などを含むポップアップ１２０２や、試着室端末１０１に対する各種処理の実行を要求する操作ボタン１２０４が表示された画面１１００を、ＬＣＤ１０３に表示する。
【００４９】
店員の呼び出しを要求する操作ボタン１２０４（「呼び出し」）が操作されると、ＣＰＵ１５１は、発光部１９２を制御して、発光部１９２を発光させて店員を呼び出す。写真撮影を要求する操作ボタン１２０４（「写真撮影」）が操作されると、ＣＰＵ１５１は、カメラ１０４から、操作ボタン１２０４（「写真撮影」）が操作されたタイミングで撮影された静止画を取り込む。
【００５０】
また、選択した衣料品３１と組み合わせて着用可能な衣料品の衣料品画像の表示を要求する操作ボタン１２０４（「おすすめコーデ」、「クローゼット」、「買物カゴ」）が操作されると、ＣＰＵ１５１、図１２に示すように、画像ファイルＦ３または顧客ファイルＦ４から、選択した衣料品３１と組み合わせて着用可能な衣料品の衣料品画像１２０５を読み込む。次いで、ＣＰＵ１５１（表示部）は、読み込んだ衣料品画像１２０５および合成画像１２０１を含む画面１１００を、ＬＣＤ１０３に表示する。
【００５１】
例えば、操作ボタン１２０４のうち「おすすめコーデ」が操作された場合、ＣＰＵ１５１は、商品ファイルＦ１から、選択した衣料品３１の商品ＩＤと対応付けられたおすすめコーディネート商品の商品ＩＤを読み込む。次いで、ＣＰＵ１５１は、画像ファイルＦ３から、読み込んだおすすめコーディネート商品の商品ＩＤと対応付けられた衣料品画像１２０５を読み込み、読み込んだ衣料品画像１２０５および合成画像１２０１を含む画面１１００を、ＬＣＤ１０３に表示する。
【００５２】
また、操作ボタン１２０４のうち「買物カゴ」が操作された場合、ＣＰＵ１５１は、商品ファイルＦ１から、登録済み商品の商品ＩＤを読み込む。次いで、ＣＰＵ１５１は、画像ファイルＦ３から、読み込んだ登録済み商品の商品ＩＤと対応付けられた衣料品画像１２０５を読み込み、読み込んだ衣料品画像１２０５および合成画像１２０１を含む画面１１００を、ＬＣＤ１０３に表示する。
【００５３】
さらに、操作ボタン１２０４のうち「クローゼット」が操作された場合、ＣＰＵ１５１は、顧客ファイルＦ４から、ハンディーターミナル６０１の操作部６０３から入力された顧客ＩＤと対応付けられた衣料品画像１２０５（予め登録した衣料品画像）を読み込み、読み込んだ衣料品画像１２０５および合成画像１２０１を含む画面１１００を、ＬＣＤ１０３に表示する。
【００５４】
なお、本実施形態では、選択した衣料品３１と組み合わせて着用可能な衣料品３１の衣料品画像１２０５を、顧客の動画像１１０１に衣料品画像１２０６を重ね合わせた合成画像１２０１とともに表示しているが、これに限定するものではない。例えば、選択した衣料品３１と組み合わせて着用可能な衣料品３１の衣料品画像１２０５を、顧客の静止画に衣料品画像１２０６を重ね合わせた合成画像とともに表示しても良い。
【００５５】
また、図１２に示す画面１１００においては、選択した衣料品３１と組み合わせて着用可能な衣料品の衣料品画像１２０５を、合成画像１２０１の周りに、衣料品の種類毎に分けて表示しているが、これに限定するものではない。図１３は、選択した衣料品に組み合わせて着用可能な衣料品の衣料品画像の他の表示例を示す図である。例えば、操作ボタン１２０４のうち「おすすめコーデ」が操作された場合、ＣＰＵ１５１は、図１３に示すように、選択した衣料品３１と、当該選択した衣料品３１と組み合わせて着用可能な衣料品と、を組み合わせた衣料品画像１３０１を含む画面１１００をＬＣＤ１０３に表示しても良い。
【００５６】
図１２に示す画面１１００をＬＣＤ１０３に表示した後、ＣＰＵ１５１は、選択した衣料品３１と組み合わせて着用する衣料品が選択されたか否かを判断する。
【００５７】
図１４および図１５は、選択した衣料品と組み合わせて着用する衣料品を選択する処理を説明するための図である。ＣＰＵ１５１は、画面１１００に表示した衣料品画像１２０５の中から、選択した衣料品３１と組み合わせて着用する衣料品３１の衣料品画像１４０１が操作されると、図１４に示すように、衣料品画像１４０１の縁の色を変えるなどして強調表示する。さらに、ＣＰＵ１５１は、操作された衣料品画像１４０１の衣料品３１が商品である場合には、図１４に示すように、衣料品画像１４０１の近傍にポップアップ１２０２を表示する。その後、図１５に示すように、衣料品画像１４０１が合成画像１２０１上にドラッグされると、ＣＰＵ１５１は、選択した衣料品３１と組み合わせて着用する衣料品３１が選択されたと判断する。
【００５８】
選択した衣料品３１を組み合わせて着用する衣料品が選択されたと判断した場合、ＣＰＵ１５１は、図９に示すステップＳ９０２〜ステップＳ９０４に示す処理と同様に、選択された衣料品３１の衣料品画像を、合成画像１２０１に重ね合わせた新たな合成画像の表示処理を実行する。簡単に説明すると、ＣＰＵ１５１は、まず、カメラ１０４により動画像を撮影した顧客の向きを判別する。次に、ＣＰＵ１５１は、選択された衣料品３１を、判別した顧客の向きと同じ向きに向かせた場合の当該選択された衣料品３１の衣料品画像を生成する。そして、ＣＰＵ１５１は、合成画像１２０１に生成した衣料品画像を重ね合わせた新たな合成画像をＬＣＤ１０３に表示する。
【００５９】
図１６は、合成画像に衣料品画像を重ね合わせた新たな合成画像が表示された画面の一例である。本実施形態では、ＣＰＵ１５１は、図１６に示すように、合成画像１２０１に生成した衣料品画像１６０３を重ね合わせた新たな合成画像１６０１を含む画面１１００をＬＣＤ１０３に表示する。また、本実施形態では、ＣＰＵ１５１は、図１６に示すように、商品ファイルＦ１から読み込んだ商品名および単価、在庫ファイルＦ２から読み込んだサイズ、商品の登録を要求するボタン１２０３などに加え、在庫ファイルＦ２から読み込んだサイズと顧客ファイルＦ４から読み込んだサイズとが異なる場合に、サイズが合っていないことを通知するメッセージ等の警告１６０２を含むポップアップ１２０２を含む画面１１００をＬＣＤ１０３に表示する。
【００６０】
選択した衣料品３１と組み合わせて着用する衣料品３１が選択されなかった場合、ＣＰＵ１５１は、操作ボタン１２０４（「写真撮影」）が操作されて静止画の撮影が要求されたか否かを判断する。静止画の撮影が要求された場合、ＣＰＵ１５１は、合成画像１２０１，１６０１の撮影処理を実行する。具体的には、ＣＰＵ１５１は、まず、合成画像１２０１，１６０１、および動画像内にいる顧客に対して静止画の撮影範囲を示す人型のシルエットを含む画面をＬＣＤ１０３に表示する。図１７は、合成画像および人型のシルエットを含む画面の一例を示す図である。本実施形態では、ＣＰＵ１５１は、図１７に示すように、合成画像１２０１，１６０１および人型のシルエット１７０１に加え、静止画の撮影開始を指示する発話（例えば、「ＯＫ」など）を要求するメッセージ１７０２、および静止画の撮影中止を指示するキャンセルボタン１７０３を含む画面１１００をＬＣＤ１０３に表示する。
【００６１】
次いで、マイク１０５から静止画の撮影開始を指示する発話が入力されると、ＣＰＵ１５１は、合成画像１２０１，１６０１、および撮影タイミングまでのカウントダウン表示をＬＣＤ１０３に表示する。図１８および図１９は、合成画像およびカウントダウン表示を含む画面の一例を示す図である。本実施形態では、ＣＰＵ１５１は、図１８および図１９に示すように、合成画像１２０１，１６０１、「３，２，１」などのカウントダウン表示１８０１，静止画の撮影タイミングを示すフラッシュ表示１９０１（例えば、合成画像１２０１，１６０１の輝度を上げるなど）を含む画面１１００をＬＣＤ１０３に表示する。さらに、本実施形態では、ＣＰＵ１５１は、静止画の撮影タイミングを示す音（例えば、「カシャ」などのカメラのシャッタ音）を図示しないスピーカから出力する。
【００６２】
次に、ＣＰＵ１５１は、静止画の撮影タイミングを示すフラッシュ表示１９０１および静止画の撮影タイミングを示す音の出力と同時に、カメラ１０４により撮影された静止画を取り込むとともに、取り込んだ静止画をＬＣＤ１０３に表示する。図２０は、静止画を含む画面の一例を示す図である。本実施形態では、ＣＰＵ１５１は、図２０に示すように、合成画像１２０１，１６０１、ポップアップ１２０２、取り込んだ静止画２００１、静止画２００１の表示の中止を要求するボタン２００２を含む画面１１００をＬＣＤ１０３に表示する。なお、画面１１００に表示された静止画２００１が操作されると、ＣＰＵ１５１は、操作された静止画２００１をハンディーターミナル６０１に送信するものとする。これにより、ユーザは、ハンディーターミナル６０１において、合成画像１２０１，１６０１を確認することができる。
【００６３】
静止画の撮影が要求されなかった場合、ＣＰＵ１５１は、画面１１００においてボタン１２０３が操作されて商品の登録が要求されたか否かを判断する。ボタン１２０３が操作されて商品の登録が要求されると、ＣＰＵ１５１は、登録が要求された商品の商品ＩＤを、顧客ファイルＦ４の登録済み商品の商品ＩＤに追加して、商品の登録を実行する。そして、ＣＰＵ１５１は、登録された商品の一覧をＬＣＤ１０３に表示する。図２１は、登録された商品の一覧が表示された画面の一例を示す図である。本実施形態では、ＣＰＵ１５１は、登録された商品の一覧や、商品の登録をやり直すボタン２１０２や、商品の登録を確定するボタン２１０３などが含まれるポップアップ２１０１を合成画像１２０１，１６０１上に表示した画面１１００をＬＣＤ１０３に表示する。
【００６４】
商品の登録を確定するボタン２１０３が操作されると、ＣＰＵ１５１は、商品登録処理を終了する。図２２は、商品登録処理の終了画面を示す図である。本実施形態では、ＣＰＵ１５１は、商品登録処理が終了すると、図２２に示すように、商品登録処理の終了を通知する画面２２００をＬＣＤ１０３に表示する。
【００６５】
このように、本実施形態の業務支援システム１１によれば、衣料品を試着する人物の動画像を撮影し、動画像を撮影した人物に試着させる衣料品を選択し、動画像を撮影した人物の向きを判別し、選択した衣料品を、判別された向きと同じ向きに向けた場合の衣料品の衣料品画像を生成し、撮影した人物の動画像に、生成した衣料品画像を重ね合わせた合成画像を表示することにより、人物の動画像の向きの変化に応じて、衣料品の向きも変化させることができるので、顧客が実際の衣料品を着用したイメージを捉え易くすることができる。
【００６６】
なお、本実施形態の試着室端末１０１で実行されるプログラムは、ＲＯＭ１５２等に予め組み込まれて提供されるが、これに限定するものではなく、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Digital  Versatile  Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。
【００６７】
さらに、本実施形態の試着室端末１０１で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ３０１上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の試着室端末１０１で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。
【００６８】
なお、本実施形態では、試着室端末１０１単体で上述した各部（選択部、判別部、表示部など）を実現しているが、これに限定するものではなく、通信回線１５に接続された一または複数のコンピュータ３０１で上述した各部（選択部、判別部、表示部など）を実現しても良い。
【符号の説明】
【００６９】
１１  業務支援システム
１５  通信回線
３１  衣料品
１０１  試着室端末
１０３  ＬＣＤ
１０４  カメラ
１５１  ＣＰＵ
１５２  ＲＯＭ
１５３  ＲＡＭ
１６２  通信インタフェース
３０１  コンピュータ
１１０１  動画像
１２０１  合成画像
１２０２  ポップアップ
１２０５，１２０６  衣料品画像
【先行技術文献】
【特許文献】
【００７０】
【特許文献１】特開２００５−１７４２０４号公報
【図１】
2012108805.tif 000003
【図２】
2012108805.tif 000004
【図３】
2012108805.tif 000005
【図４】
2012108805.tif 000006
【図５】
2012108805.tif 000007
【図６】
2012108805.tif 000008
【図７】
2012108805.tif 000009
【図８】
2012108805.tif 000010
【図９】
2012108805.tif 000011
【図１０】
2012108805.tif 000012
【図１１】
2012108805.tif 000013
【図１２】
2012108805.tif 000014
【図１３】
2012108805.tif 000015
【図１４】
2012108805.tif 000016
【図１５】
2012108805.tif 000017
【図１６】
2012108805.tif 000018
【図１７】
2012108805.tif 000019
【図１８】
2012108805.tif 000020
【図２０】
2012108805.tif 000021
【図２１】
2012108805.tif 000022
【図２２】
2012108805.tif 000023
【図１９】
2012108805.tif 000024