(57)【要約】【課題】建築物に設置された商品を交換する際の利便性を向上させる。【解決手段】支援システム１は、建築物に設置された商品の一部又は全部の交換を支援する支援装置１０と、商品の画像を撮像するための撮像装置と、支援装置１０との間で通信する端末装置５０とを備える。支援装置１０は、撮像装置により撮像された商品の画像を端末装置５０から取得する撮像画像取得部と、取得された商品の画像に基づいて画像が表す商品を特定する商品特定部と、特定された商品の情報に基づいて商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部とを備える。端末装置５０は、交換可否判定部による判定結果を支援装置から取得して提示する判定結果取得部とを備える。【選択図】図１
2020119142.tif 000002
【特許請求の範囲】
【請求項１】
建築物に設置された商品の一部又は全部の交換を支援する支援装置と、
前記商品の画像を撮像するための撮像装置と、
前記支援装置との間で通信する端末装置と、
を備え、
前記支援装置は、
前記撮像装置により撮像された前記商品の画像を前記端末装置から取得する撮像画像取得部と、
前記取得された商品の画像に基づいて、当該画像が表す商品を特定する商品特定部と、
前記特定された商品の情報に基づいて、前記商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部と、
を備え、
前記端末装置は、
前記交換可否判定部による判定結果を前記支援装置から取得して提示する判定結果取得部を備える支援システム。
【請求項２】
コンピュータを、
建築物に設置された商品の撮像画像を取得する撮像画像取得部、
前記取得された商品の撮像画像に基づいて、当該撮像画像が表す商品を特定する商品特定部、
前記特定された商品の情報に基づいて、前記商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部、
として機能させるための支援プログラム。
【請求項３】
コンピュータを、前記撮像画像に基づいて前記商品が設置された空間に関する情報を取得する空間情報取得部として更に機能させ、
前記交換可否判定部は、前記空間に関する情報に更に基づいて、前記商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する、
請求項２に記載の支援プログラム。
【請求項４】
コンピュータを、前記撮像画像又は前記商品の情報に基づいて、前記空間に設置された、前記商品により使用される設備の情報を取得する設備情報取得部として更に機能させ、
前記交換可否判定部は、前記設備の情報に更に基づいて、前記商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する、
請求項３に記載の支援プログラム。
【請求項５】
前記設備は、前記商品に給水するための設備、前記商品から排水するための設備、又は前記商品に給電するための設備を含む請求項４に記載の支援プログラム。
【請求項６】
前記商品特定部は、前記商品に表示された識別情報を前記撮像画像から取得し、前記識別情報に基づいて前記商品を特定する請求項２から５のいずれかに記載の支援プログラム。
【請求項７】
前記商品特定部は、前記識別情報の表示位置を示す情報を提示する請求項６に記載の支援プログラム。
【請求項８】
コンピュータを、
複数の商品の中から、前記商品の一部又は全部と交換可能な商品の候補を抽出する候補抽出部として更に機能させる請求項２から７のいずれかに記載の支援プログラム。
【請求項９】
コンピュータを、前記候補の情報又は前記設備の情報に基づいて、前記候補を前記空間に設置する位置を特定し、特定された位置に前記候補が設置された場合の前記空間の拡張現実画像を生成する拡張現実画像生成部として更に機能させる請求項８に記載の支援プログラム。
【請求項１０】
前記拡張現実画像生成部は、前記候補の三次元形状データと、前記候補の前記空間における設置位置を示す位置データとを取得し、前記位置データにより示される設置位置に前記候補の三次元形状データを配置し、前記撮像画像から推定される視点位置及び視線方向を設定してレンダリングした画像を前記撮像画像に重畳することにより、前記候補が前記設置位置に設置された場合の前記空間の拡張現実画像を生成することを特徴とする請求項９に記載の支援プログラム。
【請求項１１】
コンピュータを、
建築物に設置された商品を撮像装置により撮像した画像を、商品の一部又は全部の別の商品の一部又は全部への交換を支援する支援装置へ送信する撮像画像送信部、
前記商品の撮像画像に基づいて前記支援装置により生成された、前記商品の一部又は全部を前記別の商品の一部又は全部へ交換可能か否かの判定結果を前記支援装置から取得して提示する判定結果取得部、
として機能させるための支援プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、商品の交換を支援するための技術に関し、とくに、建築物に設置された商品の一部又は全部の交換を支援するための支援システム及び支援プログラムに関する。
【背景技術】
【０００２】
住宅のリフォームを支援するための様々な技術が提案されている。例えば、特許文献１に記載された住宅リフォーム支援システムは、リフォームの対象となる住宅の画像情報と寸法情報を合成して合成画像情報を生成し、この合成画像情報を読み出し可能に格納する。これにより、常に、画像情報に寸法情報が付加された合成画像を表示することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１０８６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
住宅などの建築物に設置された設備や機器などの商品を交換する際には、空間的なサイズ以外にも様々な設置条件が課せられうる。このような設置条件をリフォームの施主自身が把握するのは困難であるから、商品の交換を検討している施主に適切な情報を提供して支援する技術が求められる。
【０００５】
本発明は、このような課題に鑑みてなされ、その目的は、建築物に設置された商品を交換する際の利便性を向上させる技術を提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明のある態様の支援システムは、建築物に設置された商品の一部又は全部の交換を支援する支援装置と、商品の画像を撮像するための撮像装置と、支援装置との間で通信する端末装置と、を備える。支援装置は、撮像装置により撮像された商品の画像を端末装置から取得する撮像画像取得部と、取得された商品の画像に基づいて、当該画像が表す商品を特定する商品特定部と、特定された商品の情報に基づいて、商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部と、を備える。端末装置は、交換可否判定部による判定結果を支援装置から取得して提示する判定結果取得部を備える。
【０００７】
本発明の別の態様の支援プログラムは、コンピュータを、建築物に設置された商品の撮像画像を取得する撮像画像取得部、取得された商品の撮像画像に基づいて、当該撮像画像が表す商品を特定する商品特定部、特定された商品の情報に基づいて、商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部、として機能させる。
【０００８】
本発明の更に別の態様の支援プログラムは、コンピュータを、建築物に設置された商品を撮像装置により撮像した画像を、商品の一部又は全部の別の商品の一部又は全部への交換を支援する支援装置へ送信する撮像画像送信部、商品の撮像画像に基づいて支援装置により生成された、商品の一部又は全部を別の商品の一部又は全部へ交換可能か否かの判定結果を支援装置から取得して提示する判定結果取得部、として機能させる。
【０００９】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【発明の効果】
【００１０】
本発明によれば、建築物に設置された商品を交換する際の利便性を向上させる技術を提供することができる。
【図面の簡単な説明】
【００１１】
【図１】実施の形態に係る支援システムの構成を示す図である。
【図２】床上排水方式を採用する便器装置の例を示す図である。
【図３】床排水方式を採用する便器装置の例を示す図である。
【図４】情報提供サーバに保持される商品情報データベースの内部データの例を示す図である。
【図５】実施の形態に係る支援システムにおいて実行される支援方法の手順を示すシーケンス図である。
【図６】実施の形態に係る支援システムにおいて実行される支援方法の手順を示すシーケンス図である。
【図７】実施の形態に係る支援装置のハードウェア構成を示す図である。
【図８】実施の形態に係る端末装置のハードウェア構成を示す図である。
【図９】撮像装置により撮像された既設商品の撮像画像の例を示す図である。
【図１０】端末装置のディスプレイに表示される画像の例を示す図である。
【図１１】端末装置のディスプレイに表示される画像の例を示す図である。
【発明を実施するための形態】
【００１２】
本発明の実施の形態において、住宅などの建築物に設置された商品の一部又は全部の交換を支援する技術について説明する。トイレ、キッチン、風呂、洗面台など、住宅に設置される各種の設備や機器などの商品は、給水管、排水管、給電用のコンセントなどの設備を使用するので、既に設置されている商品（以下、「既設商品」ともいう）を別の商品（以下、「交換商品」ともいう）に交換する際には、これらの設備の状況も考慮して、交換商品が設置可能か否かを確認する必要がある。しかし、既設商品の所有者又は使用者自身が、設備の状況を確認したり、設備に合った交換商品を選択したりするのは困難である。とくに、排水管などの設備は、床下、壁の内部、既設の商品の裏側などに配設されることが多いので、設備を視認することができない場合もある。そこで、本実施の形態の支援装置は、既設商品の撮像画像から既設商品の品番を特定し、特定された品番の商品の情報に基づいて交換商品の設置の可否を判定する。これにより、ユーザは、交換商品の設置条件などを確認しなくても、既設商品を撮像するだけで、交換商品の設置の可否を知ることができる。これにより、ユーザの利便性を向上させることができる。また、ユーザがより気軽に商品の交換を検討することができるようになるので、商品を交換する機会が増加することが期待される。これにより、商品の製造者や販売者にもメリットを与えることができる。以下、主に、便器装置を交換する例について説明する。
【００１３】
図１は、実施の形態に係る支援システムの構成を示す。支援システム１は、建築物に設置された商品の交換を支援するための支援装置１０と、支援装置１０との間で通信する端末装置５０と、支援装置１０に商品の情報を提供する情報提供サーバ２と、それらを接続する通信網３とを備える。端末装置５０は、建築物に設置される商品の一例である便器装置４の画像を撮像するための撮像装置を備える。撮像装置は、ユーザが交換を検討している既設の便器装置４の画像を撮像する。撮像装置は、端末装置５０に設けられてもよいし、端末装置５０とは別に設けられてもよい。後者の場合、端末装置５０は、無線又は有線の通信などにより撮像装置から撮像画像を取得する。
【００１４】
支援装置１０は、既設商品の撮像画像から既設商品の品番を特定し、その品番の商品の情報を情報提供サーバ２から取得する。また、既設商品が設置された空間の撮像画像から空間の情報を取得する。支援装置１０は、既設商品の情報と、空間の情報から、交換商品の設置条件を取得する。例えば、既設商品の情報から、既設商品が設置された空間において既設商品が使用している給水や排水などの設備の位置、種類、形状などを推定する。支援装置１０は、推定された設備をそのまま使用可能であることを交換商品の設置条件としてもよいし、追加部材や工事などにより使用可能となることを交換商品の設置条件としてもよい。例えば、既設商品の一例として本図に示した便器装置４は、汚水を排水するための排水管を使用するが、便器装置４の排水方式は複数あるため、既設商品においていずれの排水方式が採用されているのかを事前に把握する必要がある。
【００１５】
図２及び図３を参照して、便器装置の排水方式について説明する。一般的な便器装置においては、床上排水と床排水のいずれかの排水方式が採用される。
【００１６】
図２は、床上排水方式を採用する便器装置の例を示す。図２（ａ）に示す便器装置４ａは、トイレ室９０内に設置された立管９１に排水するための排水口５ａを後部に備える。図２（ｂ）に示す便器装置４ｂは、便器装置４ｂの後方の壁に設置された排水管９２に排水するための排水口５ｂを後部に備える。図２（ｃ）に示す便器装置４ｃは、便器装置４ｃの側方の壁に設置された排水管９３に排水するための排水口５ｃを後部に備える。床上排水方式の便器装置により使用される排水管の中心位置の、床面からの高さａを「排水高さ」という。
【００１７】
図３は、床排水方式を採用する便器装置の例を示す。図３（ａ）に示す便器装置４ｄは、トイレ室９０の床面に設置された排水管９４に排水するための排水口５ｄを底部に備える。床排水方式の便器装置により使用される排水管の中心位置の、便器装置の後方の壁からの距離ｂを「排水芯（排水心）」という。
【００１８】
住宅などの建築物が施工されるときには、通常、トイレ室９０に設置される便器装置の排水方式に合わせて排水管が設置されるので、施工後に便器装置が交換されていなければ、既設の便器装置の排水高さ又は排水芯から、トイレ室９０の排水管の位置、種類、形状などを推定することができる。したがって、既設の便器装置４の品番を特定して、その品番の商品の情報を取得することにより、トイレ室の排水管の位置、種類、形状などを推定することができる。
【００１９】
既設の便器装置と同じ排水方式を採用し、同じ排水高さ又は排水芯に対応した便器装置は、排水管を移設したり追加の設備を設置したりすることなく、既設の便器装置と交換することが可能である。交換商品の排水芯が既設商品の排水芯とは異なる場合であっても、既設の便器装置よりも排水芯の短い便器装置に交換する場合は、図３（ｂ）に示すように、トイレ室９０の床面に設置された排水管９５の位置と便器装置４ｄの排水口５ｄの位置が重なるように便器装置４ｄを前に出せば、トイレ室９０に設置することができる。ただし、便器装置４ｄを前方に出して設置しても、便器装置４ｄに使用者が着座可能な空間が便器装置４ｄの前方の壁又はドアとの間に残っていることが必要である。図３（ｃ）に示すように、接続管６などの追加部品を使用することにより排水芯の位置を調整可能な可変タイプの便器装置に交換する場合は、排水管９５の位置と排水口５ｅの位置との間の距離が接続管６の設置により調整可能な範囲であれば、排水管を移設する工事を施工することなく、既設の便器装置と交換することが可能である。
【００２０】
図１に戻り、情報提供サーバ２は、住宅などの建築物に設置可能な便器装置、キッチン、風呂、洗面台などの商品の情報を提供する。支援装置１０と情報提供サーバ２とは、インターネットなどの通信網３を介して接続され、ＨＴＴＰ（Hypertext Transfer Protocol）などの通信プロトコルを使用してデータを送受信してもよい。情報提供サーバ２は、ウェブサーバとして実装されてもよい。なお、支援装置１０もウェブサーバとして実装されてもよく、この場合、端末装置５０は、ブラウザを使用して支援装置１０に接続し、支援装置１０が提供する機能を享受してもよい。
【００２１】
図４は、情報提供サーバ２に保持される商品情報データベースの内部データの例を示す。本図は、便器装置の情報を格納するデータベースの例を示す。商品情報データベースは、商品の品番、形状データファイル名、排水種別、排水高さ、排水芯、サイズ、最小設置空間、設置位置、価格、色などの外観の特徴量などの情報を格納する。最小設置空間は、便器装置を設置可能な最小のトイレ室の幅及び奥行きを表す。設置位置は、便器装置をトイレ室に設置する際の標準的な設置位置を、便器装置の後方の壁からの距離で表す。サイズや色などの商品の外観の特徴を表す情報は、既設商品の撮像画像から既設商品の品番を特定するために使用される。排水種別、排水高さ、排水芯、サイズ、最小設置空間、設置位置などの情報は、既設商品が設置された空間に商品を設置可能か否かを判定するために使用される。設置位置は、形状データに紐付けされており、交換商品を既設商品に代えて設置した場合の画像を生成するために使用される。商品情報データベースの一部又は全部が支援装置１０又は端末装置５０に保持されてもよい。
【００２２】
図５及び図６は、実施の形態に係る支援システム１において実行される支援方法の手順を示すシーケンス図である。以下の説明において、支援装置１０及び端末装置５０の各構成及び機能に付した符号は、図７及び図８に示す支援装置１０及び端末装置５０のハードウェア構成図において各構成及び機能に付した符号に対応する。
【００２３】
ステップＳ１０において、ユーザは、端末装置５０に備えられた撮像装置６０を使用して、既設商品の画像を撮像する。このとき、既設商品が設置された空間の幅、奥行き、高さなどの情報を支援装置１０が取得できるようにするために、既設商品が設置された空間も撮像することが望ましい。支援装置１０が商品を特定したり、空間の情報を取得したりしやすくするために、異なる複数の視点から既設商品及び空間の画像を撮像することが望ましい。ステップＳ１２において、端末装置５０は、撮像画像送信機能６１により、商品の撮像画像を支援装置１０へ送信し、支援装置１０は、撮像画像取得機能２１により、端末装置５０から商品の撮像画像を取得する。
【００２４】
ステップＳ１４において、支援装置１０は、空間情報取得機能２２により、端末装置５０から取得した撮像画像に基づいて、既設商品が設置された空間の情報を取得する。支援装置１０は、空間の床面、壁面、天井などを自動的に検出し、検出結果に基づいて空間の形状に関する情報を算出してもよい。便器装置を交換する場合は、とくに、床面の幅及び奥行きを算出する。測距機能を有する撮像装置６０により撮像された、距離情報を含む撮像画像を取得した場合は、支援装置１０は、空間の情報を三次元形状データとして取得してもよい。また、複数の視点からの撮像画像を取得し、複視点の画像から三次元形状を再現するＳｆＭ（Structure from Motion）により三次元形状データを取得してもよい。これにより、ユーザは、撮像装置６０により既設商品が設置された空間を撮像するだけで、空間の必要測定箇所を自動的に認識することができるので、狭く汚れやすい場所に手を伸ばして実測する手間を省くことができる。
【００２５】
ステップＳ１６において、支援装置１０は、商品特定機能２３により、既設商品の撮像画像に基づいて、既設商品の品番を特定する。これにより、ユーザは、撮像装置６０により既設商品を撮像するだけで、既設商品の品番を特定し、商品の交換に必要な情報を得ることができるので、膨大な商品写真の中から既設商品の写真を探し出して品番を特定する手間を省くことができる。支援装置１０は、既設商品に表示された品番、製品名、製造番号などの識別情報を、既設商品の撮像画像から文字認識技術を利用して読み取ってもよい。撮像画像に識別情報が撮像されていない場合、支援装置１０は、識別情報が表示された位置を撮像するように端末装置５０に指示してもよい。識別情報の表示位置は、支援装置１０が端末装置５０に送信し、端末装置５０が識別情報表示位置取得機能６２によりユーザに提示してもよい。一般に、識別情報が表示される位置は、商品又は商品群の種類、商品の製造者又は販売者などに応じて定まっているので、支援装置１０は、撮像画像に撮像されている既設商品の形状、色、大きさ、ロゴなどに基づいて商品又は商品群の種類や商品の製造者又は販売者などの情報を特定し、特定された情報に基づいて識別情報の表示位置を特定してもよい。商品又は商品群の種類、商品の製造者又は販売者などの情報と、識別情報の表示位置との対応関係は、情報提供サーバ２に保持されてもよいし、支援装置１０に保持されてもよい。支援装置１０は、撮像画像から既設商品の特徴量を検出し、検出された特徴量に基づいて、情報提供サーバ２に保持された商品情報データベースを検索することにより、既設商品の品番を特定してもよい。例えば、支援装置１０は、輪郭検出技術などを用いて商品が撮像されている領域を抽出し、抽出された商品の画像から、商品の種類、色、サイズ、形状などを検出してもよい。支援装置１０は、機械学習により学習されたアルゴリズムを用いて商品を特定してもよい。例えば、画像データを入力層とし、品番を出力層とするニューラルネットワークを構築し、商品の画像データと商品の品番との組を学習データとして中間層の重み付けを学習させてもよい。これにより、膨大な量の商品の情報を網羅的に学習させることができるので、より高い精度で商品の品番を特定することができる。
【００２６】
ステップＳ１８において、支援装置１０は、設備情報取得機能２４により、既設商品の撮像画像、既設商品の情報、既設商品が設置された空間の情報などに基づいて、商品により使用される設備の情報を取得する。商品により使用される設備は、例えば、商品に給水するための設備、商品から排水するための設備、又は商品に給電するための設備などである。便器装置を交換する場合は、支援装置１０は、商品特定機能２３により特定された既設商品の品番に基づいて、情報提供サーバ２により提供される商品情報データベースを参照し、既設商品の排水方式、排水高さ、排水芯などの情報を取得して、トイレ室に設置された排水管の情報を推定する。
【００２７】
ステップＳ２０において、支援装置１０は、空間情報取得機能２２により取得した空間に関する情報と、商品特定機能２３により特定した既設商品の品番と、設備情報取得機能２４により取得した設備に関する情報を端末装置５０へ送信する。
【００２８】
ステップＳ２２において、端末装置５０は、商品情報取得機能６３により、既設商品の品番、空間に関する情報、及び設備に関する情報を支援装置１０から取得し、取得した情報をユーザに提示する。これにより、ユーザは、既設商品の品番が正しく特定されたか否か、及び既設商品が設置された空間や設備が正しく認識されたか否かを確認することができる。
【００２９】
ステップＳ２４において、端末装置５０は、候補条件送信機能６４により、ユーザから交換商品に関する条件を受け付ける。条件は、ユーザが交換を希望する特定の商品の情報であってもよいし、交換商品の価格、機能、サイズ、色、工事の要否、納期などに関する条件であってもよい。ステップＳ２６において、端末装置５０は、候補条件送信機能６４によりユーザから受け付けた条件を支援装置１０へ送信する。
【００３０】
ステップＳ２８において、支援装置１０は、条件取得機能２５により、端末装置５０から交換商品に関する条件を取得し、交換可否判定機能２６により、商品特定機能２３により特定された既設商品の情報、空間情報取得機能２２により取得された空間に関する情報、設備情報取得機能２４により取得された設備に関する情報などに基づいて、既設商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する。支援装置１０は、端末装置５０から問い合わせを受けた特定の交換商品が既設商品と交換可能であるか否かを判定してもよい。この場合、支援装置１０は、交換可否判定機能２６による判定結果を端末装置５０に送信する。端末装置５０は、判定結果取得機能６５により、支援装置１０から判定結果を取得し、取得した判定結果をユーザに提示する。
【００３１】
ステップＳ３０において、支援装置１０は、候補抽出機能２７により、情報提供サーバ２が提供する商品情報データベースに保持された複数の商品の中から、既設商品と交換可能な交換商品の候補を抽出する。支援装置１０は、条件取得機能２５により端末装置５０から取得した候補の条件に合致する候補を抽出する。ステップＳ３２において、支援装置１０は、候補抽出機能２７により抽出された候補の情報を端末装置５０へ送信する。
【００３２】
ステップＳ３４において、端末装置５０は、候補情報取得機能６６により、支援装置１０から交換商品の候補に関する情報を取得し、取得した候補の情報をユーザに提示する。候補の提示要否や提示順序は、支援装置１０の候補抽出機能２７により決定されてもよいし、端末装置５０の候補情報取得機能６６により決定されてもよい。
【００３３】
ステップＳ４０において、端末装置５０は、交換商品選択機能６７により、ユーザに提示された候補の中からＡＲ画像を生成する候補の選択指示をユーザから受け付ける。ステップＳ４２において、端末装置５０は、交換商品選択機能６７により受け付けた交換商品選択情報を支援装置１０へ送信する。
【００３４】
ステップＳ４４において、支援装置１０は、ＡＲ画像生成機能２８により、既設商品の一部又は全部を交換商品の候補と交換した場合の空間の拡張現実（ＡＲ）画像を生成する。支援装置１０は、ＡＲ画像を生成する候補の選択情報を端末装置５０から取得し、選択された候補の画像を既設商品の撮像画像に重畳したＡＲ画像を生成する。支援装置１０は、候補の商品の情報又は設備の情報に基づいて、候補を空間に設置する位置を特定し、特定された位置に候補が設置された場合の空間のＡＲ画像を生成する。支援装置１０は、候補の商品の排水方式、排水高さ、排水芯などの情報を情報提供サーバ２から取得し、候補の商品の排水口の位置とトイレ室の排水管の位置に応じて候補の商品の設置位置を特定してもよい。支援装置１０は、候補の三次元形状データと、候補の空間における設置位置を示す位置データとを情報提供サーバ２から取得し、既設商品の撮像画像に合わせて候補の三次元形状データの縮尺を調整し、位置データにより示される設置位置に候補の三次元形状データを配置し、既設商品の撮像画像から推定される視点位置及び視線方向を設定してレンダリングした画像を既設商品の撮像画像に重畳することにより、候補が設置位置に設置された場合の空間のＡＲ画像を生成してもよい。前述したように、トイレ室の三次元形状データが得られている場合は、設置位置に候補の商品が設置されたトイレ室の三次元形状データを、任意の視点位置及び視線方向を設定してレンダリングすることにより、任意の方向から視点位置から見た画像を生成することができる。ステップＳ４６において、支援装置１０は、ＡＲ画像生成機能２８により生成されたＡＲ画像を端末装置５０へ送信する。
【００３５】
ステップＳ４８において、端末装置５０は、ＡＲ画像取得機能６８により、支援装置１０により生成されたＡＲ画像を取得し、ユーザに提示する。これにより、ユーザは、既設商品に交換商品を重畳したＡＲ画像を表示させることができるので、実際に交換したときのイメージを明確に想起することができるとともに、交換商品を設置した際の空間の形状、設置物、建具などとの干渉を容易に確認することができる。また、交換商品に交換した後に既設商品の設置跡が露出しまい、床クロス張り替えなどの付加工事が必要なことが多い設備機器を交換する場合は、既設商品と交換商品を重ね合わせた画像を確認することにより、床面の設置跡が露出するか否かを容易に判定することができる。
【００３６】
ステップＳ５０において、端末装置５０は、見積もり要求機能６９により、見積もりの作成を要求する候補の選択をユーザから受け付ける。ステップＳ５２において、端末装置５０は、見積もり要求機能６９により受け付けた候補の見積もり要求を支援装置１０へ送信する。
【００３７】
ステップＳ５４において、支援装置１０は、工事要否判定機能２９により、既設商品を端末装置５０から取得した候補と交換する場合に候補を設置する工事以外の付加的な工事が必要か否かを判定する。支援装置１０は、候補の商品の排水方式、排水高さ、排水芯などの情報を情報提供サーバ２から取得し、既設商品の品番から推定されるトイレ室の設備を参照して、工事の要否を判定する。これにより、必要な工事の費用が反映された、より精確な見積もりを作成することができるので、ユーザの利便性を向上させることができる。また、ユーザは工事の要否も考慮して交換商品を選択することができる。
【００３８】
ステップＳ５６において、支援装置１０は、見積もり作成機能３０により、既設商品の一部又は全部を交換商品の候補と交換する場合の費用の見積もりを作成する。支援装置１０は、候補の価格及び設置工事費を情報提供サーバ２から取得するとともに、工事要否判定機能２９により付加的な工事が必要であると判定された場合は、付加的な工事に要する費用を算出して、見積もりを作成する。ステップＳ５８において、支援装置１０は、見積もり作成機能３０により作成した見積もりを端末装置５０へ送信する。ステップＳ６０において、端末装置５０は、見積もり要求機能６９により、支援装置１０から見積もりを取得し、ユーザに提示する。これにより、ユーザは見積額を迅速に確認して交換商品を決定することができるので、ユーザの利便性を向上させることができる。
【００３９】
ステップＳ６２において、端末装置５０は、発注要求機能７０により、発注を要求する交換商品の選択をユーザから受け付ける。ステップＳ６４において、端末装置５０は、発注要求機能７０により受け付けた交換商品の発注要求を支援装置１０へ送信する。ステップＳ６６において、支援装置１０は、発注機能３１により、端末装置５０から要求された交換商品の発注処理を行う。支援装置１０は、例えば、交換商品を販売する販売業者に交換商品を発注するとともに、交換商品の取り付けを行う業者に取り付け工事を発注する。工事要否判定機能２９により付加的な工事を要すると判定された場合は、支援装置１０は、付加的な工事を合わせて発注する。これにより、特定した品番や測定した寸法を、見積もり・発注の段階で再び入力する手間を省くことができるので、ユーザの利便性を向上させることができる。また、品番情報や寸法情報が交換工事業者や各種サービスに引き継がれることにより、より迅速な商品の交換の流れを実現することができる。
【００４０】
支援装置１０は、ユーザからの指示に応じて、既設商品の撮像画像、候補の条件、生成したＡＲ画像などのデータをメモリ１４に保存しておき、必要に応じてユーザが取り出せるようにしてもよい。保存されたデータは、交換商品の設置などの工事を施工する工務店などに提供されてもよい。例えば、既設商品の撮像画像を保存したユーザが工務店を訪れた際に、工務店の端末に保存されたデータを送信し、仮想的なショールーム体験を提供できるようにしてもよい。
【００４１】
図７は、実施の形態に係る支援装置１０のハードウェア構成を示す。支援装置１０は、制御回路１１、入力インタフェース１２、ディスプレイ１３、メモリ１４、通信インタフェース１５、及びそれらを接続するバス１６を備える。支援装置１０は、サーバ装置であってもよいし、パーソナルコンピューターなどの装置であってもよいし、携帯電話端末、スマートフォン、タブレット端末などの携帯端末であってもよい。
【００４２】
制御回路１１は、実施の形態に係る支援プログラムを実行する。入力インタフェース１２は、支援装置１０の使用者による指示入力を制御回路１１に伝達する。入力インタフェース１２は、マウス、キーボード、タッチパッドなどであってもよい。ディスプレイ１３は、制御回路１１により生成される画面を表示する。ディスプレイ１３は、液晶表示装置、有機ＥＬ表示装置などであってもよい。入力インタフェース１２及びディスプレイ１３は、タッチパネルとして実装されてもよい。
【００４３】
メモリ１４は、制御回路１１により使用されるプログラム、データなどを記憶する。メモリ１４は、半導体メモリ、ハードディスクなどであってもよい。通信インタフェース１５は、他の装置との間の通信を制御する。通信インタフェース１５は、有線又は無線の任意の通信方式により通信を行ってもよい。通信インタフェース１５は、端末装置５０との間で通信を行う。また、通信インタフェース１５は、情報提供サーバ２との間で通信を行い、情報提供サーバ２から提供される情報を受信する。
【００４４】
制御回路１１は、撮像画像取得機能２１、空間情報取得機能２２、商品特定機能２３、設備情報取得機能２４、条件取得機能２５、交換可否判定機能２６、候補抽出機能２７、ＡＲ画像生成機能２８、工事要否判定機能２９、見積もり作成機能３０、及び発注機能３１を実現する。これらの構成は、ハードウエア的には、任意のコンピュータのＣＰＵ、メモリ、その他のＬＳＩなどにより実現され、ソフトウエア的にはメモリにロードされたプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。したがって、これらの機能ブロックがハードウエアのみ、又はハードウエアとソフトウエアの組合せなど、いろいろな形で実現できることは、当業者には理解されるところである。
【００４５】
撮像画像取得機能２１は、ステップＳ１２において、商品の撮像画像のデータを端末装置５０から取得し、メモリ１４に格納する。
【００４６】
空間情報取得機能２２は、ステップＳ１４において、既設商品が設置された空間の撮像画像に基づいて空間の情報を取得する。
【００４７】
商品特定機能２３は、ステップＳ１６において、既設商品の撮像画像に基づいて既設商品の品番を特定する。
【００４８】
設備情報取得機能２４は、ステップＳ１８において、既設商品の撮像画像や、既設商品の情報などに基づいて、商品により使用される設備の情報を取得する。
【００４９】
条件取得機能２５は、ステップＳ２６において、端末装置５０から送信された交換商品の候補の条件を取得する。
【００５０】
交換可否判定機能２６は、ステップＳ２８において、商品、空間、設備の情報などに基づいて、既設商品を交換商品に交換可能か否かを判定する。
【００５１】
候補抽出機能２７は、ステップＳ３０において、既設商品と交換可能な交換商品の候補を抽出する。
【００５２】
ＡＲ画像生成機能２８は、ステップＳ４４において、既設商品を交換商品の候補に交換した場合のＡＲ画像を生成する。
【００５３】
工事要否判定機能２９は、ステップＳ５４において、既設商品を交換商品の候補と交換する場合に候補を設置する工事以外の付加的な工事が必要か否かを判定する。
【００５４】
見積もり作成機能３０は、ステップＳ５６において、既設商品を交換商品と交換する場合の費用の見積もりを作成する。
【００５５】
発注機能３１は、ステップＳ６６において、既設商品を交換商品と交換するための発注処理を行う。
【００５６】
図８は、実施の形態に係る端末装置５０のハードウェア構成を示す。端末装置５０は、制御回路５１、入力インタフェース５２、ディスプレイ５３、メモリ５４、通信インタフェース５５、撮像装置６０、及びそれらを接続するバス５６を備える。端末装置５０は、パーソナルコンピューターなどの装置であってもよいし、携帯電話端末、スマートフォン、タブレット端末などの携帯端末であってもよい。
【００５７】
制御回路５１は、実施の形態に係る支援プログラムを実行する。入力インタフェース５２は、端末装置５０の使用者による指示入力を制御回路５１に伝達する。入力インタフェース５２は、マウス、キーボード、タッチパッドなどであってもよい。ディスプレイ５３は、制御回路５１により生成される画面を表示する。ディスプレイ５３は、液晶表示装置、有機ＥＬ表示装置などであってもよい。入力インタフェース５２及びディスプレイ５３は、タッチパネルとして実装されてもよい。
【００５８】
メモリ５４は、制御回路５１により使用されるプログラム、データなどを記憶する。メモリ５４は、半導体メモリ、ハードディスクなどであってもよい。通信インタフェース５５は、他の装置との間の通信を制御する。通信インタフェース５５は、有線又は無線の任意の通信方式により通信を行ってもよい。通信インタフェース５５は、支援装置１０との間で通信を行い、撮像装置６０により撮像された画像のデータなどを送信する。
【００５９】
制御回路５１は、撮像画像送信機能６１、識別情報表示位置取得機能６２、商品情報取得機能６３、候補条件送信機能６４、判定結果取得機能６５、候補情報取得機能６６、交換商品選択機能６７、ＡＲ画像取得機能６８、見積もり要求機能６９、発注要求機能７０、及び表示制御機能７１を実現する。これらの構成も、ハードウエアのみ、又はハードウエアとソフトウエアの組合せなど、いろいろな形で実現できる。
【００６０】
撮像画像送信機能６１は、ステップＳ１２において、撮像装置６０から既設商品や既設商品が設置された空間の撮像画像を取得し、支援装置１０へ送信する。
【００６１】
識別情報表示位置取得機能６２は、既設商品に表示された識別情報の位置を支援装置１０から取得し、ディスプレイ５３に表示する。
【００６２】
商品情報取得機能６３は、ステップＳ２２において、既設商品の商品情報を支援装置１０から取得し、ディスプレイ５３に表示する。
【００６３】
候補条件送信機能６４は、ステップＳ２４において、交換商品の候補として提示すべき商品の条件を、ユーザから入力インタフェース５２を介して取得し、ステップＳ２６において、支援装置１０へ送信する。
【００６４】
判定結果取得機能６５は、ステップＳ３４において、特定の交換商品の交換可否の判定結果を支援装置１０から取得し、ディスプレイ５３に表示する。
【００６５】
候補情報取得機能６６は、ステップＳ３４において、交換商品の候補として抽出された商品の情報を支援装置１０から取得し、ディスプレイ５３に表示する。
【００６６】
交換商品選択機能６７は、ステップＳ４０において、支援装置１０から取得された候補の中から、ＡＲ画像を生成する候補の選択指示をユーザから受け付け、ステップＳ４２において、支援装置１０へ送信する。
【００６７】
ＡＲ画像取得機能６８は、ステップＳ４８において、支援装置１０により生成されたＡＲ画像を取得し、ディスプレイ５３に表示する。
【００６８】
見積もり要求機能６９は、ステップＳ５０において、見積もりの作成を要求する候補の選択をユーザから受け付け、ステップＳ５２において、見積もり作成の要求を支援装置１０へ送信する。見積もり要求機能６９は、ステップＳ６０において、支援装置１０により作成された見積もりを取得し、ディスプレイ５３に表示する。
【００６９】
発注要求機能７０は、ステップＳ６２において、発注を要求する交換商品の選択をユーザから受け付け、ステップＳ６４において、発注処理の要求を支援装置１０へ送信する。
【００７０】
表示制御機能７１は、端末装置５０の各機能によるディスプレイ５３への表示を制御する。
【００７１】
図９は、撮像装置により撮像された既設商品の撮像画像の例を示す。ユーザは、トイレ室に設置された便器装置８０を正面側から撮像する。このとき、便器装置８０に表示された識別情報８１が撮像画像に含まれるように、便器装置８０の画像が撮像されるのが望ましい。また、トイレ室の床面の形状を精確に把握するために、床面の全領域がいずれかの撮像画像に含まれるように、複数の撮像画像が撮像されるのが望ましい。
【００７２】
図１０は、端末装置５０のディスプレイ５３に表示される画像の例を示す。支援装置１０は、既設商品の撮像画像に撮像された識別情報８１を読み取ることにより、又は、既設商品の外観の特徴量を算出し、情報提供サーバ２に保持された商品情報データベースから該当する商品を検索することにより、既設商品の品番を特定するとともに、既設商品が設置された空間の画像に基づいて空間の形状を取得する。端末装置５０は、支援装置１０により特定された既設商品の情報を支援装置１０から取得し、取得された既設商品の商品情報８２をディスプレイ５３に表示する。本図の例では、支援装置１０により認識されたトイレ室の床面の幅及び奥行きが合わせてディスプレイ５３に表示されている。
【００７３】
図１１は、端末装置５０のディスプレイ５３に表示される画像の例を示す。支援装置１０により抽出された交換商品の複数の候補の中から、ユーザが候補１を選択すると、支援装置１０は、候補１の交換商品８３を既設商品に代えてトイレ室に設置した場合のＡＲ画像を生成して端末装置５０へ送信する。端末装置５０は、ＡＲ画像を支援装置１０から取得し、取得されたＡＲ画像をディスプレイ５３に表示する。既設商品の撮像画像に交換商品を重畳させて表示することにより、既設商品の接地跡が交換商品により覆われるか否かを確認することができる。既設商品の接地跡が交換商品からはみ出してしまう場合は、必要に応じて床面の工事を検討したり、別の交換商品に変更したりすることができる。
【００７４】
以上、実施の形態に基づき本発明を説明したが、実施の形態は、本発明の原理、応用を示すにすぎない。また、実施の形態には、請求の範囲に規定された本発明の思想を逸脱しない範囲において、多くの変形例や配置の変更が可能である。
【００７５】
上記の実施の形態では、便器装置を交換する場合について主に説明したが、本実施の形態の技術は、建築物に設置された任意の商品を交換する場合にも適用可能である。また、商品の全部を交換する場合だけでなく、商品の一部のみを交換する場合にも適用可能である。例えば、便器装置の便座や局部洗浄装置などを交換する場合に、ユーザが便器装置を撮像して支援装置１０に送信すると、支援装置１０は便器装置の品番を特定し、その便器装置に装着可能な便座や局部洗浄装置などの候補を抽出する。商品の一部のみを交換する場合、既設商品が設置されている空間に、交換商品が設置できないことはあまり想定できないので、空間情報取得機能２２は設けられなくてもよい。
【００７６】
以上の実施形態、変形例により具体化される発明を一般化すると、以下の技術的思想が導かれる。
【００７７】
本発明のある態様の支援システムは、建築物に設置された商品の一部又は全部の交換を支援する支援装置と、商品の画像を撮像するための撮像装置と、支援装置との間で通信する端末装置と、を備える。支援装置は、撮像装置により撮像された商品の画像を端末装置から取得する撮像画像取得部と、取得された商品の画像に基づいて、当該画像が表す商品を特定する商品特定部と、特定された商品の情報に基づいて、商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部と、を備える。端末装置は、交換可否判定部による判定結果を支援装置から取得して提示する判定結果取得部とを備える。この態様によると、商品の交換を検討している使用者の利便性を向上させることができる。
【００７８】
本発明の別の態様の支援プログラムは、コンピュータを、建築物に設置された商品の撮像画像を取得する撮像画像取得部、取得された商品の撮像画像に基づいて、当該撮像画像が表す商品を特定する商品特定部、特定された商品の情報に基づいて、商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定する交換可否判定部、として機能させる。この態様によると、商品の交換を検討している使用者の利便性を向上させることができる。
【００７９】
この支援プログラムは、コンピュータを、撮像画像に基づいて商品が設置された空間に関する情報を取得する空間情報取得部として更に機能させてもよく、交換可否判定部は、空間に関する情報に更に基づいて、商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定してもよい。この態様によると、より的確に交換の可否を判定することができるので、使用者の利便性を更に向上させることができる。
【００８０】
この支援プログラムは、コンピュータを、撮像画像又は商品の情報に基づいて、空間に設置された、商品により使用される設備の情報を取得する設備情報取得部として更に機能させてもよく、交換可否判定部は、設備の情報に更に基づいて、商品の一部又は全部を別の商品の一部又は全部に交換可能か否かを判定してもよい。この態様によると、より的確に交換の可否を判定することができるので、使用者の利便性を向上させることができる。
【００８１】
設備は、商品に給水するための設備、商品から排水するための設備、又は商品に給電するための設備を含んでもよい。この態様によると、より的確に交換の可否を判定することができるので、使用者の利便性を向上させることができる。
【００８２】
商品特定部は、商品に表示された識別情報を撮像画像から取得し、識別情報に基づいて商品を特定してもよい。この態様によると、より的確に交換の可否を判定することができるので、使用者の利便性を向上させることができる。
【００８３】
商品特定部は、識別情報の表示位置を示す情報を提示してもよい。この態様によると、識別情報が表示された位置を使用者が撮像することができるので、より的確に交換の可否を判定することができる。これにより、使用者の利便性を向上させることができる。
【００８４】
商品特定部は、特定された商品の情報を提示してもよい。この態様によると、使用者が商品の情報を確認することができるので、より的確に交換の可否を判定することができる。これにより、使用者の利便性を向上させることができる。
【００８５】
この支援プログラムは、コンピュータを、複数の商品の中から、商品の一部又は全部と交換可能な商品の候補を抽出する候補抽出部として更に機能させてもよい。この態様によると、交換可能な商品の候補を自動的に抽出することができるので、使用者の利便性を向上させることができる。
【００８６】
この支援プログラムは、コンピュータを、候補の条件を取得する条件取得部として更に機能させてもよく、候補抽出部は、条件に合致する候補を抽出してもよい。この態様によると、条件に合致する交換商品の候補を自動的に抽出することができるので、使用者の利便性を向上させることができる。
【００８７】
この支援プログラムは、コンピュータを、前記候補の情報又は前記設備の情報に基づいて、前記候補を前記空間に設置する位置を特定し、特定された位置に前記候補が設置された場合の空間の拡張現実画像を生成する拡張現実画像生成部として更に機能させてもよい。この態様によると、交換後のイメージを明確に想起させることができる。
【００８８】
拡張現実画像生成部は、候補の三次元形状データと、候補の空間における設置位置を示す位置データとを取得し、位置データにより示される設置位置に候補の三次元形状データを配置し、撮像画像から推定される視点位置及び視線方向を設定してレンダリングした画像を撮像画像に重畳することにより、候補が設置位置に設置された場合の空間の拡張現実画像を生成してもよい。この態様によると、より精確に交換後の設置状況を表示することができる。
【００８９】
この支援プログラムは、コンピュータを、商品の一部又は全部を候補と交換する場合に前記候補を設置する工事以外の付加的な工事が必要か否かを判定する工事要否判定部として更に機能させてもよい。この態様によると、使用者は、工事の要否を更に考慮して交換商品を選択することができる。
【００９０】
この支援プログラムは、コンピュータを、商品の一部又は全部を候補と交換する場合の費用の見積もりを作成する見積もり作成部として更に機能させてもよい。この態様によると、使用者の利便性を更に向上させることができる。
【００９１】
この支援プログラムは、コンピュータを、商品の一部又は全部を候補と交換するための発注処理を行う発注部として更に機能させてもよい。この態様によると、使用者の利便性を更に向上させることができる。
【００９２】
本発明の更に別の態様の支援プログラムは、コンピュータを、建築物に設置された商品を撮像装置により撮像した画像を、商品の一部又は全部の別の商品の一部又は全部への交換を支援する支援装置へ送信する撮像画像送信部、商品の撮像画像に基づいて支援装置により生成された、商品の一部又は全部を別の商品の一部又は全部へ交換可能か否かの判定結果を支援装置から取得する判定結果取得部、として機能させる。この態様によると、商品の交換を検討している使用者の利便性を向上させることができる。
【符号の説明】
【００９３】
１  支援システム、２  情報提供サーバ、３  通信網、４  便器装置、５  排水口、６  接続管、１０  支援装置、１１  制御回路、２１  撮像画像取得機能、２２  空間情報取得機能、２３  商品特定機能、２４  設備情報取得機能、２５  条件取得機能、２６  交換可否判定機能、２７  候補抽出機能、２８  ＡＲ画像生成機能、２９  工事要否判定機能、３０  見積もり作成機能、３１  発注機能、５０  端末装置、５１  制御回路、６０  撮像装置、６１  撮像画像送信機能、６２  識別情報表示位置取得機能、６３  商品情報取得機能、６４  候補条件送信機能、６５  判定結果取得機能、６６  候補情報取得機能、６７  交換商品選択機能、６８  ＡＲ画像取得機能、６９  見積もり要求機能、７０  発注要求機能、７１  表示制御機能。
【図１】
2020119142.tif 000003
【図２】
2020119142.tif 000004
【図３】
2020119142.tif 000005
【図４】
2020119142.tif 000006
【図５】
2020119142.tif 000007
【図６】
2020119142.tif 000008
【図７】
2020119142.tif 000009
【図８】
2020119142.tif 000010
【図９】
2020119142.tif 000011
【図１０】
2020119142.tif 000012
【図１１】
2020119142.tif 000013