(57)【要約】人の３次元仮想表現を作成する方法であって、（ａ）撮像キャビン内の基準位置に位置する人の複数の画像を取得するステップと、（ｂ）写真測量によって、実際の人の粗いメッシュを計算するステップとを含む。複数の画像を取得するステップは、アクセスドアが設けられた閉じた卵形キャビンの内面にわたって分散された画像センサから来る一連の少なくとも２４個の同時の画像を記録することからなり、画像センサは、キャビンの対称軸に対して一様な形で分散される。
2020505712.tif 000002
【特許請求の範囲】
【請求項１】
人の３次元仮想表現を作成する方法であって、
（ａ）撮像キャビン内の基準位置に位置する人の複数の画像を取得するステップと、
（ｂ）写真測量によって、前記実際の人の粗いメッシュを計算するステップとを含む方法において、
前記複数の画像を取得する前記ステップは、アクセスドアが設けられた閉じた卵形キャビンの内面にわたって分散された画像センサから来る一連の少なくとも８０個の同時の画像を記録することにあり、前記画像センサは、前記キャビンの対称軸に対して一様な形で分散されることを特徴とする方法。
【請求項２】
前記画像センサの光電性表面は、２５×２５ミリメートル未満のサイズを有することを特徴とする請求項１に記載の３次元仮想表現を作成する方法。
【請求項３】
前記キャビンの前記内面は反復しないコントラストパターンを有し、前記方法は、人がいない前記キャビンの画像のセッションを取得することにある少なくとも１つの較正のステップを含み、写真測量の前記ステップは、前記キャビン内に人がいる状態での前記取得された画像と、同じ画像センサに対応する較正画像とを減算することによって、ＩＤ画像を計算するステップを含むことを特徴とする請求項１または請求項２に記載の３次元仮想表現を作成する方法。
【請求項４】
写真測量の前記ステップは、短く切り取られた画像ＩＤiのそれぞれにおいて、特性点ＰＣijを抽出することによって３Ｄ点の雲状のものを作成するステップと、前記特性点ＰＣijのそれぞれの座標を記録するステップと、このようにして識別された前記特性点ＰＣijから前記粗いメッシュを構築するステップと、包絡面テクスチャを計算するステップとを含むことを特徴とする請求項１乃至３のいずれか一項に記載の３次元仮想表現を作成する方法。
【請求項５】
前記３Ｄメッシュおよびテクスチャリングは、追加の平滑化処理を受けることを特徴とする請求項１乃至４のいずれか一項に記載の人の３次元仮想表現を作成する方法。
【請求項６】
前記粗いメッシュをモデルメッシュＭＭとマージすることであって、前記モデルメッシュは、前記モデルメッシュＭＭ上で前に識別された特異点に対応する前記粗いメッシュ上で決定されることになる重要な部分に対応する多角形のサブセットに対応する関心のある領域のグループに体系化される、マージすること、次いで局所的に各特異点を前記粗いメッシュＭＢＩ上の関連付けられた前記特異点の位置に一致させるように前記モデルＭＭの前記メッシュを変形することにある処理を適用すること、および前記モデルＭＭの前記メッシュの前記特性点のそれぞれの位置を再計算することにある、追加のステップを含むことを特徴とする請求項１乃至５のいずれか一項に記載の人の３次元仮想表現を作成する方法。
【請求項７】
デジタルラベルを特性化規則に関連付けるテーブルの形で、関心のある点のライブラリに記録された要素の認識のための処理することによって、前記粗いメッシュ上の前記人体の複数の特性点の自動的識別を含んだ、前記粗いメッシュを標準化されたメッシュに変換するステップを含むことを特徴とする請求項１乃至６のいずれか一項に記載の人の３次元仮想表現を作成する方法。
【請求項８】
アクセスドアを有する閉じた構造からなる画像撮影キャビンであって、前記キャビンの内側に向かって配向された複数の画像センサを備える撮影キャビンにおいて、卵形の内側形状を有し、前記卵形形状は、前記キャビンの対称軸に対して一様な形で前記卵形形状の前記内面にわたって分散された少なくとも８０個の画像センサを有することを特徴とする画像撮影キャビン。
【請求項９】
前記画像センサは、２５×２５ミリメートルより小さなセンサを備えることを特徴とする請求項８に記載の画像撮影キャビン。
【請求項１０】
２ｍと５ｍの間、好ましくは２ｍ未満の最大中央断面を有することを特徴とする請求項８または請求項９に記載の画像撮影キャビン。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は仮想現実の分野に関し、より詳細には、人間の一連の画像から、および写真測量技法を用いて３次元フォトリアリスティックデジタル表現を作成することに関する。
【０００２】
３Ｄ身体スキャニング（３Ｄ身体スキャン、または全３Ｄスキャンとも呼ばれる）は、ときには３Ｄ身体スキャナと呼ばれる機器を用いて、被写体の身体をスキャンすることを可能にする。
【０００３】
写真が人の画像を２次元で捕捉するように、３Ｄスキャナは身体の形状を３次元で記録する。結果は、次いでコンピュータに記憶され、またはコンピュータ上で修正され、場合によっては生産のために３Ｄプリンタに送られることができる３Ｄファイル（３Ｄモデルとも呼ばれる）である。
【０００４】
人体の３Ｄスキャニングを主として用いる領域は、静止のまたは動画化されたアバターを作成するための、または例えば人の現実感のあるフィギュアを製造するための、ゲーミング、医学、およびファッションである。
【０００５】
３Ｄ身体スキャニングのために主として２つの技術が用いられ、従来の写真からの３Ｄボリュームの再構築を用いる写真測量、ならびに投影された光の変形に基づき、それにより距離、および従って身体の点の位置を計算することを可能にする構造化された光である。
【０００６】
本発明は、写真測量によって処理を実装する、ソリューションの第１のファミリの一部である。
【背景技術】
【０００７】
人体の３次元表現を取得するためのソリューションを述べている特許文献１は、最新技術において知られている。撮影のために用いられる画像センサは、身体に取り付けられ、点および線などの簡単な幾何構造を身体に投影する、追加の光パターン投影機によって補完される。ファインダ画像なしに目で見ることができるこれらの構造は、写真測量評価のために必要な多くの部分的に重なる個々の画像を撮るときに、画像センサの手動による配向および身体からの正しい距離での画像センサの位置決めを容易にする。この手動による予め決定された配向は、画像処理プロセスを用いた個々の画像のペアへの写真測量マークの自動的割り当てを容易にし、この自動の割り当てがより安全に実行されることを可能にする。本発明の好ましい実施形態において、投影機は実際の撮影の間はスイッチオフされる。
【０００８】
基部と、予め決定された構成に配置された、基部に接続されることができる複数の画像センサとを備えた、患者の身体の皮膚の少なくとも１つの画像を捕捉するための皮膚表面撮像システムを述べている特許文献２も知られている。各画像センサは、身体の予め決定された領域の画像を捕捉する。これらのセンサは、一連の画像をもたらす。処理ユニットは以下を行うように画像センサと通信する：
（ｉ）画像センサから来る画像のセットを集める、
（ｉｉ）画像のセットを分析する、（ｉｉｉ）患者の身体皮膚に関連付けられた個人データを記録する。
【０００９】
特許文献３は、衣服の１つまたは複数の画像と組み合わされた、少数の測定値および単一の写真から作成される、人の仮想身体モデルを作成するための方法を述べている。仮想身体モデルは、ユーザの身体の現実感のある表現をもたらし、衣服、ヘヤスタイル、メークアップ、および／または他のアクセサリのフォトリアリスティック調整視覚化を視覚化するために用いられる。仮想衣服は、いくつかの角度から撮られた実際の衣服の写真に基づく層から作成される。加えて、仮想身体モデルは、例えばチャネル、友人、およびファッションエンティティからの、衣服、メークアップ、および髪に対する手動によるまたは自動の提案の多くの実施形態において用いられる。仮想身体モデルは、例えば視覚化およびスタイルコメントのために共有されることができる。加えて、それはまた他のユーザにフィットする衣服を購入することを可能にするために用いられ、これはギフトその他として適切となり得る。実装形態はまた、売手の身体形状およびサイズがユーザのものと同様であることを知って、衣服が購入されることができる、ピアツーピアオンライン販売において用いられることができる。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】欧州特許第１３２２９１１号明細書
【特許文献２】米国特許出願公開第２０１２２０６５８７号明細書
【特許文献３】国際公開第２０１２１１０８２８号パンフレット
【発明の概要】
【発明が解決しようとする課題】
【００１１】
従来技術のソリューションの欠点
【００１２】
従来技術のソリューションは十分に満足できるものではない。
【００１３】
いくつかのソリューションは、被写体の周りを移動する移動型画像センサを用いる。画像取得段階の間に被写体が移動する場合、写真測量処理は乱される。
【００１４】
他のソリューションはマーカまたは構造化された領域の使用を必要とし、これは被写体準備ステップを必要とし、フォトリアリスティック画像が取得されることが可能とならない。
【００１５】
さらに他のソリューションは画像センサからの画像の取得をもたらすが、自然光における単一の取得を通して、満足できる品質をもたらさない。
【課題を解決するための手段】
【００１６】
このような欠点を是正するために、本発明はその最も広い意味において、人の３次元仮想表現を作成する方法に関し、
（ａ）撮像キャビン内の基準位置に位置する人の複数の画像を取得するステップと、
（ｂ）写真測量によって、前記実際の人の粗いメッシュを計算するステップと
を含み、複数の画像を取得する前記ステップは、アクセスドアが設けられた閉じた卵形キャビンの内面にわたって分散された画像センサから来る一連の少なくとも８０個の同時の画像、好ましくは少なくとも１００個の同時の画像を記録することにあり、前記画像センサは、前記キャビンの対称軸に対して一様な形で分散されることを特徴とする。
【００１７】
この特許の目的のために、「画像センサ」とは自然光において画像を撮影するための光学系を備える静止画像センサを意味する。
【００１８】
好ましい「基準位置」とは、人が好ましくはまっすぐな姿勢を有し、腕は身体からわずかに離し、指はわずかに広げ、足も予め規定された距離に互いに離し（有利にはキャビンの床上のマークを用いて）、目は水平に向けられ、中間的な表情を有する位置となる。
【００１９】
最小数、すなわち少なくとも８０個のセンサを用いて、卵形キャビン内の基準位置に位置する人の画像の同時取得をもたらすことによって、キャビン内に位置する人の正確な、および全部の再構築された人の画像が生成されることができる。
【００２０】
基準位置における人の画像の再構築の正確さに寄与することに加えて、キャビンの卵形はまた、彼／彼女の身長および体格に関わらず、人に直接向けられる、センサの最適位置決めおよび配向を確実にする。画像センサの光電性表面は、２５×２５ミリメートル未満であることが好ましい。このような寸法の少なくとも８０個のセンサを用いることは、キャビンの容積を最適化し、従ってそれの最適なサイズを達成するという利点を有する。
【００２１】
好ましくは、前記キャビンの内面は反復しないコントラストパターンを有し、方法は、人がいないキャビンの画像のセッションを取得することにある少なくとも１つの較正のステップを含み、写真測量のステップは、キャビン内に人がいる状態での取得された画像と、同じ画像センサに対応する較正画像とを減算することによって、ＩＤ画像を計算するステップを含む。
【００２２】
有利には、写真測量のステップは、短く切り取られた画像ＩＤiのそれぞれにおいて、特性点ＰＣijを抽出することによって３Ｄ点の雲状のものを作成するステップと、特性点ＰＣijのそれぞれの座標を記録するステップと、このようにして識別された特性点ＰＣijから粗いメッシュを構築するステップと、包絡面テクスチャを計算するステップとを含む。
【００２３】
代替的ソリューションによれば、３Ｄメッシュおよびテクスチャリングは、追加の平滑化処理を受ける。
【００２４】
別の代替的ソリューションよれば、方法は、前記粗いメッシュをモデルメッシュＭＭとマージすることであって、モデルメッシュは、モデルメッシュＭＭ上で前に識別された特異点に対応する粗いメッシュ上で決定されることになる重要な部分に対応する多角形のサブセットに対応する関心のある領域のグループに体系化される、マージすること、次いで局所的に各特異点を粗いメッシュＭＢＩ上の関連付けられた特異点の位置に一致させるようにモデルＭＭのメッシュを変形することにある処理を適用すること、およびモデルＭＭのメッシュの特性点のそれぞれの位置を再計算することにある、追加のステップを含む。
【００２５】
有利には、前記粗いメッシュを標準化されたメッシュに変換する前記ステップは、デジタルラベルを特性化規則に関連付けるテーブルの形で、関心のある点のライブラリに記録された要素の認識のための処理することによって、前記粗いメッシュ上の人体の複数の特性点の自動的識別を含む。
【００２６】
本発明はまた、アクセスドアを有する閉じた構造からなる画像撮影キャビンに関し、キャビンの内側に向かって配向された複数の画像センサを備え、前記キャビンは卵形の内側形状を有し、卵形形状は、キャビンの対称軸に対して一様な形で前記卵形形状の内面にわたって分散された少なくとも８０個の画像センサ、好ましくは１００個の画像センサを有することを特徴とする。
【００２７】
好ましくはキャビンは、２ｍと５ｍの間、好ましくは２ｍ未満の最大中央断面を有する。
【００２８】
本発明は、添付の図面を参照しながら、非限定的な例示的実施形態に関する以下のその詳細な説明を読むことによって、より良く理解されるであろう。
【図面の簡単な説明】
【００２９】
【図１】写真測量による取得のためのキャビンの概略図である。
【図２】本発明を実装するためのシステムのハードウェアアーキテクチャの概略図である。
【発明を実施するための形態】
【００３０】
人の粗いメッシュを取得するためのシステム
本発明の実装形態は、実際の人の画像を取得する第１のステップが関わる。
【００３１】
この目的のために、キャビンは、人を取り囲む概して卵形の包絡面上に位置する画像センサ２０のグループを含む。
【００３２】
キャビンの高さは約２５０センチメートルであり、最大内径は約２００センチメートルである。
【００３３】
キャビンは、円形の断面を有する卵形壁面１と、ドア２を通した開口とからなり、半球形キャップによってその上側部分３において延長され、フロア４によってその下側部分において閉じられる。
【００３４】
キャビンは従って、回転の表面を画定し、それを生成するものは、それの画像シーケンスが作成される人を取り囲む曲線状の断面を有する。
【００３５】
この表面は、撮影視野の重なりを形成するように均一に分散された画像センサ２０を支持する。画像センサ２０は、支持体および人に対して静止する。
【００３６】
述べられる例において、キャビンは、約１０個の横断する階層６から１６に分割された、２６０個の画像センサ２０を有する。２つの階層の間の間隔は変化し、中間の階層１１から１３に対する２つの連続する階層の間の間隔は、上側の６から１０、または下側の１３から１６階層より大きくなる。画像センサは、高精細度（８ＭＢ）センサである。
【００３７】
画像センサ２０の数は１００を超えることが好ましく、ドアおよび床に対応する表面以外のキャビンの内面にわたって均一に分散される。
【００３８】
ドア２によって切断された層１０から１６は、ドア２では除いて、ある角度で均一に分散された２０個の画像センサを有する。
【００３９】
階層８および９は、ドアがないことにより、より大きな数、例えば２４個の画像センサ２０を有する。より小さな半径を有する階層６および７は、より小さな数の画像センサ２０を有する。
【００４０】
画像センサ２０は、必ずしも同じ経度上に配列されず、角度分布は階層ごとに変化して、撮影の重なる領域を増加させることを可能にする。
【００４１】
各画像センサ２０は、通信手段と、以下を制御するプログラムを実行するコンピュータとを備えたローカル電子回路に接続される：
−  関連付けられた画像センサの活動化および非活動化
−  任意選択で、取得された画像をローカルメモリに記録すること、および関連付けられた画像センサからの画像をバッファすること
−  口径、感度、ホワイトバランス、解像度、カラーバランス、撮影時間などの画像センサの光学パラメータ。このチェックは、すべての画像センサ２０に共通のサーバからのデータ、ならびに関連付けられた画像センサによって捕捉されたローカルデータに基づく
−  ローカル画像センサに関連付けられた視覚的または可聴の警告の活動化
−  実時間画像またはローカルに記録された画像の、リモートサーバへの送信。
【００４２】
キャビンは専用サーバを有し、これは画像センサのそれぞれのローカルマップと通信する手段を含み、ルータ機能を行い、リモートサーバからのデータに基づいて画像センサ２０を制御する。
【００４３】
キャビンはまた、全方向性および一様な照明をもたらすために、キャビンの内面にわたって分散された光源を有する。
【００４４】
述べられる例において光源は、ドア２の部分を除いて、角度的におよび均一に分散されて、キャビンの経度に従って配置されたＬＥＤ２１、２２の８本のストリップによって作られる。
【００４５】
光源は、任意選択で専用サーバによって制御される。
【００４６】
任意選択で、キャビンの内面は反復しない、かどのある幾何学的コントラストパターンをもつ一様な背景を有し、画像の背景を分析することによって、画像センサの位置が特定されることを可能にする。
【００４７】
任意選択で、キャビンは大きな撮影視野をもつ追加の画像センサを有し、画像取得シーケンスの間に、外部のオペレータに人の位置の画像を送信するために、人が正面から見られることを可能にする。
【００４８】
キャビンはまた、音声指示を放送するために、頭部の周りに角度的に分散されたスピーカ４１、４２を有する。
【００４９】
電子的アーキテクチャ
図２は、電子的アーキテクチャの図をより詳細に示す。
【００５０】
装置は、キャビン内の専用サーバ３１と通信する、中央コンピュータ３０を含む。専用サーバ３１は、キャビン内でローカル電子回路３２から３５とローカルに通信する。ローカル電子回路３２から３５のそれぞれは、例えば、約５メガピクセルの解像度およびｆ／２．８の公称口径、固定焦点距離および４２°Ｈ撮影視野をもつ画像センサ２０を有する。
【００５１】
加えて、装置はネットワーク衝突を防ぐために、キャビン内にネットワークスイッチを含む。
【００５２】
機能的アーキテクチャ
以下の説明は、以下の主要ステップからなる、本発明の例示的実施形態に関する：
−  キャビン内の人の画像を取得し、主要な処理を行うコンピュータに転送すること
−  写真測量
−  フォトリアリスティックボリュームの作成のための第１の平滑化代替物
−  トポロジーを再計算するための第２の代替物
−  アバターの作成。
【００５３】
人がいない空のキャビンの較正は周期的に、キャビンの構造化された表面の画像のシーケンスを取得することによって実行される。この較正は、キャビンの内面の反復しないパターンを分析することによって、画像センサ２０のそれぞれの実際の位置決めを再計算することと、背景領域内の画像センサのそれぞれに対して、および人がいる状態で取得された画像から、人がいない同じ領域の画像を減算することにあるさらなる処理のために記録することとを可能にする。
【００５４】
人の画像の取得
人がキャビン内に位置しているとき、以下の処理のシーケンスが制御される。
【００５５】
視覚的または可聴の警告は、撮影シーケンスが開始したことを人に示し、シーケンス警告の終了までじっとしたままでいるように人に促す。
【００５６】
通常、撮影シーケンスの持続時間は１秒未満である。
【００５７】
任意選択で、３Ｄ深度画像センサなどの赤外線深度センサは、キャビン内の人の位置を制御し、人が正しい位置にあるとき画像取得シーケンスを自動的にトリガし、そうでない場合は、人の位置が名目上の位置に適合していることをセンサが検出するまで、「腕を少し上げるように」または「頭をまっすぐにするように」または「右に向くように」など、位置決めエラーについて人に知らせる音声コマンドをトリガする。
【００５８】
専用サーバ３１はキャビン照明を制御し、人の位置決め段階の間は光レベルを低下させ、次いで画像取得段階の間は光レベルを増加させ、次いで画像取得段階が完了するとすぐに再び光レベルを低下させる。専用サーバ３１は、画像段階の間に人がじっとしたままでいるのを助け、プロセスを監視するために、これらの段階のそれぞれに関連付けられた効果音を同期して制御することができる。
【００５９】
専用サーバ３１は、画像取得段階の間、活動化コマンドをローカル電子回路３２から３５に送信することによってすべての画像センサ２０の同時活動化を制御し、次いで専用サーバ３１またはリモートコンピュータへの、ローカルに記録されたデータの転送を制御する。この転送は同時とする、または使用可能な帯域幅を最適化するように遅延されることができる。
【００６０】
写真測量
写真測量のステップは、画像センサ２０から来るすべてのデジタル画像、例えばキャビン内に位置する人の同時に取得された２６０個のデジタル画像に適用される。
【００６１】
処理は、画像Ｉi（ｉは述べられる例では１と２６０の間である）のそれぞれを前処理する第１のステップを含む：
−  取得された画像Ｉiと、較正段階の間に記録された同じ領域の背景画像ＩＦiを減算することによる短く切り取られた画像ＩＤiの作成、および画像のペア（Ｉi，ＩＤi）を記録すること
−  座標（Ｘi，Ｙi  Ｚi；Ａi  Ｂi  Ｃi，Ｄi）、またはキャビン基準フレーム内の画像センサの座標に対応するＸ，Ｙ，Ｚの計算であって、画像Ｉiのそれぞれに対して、Ａ，Ｂ，Ｃは、キャビン基準フレーム内の画像センサの角度配向（オイラー角）に対応し、Ｄは、角度ＡＢＣによって予め規定された軸上の画像センサの配向に対応する２進パラメータであり、およびこのようにして計算された座標を、画像のペア（Ｉi，ＩＤi）のそれぞれに対して記録する。この計算は、例えば、ＩＧＮのＭｉｃＭａｃ（商標）またはＶｉｓｕａｌＳＦＭ（商標）ソフトウェアを用いて行われる
−  短く切り取られた画像ＩＤiのそれぞれから特性点ＰＣijを抽出し、特性点ＰＣijのそれぞれの座標を記録することによる、３Ｄ点の雲状のものの作成
−  このようにして識別された特性点ＰＣijからの粗いメッシュの構築、および包絡面テクスチャの計算。
【００６２】
このステップの結果は、３Ｄメッシュおよび関連付けられたテクスチャである。
【００６３】
もとの人の粗いメッシュに対応する３ＤメッシュＭＢＩは、共通フォーマット、例えば、３Ｄジオメトリの記述を含んだ交換ファイルフォーマットであるＯＢＪにおいて保存される。
【００６４】
テクスチャはＰＮＧ画像フォーマットで保存される。
【００６５】
フォトリアリスティックボリュームを得るための第１の平滑化代替物
第１の応用例に対して、このようにして計算された３Ｄメッシュおよびテクスチャリングは、追加の平滑化処理を受ける。
【００６６】
この処理は、ゼロメッシュサイズレベルを有する、平滑化されていない３Ｄメッシュにおけるノイズを、特性点ＰＣijのそれぞれに適用される局所的平均計算により解像度を低減することによって、およびノーマルオリエンテーションをこれらの特性点ＰＣijのそれぞれに割り当てて、ＰＣＬ1,mとノーマルＮn,mとの組み合わせとして平滑化されたメッシュを記録することによって、除去することにある。
【００６７】
この処理は、ＡＵＴＯＣＡＤ（商標）などの３Ｄメッシュ修正ソフトウェアを用いて実行される。
【００６８】
この処理の結果は、取得段階の間に画像が取得された人に対応する、フォトリアリスティック３Ｄボリュームである。
【００６９】
包絡面テクスチャは、意図された使用（例えば３Ｄ印刷）に適合された解像度を有する。
【００７０】
処理結果は転送フォーマット、例えばＯＢＪフォーマットで記録される。
【００７１】
第２の代替物：アバタートポロジーの作成の再計算
別の応用例は、写真測量のステップの間に得られる３Ｄメッシュから、３Ｄアバターを作成することにある。
【００７２】
この目的のために、重要な部分に対応する多角形のサブセット、例えば口、指、胸、腕などに対応する多角形のグループに対応する、関心のある領域のグループに体系化された、ＯＢＪフォーマットで記録されたモデルメッシュＭＭが用いられる。各重要なサブグループは識別子に、および場合によってはアバターを作成するときの特別な処理（例えば「着付け」処理）に対応するマーカに関連付けられる。同じ多角形はいくつかのサブグループに属することができる。
【００７３】
任意選択でモデルメッシュＭＭは、変形されたモデルＭＭＤを計算することによって処理されることができ、同じ多角形および識別子のサブセットを保持するが、いくつかの多角形の局所的変形を用いて、例えば標準の男性モデルＭＭから筋肉質の男のモデルＭＭＤを作成する。
【００７４】
粗いメッシュＭＢＩからの選択されたモデルＭＭに対応するアバターを作成するために、リトポロジー計算が行われる。
【００７５】
この計算は、モデルメッシュＭＭの対応する特性点と一致するようになる、粗いメッシュＭＢＩの特性点の識別を必要とする。
【００７６】
この目的のために、モデルメッシュＭＭ上で前に識別された特異点、例えば目尻、口角、指先などが、粗いメッシュ上で決定される。
【００７７】
次に処理が適用され、これはモデルメッシュＭＭを変形して、各特異点を、粗いメッシュＭＢＩ上の関連付けられた特異点の位置と局所的に一致させること、および３Ｄモーフィングソフトウェアによって、モデルメッシュＭＭの特性点のそれぞれの位置を再計算することにある。
【００７８】
この処理の結果は、もとの人のモフォロジーへの、モデルの適合に対応する、ＯＢＪフォーマットで記録されたメッシュＭＭＩである。
【００７９】
このメッシュＭＭＩは、全部の動画骨格を作成するために用いられる。
【００８０】
この骨格はメッシュＭＭＩ、およびデジタル骨格の関節に対応する、メッシュ上の制御点、ならびにこれらの制御点の、骨格の関節点への関連付けから作成される。
【００８１】
次いで上述のサブグループを考慮に入れて、このようにして作成されたアバター上に要素のライブラリから追加の要素（歯、舌、眼窩など）が位置決めされる。
【００８２】
次いで各特性点を、動画化されることになるオブジェクトの皮膚の一部分に関連付けるように、スキニングプロセスが適用されるが、皮膚の所与の部分は正確な重み付けに従っていくつかの骨に関連付けられることができ、この情報は数値ファイルに記録される。
【００８３】
応用例
本発明は、実際の物理的な人の粗いメッシュＭＢＩとマージされた、基準モデルＭＭに基づいて、人の理想的な、より筋肉質および／またはより細身の身体をデザインするためのフィットネスなど、様々な応用例のために３次元フォトリアリスティック表現を作成することを可能にする。この表現は、人の近い将来のアバターに似るように、カスタマイズされた訓練プログラムを行うためにコーチに示されることができる。
【００８４】
フォトリアリスティック表現の周期的取得は、達成された進捗、および目標に到達するために必要な努力をチェックすることを可能にする。
【００８５】
これはユーザが、彼または彼女の身体を「彫刻する」ために、目に見えるおよび測定可能な目標を設定することを可能にする。
【００８６】
応用例はまた、手術後の結果を視覚化し、それを外科医との診察のためのサポートとして用いるように、美容外科の分野に関する。
【００８７】
これは事前に、結果を用いて開業医の前で決定がなされることを可能にする。
【００８８】
別の応用例は、購入前に衣服を仮想的に試着するために、あなたのアバターにデザイナのコレクションを着せて、あなた自身が行進するのを見る、および着用された衣服のすべての細部（サイズ、必要な手直し、色など）を観察するようにズームインする可能性を提供することによる、既製服の分野（購入前のオンライン仮縫い）に関する。
【図１】
2020505712.tif 000003
【図２】
2020505712.tif 000004
【国際調査報告】
2020505712.tif 000005
2020505712.tif 000006
2020505712.tif 000007
2020505712.tif 000008
2020505712.tif 000009
2020505712.tif 000010