(57)【要約】      （修正有）【課題】構築プロセスの様々な段階での航空機の検査をサポートするための改良されたシステムおよび方法を提供する。【解決手段】航空機の検査をサポートするための改良されたシステムは、航空機構築プロセスの複数の段階をキャプチャするように構成された立体記録装置を含む。さらに、１つまたは複数のプロセッサとメモリと航空機構築プロセスの複数の段階に対応する３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するための１つまたは複数のプログラムを備える。システムは航空機構築プロセスの改善されたウォークスルービデオを生成する。改善されたウォークスルービデオは、視差グリッド・オーバレイおよび／またはビデオに統合された熱スキャン・オーバレイを含む。航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて、改善されたウォークスルービデオを分析する。【選択図】図５Ａ
2018041437.tif 000002
【特許請求の範囲】
【請求項１】
航空機構築プロセスの複数の段階をキャプチャするように構成された立体記録装置と、
１つまたは複数のプロセッサと、
メモリと、
前記メモリに格納された１つまたは複数のプログラムであって、前記１つまたは複数のプログラムは、
機体番号により編成された３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するステップであって、３Ｄビデオの前記リポジトリは前記航空機構築プロセスの前記複数の段階に対応する、ステップと、
前記航空機構築プロセスの改善されたウォークスルービデオを生成するステップであって、前記改善されたウォークスルービデオは、
前記ビデオに統合された視差グリッド・オーバレイと、
前記ビデオに統合された熱スキャン・オーバレイと、
のうち１つまたは複数を含む、ステップと、
前記航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて前記改善されたウォークスルービデオを分析するステップと、
のための命令を含む
システム。
【請求項２】
前記後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む、請求項１に記載のシステム。
【請求項３】
前記後処理分析はパターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む、請求項１または２の何れか１項に記載のシステム。
【請求項４】
前記後処理分析はパターンおよび形状を分析して熱勾配準拠を決定するステップを含む、請求項１乃至３の何れか１項に記載のシステム。
【請求項５】
前記システムはさらにリモート処理中初期検査能力を提供するように構成される、請求項１乃至４の何れか１項に記載のシステム。
【請求項６】
位置、間隔、および航空機構造に関する正確な現実の測定値を前記改善されたウォークスルービデオから抽出できるように前記視差グリッド・オーバレイが構成される、請求項１乃至５の何れか１項に記載のシステム。
【請求項７】
前記視差グリッド・オーバレイはオートフォーカスを用いて自動的に決定された複数の視差ラインを含み、
前記複数の視差ラインは１つまたは複数の組の視差ラインとして編成され、
視差ラインの各組は前記視差グリッド・オーバレイ内の別々のビデオ・レイヤとして格納される、
請求項１乃至６の何れか１項に記載のシステム。
【請求項８】
立体記録装置を介して航空機構築プロセスの複数の段階をキャプチャするステップと、
機体番号により編成された３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するステップであって、３Ｄビデオの前記リポジトリは前記航空機構築プロセスの前記複数の段階に対応する、ステップと、
前記航空機構築プロセスの改善されたウォークスルービデオを生成するステップであって、前記改善されたウォークスルービデオは、
前記ビデオに統合された視差グリッド・オーバレイと、
前記ビデオに統合された熱スキャン・オーバレイと、
のうち１つまたは複数を含む、ステップと、
前記航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて前記改善されたウォークスルービデオを分析するステップと、
を含む、方法。
【請求項９】
前記後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む、請求項８に記載の方法。
【請求項１０】
前記後処理分析はパターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む、請求項８または９の何れか１項に記載の方法。
【請求項１１】
前記後処理分析はパターンおよび形状を分析して熱勾配準拠を決定するステップを含む、請求項８乃至１０の何れか１項に記載の方法。
【請求項１２】
前記改善されたウォークスルービデオはリモート処理中初期検査を可能とするように構成される、請求項８乃至１１の何れか１項に記載の方法。
【請求項１３】
位置、間隔、および航空機構造に関する正確な現実の測定値を前記改善されたウォークスルービデオから抽出できるように前記視差グリッドが構成される、請求項８乃至１２の何れか１項に記載の方法。
【請求項１４】
前記視差グリッドはオートフォーカスを用いて自動的に決定された複数の視差ラインを含み、
前記複数の視差ラインは１つまたは複数の組の視差ラインとして編成され、
視差ラインの各組は前記視差グリッド・オーバレイ内の別々のビデオ・レイヤとして格納される、
請求項８乃至１３の何れか１項に記載の方法。
【請求項１５】
コンピュータにより実行されるように構成された１つまたは複数のプログラムを格納した非一時的コンピュータ可読記憶媒体であって、前記１つまたは複数のプログラムは請求項８乃至１４の何れか１項に記載の方法を実施するための命令を含む、非一時的コンピュータ可読記憶媒体。
【発明の詳細な説明】
【背景技術】
【０００１】
航空機の製造プロセスの間、顧客が、構築されているそれらの製品の進行を理解するのは困難である。現在、顧客は、航空機または他の大規模製品の製造の進行をレビューするために、高いコストで工場に物理的に移動しなければならない。これは、大幅なコスト（例えば、航空運賃、ホテル、レンタカー等）を含む旅程を必要とし、通常は最終的な航空機受け取り場所での最終製品の簡単な物理ウォークスルーにつながる。複数のレビューが望ましい場合は、当該プロセスを反復しなければならず、顧客に対して追加のコストと時間をもたらす。企業は当該コンピュータ支援型設計（ＣＡＤ）データの仮想ショールームを利用することを試みてきた。しかし、仮想ショールームは、構築プロセスの様々な段階での航空機の実際のビューではなく、当該航空機の期待される終了状態のみを提供する。
【発明の概要】
【発明が解決しようとする課題】
【０００２】
したがって、現在の方法よりもコスト効果的で時間効率的である、構築プロセスの様々な段階での航空機の検査をサポートするための改良されたシステムおよび方法が必要である。
【課題を解決するための手段】
【０００３】
以下では、本開示の特定の実施形態の基本的な理解を提供するために本開示の簡略化された要約を提供する。本要約は本開示の包括的な概要ではなく、本開示の主要かつ重大な要素を特定せず、本開示の範囲を画するものでもない。その唯一の目的は、後述のより詳細な説明に対する前段として、本明細書で開示された幾つかの概念を簡潔な形で提供することである。
【０００４】
航空機構築プロセスの改善されたステレオ投影ビデオを生成するための様々なシステムおよび方法を提供する。様々な実施形態では、システムは航空機構築プロセスの複数の段階をキャプチャするように構成された立体記録装置を含む。当該システムはさらに１つまたは複数のプロセッサ、メモリ、および当該メモリに格納された１つまたは複数のプログラムを含む。当該１つまたは複数のプログラムは、機体番号により編成された３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するための命令を含んでもよい。３Ｄビデオの当該リポジトリは当該航空機構築プロセスの当該複数の段階に対応してもよい。
【０００５】
当該１つまたは複数のプログラムはさらに、当該航空機構築プロセスの改善されたウォークスルービデオを生成するための命令を含む。当該改善されたウォークスルービデオは、当該ビデオに統合された視差グリッド・オーバレイと、当該ビデオに統合された熱スキャン・オーバレイのうち１つまたは複数を含んでもよい。当該視差グリッドは、オートフォーカスを用いて自動的に決定された複数の視差ラインを含んでもよい。当該複数の視差ラインを１つまたは複数の組の視差ラインとして組織してもよい。視差ラインの各組を当該視差グリッド・オーバレイ内の別々のビデオ・レイヤとして格納してもよい。位置、間隔、および航空機構造に関する正確な現実の測定値を当該改善されたウォークスルービデオから抽出できるように、当該視差グリッドを構成してもよい。当該システムがリモート処理中初期検査能力を提供するように構成されてもよい。
【０００６】
当該１つまたは複数のプログラムはさらに当該航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて当該改善されたウォークスルービデオを分析するための命令を含む。幾つかの実施形態では、当該後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む。幾つかの実施形態では、当該後処理分析はパターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む。幾つかの実施形態では、当該後処理分析はパターンおよび形状を分析して熱勾配準拠を決定するステップを含む。
【０００７】
また、航空機構築プロセスの改善されたステレオ投影ビデオを生成するための方法が提供される。様々な実施形態によれば、当該方法は立体記録装置を介して航空機構築プロセスの複数の段階をキャプチャするステップを含む。当該方法はさらに、機体番号で編成されたビデオの３Ｄリポジトリを含むステレオ投影ライブラリを構築するステップを含む。ビデオの当該３Ｄリポジトリは、当該航空機構築プロセスの当該複数の段階に対応してもよい。当該方法はさらに当該航空機構築プロセスの改善されたウォークスルービデオを生成するステップを含み、当該改善されたウォークスルービデオは、当該ビデオに統合された視差グリッド・オーバレイと、当該ビデオに統合された熱スキャン・オーバレイのうち１つまたは複数を含む。当該改善されたウォークスルービデオがリモート処理中初期検査を可能とするように構成されてもよい。当該方法はさらに、当該航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて当該改善されたウォークスルービデオを分析するステップを含む。
【０００８】
本開示の他の実装は、説明された方法の動作を実施するように構成された対応するデバイス、システム、およびコンピュータプログラムを含む。例えば、コンピュータにより実行されるように構成された１つまたは複数のプログラムシステムを含む非一時的コンピュータ可読媒体が提供される。幾つかの実施形態では、当該１つまたは複数のプログラムは、説明された方法およびシステムのアクションを実施するための命令を含む。これらの他の実装はそれぞれ任意に前述の特徴のうち１つまたは複数を含んでもよい。これらのおよび他の実施形態を、図面を参照して以下で説明する。
【図面の簡単な説明】
【０００９】
【図１】１つまたは複数の実施形態に従う、本開示の様々なシステムおよび方法を実装するための例示的なネットワークアーキテクチャを示す図である。
【図２】本開示の技術および機構に関連して使用できる立体カメラの略図である。
【図３Ａ】幾つかの実施形態に従う、航空機の内部の画像および当該画像のパノスキャンの１例を示す図である。
【図３Ｂ】幾つかの実施形態に従う、航空機の内部の画像および当該画像のパノスキャンの１例を示す図である。
【図４Ａ】幾つかの実施形態に従う、航空機の内部を表示する画像の１例を示す図である。
【図４Ｂ】幾つかの実施形態に従う、統合されたオーバレイを有する航空機の内部を表示する画像の例を示す図である。
【図４Ｃ】幾つかの実施形態に従う、統合されたオーバレイを有する航空機の内部を表示する画像の例を示す図である。
【図４Ｄ】幾つかの実施形態に従う、統合されたオーバレイを有する航空機の内部を表示する画像の例を示す図である。
【図４Ｅ】幾つかの実施形態に従う、統合されたオーバレイを有する航空機の内部を表示する画像の例を示す図である。
【図４Ｆ】幾つかの実施形態に従う、統合されたオーバレイを有する航空機の内部を表示する画像の例を示す図である。
【図５Ａ】幾つかの実施形態に従う、航空機構築プロセスの改善されたステレオ投影ビデオを生成するための方法に対応するプロセスの流れ図である。
【図５Ｂ】幾つかの実施形態に従う、航空機構築プロセスの改善されたステレオ投影ビデオを生成するための方法に対応するプロセスの流れ図である。
【図６】本開示で説明した様々なプロセスを実装できるコンピュータシステムの１例を示すブロック図である。
【図７】幾つかの実施形態に従う航空機の略図である。
【図８】本明細書で説明する方法およびアセンブリを利用できる航空機生産およびサービス方法のブロック図である。
【発明を実施するための形態】
【００１０】
以下の説明では、多数の特定の詳細が、提供された概念の徹底的な理解を提供するために説明される。提供された概念をこれらの特定の詳細の一部または全部なしに実施してもよい。他の事例では、周知のプロセス動作は、説明された概念を不必要に不明瞭しないために詳細に発明されていない。幾つかの概念を当該特定の実施形態に関連して説明するが、これらの実施形態は限定を意図しないことは理解される。反対に、添付の特許請求の範囲により定義された本開示の趣旨と範囲内に含まれるように代替的な、修正、および均等物を包含することが意図されている。
【００１１】
例えば、本開示の技術は、航空機製造に使用される特定のシステムの文脈で説明される。しかし、本開示の技術および機構は、様々な他の業界における異なる構築プロセスのために改善されたビデオを生成することに適用されることに留意すべきである。以下の説明では、多数の特定の詳細が、本開示の徹底的な理解を提供するために説明されている。本開示の特定の例示的な実施形態をこれらの特定の詳細の一部または全部なしに実装してもよい。他の事例では、周知のプロセス動作は、本開示を不必要に不明瞭にしないために詳細には説明されていない。本開示の様々な技術および機構は場合によっては、明確さのため単一形説明される。しかし、特に断らない限り、幾つかの実施形態は、機構の技術または複数のインスタンス化の複数の反復を含むことに留意すべきである。
【００１２】
本開示の様々な技術および機構は場合によっては、明確さのため単一形説明される。しかし、特に断らない限り、幾つかの実施形態は、機構の技術または複数のインスタンス化の複数の反復を含むことに留意すべきである。例えば、システムはプロセッサを様々な文脈で使用する。しかし、特に断らない限り、システムは本開示の範囲にとどまりつつ複数のプロセッサを使用できることは理解される。さらに、本開示の技術および機構は場合によっては２つのエンティティ間の接続を説明する。２つのエンティティ間の接続は、様々な他のエンティティが当該２つのエンティティの間に存在しうるので、必ずしも直接的な、スムーズな接続を意味しないことに留意すべきである。例えば、プロセッサがメモリに接続されてもよいが、様々なブリッジおよびコントローラが当該プロセッサおよびメモリの間に存在してもよいことは理解される。その結果、特に断らない限り、接続は必ずしも直接的な、スムーズな接続を意味しない。
【００１３】
概要
本開示は航空機構築プロセスの改善された仮想検査を提供するための新規なシステムおよび方法を説明する。当該システムは、記録装置を用いた組立手中に取得されたビデオデータにリモートにアクセスすることによって組立製品の製造の定期的進行を顧客が参照するためのリモートアクセスを提供する。特に、当該システムは、立体カメラのような記録装置によりキャプチャされたビデオを含む、２Ｄおよび／または３Ｄ画像のリポジトリを含むステレオ投影ライブラリを構築するステップを含んでもよい。当該記録装置が、オペレータが当該アセンブリを検査する間にビデオデータが取得され、顧客に関心があるアセンブリの部分のビューを提供するようにオペレータによりウェラブルであってもよい。画像の当該リポジトリは、当該航空機構築プロセスの１つまたは複数の段階に対応してもよく、航空機機体番号により編成されてもよい。当該２Ｄおよび／または３Ｄ画像が、当該航空機の内部および外部の最大３６０度のビューと、現在のパノスキャンおよび他の方法と比較してより現実的なおよび包括的な特定の構築段階のビューとを提供できる、実視野を有するパノラマ画像であってもよい。
【００１４】
幾つかの実施形態では、局線、船尾線、および水線を含む視差ラインが、オートフォーカス能力を具備したレーザ投影デバイスによりキャプチャされた画像ごとに生成されてもよい。当該視差ラインを、１つまたは複数のグループ化された視差ラインのセットとして組織してもよく、視差ラインの各組をオーバレイとして格納してもよい。当該視差ラインが所定の距離（例えば、５”、１０”、１２”、１８”等）で均等に離間してもよく、水平、垂直、および長手方向に当該航空機構造に対する拡大および視野を提供する。さらに、当該システムは、異物損傷、アセンブリ準拠、および温度偏差のような、各構築段階に関連する他の情報をキャプチャしてもよい。この追加の情報が、様々なオーバレイに別々におよび／または組合せで格納されてもよい。当該１つまたは複数のオーバレイを、エンジニアリング分析および／または顧客検査をサポートするために必要に応じて起動（例えば、ターンオン／オフ）してもよい。後処理分析を使用して、自動的に当該キャプチャされた画像をデータベース情報と比較して異物損傷を検出し、アセンブリおよびサブアセンブリ準拠を決定し、熱勾配準拠を決定してもよい。
【００１５】
当該改善されたシステムは、航空機構造の検査を提供するための従来のシステムおよび方法と比較して多数の利点を有する。例えば、当該開示されたシステムは、航空機構造の仮想検査のために任意の位置から必要に応じて好都合にアクセスできる複数の構築段階のビデオおよび画像のライブラリを生成する。これは、当該航空機の当該物理位置へのコストがかかり時間を浪費する旅行の必要性を排除する。さらに、当該システムは、歪みのない３Ｄ画像に、従来のパノスキャンと比較してより正確な視野に対する大きなフィールドのビューを提供することができる。当業者は、パノスキャンの現在の利用がビューの歪みと制限された範囲を提供し、視界外部の領域を可視化し、当該画像に示す構造を拡大するのが困難であると理解するであろう。
【００１６】
さらに、視差ラインオーバレイは位置、間隔、および航空機構造に対する正確な測定値を提供し、熱スキャン・オーバレイは、技術者は、潜在的なシステム故障を安全かつ迅速に特定することができる。後処理分析はまた、自動的に異物損傷（「ＦＯＤ」）を識別し、アセンブリ準拠を決定し、かつ／または温度偏差を分析することによって品質制御を改善してもよい。全体として、当該改善されたシステムおよび方法は、製造問題と顧客要件からの偏差の早期識別をもたらすことができ、結果として、製造業者および顧客の両方に対する大幅なコスト削減とより正確な構築が得られる。
【００１７】
例示的な実施形態
図１は、１つまたは複数の実施形態に従う、本開示の様々なシステムおよび方法を実装するための例示的なネットワークアーキテクチャ１００の図を示す。ネットワークアーキテクチャ１００は、ネットワーク１１０によりサーバシステム１１２に通信可能に接続された幾つかのクライアントデバイス１０２乃至１０８を含む。幾つかの実施形態では、サーバシステム１１２は１つまたは複数のプロセッサおよびメモリを含む。サーバシステム１１２の当該プロセッサは、ネットワークデータ交換サーバの機能を実施するための当該メモリに格納されたコンピュータ命令（例えば、ネットワークコンピュータプログラム・コード）を実行する。
【００１８】
幾つかの実施形態では、サーバシステム１１２は、記録装置１１８により記録されたビデオおよび／または画像ファイルのリポジトリを受信し格納するように構成されたコンテンツサーバである。サーバシステム１１２はまた、ネットワークメッセージを含むネットワークデータパケットを送信および／または経路付けするように構成されたディスパッチサーバとして機能してもよい。幾つかの実施形態では、ネットワークアーキテクチャ１００はさらに、ネットワーク１１０を介してクライアントデバイス１０２乃至１０８およびサーバシステム１１２に通信可能に接続されたデータベース１１６を備えてもよい。幾つかの実施形態では、ネットワークデータ、３Ｄビデオリポジトリを含むステレオ投影ライブラリ、またはネットワークプロファイル情報、航空機情報、製造情報、構築プロセス情報等のような他の情報はデータベース１１６に格納され、かつ／または、データベース１１６から抽出してもよい。幾つかの実施形態では、データベース１１６はサーバシステム１１２内のコンポーネントであり、サーバシステム１１２のメモリ内に格納される。
【００１９】
クライアントデバイス１０２乃至１０８のユーザは、サーバシステム１１２もアクセスして、ネットワークデータ交換サービスに参加してもよい。例えば、クライアントデバイス１０２乃至１０８は、アクセスサーバシステム１１２および／またはデータベース１１６に格納されたデータにアクセスするために使用することができるウェブ・ブラウザアプリケーションを実行することができる。別の例では、クライアントデバイス１０２乃至１０８は、ネットワークに固有なソフトウェアアプリケーション（例えば、スマートフォンで実行されているネットワーキングデータ交換「アプリ」）を実行することができる。クライアントデバイス１０２乃至１１０と対話するユーザは、格納されたデータにアクセスし、３Ｄビデオ画像を検討し、テキストコメント（例えば、メッセージ問合せ、更新、アナウンス、応答）のようなデジタルコンテンツを配分することによって、サーバシステム１１２により提供された当該ネットワークデータ交換サービスに参加することができる。
【００２０】
幾つかの実装では、クライアントデバイス１０２乃至１１０は、ラップトップまたはデスクトップコンピュータ、スマートフォン、携帯情報端末、ポータブルメディアプレイヤ、タブレットコンピュータ、または電子ネットワークと通信するために使用できる他の適切なコンピューティング・デバイスのようなコンピューティング・デバイスであることができる。幾つかの実装では、サーバシステム１１２はコンピュータサーバのような１つまたは複数のコンピューティング・デバイスを含むことができる。幾つかの実装では、サーバシステム１１２は、サーバコンピュータ（例えば、クラウドコンピューティング）のアクションを実施するために協調する複数のコンピューティング・デバイスを表すことができる。ネットワーク１１０が有線および／または無線ネットワークであってもよい。幾つかの実装では、ネットワーク１１０は、パブリック通信ネットワーク（例えば、インターネット、セルラデータネットワーク、電話ネットワーク上のダイアルアップ・モデム）またはプライベート通信ネットワーク（例えば、プライベートＬＡＮ、専用回線）であることができる。
【００２１】
図２は、本開示の技術および機構に関連して使用できる立体カメラ２００の略図である。図２内の点線は立体カメラ２００への任意のコンポーネントを示す。幾つかの実施形態では、立体カメラ２００が図１で前述した記録装置１１８であってもよい。様々な実施形態では、立体カメラ２００は、レンズ２０４ａおよび２０４ｂのような複数のレンズを有するボディ２０２を備える。立体カメラ２００が、立体写真を介して２Ｄおよび／または３Ｄビデオおよび／または画像をキャプチャするように構成されてもよい。レンズ２０４ａおよび２０４ｂのような各レンズは、カメラが人間の双眼ビジョンをシミュレートし３Ｄ画像をキャプチャできるようにする別々の画像センサおよび／またはフィルムフレームを備えてもよい。幾つかの実施形態では、立体カメラ２００が、デバイスをキャプチャする複数の画像の組合せであってもよい。幾つかの実施形態では、立体カメラ２００は、２Ｄ／３Ｄ交換可能焦点レンズのような、３Ｄ画像をキャプチャするための任意の他の適切なレンズ機構を備えてもよい。幾つかの実施形態では、記録装置１１８は、カメラが周囲の３６０度パノラマビューをキャプチャするように、搭載された複数のカメラを備えてもよい。カメラのかかる構成が、シームレスなパノラマディスプレイを２Ｄおよび／または３Ｄで生成するためのスマート処理ソフトウェアに結合されてもよい。立体カメラ２００によりキャプチャされたパノラマビデオおよび／または画像は、航空機の内部および／または外部の周囲の最大３６０度のビューを提供してもよい。幾つかの実施形態では、当該パノラマビデオおよび／または画像は、デジタルパノラマ回転ラインカメラで取得されたパンスキャンのような現在のパノスキャンよりも正確な深度視野と少ないビュー歪みを提供する実視野ビューを含む。
【００２２】
立体カメラ２００のボディ２０２が、立体カメラ２００を様々な構造に搭載できるようにするマウント２０８に接続されてもよい。例えば、幾つかの実施形において、立体カメラ２００をレールシステムに搭載してもよい。幾つかの実施形態では、当該レールシステムは、立体カメラ２００がより大きいな視野をキャプチャするために最大で３６０度回転できるようにしてもよい。他の実施形態では、立体カメラ２００が、オペレータのヘルメットに搭載されてもよく、製造の各漸進的段階中に航空機の内部および／または外部に沿ってオペレータが移動する際に、顧客に関心のあるアセンブリの部分のビデオおよび／または画像を記録してもよい。立体カメラ２００によりキャプチャされた３Ｄ画像を、仮想現実眼鏡等のような適切な３Ｄ視聴デバイスで参照するためにフォーマットしてもよい。
【００２３】
幾つかの実施形態では、立体カメラ２００は、立体カメラ２００のボディ２０２の領域に搭載されたデバイスアタッチメント２１０を備えてもよい。図２に示すように、取付け素子２１０は立体カメラ２００の上部に搭載される。しかし、異なる実施形態では、取付け素子２１０を立体カメラ２００の任意の部分に搭載してもよい。幾つかの実施形態では、立体カメラ２００は、ボディ２０２の様々な部分に搭載した複数の取付け素子２１０を備えてもよい。様々な実施形態では、取付け素子２１０は、立体カメラ２００によりキャプチャされた３Ｄ画像を強化または補完する情報をキャプチャしてもよい。１態様では、取付け素子２１０が、図４Ｂ乃至４Ｅを参照して後述するように基準測定ラインを生成するためのオートフォーカス機能を有するレーザ投影デバイスであってもよい。別の態様では、取付け素子２１０は、さらに図４Ｆを参照して後述するように、撮像温度放射に対する赤外線ビジョンデバイスを含んでもよい。かかる取付け素子２１０は、記録された画像に関する追加の情報を提供する同期されたオーバレイを生成してもよい。幾つかの実施形態では、取付け素子２１０は、周囲の十分かつ／または均等な照明を提供するための光源を備えてもよい。前述のデバイスアタッチメント２１０のうち１つまたは複数の機能を立体カメラ２００に組み込み、立体カメラ２００により実施してもよい。
【００２４】
キャプチャされた画像およびオーバレイの例
より正確な視覚的視野を有するビデオおよび／または画像をキャプチャすることによって、本開示のシステムおよび方法は、現在使用されている従来のパノスキャン、および他のパノラマ撮影方法の問題を回避することができる。図３Ａ乃至３Ｂは、幾つかの実施形態に従う、航空機の内部の画像３００および画像３００のパノスキャン３０１の１例を示す。図３Ａを参照すると、画像３００は構築段階中の航空機の内部を示す。図３Ｂを参照すると、パノスキャン３０１が、極端に広い領域レンズフォーマットで表示され歪められた航空機の静的パノラマ画像であってもよく、エンジニアリング機器に対する潜在的な位置で使用してもよい。幾つかの実施形態では、画像３００および／またはパノスキャン３０１がビデオシーケンス内のフレームであってもよい。パノスキャン３０１のようなパノスキャンは、油圧ライン、電気線、および／または他のエンジニアリング構造を容易に示すことができる。しかし、当該フォーマッティングは、図３Ｂに示すように、ビュー内に歪みをもたらす（例えば、魚眼効果）。これらの歪みは、視野の外部の領域を可視化し当該画像で示された構造の距離を決定するのを困難にさせうる。さらに、視野が、画像の中心に固定され、ズームイン、ズームアウト、および回転のような限定された移動のみが可能であり、かかる限定された移動は当該画像をさらに歪ませるかもしれない。さらに、魚眼効果の歪みは、パノスキャン３０１のようなパノスキャン画像内の既存の構造を拡大する際の困難性をもたらす。
【００２５】
対照的に、記録装置１１８によりキャプチャされたビデオおよび／または３６０度画像は、実視野を有する画像を表示し、既知の距離で均等に離間した線のオーバレイのような、様々な手段を介して拡大することを可能とする。さらに、３Ｄビデオおよび／または画像は、従来のパノスキャン画像で示されない深度知覚情報を提供する。さらに、記録装置１１８によりキャプチャされたビデオおよび／または３６０度画像は、特定の静的視点に固定されず、現在の視野の外部の領域の可視化を可能とする。
【００２６】
以下の図面は、記録装置１１８、または立体カメラ２００によりキャプチャされ、サーバシステム１１２および／またはデータベース１１６に格納されたもののような、記録された画像の追加の例を提供する。図４Ａは、幾つかの実施形態に従う、航空機の内部を表示する画像４００の１例を示す。図４Ａに示すように、画像４００は複数の列の座席、荷物入れ、および窓を含む。画像４００が記録されたビデオのフレームであってもよい。幾つかの実施形態では、画像４００が３６０度パノラマ画像またはビデオのセクションであってもよい。示したように参照の簡単のため、画像４００が２Ｄ視野で示されている。しかし、画像４００が３Ｄビデオおよび／または画像であってもよい。
【００２７】
図４Ｂ乃至４Ｆは、幾つかの実施形態に従う、様々な統合されたオーバレイを有する航空機の内部を表示する画像４００の例を示す。幾つかの実施形態では、局線、船尾線、および水線のような視差ラインを含むオーバレイは、拡大および／または測定目的のために当該画像に階層化される。かかるオーバレイを、キャプチャされた画像とともにサーバ１１２および／またはデータベース１１６に格納してもよい。幾つかの実施形態では、記録装置１１８のオートフォーカス機能、または取付け素子２２０は、画像内の距離を記述し、デフォルトのおよび／またはユーザ定義された間隔を必要に応じて維持する視差ラインを生成する。当該視差ラインが所定の距離（例えば、５”、１０”、１２”、１８”等）で均等に離間してもよい。
【００２８】
図４Ｂは、航空機のＸ軸に並列に走る局線４０２ａ乃至４０２ｊを有する画像４００を示す。局線４０２ａ乃至４０２ｊのような局線は一般に、航空機の長さに沿った位置を指定し、当該構造の前面から後面に走り、小骨のような構造的に大規模な項目において注釈をつけられる。例えば、局２２で開始し任意のクランプまたは曲げまたは穴がなく局５００に真っすぐ走るパイプは、開始点および停止点への参照のみを含む。幾つかの実施形態では、機体局の原点（ＦＳ＝０またはｘ＝０）は、機首先端または機首から幾つかの距離（例えば、ほぼ５０から１００インチ）前方に配置される。さらに、均等に離間した局線が、Ｙ軸で当該構造の水平距離に対する視野を提供してもよい。例えば、前述のように、視差局線４０２ａ乃至４０２ｊが所定の距離（例えば、５”、１０”、１２”、１８”、等）で均等に離間してもよい。
【００２９】
図４Ｃは、航空機のＹ軸に並列に走る船尾線４０４ａ乃至４０４ｆを有する画像４００を示す。船尾線４０４ａ乃至４０４ｆのような船尾線は一般に、航空機中心線の左と右を測定する。幾つかの実施形態では、船尾線の原点（ＢＬ＝０またはｙ＝０）が航空機の対称平面に配置される。さらに、均等に離間した船尾線が、Ｚ軸における構造の垂直距離に対する視野を提供してもよい。例えば、前述のように、視差船尾線４０４ａ乃至４０４ｆが所定の距離（例えば、５”、１０”、１２”、１８”、等）で均等に離間してもよい。
【００３０】
図４Ｄは、航空機のＺ軸に並列に走る水線４０６ａ乃至４０６ｊを有する画像４００を示す。水線４０６ａ乃至４０６ｊのような水線は一般に、地上（例えば、床、天井等）から上に、航空機の高さにおける重要な点の位置を指定する。一般に、水線０は一般に、航空機より少し下、または、機体の底部にある。幾つかの実施形態では、水線の原点（ＷＬ＝０またはｚ＝０）は、機首先端に、地上に、または機首先端より下ほぼ１００乃至２００インチに配置される。さらに、均等に離間した水線は、Ｘ軸における構造の長手方向距離に対する視野を提供してもよい。例えば、前述のように、視差水線４０６ａ乃至４０６ｊが所定の距離（例えば、５”、１０”、１２”、１８”、等）で均等に離間してもよい。
【００３１】
グリッド・オーバレイが、オートフォーカス機能を有する記録装置１１８に搭載されたレーザ投影デバイスを用いることによって生成されてもよい。かかるレーザ投影デバイスが取付け素子２１０であってもよい。オブジェクトを指すとき、当該レーザ投影デバイスは、垂直Ｘ軸、Ｙ軸、および／またはＺ軸の何れかにおける定義されたラインのグリッドを生成する能力を有する。幾つかの実施形態では、立体カメラ２００は、レーザ投影デバイスの能力を提供するコンポーネントを含んでもよい。幾つかの実施形態では、視差グリッド・オーバレイは１つまたは複数の層を含む。各層は１組の視差ラインを含む。幾つかの実施形態では、１組の視差ラインは、１つまたは複数の並列線のグループを含んでもよい。幾つかの実施形態では、１組の視差ラインは、１つまたは複数の局線、船尾線、および／または水線のグループを含んでもよい。視差ラインの当該集合を、ビデオおよび／または画像フォーマットに取り付けられたメタデータとして格納してもよい。例えば、４つの特定のチャネルが、キャプチャされた１．）ビデオおよび／または画像、２．）局線、３．）船尾線、および４．）水線であってもよい。幾つかの実施形態では、当該キャプチャされたデータが、参照のために取出し可能な単一のファイルに集約されてもよい。
【００３２】
視差ラインの各組が、それらが必要に応じて（例えば、ターン・オン／オフ）を起動できるように、別々のビデオ・レイヤおよび／またはレベルで生成され格納されてもよい。様々な実施形態では、視差ラインの１つまたは複数の層が起動され、ビデオおよび／または画像で表示されてもよい。例えば、図４Ｂ乃至４Ｄの各々は、チャネルでキャプチャされ画像４００に対するファイルに関連付けられたメタデータとして格納される１組の視差ラインを表してもよい。図４Ｂ乃至４Ｄに表した画像４００および視差ラインに対応するメタデータを、単一の取出し可能な参照用のファイルに集約してもよい。例えば、図４Ｅは、図４Ｂ乃至４Ｄで説明するように、全てのオーバレイが起動され重ね合わされた画像４００を示す。かかる視差ラインオーバレイを、仮想顧客ウォークスルーに対する拡大またはエンジニアリング分析等のサポートのために使用してもよい。かかる較正された視差ラインは、設計の更新および変更のために領域を迅速に幾何的に評価するための能力を技術者に提供しうる。それはまた、オフサイト技術者が航空機に存在する特徴を、それを物理的に測定するかまたは旧式の図面を探す必要なしに、正確に測定できるようにしうる。
【００３３】
画像４００上で生成され表示されうる別のタイプのオーバレイは熱スキャン・オーバレイである。図４Ｆは、統合された熱スキャン・オーバレイを有する画像４００を示す。影付き領域４０８ａ乃至４０８ｆは、画像４００上にオーバレイされたサーモグラムの可視化された温度放射を表す。当該異なる影付きパターンは異なる温度範囲を表す。赤外線放射は、絶対ゼロより上の温度を有する全てのオブジェクトにより放射される。オブジェクトにより発せられた放射の量は、温度とともに増大し、温度の変化を、サーモグラフィを通じて可視化できるようにする。様々な実施形態では、熱スキャン・オーバレイは、立体カメラ２００に搭載された赤外線ビジョンデバイスにより検出されキャプチャされた赤外線放射のサーモグラムビデオおよび／または画像を含んでもよい。例えば、赤外線ビジョンデバイスが、中波（３乃至５μｍ）および長波（７乃至１４μｍ）赤外線帯域での放射を検出できる焦点面アレイ（ＦＰＡ）赤外線カメラであってもよく、夫々、ＭＷＩＲおよびＬＷＩＲとして示され、高透過率赤外線ウィンドウの２つに対応する。他の実施形態では、当該赤外線ビジョンデバイスは、様々な他のサーモグラフィカメラまたは記録装置の１つであってもよい。
【００３４】
幾つかの実施形態では、サーモグラムビデオおよび／または画像を、パッシブサーモグラフィを通じてキャプチャしてもよく、関心のある特徴は通常、背景よりも高いか低い温度にある。代替的に、および／またはさらに、サーモグラムビデオおよび／または画像が、関心のある特徴と背景の間の温度コントラストを生成するのにエネルギ源が必要とされるアクティブサーモグラフィを介してキャプチャされてもよい。アクティブなサーモグラフィが、検査された部分が通常は周囲と平衡する事例で必要であってもよい。
【００３５】
キャプチャされると、サーモグラムビデオおよび／または画像をついで、画像４００への別々のオーバレイ層として、サーバ１１２および／またはデータベース１１６に格納してもよく、必要に応じて起動（例えば、ターン・オン／オフ）してもよい。かかる熱スキャン・オーバレイを、様々なエンジニアリング分析をサポートするために使用してもよい。例えば、サーモグラフィ撮像は非破壊試験方法であり、アクセス可能なまたは危険な領域で測定または観測するために使用することができる。それを、暗い領域内のオブジェクトを検出するために使用することができる。正確な温度データを統合する赤外線画像が、技術者または技術者に、全ての種類の機器および構造の条件に関する重大な情報を提供してもよい。それを、シャフト、パイプ、および他の金属またはプラスティック部分内の欠陥を発見するために使用することができる。それはまた、リアルタイムに移動するターゲットを記録でき、大規模領域の温度の比較を可能とする。不可視な熱問題を可視とする非接触測定として、温度カメラは、技術者、技術者、または他のオペレータに生産機器をピーク動作でもより安全に検査させる。トラブルシューティングとともに、熱スキャン・オーバレイはまた、生産プロセス自体を最適化し品質制御を監視することを支援することができる。
【００３６】
幾つかの実施形態では、ビデオおよび／または画像をキャプチャし、リアルタイムに参照してもよい。幾つかの実施形態では、上述のオーバレイをまた、視聴者にリアルタイムに送信してもよい。様々な実施形態では、図４Ａ乃至４Ｆを参照して前述した熱スキャン・オーバレイのような画像およびオーバレイを後処理分析のために利用してもよい。かかる後処理分析は、自動的に異物損傷（「ＦＯＤ」）を識別し、アセンブリ準拠を決定し、かつ／または温度偏差を分析するステップを含んでもよい。これらの後処理分析を、図５Ａ乃至５Ｂで説明した方法５００の動作５１３を参照して以下でさらに説明する。幾つかの実施形態では、当該システムは、画像３００または４００のようなキャプチャされた画像を１つまたは複数の分析データベースと比較することによって、分析レポートを生成するように構成される。
【００３７】
航空機構築プロセスの改善されたステレオ投影ビデオを生成する例 
図５Ａ乃至５Ｂは、幾つかの実施形態に従う、航空機構築プロセスの改善されたステレオ投影ビデオを生成するための方法５００に対応するプロセスの流れ図を示す。方法５００を、上述のシステム１００の様々な実施形態により実装してもよい。幾つかの実施形態では、方法５００を、少なくとも動作８０８、８１０、８１２、および８１４のような、後述する図８を参照して後述するプロセス８００の特定の部分として実装してもよい。
【００３８】
動作５０１で、航空機構築プロセスの複数の段階が立体記録装置を介してキャプチャされる。幾つかの実施形態では、各構築プロセスの画像および／またはビデオを、記録装置１１８または立体カメラ２００によりキャプチャしてもよい。かかる構築プロセスは、図８を参照して後述する動作を含んでもよい。例えば、動作５０１を、システム統合８１０の様々な段階中に航空機の内部および／または外部のビデオおよび／または画像をキャプチャするために実装してもよく、ブロック８０８で製造された様々なコンポーネントおよびサブアセンブリが一緒に組み立てられる。幾つかの実施形態では、システム統合８１０の様々な段階を、構築日−１８１０−Ａ、構築日−２８１０−Ｂ、構築日−３８１０−Ｃ等乃至構築日−Ｎ８１０−Ｄのような異なる構築日に分割してもよい。幾つかの実施形態では、動作５０１を、コンポーネントおよびサブアセンブリ製造８０８中の１つまたは複数の構築日のような、漸進的な時間スケールでビデオおよび／または画像をキャプチャするために実装してもよい。幾つかの実施形態では動作５０１を、１つまたは複数の構築日８１０−Ａ乃至８１０−Ｎからの結果を表しうる特定のマイルストーンで航空機のビデオおよび／または画像をキャプチャするために実装してもよい。
【００３９】
動作５０３で、ステレオ投影ライブラリが構築される。当該ライブラリは、機体番号により編成された３Ｄビデオのリポジトリ５０５を含む。全ての航空機は、航空機の外部に表示されなければならない文字と数字の一意な識別組合せで登録される。機体番号によりステレオ投影ライブラリを編成することは、所望の航空機に対応するビデオと画像を発見するのをより好都合にしうる。幾つかの実施形態では、ビデオおよび画像への顧客のアクセスを、かかる顧客が購入した航空機の機体番号に対応するものに限定してもよい。幾つかの実施形態では、３Ｄビデオの当該リポジトリ５０５は航空機構築プロセスの複数の段階に対応する。前述のように、航空機構築プロセスのかかる段階をさらに図８を参照して後述してもよい。
【００４０】
動作５０７で、航空機構築プロセスの改善されたウォークスルービデオ５０７が生成される。幾つかの実施形態では、改善されたウォークスルービデオ５０７が当該構築プロセスの各段階に対して生成される。幾つかの実施形態では、改善されたウォークスルービデオ５０７は、当該構築プロセスの複数の段階を含んでもよい。幾つかの実施形態では、当該改善されたウォークスルービデオ５０７は当該以下の、当該ビデオに統合された視差グリッド・オーバレイ５１５、および当該ビデオに統合された熱スキャン・オーバレイのうち１つまたは複数を含む。
【００４１】
視差グリッド・オーバレイ５１５は、オートフォーカスを用いて自動的に決定された複数の視差ラインを含んでもよい。前述のように、レーザ投影デバイスを、立体カメラ２００上に取付け素子２１０として取り付けてもよい。当該レーザ投影デバイスを、垂直軸（例えば、Ｘ−軸、Ｙ−軸、およびＺ軸）の何れかにおいて定義されたラインのグリッドを生成するオートフォーカス能力で構成してもよい。幾つかの実施形態では、当該視差ラインが、局線４０２ａ−４０２ｊ、船尾線４０４ａ−４０４ｆ、水線４０６ａ−４０６ｊ等のような前述の図４Ｂ−４Ｅを参照して前述した視差ラインのうち１つまたは複数の任意の組合せであってもよい。幾つかの実施形態では、視差ラインの各タイプが特定のチャネルでキャプチャされる。当該複数の視差ラインを視差ラインの１つまたは複数のセット５１６として組織してもよい。当該複数の視差ライン内の視差ラインの各セット５１６を、別々のビデオ・レイヤ５１７として視差グリッド・オーバレイ５１５に格納してもよい。視差ラインの当該集合を、当該ビデオおよび／または画像フォーマットに取り付けたメタデータとして格納してもよい。幾つかの実施形態では、当該キャプチャされたデータを、参照するために取出し可能な単一のファイルに集約してもよい。幾つかの実施形態では、視差ラインの集合５１６は１種の視差ラインのうち１つまたは複数を含む。幾つかの実施形態では、視差ラインの集合５１６は、前述の当該視差ラインのうち１つまたは複数の任意の組合せを含んでもよい。
【００４２】
幾つかの実施形態では、位置、間隔、および航空機構造に対する正確な現実の測定値５１９を当該改善されたウォークスルービデオから抽出できる５０７ように、視差グリッドが構成される。例えば、前述のように図４Ｂ−４Ｅを参照すると、局線が幾つかの所定の距離（例えば、５”、１０”、１２”、１８”、等）で均等に離間してもよく、Ｙ軸における構造の水平距離に対する視野を提供することができる。同様に、均等に離間した船尾線は、Ｚ軸における構造の垂直距離に対する視野を提供してもよい。さらに、均等に離間した水線は、Ｘ軸における構造の長手方向距離に対する視野を提供してもよい。
【００４３】
前述のように、熱スキャン・オーバレイを、立体カメラ２００に取付け素子２１０として搭載された、サーモグラフィカメラのような赤外線ビジョンデバイスによりキャプチャしてもよい。当該サーモグラムビデオおよび／またはキャプチャされた画像を、画像４００のような画像上で表示しうる１つまたは複数のオーバレイとして格納してもよい。幾つかの実施形態では、熱スキャン・オーバレイは、基盤となる画像４００が分析に必要でない温度変形を非常に明確に示してもよい。したがって、技術者または他の技術者は、熱スキャン・オーバレイを参照するだけでよいかもしれない。他のオーバレイを、さらにおよび／または代替的に、立体カメラ２００の周囲に対応する他の情報を測定する他の取付け素子２１０により生成してもよい。
【００４４】
幾つかの実施形態では、当該改善されたウォークスルービデオ５０９はリモート処理中初期検査を可能とするように構成される５１１。この新規な方法は、顧客が（図８で説明したように）製造構築サイクル内の任意の点で製品をレビューするための解決策を提供する。顧客は、クライアントデバイス１０２−１０８（例えば、ｉＰａｄ（登録商標）、モバイルデバイス、ラップトップ、またはスマートグラス等）を使用し、過去に記録された製品間隔のリモートウォークスルーを参照してもよい。幾つかの実施形態では、当該システムは、顧客が、リアルタイムなインタラクティブセッションを第２のモードで体験することを可能としてもよい。これは、顧客が、顧客要件に関する潜在的な問題を特定し、かつ／または、大量の時間とコストが費やされる前に過去に選択されたオプションを変更できるようにしてもよい。初期検査５１１をまた、ンジニアリング分析のために技術者またはエンジニアにより使用してもよい。当該画像データを分析して、顧客要件への偏差を識別し、当該アセンブリの温度変形を識別し、当該アセンブリの検査を実施することができる。例えば、較正された視差ラインは、技術者に、設計の更新と変更のために領域を迅速に測定し幾何的に評価するための能力を与えてもよい。別の例として、熱スキャン・オーバレイは、異常および他の機械的および／または電気的問題を識別する際に支援することができる。
【００４５】
さらに、後処理分析を使用して、当該構築プロセス中の潜在的な問題を自動的に識別してもよい。動作５１３で、当該改善されたウォークスルービデオ５０７を、後処理分析を用いて分析して、航空機構築プロセス中に発生した異常および不規則性を識別する。幾つかの実施形態では、当該後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む５２１。異物損傷（「ＦＯＤ」）は、物理または経済用語で表現できるか、または、製品の要求された安全性または性能特性を劣化させうるかまたは劣化させえない、外部オブジェクトに属する任意の障害である。ＦＯＤは、外部オブジェクトにより航空機に発生する障害と、外部オブジェクト自体の両方を記述してもよい。外部オブジェクトが、様々なツール、携帯電話、バッジ、食べ物等のような、航空機または車両の一部ではない任意のオブジェクトであってもよい。幾つかの実施形態では、ＦＯＤデータベースはサーバ１１２および／またはデータベース１１６内に格納される。当該ＦＯＤデータベースは、携帯電話オブジェクト、バッジ、鍵、ツール、リベット、ブラケット、配線または油圧スクラップ等を含む、様々な構築プロセス中に航空機内で共通に発見される外部オブジェクトに対応するアノマラスな形状のライブラリを含んでもよい。幾つかの実施形態では、当該ライブラリは、当該外部オブジェクトの様々な視野、サイズ決め、配色等に対応する形状を含む、かかる外部オブジェクトに関する情報を含む。後処理の間に、画像４００のような画像を、当該画像内のアノマラスな形状を当該ＦＯＤデータベースに格納された情報とマッチすることによって、かかる外部オブジェクトに対してスキャンしてもよい。例えば、当該システムは、航空機に残されたスクリュー・ドライバまたはレンチ識別してもよい。幾つかの実施形態では、当該システムが、特定の外部オブジェクトタイプを検索するように構成されてもよい。
【００４６】
幾つかの実施形態では、当該後処理分析は、パターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む５２３。航空機および構築段階ごとに、アセンブリ、サブアセンブリ、および顧客の一意なオプションに対する期待された形状があってもよい。これらの形状を、航空機の「施工完了時の」構成を維持するコンピュータ支援型設計およびコンピュータ支援型製造（ＣＡＤ／ＣＡＭ）システムから導出してもよい。かかる期待された形状が、サーバ１１２および／またはデータベース１１６内に格納された標準（期待された）形状データベースであってもよい。例えば、標準形状データベースは、航空機の座席、テーブル、手洗い、荷物入れ、および他の標準構造に関する形状情報を含んでもよい。後処理の間に、画像４００のような画像を、当該画像内の形状を、当該様々な構造の正確な取付けを確認するために当該標準形状データベースに格納された形状情報とマッチすることでかかる標準構造に関してスキャンしてもよい。例えば、アセンブリ準拠を、手洗いが期待される位置に正しく取り付けられることを確認するために実行してもよい。
【００４７】
幾つかの実施形態では、当該後処理分析はパターンおよび形状を分析して熱勾配準拠を決定するステップを含む５２５。航空機および構築段階ごとに、航空機の様々な領域の期待された温度勾配があってもよい。正常値から乖離する温度が、電気的または機械的問題を示しうる。かかる期待された温度勾配情報が、サーバ１１２内のサーマル（期待）熱データベースおよび／またはデータベース１１６に格納されてもよい。後処理の間に、図４Ｆに関連して前述したような熱スキャン・オーバレイを検索し、熱ヒートデータベースと比較して、期待された温度の閾値内で準拠しない温度勾配を識別してもよい。例えば、熱スキャン・オーバレイを有する画像４００のような画像からの客室照明の温度振舞いを、熱ヒートデータベースに対してチェックして、熱勾配温度が客室照明の期待される温度振舞いと一貫することを検証してもよい。
【００４８】
図６は、本開示で説明した様々なプロセスを実装できるコンピュータシステム６００の１例を示すブロック図である。システム６００は一般に、電源６２４と、メモリ６１２に格納されたモジュール、プログラムおよび／または命令を実行しそれにより動作を処理するための１つまたは複数の処理ユニット（ＣＰＵ）６０２と、１つまたは複数のネットワークまたは他の通信回路またはネットワーク６２２と通信するためのインタフェース６２０と、コントローラ６１８と、およびこれらのコンポーネントを相互接続するための１つまたは複数の通信バス６１４とを備える。幾つかの実施形態では、ネットワーク６２２が、図１で前述したネットワーク１１０のような無線および／または有線ネットワークであってもよい。幾つかの実施形態では、ネットワーク６２２は、別の通信バス、インターネット、イーサネット（登録商標）、イントラネット、他の広域ネットワーク、ローカル・エリア・ネットワーク、およびメトロポリタン・エリア・ネットワークであることができる。通信バス６１４は任意に、システムコンポーネントを相互接続しそれらの間の通信を制御する回路（場合によっては、チップ・セットと呼ばれる）を含む。システム６００は任意に、ディスプレイデバイス６０６、キーボード６０８、およびマウス６１０を備えるユーザインタフェース６０４を備える。
【００４９】
メモリ６１２は、ＤＲＡＭ、ＳＲＡＭ、ＤＤＲＲＡＭのような高速ランダムアクセスメモリまたは他のランダムアクセス固体状態メモリデバイスを含み、１つまたは複数の磁気ディスク記憶装置、光ディスク記憶装置、フラッシュメモリデバイス、または他の不揮発性固体状態記憶装置のような不揮発性メモリを含んでもよい。メモリ６１２は任意に、ＣＰＵ（複数可）６０２からリモートに配置された１つまたは複数の記憶装置６１６を含んでもよい。幾つかの実施形態では、メモリ１１６は１つまたは複数の記憶装置６１６を含んでもよい。
【００５０】
メモリ６１２、または代替的にメモリ６１２内の不揮発性メモリデバイス（複数可）は非一時的コンピュータ可読記憶媒体を含む。幾つかの実施形態では、メモリ６１２、またはメモリ６１２の当該コンピュータ可読記憶媒体は、当該以下のプログラム、モジュールおよびデータ構造、またはそのサブセットを格納する。
【００５１】
様々な基本システムサービスを処理しハードウェア依存タスクを実施するための手続きを含むオペレーティング・システム６４０と、
様々なプログラムファイルを格納するためのファイルシステム６４４と、
動作５０１で説明するように、３Ｄステレオ投影ビデオおよび／または画像４００のような画像を、ステレオ投影カメラ２００のような記録装置１１８から受信するための画像キャプチャ・モジュール６４６と、
動作５０３で説明するように、当該キャプチャされたビデオおよび／または画像をメモリ６１２、記憶装置６１６、および／またはデータベース１１６に格納し、当該ビデオおよび／または画像を機体番号に対応するリポジトリとして編成するための画像記憶モジュール６４８と、
動作５０７で説明するように、レーザ投影デバイスを含む立体カメラ２００および／または取付け素子２１０から投影されたラインに対応するデータを受信し、当該データを、当該関連付けられた画像に対応するオーバレイとしてメモリ６１２、記憶装置６１６、および／またはデータベース１１６に格納するための視差ラインオーバレイモジュール６５０と、
動作５０７で説明するように、赤外線ビジョンデバイスを含む取付け素子２１０によりキャプチャされたサーモグラフィ撮像に対応するデータを受信し、当該データを、当該関連付けられた画像に対応するオーバレイとしてメモリ６１２、記憶装置６１６、および／またはデータベース１１６に格納するための熱スキャン・オーバレイモジュール６５２と、
動作５１３で説明するように、メモリ６１２、記憶装置６１６、および／またはデータベース１１６に格納された形状およびパターンを、自動的に異物損傷（「ＦＯＤ」）を識別し、アセンブリ準拠を判定し、および／または温度偏差を分析するために、キャプチャされた画像および／またはオーバレイ内の形状およびパターンと比較するための後処理モジュール６５４と、
航空機識別情報、動作パラメータ、測定値、外部オブジェクトに対応するアノマラスな形状、適切なコンポーネントおよび／または構造、温度勾配情報、および／または他の製造情報に対応する期待された形状を含むローカルデータベース情報６５６。
【００５２】
上で特定した要素の各々が前述のメモリデバイスのうち１つまたは複数に格納されてもよく、上述の機能を実施するための１組の命令に対応する。上で特定したモジュールのうち１つまたは複数は、１つまたは複数のクライアントデバイス１０２−１０８および／またはローカル記憶６１６またはネットワーク６２２上のデータベース１１６のような他のデータベースから入力を取り出すことによって動作してもよい。上で特定したモジュールまたはプログラム（即ち、命令のセット）を別々のソフトウェアプログラム、手続きまたはモジュールとして実装する必要はなく、したがってこれらのモジュールの様々なサブセットを様々な実施形態において結合または再配置してもよい。幾つかの実施形態では、メモリ６１２は、上で識別したモジュールおよびデータ構造のサブセットを格納してもよい。さらに、メモリ６１２は、上述していない追加のモジュールおよびデータ構造を格納してもよい。
【００５３】
図６は「航空機構築プロセスの改善されたステレオ投影ビデオを生成するためのシステム」を示すが、図６は、本明細書で説明する実施形態の構造的機構としてよりも、１組のサーバに存在しうる様々な特徴の機能的説明を意図している。実際、当業者により認識されるように、別々に示された項目を結合してもよく、幾つかの項目を分離してもよい。例えば、図６に別々に示した幾つかの項目を単一のサーバで実装してもよく、単一の項目を１つまたは複数のサーバにより実装してもよい。航空機構築プロセスの改善されたステレオ投影ビデオを生成するためのシステムを実装するためのサーバの実際の数およびどのように機能がそれらに間で割り当てられるかは実装ごとに変化し、当該システムがピーク利用期間中にならびに平均利用期間中に処理しなければならないデータトラフィックに部分的に依存しうる。
【００５４】
航空機および航空機を製造し動作させる方法の例
説明されたシステムおよび技術の実装の様々な態様をよりよく理解するために、航空機および航空機翼の簡単な説明を次に提供する。図７は、幾つかの実施形態に従う航空機７００の略図である。図７に示すように、航空機７００は、長手方向軸（Ｘ−軸）、水平軸（Ｙ−軸）、および垂直軸（Ｚ軸）により定義される。様々な実施形態では、航空機７００は内部７７０を有する機体７５０を含む。航空機７００は機体７５０に接続された翼７２０を含む。航空機７００はまた、翼７２０により支持されるエンジン７３０を備えてもよい。幾つかの実施形態では、航空機７００はさらに、電気検査システム７４０および環境検査システム７６０のような幾つかの高レベル検査システムを含む。他の実施形態では、任意数の他の検査システムを含んでもよい。
【００５５】
図７に示す航空機７００は、例示的な実施形態に従う、方法５００の実装によるシステム１００のような、当該構築プロセスの様々な段階で改善されたステレオ投影ビデオ生成されうる車両の１例である。航空宇宙の例を示したが、本明細書で開示した原理を自動車業界のような他の業界に適用してもよい。したがって航空機７００に加えて、本明細書で開示した原理を、他の車両、例えば、地上車両、海上車両、空中間車両等に適用してもよい。
【００５６】
本開示の例を、図８に示す航空機製造およびサービス方法８００および図７に示すよう航空機７００の文脈で説明してもよい。事前生産中は、例示的な方法８００は、航空機７００の仕様および設計（ブロック８０４）および素材調達（ブロック８０６）を含んでもよい。生産中は、航空機７００のコンポーネントおよびサブアセンブリ製造（ブロック８０８）およびシステム統合（ブロック８１０）を行ってもよい。幾つかの実施形態では、システム統合（ブロック８１０）は、構築日−１８１０−Ａ、構築日−２８１０−Ｂ、構築日−３８１０−Ｃ、および構築日−Ｎ８１０−Ｄまでを含む１つまたは複数の指定された構築日を含んでもよい。幾つかの実施形態では、コンポーネントおよびサブアセンブリ製造（ブロック８０８）およびシステム統合（ブロック８１０）を並列に行ってもよい。例えば、他のコンポーネントおよび／またはサブアセンブリがブロック８０８で製造されている間に、ブロック８０８における様々なコンポーネントおよび／またはサブアセンブリ完全な製造として、それらをブロック８１０で航空機に統合してもよい。これらの方法により形成された説明されたシステム、方法、およびアセンブリを、航空機７００の仕様および設計（ブロック８０４）、航空機７００の素材調達（ブロック８０６）、コンポーネントおよびサブアセンブリ製造（ブロック８０８）、および／またはシステム統合（ブロック８１０）の何れかで使用してもよい。
【００５７】
その後、航空機７００がサービスにおくために（ブロック８１４）認証および配送を受けてもよい（ブロック８１２）。サービス中に、航空機７００が定期保守およびサービスに関してスケジュールされてもよい（ブロック８１６）。定期保守およびサービスは、航空機７００の１つまたは複数の検査システムの修正、再構成、改良等を含んでもよい。これらの方法により形成される説明されたシステム、方法、およびアセンブリを、認証および配送（ブロック８１２）、サービス（ブロック８１４）、および／または定期保守およびサービス（ブロック８１６）の何れかで使用してもよい。
【００５８】
例示的な方法８００のプロセスの各々を、検査システムインテグレータ、サードパーティ、および／またはオペレータ（例えば、顧客）により実施または実行してもよい。この説明の目的のため、検査システムインテグレータは、限定ではなく、任意数の航空機製造業者および主要検査システム下請け業者と、サードパーティが限定ではなく、任意数のベンダ、下請け業者、およびサプライヤを含んでもよく、オペレータが航空会社、リース会社、軍事機関、サービス組織等であってもよいを含んでもよい。
【００５９】
本明細書で示すかまたは説明した装置（複数可）および方法（複数可）を、製造およびサービス方法の段階のうち任意の１つまたは複数の間に使用してもよい（例示的な方法８００）。例えば、コンポーネントおよびサブアセンブリ製造（ブロック８０８）に対応するコンポーネントまたはサブアセンブリを、航空機７００サがービス中に生産されたコンポーネントまたはサブアセンブリと同様な方式で製作または製造してもよい（ブロック８１４）。また、例えば、大幅に航空機７００の組立てを加速するかまたは航空機のコストを削減することによって、当該装置（複数可）、方法（複数可）、またはその組合せの１つまたは複数の例を生産段階で利用してもよい（ブロック８０８）および（ブロック８１０）。同様に、当該装置または方法実装、またはその組合せの１つまたは複数の例を、例えば限定ではなく、航空機７００がサービス中（ブロック８１４）および／または保守およびサービス中に（ブロック８１６）利用してもよい。
【００６０】
結論
本明細書で開示された装置（複数可）および方法（複数可）の異なる例は、様々なコンポーネント、特徴、および機能を含む。本明細書で開示された装置（複数可）および方法（複数可）の当該様々な例は、本明細書で開示された装置（複数可）および方法（複数可）の他の例の何れかのコンポーネント、特徴、および機能の何れかを任意の組合せで含んでもよく、かかる可能性の全ては本開示の趣旨および範囲内にあることが意図されていることは理解されるべきである。上述の説明および当該関連付けられた図面で提示した教示事項の効果を有する、本明細書で説明した例の多数の修正は本開示が関連する当業者に想到される。
【００６１】
したがって、本開示は示した特定の例に限定されず、修正および他の例が添付の特許請求の範囲に含まれることが意図されることは理解される。さらに、上述の説明および当該関連付けられた図面は本開示の例を要素および／または機能の特定の例示的な組合せの文脈で説明するが、要素および／または機能の異なる組合せを添付の特許請求の範囲から逸脱しない代替的な実装により提供してもよいことは理解されるべきである。したがって、添付の特許請求の範囲内の括弧で括った参照番号は例示的な目的としてのみ提供され、クレーム主題の範囲を本開示で提供した特定の例に限定しようとするものではない。
【００６２】
さらに、本開示は以下の項に従う実施形態を含む、
【００６３】
項１．航空機構築プロセスの複数の段階をキャプチャするように構成された立体記録装置と、
１つまたは複数のプロセッサと、
メモリと、
当該メモリに格納された１つまたは複数のプログラムであって、当該１つまたは複数のプログラムは、
機体番号により編成された３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するステップであって、３Ｄビデオの当該リポジトリは航空機構築プロセスの当該複数の段階に対応する、ステップと、
航空機構築プロセスの改善されたウォークスルービデオを生成するステップであって、当該改善されたウォークスルービデオは、
当該ビデオに統合された視差グリッド・オーバレイと、
当該ビデオに統合された熱スキャン・オーバレイと、
のうち１つまたは複数を含む、ステップと、
航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて当該改善されたウォークスルービデオを分析するステップと、
のための命令を含む、プログラムと、
を備える、システム。
【００６４】
項２．当該後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む、項１に記載のシステム。
【００６５】
項３．当該後処理分析はパターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む、項１に記載のシステム。
【００６６】
項４．当該後処理分析はパターンおよび形状を分析して熱勾配準拠を決定するステップを含む、項１に記載のシステム。
【００６７】
項５．当該システムはさらにリモート処理中初期検査能力を提供するように構成される、項１に記載のシステム。
【００６８】
項６．位置、間隔、および航空機構造に関する正確な現実の測定値を当該改善されたウォークスルービデオから抽出できるように当該視差グリッド・オーバレイが構成される、項１に記載のシステム。
【００６９】
項７．当該視差グリッド・オーバレイはオートフォーカスを用いて自動的に決定された複数の視差ラインを含み、
当該複数の視差ラインは１つまたは複数の組の視差ラインとして編成され、
視差ラインの各組は当該視差グリッド・オーバレイ内の別々のビデオ・レイヤとして格納される、
項１に記載のシステム。
【００７０】
項８．立体記録装置を介して航空機構築プロセスの複数の段階をキャプチャするステップと、
機体番号により編成された３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するステップであって、３Ｄビデオの当該リポジトリは航空機構築プロセスの当該複数の段階に対応する、ステップと、
航空機構築プロセスの改善されたウォークスルービデオを生成するステップであって、当該改善されたウォークスルービデオは、
当該ビデオに統合された視差グリッド・オーバレイと、
当該ビデオに統合された熱スキャン・オーバレイと、
のうち１つまたは複数を含む、ステップと、
航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて当該改善されたウォークスルービデオを分析するステップと、
を含む、方法。
【００７１】
項９．当該後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む、項８に記載の方法。
【００７２】
項１０．当該後処理分析はパターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む、項８に記載の方法。
【００７３】
項１１．当該後処理分析は、パターンおよび形状を分析して熱勾配準拠を決定するステップを含む、項８に記載の方法。
【００７４】
項１２．当該改善されたウォークスルービデオはリモート処理中初期検査を可能とするように構成される、項８に記載の方法。
【００７５】
項１３．位置、間隔、および航空機構造に関する正確な現実の測定値を当該改善されたウォークスルービデオから抽出できるように当該視差グリッドが構成される、項８に記載の方法。
【００７６】
項１４．当該視差グリッドはオートフォーカスを用いて自動的に決定された複数の視差ラインを含み、
当該複数の視差ラインは１つまたは複数の組の視差ラインとして編成され、
視差ラインの各組は当該視差グリッド・オーバレイ内の別々のビデオ・レイヤとして格納される、項８に記載の方法。
【００７７】
項１５．コンピュータにより実行されるように構成された１つまたは複数のプログラムを格納した非一時的コンピュータ可読記憶媒体であって、当該１つまたは複数のプログラムは、
立体記録装置を介して航空機構築プロセスの複数の段階をキャプチャするステップと、
機体番号により編成された３Ｄビデオのリポジトリを含むステレオ投影ライブラリを構築するステップであって、３Ｄビデオの当該リポジトリは航空機構築プロセスの当該複数の段階に対応する、ステップと、
航空機構築プロセスの改善されたウォークスルービデオを生成するステップであって、当該改善されたウォークスルービデオは、
当該ビデオに統合された視差グリッド・オーバレイと、
当該ビデオに統合された熱スキャン・オーバレイと、
のうち１つまたは複数を含む、ステップと、
航空機構築プロセス中に発生した異常および不規則性を特定するための後処理分析を用いて当該改善されたウォークスルービデオを分析するステップと、
のための命令を含む、非一時的コンピュータ可読記憶媒体。
【００７８】
項１６．当該後処理分析は異物損傷を検出するためのパターンおよび形状を分析するステップを含む、項１５に記載の当該非一時的コンピュータ可読記憶媒体。
【００７９】
項１７．当該後処理分析はパターンおよび形状を分析して、アセンブリおよびサブアセンブリ準拠を決定するステップを含む、項１５に記載の当該非一時的コンピュータ可読記憶媒体。
【００８０】
項１８．当該後処理分析はパターンおよび形状を分析して熱勾配準拠を決定するステップを含む、項１５に記載の当該非一時的コンピュータ可読記憶媒体。
【００８１】
項１９．位置、間隔、および航空機構造に関する正確な現実の測定値を当該改善されたウォークスルービデオから抽出できるように当該視差グリッドが構成される、項１５に記載の当該非一時的コンピュータ可読記憶媒体。
【００８２】
項２０．当該視差グリッドはオートフォーカスを用いて自動的に決定された複数の視差ラインを含み、
当該複数の視差ラインは１つまたは複数の組の視差ラインとして編成され、
視差ラインの各組は当該視差グリッド・オーバレイ内の別々のビデオ・レイヤとして格納される、
項１５に記載の当該非一時的コンピュータ可読記憶媒体。
【符号の説明】
【００８３】
６１８  コントローラ
６２０  通信回路
６２２  ネットワーク／インターネット
６２４  電源
６４０  オペレーティング・システム
６４４  ファイル・システム
６４６  画像キャプチャ・モジュール
６４８  画像記憶モジュール
６５０  視差オーバレイ・モジュール
６５２  熱スキャン・オーバレイ・モジュール
６５４  後処理モジュール
６５６  ローカル・データベース情報
【図１】
2018041437.tif 000003
【図２】
2018041437.tif 000004
【図３Ａ】
2018041437.tif 000005
【図３Ｂ】
2018041437.tif 000006
【図４Ａ】
2018041437.tif 000007
【図４Ｂ】
2018041437.tif 000008
【図４Ｃ】
2018041437.tif 000009
【図４Ｄ】
2018041437.tif 000010
【図４Ｅ】
2018041437.tif 000011
【図４Ｆ】
2018041437.tif 000012
【図５Ａ】
2018041437.tif 000013
【図５Ｂ】
2018041437.tif 000014
【図６】
2018041437.tif 000015
【図７】
2018041437.tif 000016
【図８】
2018041437.tif 000017
【外国語明細書】
2018041437000001.pdf