(57)【要約】【課題】撮像画像データとＣＧデータとを合成した合成画像の作成作業の効率を向上させる。【解決手段】画像合成装置２０は、撮像画像データを取得する映像入力インタフェース３００と、ＣＧデータを取得するＣＧ入力インタフェース３０５と、撮像画像データにおけるＣＧデータが合成される合成位置に対応する領域の画像の特性に基づいて、ＣＧデータが補正された補正ＣＧデータを生成する画像特性適用部３０６と、補正ＣＧデータが合成位置において撮像画像データに合成された合成画像データを生成する合成部３０８と、を有する。【選択図】図３
2017134447.tif 000002
【特許請求の範囲】
【請求項１】
撮像画像データを取得する画像取得手段と、
グラフィックスデータを取得するデータ取得手段と、
前記撮像画像データにおける前記グラフィックスデータが合成される合成位置に対応する領域の画像の特性に基づいて、前記グラフィックスデータが補正された補正グラフィックスデータを生成する補正データ生成手段と、
前記補正グラフィックスデータが前記合成位置において前記撮像画像データに合成された合成画像データを生成する合成手段と、
を有することを特徴とする画像合成装置。
【請求項２】
前記補正データ生成手段は、前記撮像画像データに含まれる一以上の注目オブジェクトを特定するための情報を取得し、取得した情報に基づいて特定される前記一以上の注目オブジェクトのうち、前記合成位置に最も近い注目オブジェクトの画像の特性に基づいて、前記補正グラフィックスデータを生成することを特徴とする、
請求項１に記載の画像合成装置。
【請求項３】
前記補正データ生成手段は、前記合成位置から所定の範囲内の領域の画像の特性に基づいて、前記グラフィックスデータが補正された補正グラフィックスデータを生成することを特徴とする、
請求項１に記載の画像合成装置。
【請求項４】
前記補正データ生成手段は、前記合成位置に対応する領域に含まれる画素値の統計値に基づいて、前記画像の特性を決定することを特徴とする、
請求項１から３のいずれか１項に記載の画像合成装置。
【請求項５】
前記補正データ生成手段は、ユーザによるフォーカス調整が終了したことに応じて、前記補正グラフィックスデータを生成することを特徴とする、
請求項１から４のいずれか１項に記載の画像合成装置。
【請求項６】
前記補正データ生成手段は、前記フォーカス調整が終了した後の前記撮像画像データの輝度及びシャープネスに基づいて、前記補正グラフィックスデータを生成することを特徴とする、
請求項５に記載の画像合成装置。
【請求項７】
前記補正データ生成手段は、所定期間内に複数のフォーカス調整が行われた場合、最後に実行されたフォーカス調整が終了したことに応じて前記補正グラフィックスデータを生成することを特徴とする、
請求項５又は６に記載の画像合成装置。
【請求項８】
前記合成手段は、ユーザによる前記合成画像データを調整する操作に応じて、前記撮像画像データ及び前記補正グラフィックスデータの画質を連動させて調整することを特徴とする、
請求項１から７のいずれか１項に記載の画像合成装置。
【請求項９】
前記補正グラフィックスデータと、前記補正データ生成手段が前記補正グラフィックスデータの生成に用いた前記画像の特性とを関連付けて表示部に表示させる表示制御手段をさらに有することを特徴とする、
請求項１から８のいずれか１項に記載の画像合成装置。
【請求項１０】
前記グラフィックスデータと、前記グラフィックスデータに関連付けられた、前記グラフィックスデータが合成される合成位置に対応する領域の画像の特性を示す画像特性情報と、を含むファイルを出力するファイル出力手段をさらに有することを特徴とする、
請求項１から９のいずれか１項に記載の画像合成装置。
【請求項１１】
前記ファイルを取得するファイル取得手段をさらに有し、
前記補正データ生成手段は、前記ファイル取得手段が取得した前記ファイルに含まれる前記グラフィックスデータと前記画像特性情報とに基づいて前記補正グラフィックスデータを生成することを特徴とする、
請求項１０に記載の画像合成装置。
【請求項１２】
コンピュータにより実行される、
撮像画像データを取得するステップと、
グラフィックスデータを取得するステップと、
前記撮像画像データにおける前記グラフィックスデータが合成される合成位置に対応する領域の画像の特性に基づいて、前記グラフィックスデータが補正された補正グラフィックスデータを生成するステップと、
前記補正グラフィックスデータが前記合成位置において前記撮像画像データに合成された合成画像データを生成するステップと、
を有することを特徴とする画像合成方法。
【請求項１３】
前記補正グラフィックスデータを生成するステップは、
前記撮像画像データに含まれる一以上の注目オブジェクトを特定するための情報を取得するステップと、
取得した情報に基づいて特定される前記一以上の注目オブジェクトのうち、前記合成位置に最も近い注目オブジェクトの画像の特性に基づいて、前記補正グラフィックスデータを生成するステップと、
を有することを特徴とする、
請求項１２に記載の画像合成方法。
【請求項１４】
前記補正グラフィックスデータを生成するステップにおいて、前記合成位置から所定の範囲内の領域の画像の特性に基づいて、前記グラフィックスデータが補正された補正グラフィックスデータを生成することを特徴とする、
請求項１３に記載の画像合成方法。
【請求項１５】
前記補正グラフィックスデータを生成するステップの前に、ユーザによるフォーカス調整が終了したことを検出するステップをさらに有し、
前記補正グラフィックスデータを生成するステップにおいて、前記フォーカス調整が終了したことに応じて、前記補正グラフィックスデータを生成することを特徴とする、
請求項１２から１４のいずれか１項に記載の画像合成方法。
【請求項１６】
前記フォーカス調整が終了したことを検出するステップの後に、前記フォーカス調整が終了した後の前記撮像画像データの輝度及びシャープネスを取得するステップをさらに有し、
前記補正グラフィックスデータを生成するステップにおいて、取得した前記フォーカス調整が終了した後の前記撮像画像データの輝度及びシャープネスに基づいて、前記補正グラフィックスデータを生成することを特徴とする、
請求項１５に記載の画像合成方法。
【請求項１７】
コンピュータを、請求項１から１１のいずれか１項に記載の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像画像データとグラフィックスデータとを合成する画像合成装置及び画像合成方法に関するものである。
【背景技術】
【０００２】
従来、カメラで撮影した映像に含まれる撮像画像データに、コンピュータで作成したグラフィックスデータを合成する画像合成装置が知られている。特許文献１には、実写画像の奥行き情報と、グラフィックス画像の奥行き情報とに基づいて、実写画像の奥行きとグラフィックス画像の奥行きとが合うように補正する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−１４６２２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
撮像画像データの被写界深度が比較的浅い場合、撮像画像データ内の位置によって、輝度やシャープネスが異なる。このような場合に、撮像画像データの平均的な輝度やシャープネスに合わせてグラフィックスデータを補正してしまうと、グラフィックスデータが合成される位置によっては、撮像画像データにおけるグラフィックスデータが合成された位置の周辺の画質とグラフィックスデータの画質とが合わないという問題が生じてしまう。その結果、グラフィックスデータを合成した画像の補正に長時間を要するため、映像制作の効率が悪いという問題があった。
【０００５】
そこで、本発明は上述した点に鑑みてなされたものであり、撮像画像データとグラフィックスデータとを合成した合成画像の作成作業の効率を向上させることができる画像合成装置及び画像合成方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の画像合成装置は、撮像画像データを取得する画像取得手段と、グラフィックスデータを取得するデータ取得手段と、前記撮像画像データにおける前記グラフィックスデータが合成される合成位置に対応する領域の画像の特性に基づいて、前記グラフィックスデータが補正された補正グラフィックスデータを生成する補正データ生成手段と、前記補正グラフィックスデータが前記合成位置において前記撮像画像データに合成された合成画像データを生成する合成手段と、を有することを特徴とする。
【０００７】
本発明の画像合成方法は、コンピュータにより実行される、撮像画像データを取得するステップと、グラフィックスデータを取得するステップと、前記撮像画像データにおける前記グラフィックスデータが合成される合成位置に対応する領域の画像の特性に基づいて、前記グラフィックスデータが補正された補正グラフィックスデータを生成するステップと、前記補正グラフィックスデータが前記合成位置において前記撮像画像データに合成された合成画像データを生成するステップと、を有することを特徴とする。
【発明の効果】
【０００８】
本発明によれば、撮像画像データとグラフィックスデータとを合成した合成画像の作成作業の効率を向上させることができるという効果を奏する。
【図面の簡単な説明】
【０００９】
【図１】本実施形態に係る映像制作のワークフローを示す図である。
【図２】本実施形態に係る画像合成システムＳの構成を示す図である。
【図３】画像合成装置２０の構成を示す図である。
【図４】画像合成装置２０に表示される画面の例を示す図である。
【図５】画像合成装置２０の各処理部における動作の流れを示すタイムチャートである。
【図６】画像合成装置２０の動作フローチャートである。
【図７】第２の実施形態に係る画像合成装置２０の構成を示す図である。
【図８】ＣＤＬファイルを作成する動作のフローチャートである。
【図９】ＣＤＬファイル１０００の一例を示す図である。
【図１０】第３の実施形態に係る画像合成装置２０の構成を示す図である。
【図１１】ＣＤＬファイルの内容をグラフィックスデータに適用する場合の動作を示すフローチャートである。
【発明を実施するための形態】
【００１０】
＜第１の実施形態＞
［映像制作ワークフローの概要］
本発明の第1の実施形態における画像合成装置は、カメラで被写体を撮影して得られた撮像画像から複数の注目オブジェクトを抽出し、注目オブジェクトに対応する領域の画素の輝度又はシャープネス等の画像特性情報を適用したグラフィックスデータ（以下、ＣＧ（Computer Graphics）データという）を撮像画像データと合成して表示する。ＣＧデータは、コンピュータにより生成された画像データである。本実施形態の画像合成装置を用いることにより、映像制作者（以下、ユーザという）は、カメラで撮影中に、近傍の注目オブジェクトと同等の画像特性を有するＣＧデータが合成された撮像画像を確認することができる。
【００１１】
図１は、本実施形態に係る映像制作のワークフローを示す図である。ワークフローは、ＣＧ作成ＷＦ１、撮影ＷＦ２、ＣＧ補正ＷＦ３、保存ＷＦ４、合成ＷＦ５及び画像補正ＷＦ６を含んでいる。
図１に示すワークフローにおいては、撮影ＷＦ２で被写体を撮影している間に、ＣＧ補正ＷＦ３において、ＣＧ作成ＷＦ１で作成されたＣＧデータを合成する位置の画像特性に合うようにＣＧデータを補正して、撮像画像データに合成して表示する。そして、保存ＷＦ４において、撮像画像データと、撮像画像データの画像特性が適用されたＣＧデータとが、記憶媒体に保存される。その後、合成ＷＦ５において、撮影終了後に撮像画像データとＣＧデータとが再び合成され、最後に、画像補正ＷＦ６において、撮像画像データ及びＣＧデータを補正するための画像処理が施される。
【００１２】
したがって、ユーザは、撮影ＷＦ２において、撮像画像データの画像特性に合った状態のＣＧデータが合成された合成画像データを確認しながら撮影作業を行うことができるので、制作する映像の品質を向上させることができる。また、画像補正ＷＦ６においては、撮像画像データとＣＧデータとが、ほぼ同じ画像特性を有しているので、ユーザは、撮像画像データとＣＧデータとを連動して容易に補正することができる。また、撮像画像データとＣＧデータとを個別に補正する必要がある場合であっても微調整で済むので、容易に補正をすることができる。
【００１３】
この点、本実施形態に係るワークフローは、撮像画像データを記憶媒体に保存した後に撮像画像データに合わせてＣＧデータを補正する必要がある従来のワークフローに比べて、画像補正ＷＦ６における補正量が少ない。したがって、本実施形態に係るワークフローによれば、ユーザの作業の短縮が可能であり、ワークフロー全体での作業効率化を実現することができる。
【００１４】
［画像合成システムＳの構成］
図２は、本実施形態に係る画像合成システムＳの構成を示す図である。画像合成システムＳは、画像合成装置２０と、カメラ２１と、レコーダ２２と、コントローラ２３と、を有する。
画像合成装置２０は、カメラ２１から取得した撮像画像データと、レコーダ２２から取得したＣＧデータとを合成して合成画像データを生成する装置である。画像合成装置２０は、例えば記憶媒体に記憶されたプログラムを実行することにより動作するコンピュータであり、合成画像データを表示するディスプレイを有する。
【００１５】
カメラ２１は、ユーザが被写体を撮影するために用いる。カメラ２１で生成された撮像画像データは、画像合成装置２０に送信され、画像合成装置２０において表示される。
レコーダ２２は、ＣＧデータを蓄積する記憶媒体を有する。レコーダ２２は、ユーザの指示に応じて、保存しているＣＧデータを画像合成装置２０に送信する。
【００１６】
コントローラ２３は、ユーザが画像合成装置２０を操作するためのデバイスであり、調整つまみ２４、十字キー２５、キャンセルキー２６、及び決定キー２７を有する。ユーザは、コントローラ２３を用いて、画像合成装置２０に表示された撮像画像データにおいてＣＧデータを合成する位置を指定したり、合成する対象となるＣＧデータを選択したりすることができる。
【００１７】
なお、カメラ２１は、生成した撮像画像データをサーバ２８に送信してもよい。また、レコーダ２２は、蓄積しているＣＧデータをサーバ２８に送信してもよく、サーバ２８からＣＧデータを受信してもよい。画像合成装置２０は、レコーダ２２からＣＧデータを取得する代わりに、サーバ２８からＣＧデータを取得してもよい。
【００１８】
［画像合成装置２０の構成］
図３は、画像合成装置２０の概略構成を示すブロック図である。
画像合成装置２０は、入力される撮像画像データの処理部として、映像入力インタフェース３００、オブジェクト検出部３０１、高域着色部３０２、ピクセルズーム部３０３及び画像特性特定部３０４を有する。また、画像合成装置２０は、ＣＧデータの処理部として、ＣＧ入力インタフェース３０５、画像特性適用部３０６、スケーリング部３０７、ファイル作成部３１０及びファイル出力部３１１を有する。
【００１９】
また、画像合成装置２０は、撮像画像データとＣＧデータとを合成して表示するための処理部として、合成部３０８及びパネル表示部３０９を有する。また、画像合成装置２０は、ユーザからの指示に基づいて各処理部を制御するためのユーザ指示制御部３１２を有する。オブジェクト検出部３０１、高域着色部３０２、ピクセルズーム部３０３、画像特性特定部３０４及び画像特性適用部３０６は、補正データ生成手段として機能する。補正データ生成手段は、撮像画像データにおけるＣＧデータが合成される合成位置に対応する領域の画像の特性に基づいて、ＣＧデータが補正された補正ＣＧデータを生成する。
【００２０】
図４は、画像合成装置２０に表示される画面の例を示す図である。図４（ａ）は、ＣＧデータが合成されていない状態の撮像画像データ５０を表示している画面を示している。図４（ａ）に示す画面には、撮像画像データ５０を表示する撮像画像データ表示領域Ｒ１と、ＣＧデータを表示するＣＧデータ表示領域Ｒ２とが設けられている。図４（ｂ）は、ＣＧデータが合成された状態の撮像画像データ６０を表示している画面を示している。
【００２１】
図４（ａ）に示す撮像画像データ表示領域Ｒ１には、雲５３、雲５４、山５５及び木５６等の注目オブジェクトを含む撮像画像データ５０が表示されている。注目オブジェクトは、撮像画像データ５０における背景画像と識別可能なオブジェクトである。また、ＣＧデータ表示領域Ｒ２には、ＣＧデータ５１及びＣＧデータ５２が表示されている。ユーザは、例えば、ＣＧデータ５１及びＣＧデータ５２のいずれかを選択した後に、選択したＣＧデータの合成位置を撮像画像データ５０において指定することで、図４（ｂ）に示すように、所望の位置にＣＧデータを配置して合成することができる。ユーザは、撮像画像データ５０にＣＧデータを配置する前、又はＣＧデータを配置した後のいずれかのタイミングで、ＣＧデータの大きさを変更することができる。
【００２２】
ＣＧデータには、撮像画像データ５０と合成された時点で、ＣＧデータが合成された位置の近傍の注目オブジェクトの画像特性が適用されている。例えば、雲５４の近傍に配置されたＣＧデータ５１には、雲５４に含まれる画素の輝度及びシャープネスの平均値又は中間値等の統計値が適用されている。また、木５６の近傍に配置されたＣＧデータ５２には、木５６に含まれる画素の輝度及びシャープネスの統計値が適用されている。
【００２３】
以下、図３を参照しながら、画像合成装置２０の構成について説明する。
映像入力インタフェース３００は、カメラ２１から撮像画像データ５０を受信する画像取得手段である。映像入力インタフェース３００は、受信した撮像画像データ５０をオブジェクト検出部３０１に送信する。
【００２４】
オブジェクト検出部３０１は、映像入力インタフェース３００から受信した撮像画像データ５０に含まれる注目オブジェクトを検出する。オブジェクト検出部３０１は、例えば、ユーザ指示制御部３１２を介して、撮像画像データに含まれる一以上の注目オブジェクトを特定するための情報を取得し、取得した情報に基づいて、一以上の注目オブジェクトを特定する。オブジェクト検出部３０１は、例えば、撮像画像データ５０における輪郭線を検出し、検出した輪郭線の形状及び輪郭線の内側の画素の値に基づいて、予めユーザにより設定された色及び形状を有する注目オブジェクトを検出する。オブジェクト検出部３０１は、注目オブジェクトを特定するための情報として、ユーザが選択した注目オブジェクトの座標をユーザから取得してもよい。オブジェクト検出部３０１は、検出した注目オブジェクトを特定するための情報として、例えば輪郭線の座標データを含むオブジェクト情報を記憶部（不図示）に記憶する。
【００２５】
撮像画像データ５０における注目オブジェクトの位置及び大きさは、ユーザがカメラ２１を操作することにより変化する。そこで、オブジェクト検出部３０１は、撮像画像データ５０を映像入力インタフェース３００から受け取るたびに、注目オブジェクトを検出して、直前に検出していた注目オブジェクトと比較する。オブジェクト検出部３０１は、注目オブジェクトのオブジェクト情報に変化があることを検出した場合、記憶部に記憶されているオブジェクト情報を更新する。
【００２６】
オブジェクト検出部３０１は、検出した注目オブジェクトのオブジェクト情報を、高域着色部３０２及びピクセルズーム部３０３に通知する。オブジェクト検出部３０１は、例えば、検出した複数の注目オブジェクトのうち、ユーザに選択された注目オブジェクトのオブジェクト情報を、高域着色部３０２及びピクセルズーム部３０３に通知する。オブジェクト検出部３０１は、ユーザがＣＧデータを合成する位置に最も近い注目オブジェクトのオブジェクト情報を選択し、選択したオブジェクト情報を高域着色部３０２及びピクセルズーム部３０３に通知してもよい。
【００２７】
高域着色部３０２は、撮像画像データ５０における所定の周波数よりも高い高域周波数を有する領域を検出し、高域周波数を有すると判断した領域に着色するピーキング機能を実現する。高域着色部３０２が、画面内のシャープな部分に対応する高域周波数を有する領域に着色することで、ユーザがフォーカスを調整しやすくなる。高域着色部３０２は、例えば、オブジェクト情報が示す注目オブジェクトから所定の範囲の領域における高域周波数を有する領域に着色する。
【００２８】
高域着色部３０２は、コントローラ２３及びユーザ指示制御部３１２を介してユーザから取得した、高域周波数の閾値及び着色する色の設定内容に基づいて、高域周波数を有する領域に着色する。高域着色部３０２は、ユーザによるフォーカス調整が行われる前の撮像画像データ５０、ユーザによるフォーカス調整が終了した後の撮像画像データ５０ａ、及びオブジェクト検出部３０１から通知されたオブジェクト情報を、画像特性特定部３０４に送信する。
【００２９】
ピクセルズーム部３０３は、コントローラ２３及びユーザ指示制御部３１２を介して入力されるユーザの指示に応じて、各画素の画素値を変化させることなく各画素の表示サイズを拡大又は縮小することにより、画面を拡大又は縮小するピクセルズーム機能を実行する。ピクセルズーム部３０３が画面を拡大又は縮小すると、オブジェクト検出部３０１で検出した注目オブジェクトの座標及び大きさ等が変化する。そこで、ピクセルズーム部３０３は、拡大又は縮小に伴う注目オブジェクトの座標及び大きさの変化量に基づいて、オブジェクト検出部３０１から受信したオブジェクト情報を更新する。高域着色部３０２は、拡大又は縮小を行う前の撮像画像データ５０、拡大又は縮小した後の撮像画像データ５０ｂ、及びオブジェクト検出部３０１から通知されたオブジェクト情報を、画像特性特定部３０４に送信する。
【００３０】
画像特性特定部３０４は、高域着色部３０２又はピクセルズーム部３０３から、各々の処理ブロックで処理を実施する前の撮像画像データ５０、若しくは高域着色部３０２又はピクセルズーム部３０３で処理を実施した後の撮像画像データ５０ａ又は撮像画像データ５０ｂ、及び各注目オブジェクトのオブジェクト情報を受信する。画像特性特定部３０４は、例えば、ユーザによるフォーカス調整が終了したことに応じて、高域着色部３０２又はピクセルズーム部３０３から入力された撮像画像データ５０ａ又は撮像画像データ５０ｂの各画素の画素値を特定する。
【００３１】
そして、画像特性特定部３０４は、ＣＧデータを合成する位置に対応する領域に含まれる画素値の平均値等の統計値に基づいて、当該領域における輝度及びシャープネス等の画像の特性を決定し、画像特性情報を生成する。画像特性特定部３０４は、例えば、各画素の輝度及びシャープネスと、オブジェクト情報とに基づいて、注目オブジェクトの領域又は合成位置から所定の範囲の領域に対応する輝度及びシャープネスを示す画像特性情報を生成する。画像特性特定部３０４は、ユーザがフォーカス調整を行わなかった場合、撮像画像データ５０に含まれる、合成位置に対応する領域の各画素の輝度及びシャープネスに基づく統計値を用いて画像特性情報を生成する。
【００３２】
画像特性特定部３０４は、生成した画像特性情報を、オブジェクト情報とともに画像特性適用部３０６に送信する。また、画像特性特定部３０４は、撮像画像データ５０、撮像画像データ５０ａ又は撮像画像データ５０ｂを合成部３０８に送信する。また、画像特性特定部３０４は、撮像画像データ５０、撮像画像データ５０ａ又は撮像画像データ５０ｂに含まれる全画素の輝度及びシャープネスを示す全画素特性情報を、画像特性適用部３０６及びスケーリング部３０７を介して、ファイル作成部３１０に送信する。
【００３３】
ＣＧ入力インタフェース３０５は、レコーダ２２からＣＧデータを受信するデータ取得手段である。本実施形態においては、ＣＧ入力インタフェース３０５が、ＣＧデータ５１及びＣＧデータ５２を受信するものとする。ＣＧ入力インタフェース３０５は、受信したＣＧデータ５１及びＣＧデータ５２を画像特性適用部３０６に送信する。
【００３４】
画像特性適用部３０６は、ＣＧ入力インタフェース３０５からＣＧデータ５１及びＣＧデータ５２を受信する。また、画像特性適用部３０６は、ＣＧデータ５１及びＣＧデータ５２が合成される位置である合成位置に対応する領域の画像の特性を特定し、特定した画像特性をＣＧデータ５１及びＣＧデータ５２に適用して補正することにより、補正ＣＧデータを生成する。
【００３５】
画像特性適用部３０６は、コントローラ２３を介してユーザにより指定された各ＣＧデータの合成位置に最も近い注目オブジェクトの画像の特性と同等の画像特性になるように、ＣＧデータ５１及びＣＧデータ５２を補正する。画像特性適用部３０６は、例えば、オブジェクト情報が示す注目オブジェクトの座標と各ＣＧデータの座標とを比較して、各ＣＧデータの合成位置に最も近い注目オブジェクトを特定し、特定した注目オブジェクトの画像特性をＣＧデータ５１及びＣＧデータ５２に適用することにより、補正ＣＧデータを生成する。画像特性適用部３０６は、注目オブジェクトの画像特性ではなく、合成位置から所定の範囲の領域の画像の特性をＣＧデータ５１及びＣＧデータ５２に適用することにより補正ＣＧデータを生成してもよい。
【００３６】
画像特性適用部３０６は、ユーザによるフォーカス調整が終了したことに応じて、フォーカス調整が終了した後の撮像画像データ５０ａ又は撮像画像データ５０ｂの輝度及びシャープネスをＣＧデータに適用することにより補正ＣＧデータを生成する。画像特性適用部３０６は、フォーカス調整の動作が終了したタイミングで、撮影画像データの画像特性を合成するＣＧデータに適用する。画像特性適用部３０６は、ユーザが所定期間内に複数のフォーカス調整を行った場合、最後に実行されたフォーカス調整が終了したことに応じて補正ＣＧデータを生成する。
【００３７】
また、画像特性適用部３０６は、ユーザが撮影時に実施するフォーカス調整機能の種類に応じて、撮影画像データの画像特性を合成するＣＧデータに適用するタイミングを決定する。例えば、画像特性適用部３０６は、ピーキング機能を用いてフォーカス調整がされている場合、ピーキング機能の終了操作が行われたタイミングに応じて、撮像画像データの画像特性をＣＧデータに適用し、ピクセルズーム機能を用いてフォーカス調整がされている場合、等倍表示に切り替わったタイミングに応じて、撮像画像データの画像特性をＣＧデータに適用する。
【００３８】
画像特性適用部３０６は、注目オブジェクトに含まれる領域又は合成位置から所定の範囲の領域における画素値の統計値に基づく画像特性と、ＣＧデータの画像特性との差が所定の範囲に入っていない場合にＣＧデータ５１及びＣＧデータ５２を補正するものとしてもよい。このように統計値を用いるとともに、ＣＧデータの画質が、合成される位置の周辺の画質と大きく異なる場合にのみ補正ＣＧデータを生成することにより、処理を高速化することができる。
【００３９】
図４に示した例の場合、画像特性適用部３０６は、ＣＧデータ５１が雲５４の近傍に配置されたことから、ＣＧデータ５１に雲５４の画像特性情報を適用することにより、補正ＣＧデータ６１を生成する。また、画像特性適用部３０６は、ＣＧデータ５２が木５６の近傍に配置されたことから、ＣＧデータ５２に木５６の画像特性情報を適用することにより補正ＣＧデータ６２を生成する。その後、画像特性適用部３０６は、補正ＣＧデータ６１、補正ＣＧデータ６２、及び合成位置を示す情報を、スケーリング部３０７に送信する。
【００４０】
スケーリング部３０７は、ユーザがコントローラ２３を介して入力した拡大率又は縮小率に基づいて、画像特性適用部３０６から受信した補正ＣＧデータ６１及び補正ＣＧデータ６２を拡大又は縮小する。スケーリング部３０７は、補正ＣＧデータ６１及び補正ＣＧデータ６２を拡大又は縮小した後、合成部３０８に、拡大又は縮小後の補正ＣＧデータ６１及び補正ＣＧデータ６２を送信する。
【００４１】
合成部３０８は、画像特性特定部３０４から受信した撮像画像データ５０、撮像画像データ５０ａ又は撮像画像データ５０ｂと、スケーリング部３０７から受信した補正ＣＧデータ６１及び補正ＣＧデータ６２とを、合成位置において合成する。合成部３０８は、合成した画像をパネル表示部３０９に送信する。合成部３０８は、コントローラ２３を介して入力されたユーザによる合成画像データを調整する操作に応じて、撮像画像データ５０、撮像画像データ５０ａ又は撮像画像データ５０ｂ及び補正ＣＧデータの画質を連動させて調整することにより、合成画像データを更新する。
【００４２】
パネル表示部３０９は、合成部３０８から受信した画像を表示パネルに表示する表示制御手段である。パネル表示部３０９は、補正ＣＧデータと、画像特性適用部３０６が補正ＣＧデータの生成に用いた画像の特性とを関連付けて表示することもできる。
【００４３】
ファイル作成部３１０は、スケーリング部３０７から受信した、補正ＣＧデータ６１及び補正ＣＧデータ６２、各注目オブジェクトのオブジェクト情報、並びに全画素特性情報を含むファイルを作成する。そして、ファイル作成部３１０は、作成したファイルを、ファイル出力部３１１に送信する。
ファイル出力部３１１は、ファイル作成部３１０から受信したファイルを、画像合成装置２０の外部に出力する。ファイル出力部３１１は、例えば、ファイルをサーバ２８に出力することにより保存する。
【００４４】
［画像合成装置２０の各部における動作の流れ］
次に、画像合成装置２０の時刻毎の動作を説明する。図５は、画像合成装置２０の各処理部における動作の流れを示すタイムチャートである。図５においては、画像合成装置２０が有する各処理部が横軸に配置され、時刻がＴ４０からＴ４９に分割して縦軸に配置されている。図５においては、各処理部が実施する処理が時刻毎に示されている。
【００４５】
時刻Ｔ４０において、映像入力インタフェース３００は、カメラ２１から入力映像を受信する。入力映像には、撮像画像データ５０が含まれている。また、ＣＧ入力インタフェース３０５は、レコーダ２２からＣＧデータ５１及びＣＧデータ５２を受信する。ＣＧ入力インタフェース３０５は、時刻Ｔ４０から時刻４４の間の任意の時刻にＣＧデータ５１及びＣＧデータ５２を受信することができる。
【００４６】
時刻Ｔ４１において、オブジェクト検出部３０１は、撮像画像データ５０に含まれる注目オブジェクトを検出する。オブジェクト検出部３０１は、注目オブジェクト毎に座標や大きさなどを示すオブジェクト情報を生成する。図４に示す例において、オブジェクト検出部３０１は、雲５３、雲５４、山５５、木５６等を検出し、それらの輪郭線上の画素の座標や輪郭線に囲まれた領域の面積の情報を生成する。
【００４７】
時刻Ｔ４２から時刻Ｔ４３の処理は、高域着色部３０２又はピクセルズーム部３０３のいずれか一方が有効となる排他処理である。
時刻Ｔ４２において、高域着色部３０２は、撮像画像データ５０における高域周波数を有する領域を検出する。また、ピクセルズーム部３０３は、撮像画像データ５０を拡大又は縮小する。ピクセルズーム部３０３は、時刻Ｔ４２から時刻Ｔ４３の間の任意の時刻に撮像画像データ５０を拡大又は縮小することができる。
【００４８】
時刻Ｔ４３において、高域着色部３０２は、時刻Ｔ４２において検出した撮像画像データ５０における高域周波数を有する領域を着色する。
時刻Ｔ４４において、画像特性特定部３０４は、フォーカス調整が終了した後の撮像画像データ５０（撮像画像データ５０ａ又は５０ｂ）に含まれる全画素の輝度及びシャープネスを特定して全画素特性情報を生成する。そして、画像特性特定部３０４は、高域着色部３０２又はピクセルズーム部３０３から受信したオブジェクト情報に全画素特性情報を付加する。
【００４９】
時刻Ｔ４５において、画像特性適用部３０６は、ＣＧデータ５１及びＣＧデータ５２に対して、時刻Ｔ４４で画像特性特定部３０４が作成した各注目オブジェクトのオブジェクト情報に付加された全画素特性情報により特定される、ＣＧデータ５１及びＣＧデータ５２の近傍の領域の輝度及びシャープネスを適用する。
時刻Ｔ４６において、スケーリング部３０７は、ＣＧデータ５１及びＣＧデータ５２を拡大又は縮小する。
【００５０】
時刻Ｔ４７において、合成部３０８は、撮像画像データ５０とＣＧデータ５１及びＣＧデータ５２とを合成して合成画像データを作成する。
時刻Ｔ４８において、パネル表示部３０９は、時刻Ｔ４７に合成部３０８が作成した合成画像データを表示パネルに表示する。また、ファイル作成部３１０は、ＣＧデータ５１、ＣＧデータ５２、及び各注目オブジェクトのオブジェクト情報や、全画素特性情報に基づいてファイルを作成する。ファイル作成部３１０は、時刻Ｔ４８以外のユーザが指示した時刻にファイルを作成してもよい。
時刻Ｔ４９において、ファイル出力部３１１は、時刻Ｔ４８においてファイル作成部３１０が作成したファイルを出力する。
【００５１】
［画像合成装置２０の動作フローチャート］
図６は、画像合成装置２０の動作フローチャートである。
まず、ステップＳ１０において、画像特性適用部３０６は、ＣＧ入力インタフェース３０５から取得した一以上のＣＧデータから、撮像画像データに合成する対象となるＣＧデータを選択する。
ステップＳ１１において、オブジェクト検出部３０１は、ＣＧデータを合成する位置としてユーザが指定した合成位置の座標と、各注目オブジェクトの座標とを比較して、合成位置に最も近い注目オブジェクトを検出する。
【００５２】
ステップＳ１２において、画像特性適用部３０６は、ユーザ指示制御部３１２から取得する情報に基づいて、ユーザが使用するフォーカス調整機能が、高域周波数を着色するピーキング機能であるか、ピクセルズーム機能であるかを判定する。画像特性適用部３０６は、ピクセルズーム機能が選択された場合はステップＳ１３に進み、ピーキング機能が選択された場合はステップＳ１５に進む。
【００５３】
ステップＳ１３において、画像特性適用部３０６は、ユーザ指示制御部３１２から取得する情報に基づいて、ピクセルズーム機能が動作中であるか、停止したかを判定する。画像特性適用部３０６は、ピクセルズーム機能の動作が停止したと判定した場合は、ステップＳ１４に進み、ピクセルズーム機能の動作が停止していないと判定した場合は、ステップＳ１３に留まる。
【００５４】
ステップＳ１４において、画像特性適用部３０６は、撮像画像データの拡大及び縮小処理が停止し、全画面の等倍表示に切り替わったかを判定する。画像特性適用部３０６は、等倍表示に切り替わった時刻において等倍表示に切り替わったと判定し、ステップＳ１６に進む。画像特性適用部３０６は、Ｓ１４において等倍表示でないと判定した場合は、ステップＳ１４に留まる。
【００５５】
ステップＳ１５において、画像特性適用部３０６は、ユーザ指示制御部３１２から取得する情報に基づいて、ピーキング機能が動作中であるか、停止したかを判定する。画像特性適用部３０６は、ピーキング機能の動作が停止したと判定した場合はステップＳ１６に進み、ピーキング機能の動作が停止していないと判定した場合はステップＳ１５に留まる。
【００５６】
ステップＳ１６において、画像特性適用部３０６は、ステップＳ１０で選択したＣＧデータに適用するために用いられる画像特性を画像特性特定部３０４から取得する。
ステップＳ１７において、画像特性適用部３０６は、ステップＳ１６で取得した画像特性情報に含まれる、合成位置に最も近い注目オブジェクトに対応する輝度情報をＣＧデータに適用する。また、ステップＳ１８において、画像特性適用部３０６は、ステップＳ１６で取得した画像特性情報に含まれる、合成位置に最も近い注目オブジェクトに対応するシャープネス情報をＣＧデータに適用する。
【００５７】
［第１の実施形態における効果］
以上説明したように、本実施形態に係る画像合成装置２０は、撮像画像データ５０におけるＣＧデータが合成される合成位置に対応する領域の画像の特性に基づいて補正ＣＧデータを生成し、補正ＣＧデータが上記の合成位置において撮像画像データと合成された合成画像データを出力する。このようにすることで、ユーザは、撮像画像データと合成したＣＧデータを選択して、配置したい位置を決定するだけで、ＣＧデータが配置される位置における撮像画像データの輝度やシャープネス等の画像特性に合ったＣＧデータが撮像画像データに合成される。したがって、ユーザは、合成するＣＧデータの画像補正に煩わされることなく撮影作業を進めることができるので、映像制作の作業が効率化する。また、画像合成装置２０は、撮像画像データの画像特性情報をＣＧデータに付加して記憶媒体に保存するので、後工程である画像補正ＷＦ６においても、ＣＧデータの補正時間を短縮することができる。
【００５８】
また、画像合成装置２０は、ユーザが撮影時に実施するフォーカス調整機能の種類に応じて、画像合成装置２０が、撮影画像データの画像特性を合成するＣＧデータに適用するタイミングを決定する。画像合成装置２０は、フォーカス調整の動作が終了したタイミングで、撮影画像データの画像特性を合成するＣＧデータに適用する。したがって、ユーザは、フォーカス調整が終了した時点で、ＣＧデータが合成された位置の周辺の画像特性に合った画像特性に調整された状態の合成画像を確認して、撮影作業を継続することができる。
【００５９】
＜第２の実施形態＞
第１の実施形態においては、ファイル作成部３１０が、ＣＧデータを含むファイルを作成する例について説明した。第２の実施形態においては、ファイル作成部３１０が、ＣＧデータに適用された情報に基づいて、色情報データファイルであるＣＤＬファイルを作成する点で、第１の実施形態と異なる。
【００６０】
ＣＤＬファイルは、ＡＳＣ  ＣＤＬ（米国撮影監督協会カラーディシジョンリスト）に対応するファイルで、ＸＭＬ形式で記述されている。ＡＳＣ  ＣＤＬに対応する機器は、ＣＤＬファイルに含まれている色情報を読み出す機能、読み出した色情報に基づいて色を調整する機能、及び調整した結果をＣＤＬファイルに書き込む機能などを備える。
【００６１】
ＣＤＬファイルは、黒レベルを起点とした傾き（ＳＬＯＰＥ）、ＳＬＯＰＥを維持した状態での輝度（ＯＦＦＳＥＴ）、黒レベルと白レベルを維持したゲイン（ＰＯＷＥＲ）、調整範囲（ＳＡＴＵＲＡＴＩＯＮ）を示す４種類の情報を基本構成情報として含む。ＣＤＬファイルは、上記の４種類の基本構成情報の他に、ユーザが独自に編集可能な情報を記述できる拡張メタ領域を有する。本実施形態においては、ファイル作成部３１０が、ＣＧデータに係る情報を拡張メタ領域に含むＣＤＬファイルを作成する動作について説明する。ＣＧデータに係る情報には、ＣＧデータの座標、合成画像データで使用される際の拡大率、近傍の注目オブジェクトを特定する情報、及び適用される画像特性情報等が含まれる。
【００６２】
図７は、第２の実施形態に係る画像合成装置２０の構成を示す図である。第２の実施形態における画像合成装置２０は、映像入力インタフェース３００とオブジェクト検出部３０１との間に、画像処理部８００を有する点で、第１の実施形態における画像合成装置２０と異なる。
【００６３】
画像処理部８００は、ユーザの指示に応じて、映像入力インタフェース３００を介して入力された撮像画像データに画像処理を施す。画像処理は、輝度、コントラスト、色、及びシャープネス等を調整する処理である。画像処理部８００は、画像処理内容を示す画像処理情報をファイル作成部３１０に送信する。
【００６４】
ファイル作成部３１０は、画像処理部８００から受信した画像処理情報に基づいてＣＤＬファイルを作成する。そして、ファイル作成部３１０は、作成したＣＤＬファイルに、上述した４種類の基本構成情報と、入力された撮像画像データ及びＣＧデータに係る情報を記述して生成したＣＤＬファイルをファイル出力部３１１に送信する。ファイル作成部３１０は、例えば、拡張メタ領域に、ＣＧデータと、ＣＧデータに関連付けられた、ＣＧデータが合成される合成位置に対応する領域の画像の特性を示す画像特性情報と、を含むＣＤＬファイルを出力する。ファイル出力部３１１は、生成されたＣＤＬファイルを出力する。
【００６５】
図８は、画像合成装置２０がＣＤＬファイルを作成する動作のフローチャートである。
ステップＳ２０において、ファイル作成部３１０は、画像合成装置２０に入力された撮像画像データに画像処理を施し、画像処理内容を示すパラメータを画像処理部８００から取得する。
【００６６】
ステップＳ２１において、ファイル作成部３１０は、ステップＳ２０において取得したパラメータに基づいて、ＣＤＬファイルに記述する４種類の基本構成情報である、ＳＬＯＰＥ、ＰＯＷＥＲ、ＯＦＦＳＥＴ、ＳＡＴＵＲＡＴＩＯＮを含む基本構成領域のデータを作成する。
ステップＳ２２において、ファイル作成部３１０は、入力された撮像画像データに関する４種類の基本構成情報以外の情報を含む、拡張メタ領域のデータを作成する。４種類の基本構成情報以外の情報は、例えば、画像特性適用部３０６を介して取得した、オブジェクト検出部３０１が検出した注目オブジェクトのオブジェクト情報であり、各注目オブジェクトの座標、サイズ、輝度及びシャープネス等を示す情報である。
【００６７】
ステップＳ２３において、ファイル作成部３１０は、ＣＤＬファイルに記述するＣＧデータの有無を判断する。画像特性適用部３０６からＣＧデータ及びＣＧデータに係る情報を取得できる場合、ファイル作成部３１０は、ＣＤＬファイルに記述するＣＧデータがあると判定してステップＳ２４に進む。画像特性適用部３０６からＣＧデータ及びＣＧデータに係る情報を取得できない場合、ファイル作成部３１０は、ＣＤＬファイルに記述するＣＧデータがないと判定し、ＣＤＬファイル作成を終了する。
【００６８】
ステップＳ２４において、ファイル作成部３１０は、画像特性適用部３０６から受信した情報に基づいて、ＣＤＬファイルに記述するＣＧデータの数及びファイル名を取得する。
ステップＳ２５において、ファイル作成部３１０は、ステップＳ２４において検出したＣＧデータに対応する、ユーザが指示した合成位置の座標、拡大率、撮影画像における最も近い注目オブジェクトのオブジェクト情報等のＣＧデータを調整するための調整情報を取得する。
ステップＳ２６において、ファイル作成部３１０は、ステップＳ２４及びステップＳ２５で取得したＣＧデータに係る情報を、ＣＤＬファイルの拡張メタ領域に記述することにより、拡張メタ領域を更新して、ＣＤＬファイルの作成を終了する。
【００６９】
図９は、ファイル作成部３１０が作成したＣＤＬファイル１０００の一例を示す図である。ＣＤＬファイル１０００は、基本構成情報１００１、撮像画像データに係る拡張メタ情報１００２、ＣＧデータに係る拡張メタ情報１００３から構成されている。基本構成情報１００１は、ステップＳ２１において記述され、拡張メタ情報１００２は、ステップＳ２２において記述され、ＣＧデータに係る拡張メタ情報１００３は、ステップＳ２６において記述される。
なお、本実施形態においては、ＣＤＬファイルを例示したが、ＣＤＬファイル以外の形式のファイルに本実施形態に係る構成及び処理を適用してもよい。
【００７０】
［第２の実施形態における効果］
以上説明したように、本実施形態では、ファイル作成部３１０が、入力された撮像画像データを画像処理した後の撮像画像データ５０の画像特性情報と、当該撮像画像データ５０ｙと合成するＣＧデータの画像特性情報とが記述されたＣＤＬファイルを作成する。このようにすることで、画像合成装置２０は、撮影ＷＦ２においてユーザが撮像画像データ及びＣＧデータの画質の調整を行った結果を保存することが可能となるので、画像補正ＷＦ６では、保存されたＣＤＬファイルを用いることにより、ＣＧデータの調整を行った状態で撮影作業をすることが可能である。その結果、撮影ＷＦ２の作業時間を延長させることなく、画像補正ＷＦ６の作業時間を短縮できるため、映像制作ワークフローの効率化を図ることができる。
【００７１】
＜第３の実施形態＞
第３の実施形態に係る画像合成装置２０は、入力されたＣＤＬファイルに、撮像画像データに合成するＣＧデータに適用する画像特性情報が記述されている場合に、当該画像特性情報を読み出してＣＧデータに適用する。
図１０は、第３の実施形態に係る画像合成装置２０の構成を示す図である。第３の実施形態に係る画像合成装置２０は、レコーダ２２からＣＤＬファイルを取得するファイル取得手段としてのファイル入力部１１００を有する点で、図７に示した第２の実施形態に係る画像合成装置２０と異なる。
【００７２】
ファイル入力部１１００は、レコーダ２２からＣＤＬファイルを受信し、ＣＤＬファイルの記述内容に問題がないかどうかを確認する。ファイル入力部１１００は、ＣＤＬファイルに問題がない場合、第２の実施形態で説明した４種類の基本構成情報及び拡張メタ情報を、画像処理部８００に送信する。また、ファイル入力部１１００は、ＣＤＬファイルの拡張メタ領域に、ＣＧデータに係る座標、大きさ、輝度、及びシャープネス等の情報が記述されている場合、その情報を画像特性適用部３０６に送信する。
【００７３】
画像処理部８００は、ファイル入力部１１００から入力された情報に基づいて、撮像画像データに画像処理を施す。画像特性適用部３０６は、ファイル入力部１１００が取得したＣＤＬファイルに含まれるＣＧデータと画像特性情報とに基づいて補正ＣＧデータを生成する。画像特性適用部３０６は、ファイル入力部１１００から、ＣＧデータに係る座標、大きさ、輝度、及びシャープネス等の情報を受信した場合、それらの情報を初期値として、ＣＧデータに適用した後に、スケーリング部３０７に送信する。
【００７４】
図１１は、画像特性適用部３０６がＣＤＬファイルの内容をＣＧデータに適用する場合の動作を示すフローチャートである。図１１に示すフローチャートは、ステップＳ１０とステップＳ１１との間に、ＣＤＬファイルの取得に関するステップＳ３０がある点で、図７に示した第１の実施形態のフローチャートと異なる。また、図１１に示すフローチャートは、ＣＤＬファイルを取得した場合の動作であるステップＳ３１、ステップＳ３２、ステップＳ３３がある点でも図６のフローチャートと異なる。
【００７５】
ステップＳ３０において、画像特性適用部３０６は、ファイル入力部１１００からＣＤＬファイルを取得できるか否かを確認する。画像特性適用部３０６は、ＣＤＬファイルが取得できない場合は、ステップＳ１１に進み、第１の実施形態と同じ処理を実行する。画像特性適用部３０６は、ＣＤＬファイルを取得できる場合、ステップＳ３１に進む。
【００７６】
ステップＳ３１において、画像特性適用部３０６は、取得したＣＤＬファイルの記述内容を読み取る。ステップＳ３２において、画像特性適用部３０６は、ステップＳ３１において読み取ったＣＤＬファイルの内容から、ＣＧデータのファイル名、座標、大きさ、拡大率、輝度、シャープネス等の情報を抽出する。そして、画像特性適用部３０６は、ファイル名に基づいて、抽出した情報とＣＧデータとを関連付ける。また、画像特性適用部３０６は、ステップＳ３１において取得した情報のうち、座標及び拡大率を示す情報を、スケーリング部３０７及び合成部３０８に送信する。
【００７７】
ステップＳ３３において、画像特性適用部３０６は、ステップＳ３２において関連付けた情報に基づいて、各ＣＧデータの輝度及びシャープネスの画像特性情報を特定する。そして、ステップＳ１７及びステップＳ１８において、特定した画像特性情報が示す輝度及びシャープネスをＣＧデータに適用する。
【００７８】
画像特性適用部３０６は、上述した動作の後に、ユーザが、輝度、シャープネス、座標、拡大率等の調整を実施する場合は、ユーザが実施する調整の内容を優先する。したがって、画像特性適用部３０６は、ＣＤＬファイルを再度保存する場合に、ユーザが実施した調整内容をＣＤＬファイルの記述内容に反映する。
【００７９】
［第３の実施形態における効果］
以上説明したように、本実施形態に係る画像合成装置２０は、入力されたＣＤＬファイルの記述内容を確認し、ＣＧデータに係るパラメータを抽出できた場合は、抽出したパラメータをＣＧデータの初期値として用いる。このようにすることで、ワークフローにおける画像補正ＷＦ６において、撮影ＷＦ２で撮像画像データを調整した際にＣＧデータに適用された情報を使用できるので、ユーザによる画像補正ＷＦ６の作業時間を短縮することができる。その結果、映像制作ワークフローの効率化を図ることができる。
【００８０】
以上、本発明をいくつかの実施の形態をもとに説明した。これらの任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を合わせ持つ。
また、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
例えば、画像合成装置２０がコンピュータを含んで構成されており、記憶媒体に記憶されたプログラムをＣＰＵが実行することにより、画像合成装置２０の各部の処理を実行してもよい。
【符号の説明】
【００８１】
２０  画像合成装置
３００  映像入力インタフェース
３０５  ＣＧ入力インタフェース
３０６  画像特性適用部
３０８  合成部
【図１】
2017134447.tif 000003
【図２】
2017134447.tif 000004
【図３】
2017134447.tif 000005
【図４】
2017134447.tif 000006
【図５】
2017134447.tif 000007
【図６】
2017134447.tif 000008
【図７】
2017134447.tif 000009
【図８】
2017134447.tif 000010
【図９】
2017134447.tif 000011
【図１０】
2017134447.tif 000012
【図１１】
2017134447.tif 000013