【手続補正書】
【提出日】平成30年6月1日(2018.6.1)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像データおよび被写体の距離分布に関連するマップデータを処理する画像処理装置であって、
符号化された前記画像データを復号化して復号化画像データを生成する第１の復号化手段と、
符号化された前記マップデータを復号化して復号化マップデータを生成する第２の復号化手段と、
前記復号化画像データおよび復号化マップデータを取得し、前記復号化マップデータよりも解像度が高い前記復号化画像データを参照して前記復号化マップデータの整形処理を行う第１の整形手段と、
前記第１の整形手段により整形処理された前記復号化マップデータを参照して前記復号化画像データの画像処理を行う第１の画像処理手段を有することを特徴とする画像処理装置。
【請求項２】
符号化されていない前記マップデータを取得して整形処理を行う第２の整形手段をさらに備え、
前記第１の整形手段は、第１の解像度の前記復号化画像データを参照し、前記復号化マップデータを整形して前記第１の解像度のマップデータを出力し、
前記第２の整形手段は、前記第１の解像度よりも低い第２の解像度の画像データを参照し、前記マップデータを整形して前記第２の解像度のマップデータを出力することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
符号化されていない前記マップデータを生成して前記第２の整形手段に出力するマップ生成手段をさらに備えることを特徴とする請求項２に記載の画像処理装置。
【請求項４】
符号化された前記画像データを復号化して復号化画像データを生成する第３の復号化手段と、
前記第２の整形手段により整形処理されてから符号化された前記マップデータを復号化して復号化マップデータを生成する第４の復号化手段と、
前記第４の復号化手段により生成された前記復号化マップデータを参照して、前記第３の復号化手段により生成された前記復号化画像データの画像処理を行う第２の画像処理手段を有することを特徴とする請求項２または３に記載の画像処理装置。
【請求項５】
前記第１の画像処理手段は、前記第１の解像度の復号化マップデータを参照して前記復号化画像データの画像処理を行い、
前記第２の画像処理手段は、前記第２の解像度の復号化マップデータを参照して前記復号化画像データの画像処理を行うことを特徴とする請求項４に記載の画像処理装置。
【請求項６】
前記第１または第２の画像処理手段は、背景の画像をぼかす処理を行うことを特徴とする請求項５に記載の画像処理装置。
【請求項７】
前記画像データを符号化して前記第１の復号化手段に出力する第１の符号化手段と、
前記マップデータを符号化して前記第２の復号化手段に出力する第２の符号化手段をさらに備えることを特徴とする請求項１から６のいずれか１項に記載の画像処理装置。
【請求項８】
前記画像データを符号化して前記第１の復号化手段に出力する第１の符号化手段と、
前記マップデータを符号化して前記第２の復号化手段に出力する第２の符号化手段と、
前記画像データを符号化して前記第３の復号化手段に出力する第３の符号化手段と、
前記第２の整形手段によって整形処理された前記マップデータを符号化して前記第４の復号化手段に出力する第４の符号化手段を備えることを特徴とする請求項４に記載の画像処理装置。
【請求項９】
前記画像データのリサイズを行うリサイズ手段をさらに備え、
前記第２の整形手段は、前記リサイズ手段によってリサイズ処理された画像データを取得して、前記マップデータの整形処理を行うことを特徴とする請求項２から６、８のいずれか１項に記載の画像処理装置。
【請求項１０】
前記第２の符号化手段または前記第４の符号化手段により符号化された前記マップデータを選択して出力する第１の選択手段と、
前記第１の符号化手段または前記第３の符号化手段により符号化された前記画像データを選択して出力する第２の選択手段をさらに備えることを特徴とする請求項８に記載の画像処理装置。
【請求項１１】
前記画像データを符号化して前記第１の復号化手段に出力する第１の符号化手段と、
前記第２の整形手段により整形されていない前記マップデータを符号化して前記第２の復号化手段に出力する第２の符号化手段をさらに備えることを特徴とする請求項２から６のいずれか１項に記載の画像処理装置。
【請求項１２】
前記第１の整形手段は、前記マップデータの着目画素に対して、当該着目画素の画素値およびその周辺画素の画素値を平滑化する際、前記着目画素の画素値と前記周辺画素の画素値とが近いほど前記周辺画素の出力に対する平滑化の重みを大きくすることを特徴とする請求項１から１１のいずれか１項に記載の画像処理装置。
【請求項１３】
前記整形処理は、エッジ保存型のフィルタ処理であることを特徴とする請求項１乃至１２のいずれか１項に記載の画像処理装置。
【請求項１４】
前記整形処理は、ジョイント・バイラテラル・フィルタによるフィルタ処理であることを特徴とする請求項１乃至１３のいずれか１項に記載の画像処理装置。
【請求項１５】
符号化装置と復号化装置を有する画像処理システムであって、
前記符号化装置は、
画像データを符号化する第１の符号化手段と、
被写体の距離分布に関連するマップデータを符号化する第２の符号化手段と、を備え、
前記復号化装置は、
前記第１の符号化手段により符号化された前記画像データを復号化して復号化画像データを生成する第１の復号化手段と、
前記第２の符号化手段により符号化された前記マップデータを復号化して復号化マップデータを生成する第２の復号化手段と、
前記復号化画像データおよび復号化マップデータを取得し、前記復号化マップデータよりも解像度が高い前記復号化画像データを参照して前記復号化マップデータの整形処理を行う第１の整形手段と、
前記第１の整形手段により整形処理された前記復号化マップデータを参照して前記復号化画像データの画像処理を行う第１の画像処理手段と、を備えることを特徴とする画像処理システム。
【請求項１６】
前記符号化装置は、符号化されていない前記マップデータの整形処理を行う第２の整形手段を備え、
前記第１の整形手段は、第１の解像度の前記復号化画像データを参照し、前記復号化マップデータを整形して前記第１の解像度のマップデータを出力し、
前記第２の整形手段は、前記第１の解像度よりも低い第２の解像度の画像データを参照し、前記マップデータを整形して前記第２の解像度のマップデータを出力することを特徴とする請求項１５に記載の画像処理システム。
【請求項１７】
前記第１または第２の整形手段は、前記マップデータの着目画素に対して、当該着目画素の画素値およびその周辺画素の画素値を平滑化する際、前記着目画素の画素値と前記周辺画素の画素値とが近いほど前記周辺画素の出力に対する平滑化の重みを大きくすることを特徴とする請求項１６に記載の画像処理システム。
【請求項１８】
前記符号化装置は、
前記画像データを符号化する第３の符号化手段と、
前記第２の整形手段によって整形処理された前記マップデータを符号化する第４の符号化手段と、を備え、
前記復号化装置は、
前記第３の符号化手段により符号化された前記画像データを復号化して復号化画像データを生成する第３の復号化手段と、
前記第４の符号化手段により符号化された前記マップデータを復号化して復号化マップデータを生成する第４の復号化手段と、を備えることを特徴とする請求項１６または１７に記載の画像処理システム。
【請求項１９】
前記復号化装置は、前記第４の復号化手段により生成された前記復号化マップデータを参照して、前記第３の復号化手段により生成された前記復号化画像データの画像処理を行う第２の画像処理手段を備えることを特徴とする請求項１８に記載の画像処理システム。
【請求項２０】
前記第１の画像処理手段は、第１の解像度の前記復号化マップデータを参照して前記復号化画像データの画像処理を行い、
前記第２の画像処理手段は、前記第１の解像度よりも低い第２の解像度の前記復号化マップデータを参照して前記復号化画像データの画像処理を行うことを特徴とする請求項１９に記載の画像処理システム。
【請求項２１】
請求項１から１４のいずれか１項に記載の画像処理装置を備えることを特徴とする撮像装置。
【請求項２２】
撮像光学系を通して被写体を撮像する撮像素子を備え、
前記撮像素子は、前記撮像光学系にて異なる瞳領域をそれぞれ通過した光を受光して光電変換する複数の光電変換部を有しており、前記複数の光電変換部の出力する信号から被写体の距離分布に関連する情報を取得することを特徴とする請求項２１に記載の撮像装置。
【請求項２３】
画像データおよび被写体の距離分布に関連するマップデータを処理する画像処理装置により実行される画像処理方法であって、
符号化された前記画像データを復号化して復号化画像データを生成する第１の復号化工程と、
符号化された前記マップデータを復号化して復号化マップデータを生成する第２の復号化工程と、
前記復号化画像データおよび復号化マップデータを取得し、前記復号化マップデータよりも解像度が高い前記復号化画像データを参照して前記復号化マップデータの整形処理を行う整形工程と、
前記整形工程にて整形処理された前記復号化マップデータを参照して前記復号化画像データの画像処理を行う画像処理工程を有することを特徴とする画像処理方法。
【請求項２４】
請求項２３に記載した画像処理方法の各工程を前記画像処理装置のコンピュータに実行させるためのプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】発明の名称
【補正方法】変更
【補正の内容】
【発明の名称】画像処理装置、画像処理システム、撮像装置、画像処理方法およびプログラム