(57)【要約】  本発明は撮影方法を開示し、方法は、撮影端末に適用され、撮影端末は、第1のカメラ、第2のカメラ、および第3のカメラを含み、第1のカメラおよび第3のカメラはカラーカメラであり、第2のカメラは白黒カメラであり、第2のカメラの解像度は、第1のカメラの解像度よりも高く、かつ第3のカメラの解像度よりも高く、第1のカメラ、第2のカメラ、第3のカメラはすべてプライムレンズを使用するカメラであり、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方より大きく、方法は、目標ズーム比を取得するステップと、目標ズーム比に基づいて、第1のカメラ、第2のカメラ、および第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定するステップと、目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むステップと、目標シーンを含む少なくとも1つの画像に基づいて、目標シーンの出力画像を取得するステップと、を含む。目標シーンは、ユーザが撮影を期待しているシーンである。本発明によれば、約5xのロスレスズーム効果が達成される。
2021507646.tif 000002
【特許請求の範囲】
【請求項１】
撮影方法であって、前記方法は端末に適用され、前記端末は第1のカメラ、第2のカメラ、および第3のカメラを含み、前記第1のカメラおよび前記第3のカメラはカラーカメラであり、前記第2のカメラは白黒カメラであり、前記第1のカメラ、前記第2のカメラ、前記第3のカメラはすべてプライムレンズを使用するカメラであり、前記第3のカメラの等価焦点距離は、前記第1のカメラの等価焦点距離および前記第2のカメラの等価焦点距離の両方より大きく、前記方法は、
目標ズーム比を取得するステップと、
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定するステップと、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むステップと、
前記目標シーンを含む前記少なくとも1つの画像に基づいて、前記目標シーンの出力画像を取得するステップと、を含む、方法。
【請求項２】
前記第2のカメラの解像度は、前記第1のカメラの解像度よりも高く、かつ前記第3のカメラの解像度よりも高い、請求項1に記載の方法。
【請求項３】
前記第2のカメラの解像度は、前記第1のカメラの出力画像の解像度よりも高く、かつ前記第3のカメラの出力画像の解像度よりも高い、請求項1に記載の方法。
【請求項４】
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定する前記ステップは、
前記目標ズーム比が（1、3）内の場合に、前記第1のカメラおよび前記第2のカメラを目標カメラとして決定するステップを含み、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込む前記ステップは、
前記第1のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む画像をそれぞれ取り込むステップを含む、請求項1から3のいずれか一項に記載の方法。
【請求項５】
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定する前記ステップは、
前記目標ズーム比が［3、5］内の場合に、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定するステップと、
前記目標シーンの前記照度が前記予め設定されたしきい値より低い場合には、
前記第2のカメラおよび前記第3のカメラを目標カメラとして決定するステップと、を含み、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込む前記ステップは、
前記第2のカメラおよび前記第3のカメラを使用して、前記目標シーンを含む画像をそれぞれ取り込むステップを含む、請求項1から3のいずれか一項に記載の方法。
【請求項６】
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定する前記ステップは、
前記目標ズーム比が［3、5］内の場合に、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定するステップと、
前記目標シーンの前記照度が前記予め設定されたしきい値より低くない場合には、
前記第3のカメラを前記目標カメラとして決定するステップと、を含み、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込む前記ステップは、
前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つの画像を取り込むステップを含む、請求項1から3のいずれか一項に記載の方法。
【請求項７】
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定する前記ステップは、
前記目標ズーム比が（5、10］内の場合に、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定するステップと、
前記目標シーンの前記照度が前記予め設定されたしきい値より低い場合には、
前記第2のカメラおよび前記第3のカメラを目標カメラとして決定するステップと、を含み、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込む前記ステップは、
前記第2のカメラおよび前記第3のカメラを使用して、前記目標シーンを含む画像を取り込むステップを含む、請求項1から3のいずれか一項に記載の方法。
【請求項８】
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定する前記ステップは、
前記目標ズーム比が（5、10］内の場合に、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定するステップと、
前記目標シーンの前記照度が前記予め設定されたしきい値より低くない場合には、
前記第3のカメラを前記目標カメラとして決定するステップと、を含み、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込む前記ステップは、
前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つの画像を取り込むステップを含む、請求項1から3のいずれか一項に記載の方法。
【請求項９】
前記第3のカメラの前記等価焦点距離は、前記第2のカメラの前記等価焦点距離の3倍であり、前記第2のカメラの前記等価焦点距離は、前記第1のカメラの等価焦点距離に等しい、請求項1から8のいずれか一項に記載の方法。
【請求項１０】
前記第1のカメラの前記等価焦点距離は27mmであり、前記第2のカメラの前記等価焦点距離は27mmであり、前記第3のカメラの前記等価焦点距離は80mmである、請求項1から9のいずれか一項に記載の方法。
【請求項１１】
前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのF値は、それぞれ1．8、1．65、および2．4である、請求項1から10のいずれか一項に記載の方法。
【請求項１２】
前記第1のカメラの前記解像度、前記第2のカメラの前記解像度、および前記第3のカメラの前記解像度は、それぞれ10M、20M、および10Mである、請求項1から11のいずれか一項に記載の方法。
【請求項１３】
撮影装置であって、前記装置は端末に適用され、前記端末は第1のカメラ、第2のカメラ、および第3のカメラを含み、前記第1のカメラおよび前記第3のカメラはカラーカメラであり、前記第2のカメラは白黒カメラであり、前記第1のカメラ、前記第2のカメラ、前記第3のカメラはすべてプライムレンズを使用するカメラであり、前記第3のカメラの等価焦点距離は、前記第1のカメラの等価焦点距離および前記第2のカメラの等価焦点距離の両方より大きく、前記装置は、
目標ズーム比を取得するように構成された取得モジュールと、
前記目標ズーム比に基づいて、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定するように構成された決定モジュールと、
前記目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むように構成された取り込みモジュールと、
前記目標シーンを含む前記少なくとも1つの画像に基づいて、前記目標シーンの出力画像を取得するように構成された画像処理モジュールと、をさらに含む、装置。
【請求項１４】
前記第2のカメラの解像度は、前記第1のカメラの解像度よりも高く、かつ前記第3のカメラの解像度よりも高い、請求項13に記載の装置。
【請求項１５】
前記第2のカメラの前記解像度は、前記第1のカメラの出力画像の解像度よりも高く、かつ前記第3のカメラの出力画像の解像度よりも高い、請求項14に記載の装置。
【請求項１６】
前記ズーム比が（1、3）内である場合に、前記決定モジュールは、前記第1のカメラおよび前記第2のカメラを目標カメラとして決定するように特に構成され、前記取り込みモジュールは、前記第1のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む画像をそれぞれ取り込むように特に構成される、請求項13から15のいずれか一項に記載の装置。
【請求項１７】
前記ズーム比が［3、5］内である場合に、前記決定モジュールは、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定し、前記目標シーンの前記照度が前記予め設定されたしきい値よりも低い場合には、前記決定モジュールは、前記第3のカメラおよび前記第2のカメラを目標カメラとして決定し、前記取り込みモジュールは、前記第3のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む画像をそれぞれ取り込むように特に構成される、請求項13から15のいずれか一項に記載の装置。
【請求項１８】
前記ズーム比が［3、5］内である場合に、前記決定モジュールは、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定し、前記目標シーンの前記照度が前記予め設定されたしきい値より低くない場合には、前記決定モジュールは、前記第3のカメラを前記目標カメラとして決定し、前記取り込みモジュールは、前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つの画像を取り込むように特に構成される、請求項13から15のいずれか一項に記載の装置。
【請求項１９】
前記ズーム比が（5、10］内である場合に、前記決定モジュールは、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定し、前記目標シーンの前記照度が前記予め設定されたしきい値よりも低い場合には、前記決定モジュールは、前記第3のカメラおよび前記第2のカメラを目標カメラとして決定し、前記取り込みモジュールは、前記第3のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む画像をそれぞれ取り込むように特に構成される、請求項13から15のいずれか一項に記載の装置。
【請求項２０】
前記ズーム比が（5、10］内である場合に、前記決定モジュールは、前記目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定し、前記目標シーンの前記照度が前記予め設定されたしきい値より低くない場合には、前記決定モジュールは、前記第3のカメラを前記目標カメラとして決定し、前記取り込みモジュールは、前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つの画像を取り込むように特に構成される、請求項13から15のいずれか一項に記載の装置。
【請求項２１】
前記第1のカメラの前記等価焦点距離は27mmであり、前記第2のカメラの前記等価焦点距離は27mmであり、前記第3のカメラの前記等価焦点距離は80mmである、請求項13から20のいずれか一項に記載の装置。
【請求項２２】
前記第1のカメラの前記解像度、前記第2のカメラの前記解像度、および前記第3のカメラの前記解像度は、それぞれ10M、20M、および10Mである、請求項13から21のいずれか一項に記載の装置。
【請求項２３】
端末デバイスであって、前記端末デバイスは、メモリ、プロセッサ、バス、第1のカメラ、第2のカメラ、および第3のカメラを含み、前記メモリ、前記第1のカメラ、前記第2のカメラ、前記第3のカメラ、および前記プロセッサは、前記バスを使用して接続され、前記第1のカメラおよび前記第3のカメラはカラーカメラであり、前記第2のカメラは白黒カメラであり、前記第1のカメラ、前記第2のカメラ、前記第3のカメラはすべてプライムレンズを使用するカメラであり、前記第3のカメラの等価焦点距離は、前記第1のカメラの等価焦点距離および前記第2のカメラの等価焦点距離の両方より大きく、
前記カメラは、前記プロセッサの制御下で画像信号を取り込むように構成され、
前記メモリは、コンピュータプログラムおよび命令を格納するように構成され、
前記プロセッサは、前記メモリに格納された前記コンピュータプログラムおよび前記命令を呼び出すように構成され、その結果、前記端末デバイスは、請求項1から12のいずれか一項に記載の方法を実行する、端末デバイス。
【請求項２４】
前記端末デバイスはアンテナシステムをさらに含み、前記アンテナシステムは、前記プロセッサの制御下で、無線通信信号を送信および受信して、モバイル通信ネットワークとの無線通信を実施し、前記モバイル通信ネットワークは、GSMネットワーク、CDMAネットワーク、3Gネットワーク、4Gネットワーク、FDMA、TDMAネットワーク、PDCネットワーク、TACSネットワーク、AMPSネットワーク、WCDMA(登録商標)ネットワーク、TD−SCDMAネットワーク、Wi−Fiネットワーク、およびLTEネットワークのうちの1つまたは複数を含む、請求項23に記載の端末デバイス。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、端末技術の分野に関し、特に、撮影方法、装置、およびデバイスに関する。
【背景技術】
【０００２】
ズームは、写真を撮る最も一般的なモードの1つである。ユーザは、遠くにある像や3〜5メートル離れた人物など、遠くにある被写体のクローズアップを撮影する必要がある場合があり、ユーザは、時にはズームを使用して、撮影用の画像レイアウトを調整したい場合がある。例えば、携帯電話で写真を撮る場合、携帯電話ユーザが最もよく使用するズームは2x〜5xである。
【０００３】
ズームを実現する方法としては、光学ズーム（optical zoom）、デジタルズーム（digital zoom）などがある。光学ズームとデジタルズームの両方が、撮影中に遠くの被写体をズームインするのに役立つが、光学ズームのみが、物体の撮像後により多くのピクセルを追加することによって画像物体を大きく、比較的鮮明にすることができる。光学ズームに似ており、物体の領域をズームできるだけでなく、画像の鮮明度を確実にすることができるこのようなズームは、ロスレスズームと呼ばれる。
【０００４】
撮影端末は通常、プライムレンズまたはズームレンズを使用しているが、光学ズームが可能かどうかが最大の違いである。プライムレンズは光学ズームを行うことができない。中心のシーンは、中心のシーンに近づくか、画像補間アルゴリズムを使用してデジタルズームを実行することによってのみズームインすることができる。しかし、ズームレンズは光学ズームを実行でき、遠くの被写体をズームするためには、ズームレンズの対応するズーム比をその光学ズーム範囲内で調整するだけで、詳細を失わずに被写体を確実にズームインする。ズームレンズは、レンズの焦点距離を調整することにより、被写体を遠くまでズームインできるため、ユーザは遠くの被写体の細部を鮮明に見ることができる。
【０００５】
しかし、ズームレンズは通常比較的大きくて厚く、一般的にデジタルカメラで使用されている。このようなズームレンズ、特に高ズーム比（3xより高い）のズームレンズを携帯端末デバイス（例えば、薄型の携帯電話）に直接使用することは、薄型の携帯端末デバイスを求めるユーザの追求に反する。したがって、デジタルズーム技術を使用して遠くの被写体をズームインするのが一般的な方法である。しかし、この技術では、解像力と撮像の鮮明度の改善が制限される。ズーム比が比較的高い場合、画像の鮮明度の損失が起こる。
【０００６】
したがって、端末デバイスの薄型特徴を確保しながら、端末デバイスの撮像がより高い解像力およびより高い鮮明度を得ることができる技術的解決策が緊急に必要とされている。
【発明の概要】
【課題を解決するための手段】
【０００７】
本発明の実施形態は、高ズーム比でロスレス撮像を達成し、それによってユーザの撮影エクスペリエンスを改善するための撮影方法、装置、およびデバイスを提供する。
【０００８】
本発明の実施形態で提供される具体的な技術的解決策は、以下の通りである。
【０００９】
第1の態様によれば、本発明の一実施形態は、撮影方法を提供し、方法は撮影端末に適用され、撮影端末は第1のカメラ、第2のカメラ、および第3のカメラを含み、第1のカメラおよび第3のカメラはカラーカメラであり、第2のカメラは白黒カメラであり、第1のカメラ、第2のカメラ、第3のカメラはすべてプライムレンズを使用するカメラであり、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方より大きく、方法は、
目標ズーム比を取得するステップと、
目標ズーム比に基づいて、第1のカメラ、第2のカメラ、および第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定するステップと、
目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むステップと、
目標シーンを含む少なくとも1つの画像に基づいて、少なくとも1つの目標シーンの出力画像を取得するステップと、を特に含む。
【００１０】
目標シーンは、ユーザが最終的に撮影することを期待している領域であり、端末の目標ズーム比でのプレビュー画像として理解することもでき、したがって、目標ズーム比と目標シーンとの間には対応関係がある。
【００１１】
第2の態様によれば、本発明の一実施形態は、撮影装置を提供し、装置は撮影端末に適用され、撮影端末は第1のカメラ、第2のカメラ、および第3のカメラを含み、第1のカメラおよび第3のカメラはカラーカメラであり、第2のカメラは白黒カメラであり、第1のカメラ、第2のカメラ、第3のカメラはすべてプライムレンズを使用するカメラであり、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方より大きく、装置は、
目標ズーム比を取得するように構成された取得モジュールと、
目標ズーム比に基づいて、第1のカメラ、第2のカメラ、および第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定するように構成された決定モジュールと、
目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むように構成された取り込みモジュールと、
目標シーンを含む少なくとも1つの画像に基づいて、目標シーンの出力画像を取得するように構成された画像処理モジュールと、をさらに含む。
【００１２】
本発明の実施形態で提供される前述の方法および装置の技術的解決策によれば、撮影端末は、大きな体積のズームデバイスの代わりに、プライムレンズを使用する複数のカメラの組み合わせを使用するので、端末の厚さは大幅に増加しないため、約5xのロスレスズーム効果が得られる。これにより、特に携帯電話などのスマートハンドヘルドデバイスの端末の美観が保証され、小型薄型端末と大きなズームでのロスレス撮像に対するユーザの要件が満たされ、ユーザの使用エクスペリエンスが向上する。
【００１３】
第1の態様または第2の態様によれば、可能な設計では、第2のカメラの解像度は、第1のカメラの解像度よりも高く、かつ第3のカメラの解像度よりも高い。
【００１４】
第1の態様または第2の態様によれば、可能な設計では、第2のカメラの解像度は、第1のカメラの出力画像の解像度よりも高く、かつ第3のカメラの出力画像の解像度よりも高い。
【００１５】
第1の態様または第2の態様によれば、可能な設計では、方法は、目標ズーム比が（1、3）内の場合に、第1のカメラおよび第2のカメラを目標カメラとして決定するステップと、第1のカメラおよび第2のカメラを使用して、目標シーンを含む画像をそれぞれ取り込むステップと、を含む。方法は、取得モジュール、決定モジュール、および取り込みモジュールによって協調的に実行されてもよい。
【００１６】
第3のカメラと比べて、第1のカメラおよび第2のカメラは短焦点レンズを使用したカメラである。低い目標ズーム比の要件の下で、第1のカメラと第2のカメラを使用して、それぞれカラー画像と白黒画像を取り込み、センタークロッピング、マルチフレームズーム、白黒とカラーの融合の方法を後で使用することにより、低い目標ズーム比での鮮明な撮像を実現することができる。これらのアルゴリズムは、画像処理モジュールによって実行されてもよい。
【００１７】
第1の態様または第2の態様によれば、可能な設計では、方法は、目標ズーム比が［3、5］内の場合に、目標シーンの照度が予め設定されたしきい値よりも低いかどうかをさらに判定するステップと、目標シーンの照度が予め設定されたしきい値よりも低い場合には、第3のカメラおよび第2のカメラを目標カメラとして決定し、第2のカメラおよび第3のカメラを使用して、目標シーンを含む画像をそれぞれ取り込むステップと、あるいは、目標シーンの照度が予め設定されたしきい値より低くない場合には、第3のカメラを目標カメラとして決定し、第3のカメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むステップと、を含む。方法は、取得モジュール、決定モジュール、および取り込みモジュールによって協調的に実行されてもよい。
【００１８】
第1のカメラおよび第2のカメラと比較して、第3のカメラは短焦点レンズを使用するカメラである。適度な目標ズーム比の要件の下で、カラー画像を取り込むために第3のカメラが使用される。目標シーンに十分な光がある場合、すなわち目標シーンが暗くない環境にある場合には、センタークロッピングとマルチフレームズームの方法を使用することにより、ロスレスズームをほぼ実現することができる。目標シーンに十分な光がない場合、すなわち目標シーンが暗い環境にある場合には、第2のカメラを有効にして、第3のカメラで取り込まれたカラー画像の詳細を補足するために黒い画像を取り込む必要があり、また、センタークロッピング、マルチフレームズーム、ならびに望遠、白黒、およびカラーの融合などの方法を使用して、ロスレスズームをほぼ達成できるため、適度な目標ズーム比で鮮明な撮像を実現することができる。これらのアルゴリズムは、画像処理モジュールによって実行されてもよい。
【００１９】
第1の態様または第2の態様によれば、可能な設計では、方法は、目標ズーム比が（5、10］内の場合に、目標シーンの照度が予め設定されたしきい値よりも低いかどうかを判定するステップと、目標シーンの照度が予め設定されたしきい値よりも低い場合には、第3のカメラおよび第2のカメラを目標カメラとして決定し、第2のカメラおよび第3のカメラを使用して、目標シーンを含む画像をそれぞれ取り込むステップと、あるいは、目標シーンの照度が予め設定されたしきい値より低くない場合には、第3のカメラを目標カメラとして決定し、第3のカメラを使用して、目標シーンを含む少なくとも1つの画像を取り込むステップと、を含む。方法は、取得モジュール、決定モジュール、および取り込みモジュールによって協調的に実行されてもよい。
【００２０】
第1のカメラおよび第2のカメラと比較して、第3のカメラは短焦点レンズを使用するカメラである。高い目標ズーム比の要件の下で、カラー画像を取り込むために第3のカメラが使用される。目標シーンに十分な光がある場合、すなわち目標シーンが暗くない環境にある場合には、センタークロッピング、マルチフレームズーム、およびデジタルズームの方法を使用することにより、ロスレスズームをほぼ実現することができる。目標シーンに十分な光がない場合、すなわち目標シーンが暗い環境にある場合には、第2のカメラを有効にして、第3のカメラで取り込まれたカラー画像の詳細を補足するために黒い画像を取り込む必要がさらにあり、また、センタークロッピング、マルチフレームズーム、デジタルズーム、ならびに望遠、白黒、およびカラーの融合などの方法を使用して、ロスレスズームをほぼ達成できるため、高い目標ズーム比で鮮明な撮像を実現することができる。これらのアルゴリズムは、画像処理モジュールによって実行されてもよい。
【００２１】
第1の態様または第2の態様によれば、可能な設計では、第3のカメラの等価焦点距離は、第2のカメラの等価焦点距離の3倍であり、第2のカメラの等価焦点距離は、第1のカメラの等価焦点距離に等しい。
【００２２】
第1の態様または第2の態様によれば、可能な設計では、第1のカメラの等価焦点距離は27mmであり、第2のカメラの等価焦点距離は27mmであり、第3のカメラの等価焦点距離は80mmである。つまり、第3のカメラの等価焦点距離は、第1と第2のカメラの等価焦点距離の約3倍である。
【００２３】
第1の態様または第2の態様によれば、可能な設計では、第1のカメラの解像度、第2のカメラの解像度、および第3のカメラの解像度は、それぞれ10M、20M、および10Mである。
【００２４】
異なる端末は、ユーザの異なるズーム要件に基づいて決定されてもよく、これらの端末は、異なる特徴を備えたレンズを有し、異なるズーム条件でレンズの組み合わせ、画像処理アルゴリズムなどを提供してもよいことを理解されたい。前述の説明で境界点として3xおよび5xが使用されていることは、その1つの実施態様である。より広義には、本発明における目標ズーム比は、低い範囲、中程度の範囲、および高い範囲の3つの範囲をカバーしてもよい。説明を簡単にするために、3つの範囲は（1，a）、［a，b］、および（b，c］として表される。短焦点レンズを使用したカメラ（例えば、等価焦点距離が27 mm）として、第1のカメラと第2のカメラには強力な短焦点撮像機能がある。しかし、目標ズーム比の値が大きくなるほど、第1のカメラおよび第2のカメラで撮像された少なくとも1つの画像を処理して得られる出力画像の鮮明度は低下し、ここで、処理アルゴリズムには、マルチフレームズーム、および白黒とカラーの融合が含まれる。したがって、鮮明度の制約下では、aには上限値があり、特定の上限値はレンズパラメータ、アルゴリズム、および鮮明度に対するユーザの要件に関連している。具体的な上限値は記載されておらず、これに限定されない。第3のカメラのレンズパラメータは通常、aの上限値に関連している（例えば、aが3の場合、第3のカメラの等価焦点距離は80mmになり得る）。具体的には、適度なズームの要件の下では、第1のカメラと第2のカメラはすでに撮像要件を満たすことができず、この場合、少なくとも1つの画像を取り込む主なタスクは望遠レンズ、すなわち第3のカメラで行う必要がある。しかし、目標ズーム比の値がさらに大きくなると、第3のカメラで取り込まれた少なくとも1つの画像を処理することによって得られる出力画像の鮮明度もまた低下するが、ここで、処理アルゴリズムにはマルチフレームズームおよび白黒とカラーの融合が含まれる。したがって、鮮明度の制約下では、bにも上限値があり、bは端末が達成できるほぼロスのない最大ズーム能力として代替的に理解でき、具体的な上限値はレンズパラメータ、アルゴリズム、および鮮明度に対するユーザの要求に関連している。具体的な上限値は記載されておらず、これに限定されない。（b、c］の範囲のレンズの組み合わせと画像取り込みの方法は、（b、c）の範囲では、デジタルズームのアルゴリズムが後で追加されていることを除いて、［a、b］の範囲の方法と似ており、高い目標ズーム比での撮像を実現しているが、すでに撮像品質の低下が発生している。したがって、端末システム、構成要素などの機能的制約の下では、cには上限値があり、cは低鮮明度要件の下で端末が達成できる最大ズーム能力としても理解することができ、具体的な上限値は、レンズパラメータ、アルゴリズム、および鮮明度に対するユーザの要求に関連している。具体的な上限値は記載されておらず、これに限定されない。本発明によれば、（1、b）ズーム範囲でのロスレスズームを実現することができる。
【００２５】
さらに、ユーザがズーム画像の鮮明度の限定的な低下を許容する場合、または端末デバイスが、画像処理アルゴリズムの進歩により、より長い焦点距離の望遠レンズ（例えば、4x望遠レンズまたは5x望遠レンズであり、具体的には、等価焦点距離は108mmまたは135mmである）を使用することが可能な場合には、前述の可能な設計では、目標ズーム比の範囲、レンズパラメータ、およびレンズの組み合わせの方法はすべて、前述の理論に基づいて適応的に調整でき、それによってユーザの要求を満たす画像を得ることができる。例えば、第3のカメラの等価焦点距離は80mmを超えてもよい。これらの可能な設計はすべて、本発明の保護範囲に含まれるものとする。
【００２６】
さらに、ユーザが光の影響を受けやすい状態でズーム画像のノイズまたは細部の限定的な増加を許容する場合、または端末デバイスが、画像処理アルゴリズムの進歩により、より長い焦点距離の望遠レンズ（例えば、4x望遠レンズまたは5x望遠レンズであり、具体的には、等価焦点距離は108mmまたは135mmである）を使用することが可能な場合には、前述の可能な設計では、目標ズーム比の範囲、レンズパラメータ、およびレンズの組み合わせの方法はすべて、前述の理論に基づいて適応的に調整でき、それによってユーザの要求を満たす画像を得ることができる。例えば、第2のカメラの等価焦点距離は27mmを超えてもよい。これらの可能な設計はすべて、本発明の保護範囲に含まれるものとする。
【００２７】
さらに、ユーザがズーム画像の鮮明度の限定的な低下を許容した場合には、または画像処理アルゴリズムの進歩により、bの値は5より大きくなることがあり、例えば、5．5xまたは6xなどの別の値に達することがあり得る。
【００２８】
より具体的には、前述の可能な設計は、メモリ内のプログラムと命令を呼び出して対応する動作を実行する、例えば、カメラを有効にし、画像を取り込むようにカメラを制御し、取り込んだ画像に対してアルゴリズム処理を実行し、最終的な出力画像を生成して保存することにより、プロセッサによって実施することができる。
【００２９】
第3の態様によれば、本発明の一実施形態は、端末デバイスを提供し、端末デバイスは、メモリ、プロセッサ、バス、第1のカメラ、第2のカメラ、および第3のカメラを含み、メモリ、第1のカメラ、第2のカメラ、第3のカメラ、およびプロセッサは、バスを使用して接続され、第1のカメラおよび第3のカメラはカラーカメラであり、第2のカメラは白黒カメラであり、第1のカメラ、第2のカメラ、第3のカメラはすべてプライムレンズを使用するカメラであり、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方より大きい。カメラは、プロセッサの制御下で画像信号を取り込むように構成されている。メモリは、コンピュータプログラムおよび命令を格納するように構成されている。プロセッサは、メモリに格納されたコンピュータプログラムおよび命令を呼び出すように構成され、その結果、端末デバイスは、前述の可能な設計のいずれか1つによる方法を実行する。
【００３０】
第3の態様によれば、可能な設計では、端末デバイスはアンテナシステムをさらに含み、アンテナシステムは、プロセッサの制御下で、無線通信信号を送信および受信して、モバイル通信ネットワークとの無線通信を実施し、モバイル通信ネットワークは、GSMネットワーク、CDMAネットワーク、3Gネットワーク、4Gネットワーク、5Gネットワーク、FDMAネットワーク、TDMAネットワーク、PDCネットワーク、TACSネットワーク、AMPSネットワーク、WCDMA(登録商標)ネットワーク、TDSCDMAネットワーク、Wi−Fiネットワーク、およびLTEネットワークのうちの1つまたは複数を含む。
【００３１】
上記の方法、装置、およびデバイスは、端末提供の撮影ソフトウェアが撮影を実行するシナリオだけでなく、端末がサードパーティの撮影ソフトウェアを実行して撮影を実行するシナリオにも適用されてもよい。
【００３２】
本発明によれば、スマートフォンで約5xのロスレスズーム効果を得ることができ、暗い環境下でも解像力とノイズのバランスを比較的良好に保つことができる。
【図面の簡単な説明】
【００３３】
【図１】本発明の一実施形態による、端末の概略的な構成図である。
【図２】本発明の一実施形態による撮影方法のフローチャートである。
【図３】本発明の一実施形態による特定のカメラ設計方式を示す図である。
【図４】本発明の一実施形態による第1の任意選択の場合の撮影方式を示す図である。
【図５】本発明の一実施形態による、実際に取り込まれた画像から出力画像への目標シーンの変更プロセスを示す図である。
【図６】本発明の一実施形態による第2の任意選択の場合の撮影方式を示す図である。
【図７】本発明の実施形態による第3の任意選択の場合の撮影方式を示す図である。
【図８】本発明の実施形態による第4の任意選択の場合の撮影方式を示す図である。
【図９】本発明の実施形態による第5の任意選択の場合の撮影方式を示す図である。
【図１０】本発明の一実施形態による撮影装置の概略構成図である。
【発明を実施するための形態】
【００３４】
以下では、本発明の実施形態の添付図面を参照して、本発明の実施形態の技術的解決策について明白かつ完全に説明する。明らかに、記載された実施形態は、本発明の実施形態の一部にすぎず、そのすべてではない。創造的努力なしに本発明の実施形態に基づいて当業者によって得られたすべての他の実施形態は、本発明の保護範囲内に含まれるものとする。
【００３５】
本発明の実施形態では、端末は、ユーザに撮影および／またはデータ接続を提供するデバイス、無線接続機能を備えたハンドヘルドデバイス、または無線モデムに接続された別の処理デバイス、例えば、デジタルカメラ、一眼レフカメラ、携帯電話（またはセルラー電話と呼ばれる）、またはスマートフォンであってもよく、あるいは、ポータブル、ポケットサイズ、ハンドヘルド、またはウェアラブルデバイス（例えばスマートウォッチ）、タブレット、パーソナルコンピュータ（PC、Personal Computer）、携帯情報端末（Personal Digital Assistant、PDA）、販売時点情報管理システム（Point of Sales、POS）、車載コンピュータ、ドローン、空中カメラなどであってもよい。
【００３６】
図1は、端末100のハードウェア構成の任意選択的な概略図である。
【００３７】
図1に示すように、端末100は、無線周波数ユニット110、メモリ120、入力ユニット130、表示ユニット140、カメラ150、オーディオ回路160、スピーカ161、マイクロフォン162、プロセッサ170、外部インターフェース180、および電源190などの構成要素を含むことができる。本発明のこの実施形態では、少なくとも3つのカメラ150がある。
【００３８】
カメラ150は、画像またはビデオを取り込むように構成され、画像またはビデオ撮影機能を実施するためのアプリケーション命令を使用することによってトリガされ得る。カメラは、撮像レンズ、光フィルタ、および画像センサなどの構成要素を含むことができる。被写体によって放射または反射された光は、撮像レンズに入り、光フィルタを通過し、最終的に画像センサに収束する。撮像レンズは、主に、撮影視野内のすべての対象物（被写体とも呼ばれる）から放射されたまたは反射された光を収束させて撮像するように構成されている。光フィルタは、主に、光の中の不要な光波（例えば、赤外光などの可視光以外の光波）を除去するように構成されている。画像センサは、主に、受信した光信号に対して光電気変換を実行して、光信号を電気信号に変換し、その後の処理のためにプロセッサ170に電気信号を入力するように構成されている。
【００３９】
当業者は、図1が携帯型多機能装置の単なる一例を示しており、携帯型多機能装置に対する限定を構成しないことを理解するであろう。携帯型多機能装置は、図に示すものよりも多いまたは少ない構成要素を含んでもよいし、またはいくつかの構成要素が組み合わされてもよいし、または異なる構成要素が使用されてもよい。
【００４０】
入力ユニット130は、入力された数字または入力された文字情報を受信して、携帯型多機能装置のユーザ設定および機能制御に関連するキー信号入力を生成するように構成されてもよい。具体的には、入力ユニット130は、タッチスクリーン131および別の入力デバイス132を含んでもよい。タッチスクリーン131は、タッチスクリーン131上またはその近くでユーザによって実行されたタッチ操作（例えば、タッチスクリーン上またはその近くで指、ナックル、スタイラス、または他の任意の適切な対象物を使用してユーザによって実行された操作）を収集して、予め設定されたプログラムに基づいて対応する接続装置を駆動することができる。タッチスクリーンは、タッチスクリーン上でユーザによって実行されたタッチ操作を検出し、タッチ操作をタッチ信号に変換し、タッチ信号をプロセッサ170に送信し、プロセッサ170によって送信されたコマンドを受信し、コマンドを実行することができる。タッチ信号は、少なくともタッチポイントの座標情報を含む。タッチスクリーン131は、端末100とユーザとの間の入力インターフェースおよび出力インターフェースを提供することができる。さらに、タッチスクリーンは、抵抗器タイプ、キャパシタタイプ、赤外線タイプ、および表面弾性波タイプなどの様々なタイプで実装されてもよい。入力ユニット130は、タッチスクリーン131の他に、別の入力デバイスをさらに含んでもよい。具体的には、別の入力デバイス132は、物理キーボード、ファンクションキー（ボリューム制御キーおよび電源キーなど）、トラックボール、マウス、ジョイスティックなどのうちの1つまたは複数を含むことができるが、これらに限定されない。
【００４１】
表示ユニット140は、ユーザが入力した情報またはユーザに提供される情報、ならびに端末100の様々なメニューを表示するように構成されてもよい。本発明のこの実施形態では、表示ユニットはさらに、カメラ150を使用することによってデバイスにより取得された画像を表示するように構成される。画像には、いくつかの撮影モードにおけるプレビュー画像、撮影初期画像、および撮影後に特定のアルゴリズムを用いて処理された目標画像が含まれてもよい。
【００４２】
さらに、タッチスクリーン131がディスプレイパネル141を覆ってもよい。タッチスクリーン131は、タッチスクリーン131上またはその近くのタッチ操作を検出すると、タッチ操作をプロセッサ170に送信してタッチ事象のタイプを判定し、プロセッサ170は、タッチ事象のタイプに基づいてディスプレイパネル141上に対応する視覚出力を提供する。この実施形態では、タッチスクリーンおよび表示ユニットは、1つの構成要素に統合されて、端末100の入力、出力、および表示機能を実現することができる。説明を簡単にするために、本発明の実施形態では、タッチディスプレイを使用して、タッチスクリーンおよび表示ユニットの機能を表す。いくつかの実施形態では、タッチスクリーンおよび表示ユニットは、代替的に2つの独立した構成要素であってもよい。
【００４３】
メモリ120は、命令およびデータを格納するように構成されてもよい。メモリ120は、主に、命令格納領域およびデータ格納領域を含んでもよい。データ格納領域は、ナックルタッチジェスチャとアプリケーション機能との間の関連付けの関係を格納することができる。命令格納領域は、オペレーティングシステム、アプリケーション、および少なくとも1つの機能に必要な命令、またはそれらのサブセットもしくは拡張セットなどのソフトウェアユニットを格納することができる。メモリ120は、不揮発性ランダムアクセスメモリをさらに含んでもよく、ソフトウェアおよびアプリケーション上の制御をサポートするために、ハードウェア、ソフトウェア、ならびに計算および処理デバイスのデータリソースを管理するためのプログラムおよび命令をプロセッサ170に提供してもよい。メモリ120は、マルチメディアファイルを格納し、オペレーティングプログラムおよびアプリケーションを格納するようにさらに構成されてもよい。
【００４４】
プロセッサ170は、端末100の制御センターであり、様々なインターフェースおよびラインを使用して、携帯電話全体の部品に接続される。プロセッサ170は、端末100の様々な機能を実行し、メモリ120に格納された命令を実行または実施し、メモリ120に格納されたデータを呼び出してデータを処理し、携帯電話の全体的な監視を行う。任意選択で、プロセッサ170は、1つまたは複数の処理ユニットを含むことができる。任意選択で、アプリケーションプロセッサおよびモデムプロセッサは、プロセッサ170に統合されてもよく、アプリケーションプロセッサは主にオペレーティングシステム、ユーザインターフェース、アプリケーションなどを処理し、モデムプロセッサは主に無線通信を処理する。モデムプロセッサはプロセッサ170に統合されなくてもよいことが理解され得る。いくつかの実施形態では、プロセッサおよびメモリが単一のチップ上に実装されてもよい。いくつかの実施形態では、代替的に、プロセッサおよびメモリが独立したチップ上にそれぞれ実装されてもよい。プロセッサ170はさらに、対応する動作および制御信号を生成し、信号を計算および処理デバイスの対応する構成要素に送信し、ソフトウェアのデータ、特にメモリ120内のデータおよびプログラムを読み取って処理するように構成されてもよく、その結果、計算および処理デバイスの各機能モジュールが対応する機能を実行し、対応する構成要素を制御して、命令によって要求されるように動作するようにする。
【００４５】
無線周波数ユニット110は、コールプロセスにおいて情報を送受信するか、信号を送受信するように、特に、基地局からダウンリンク情報を受信した後に、処理のためにダウンリンク情報をプロセッサ170に送信し、設計されたアップリンクデータを基地局に送信するように構成されてもよい。通常、RFユニットは、アンテナ、少なくとも1つの増幅器、トランシーバ、カプラ、低雑音増幅器（Low Noise Amplifier、LNA）、デュプレクサなどを含むが、これらに限定されない。さらに、無線周波数ユニット110は、無線通信を介してネットワークデバイスおよび別のデバイスと通信することができる。無線通信は、任意の通信規格またはプロトコルを使用することができ、それには、限定はしないが、モバイル通信用グローバルシステム（Global System of Mobile communication、GSM）、一般パケット無線サービス（General Packet Radio Service、GPRS）システム、コード分割多重アクセス（Code Division Multiple Access、CDMA）、広帯域コード分割多重アクセス（Wideband Code Division Multiple Access、WCDMA(登録商標)）システム、ロングタームエボリューション（Long Term Evolution、LTE）、電子メール、ショートメッセージングサービス（Short Messaging Service、SMS）などが含まれる。
【００４６】
オーディオ回路160、スピーカ161、およびマイクロフォン162は、ユーザと端末100との間のオーディオインターフェースを提供することができる。オーディオ回路160は、受信したオーディオデータから変換された電気信号をスピーカ161に送信することができ、スピーカ161が、出力のために電気信号をオーディオ信号に変換する。別の態様では、マイクロフォン162は、オーディオ信号を収集し、受信したオーディオ信号を電気信号に変換するように構成される。オーディオ回路160は、電気信号を受信し、電気信号をオーディオデータに変換し、次いで、オーディオデータを処理のためにプロセッサ170に出力し、無線周波数ユニット110がオーディオデータを別の端末に送信する。あるいは、オーディオデータは、さらなる処理のためにメモリ120に出力される。オーディオ回路は、オーディオ回路とイヤホンとの間の接続インターフェースを提供するように構成されたイヤホンジャック163をさらに含んでもよい。
【００４７】
端末100は、各構成要素に電力を供給する電源（電池など）190をさらに含む。任意選択で、電源は、電源管理システムを使用して充電、放電、および電力消費の管理などの機能を実施するために、電源管理システムを使用してプロセッサ170に論理的に接続されてもよい。
【００４８】
端末100は、外部インターフェース180をさらに含み、外部インターフェースは、標準的なMicro USBインターフェースまたはマルチピンコネクタであってもよい。外部インターフェース180は、端末100と通信のための別のデバイスとを接続するように構成されてもよく、さらに端末100を充電するために充電器に接続されてもよい。
【００４９】
端末100は、フラッシュ、無線フィデリティ（wireless fidelity、WiFi）モジュール、ブルートゥース(登録商標)モジュール、種々の機能を有するセンサなどをさらに含むことができるが、これらは図には示されていない。ここでは詳細についての説明を省略する。以下に説明するすべての方法は、図1に示す端末に適用することができる。
【００５０】
図2に示すように、本発明の実施形態は、撮影方法を開示する。方法は、撮影端末に適用され、端末は、第1のカメラ、第2のカメラ、および第3のカメラを含み、第1のカメラおよび第3のカメラはカラーカメラであり、第2のカメラは白黒カメラであり、第2のカメラの解像度は、第1のカメラの解像度よりも高く、かつ第3のカメラの解像度よりも高く、第1のカメラ、第2のカメラ、第3のカメラはすべてプライムレンズを使用するカメラであり、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方より大きく、方法は以下のステップを含む。
【００５１】
ステップ21：目標ズーム比を取得する。
【００５２】
ステップ22：目標ズーム比に基づいて、第1のカメラ、第2のカメラ、および第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定する。
【００５３】
ステップ23：目標カメラを使用して、目標シーンを含む少なくとも1つの画像を取り込む。
【００５４】
ステップ24：目標シーンを含む、取り込まれた少なくとも1つの画像に基づいて目標シーンの出力画像を取得する。目標シーンは、ユーザが撮影を期待しているシーンである。出力画像の解像度は第2のカメラの解像度よりも低い。
【００５５】
前述の3つのカメラは、端末デバイスの前または端末デバイスの後ろに配置することができる。カメラの具体的な配置方法は、設計者の要求に応じて柔軟に決定することができる。これは、本願では限定されない。
【００５６】
様々なサイズの受光素子の撮像の視野を、135フィルムカメラ（135フィルムカメラの固定感光面と35mmフィルム仕様を使用）の撮像の同じ視野に対応するレンズの焦点距離に変換することは業界の慣例である。変換によって得られる焦点距離は、135フィルムカメラの等価焦点距離である。デジタルカメラの受光素子（CCDまたはCMOS）のサイズは、カメラによって異なる（そのサイズは、例えば、1／2．5インチまたは1／1．8インチである）。したがって、同じ焦点距離のレンズでも、サイズの異なる受光素子を備えたデジタルカメラでは、異なる撮像視野を有する。しかし、ユーザにとって実際に意味があるのは、カメラの撮影範囲（視野のサイズ）である。言い換えれば、人々は実際の焦点距離よりも等価焦点距離に関心がある。
【００５７】
特定の実施プロセスにおいて、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方よりも大きい。前述の例の第1のカメラ、第2のカメラ、および第3のカメラの等価焦点距離（27mm、27mm、80mm）の組み合わせに加えて、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離は、代替的に25mm〜35mmから選択される他の値であってもよく、第3のカメラの等価焦点距離は、第1のカメラまたは第2のカメラの等価焦点距離の2〜4倍であってもよい。望遠レンズを使用するカメラとして、第3のカメラは、第1のカメラと第2のカメラで取得した画像がアルゴリズムを使用してロスレスズームを達成できない場合に、より高いズームの要件の下でロスレスズーム画像を取得するタスクを実行する。この倍率は、第1のカメラと第2のカメラのパラメータとアルゴリズムの性能がロスレス出力画像を達成するときに到達できる最大ズーム比によって決定され、この倍率は、例えば、2．5倍、3倍、または3．5倍である。これは単に一例として使用されており、限定されない。
【００５８】
特定の実施プロセスでは、第2のカメラの口径は、第1のカメラの口径および第3のカメラの口径の両方より大きい。例えば、第2のカメラのF値は1．65、第1のカメラのF値は1．8、第3のカメラのF値は2．4であり、別の例では、第2のカメラのF値は1．55、第1のカメラのF値は1．7、第3のカメラのF値は2．2である。これは単に一例として使用されており、限定されない。
【００５９】
特定の実施プロセスでは、第2のカメラの解像度は第1のカメラの解像度よりも高く、かつ第3のカメラの解像度よりも高い。前述の例の第2のカメラの解像度、第1のカメラの解像度、および第3のカメラの解像度の組み合わせ（20M、10M、10M）に加えて、第2のカメラの解像度、第1のカメラの解像度、および第3のカメラの解像度は、例えば、（20M、10M、8M）の組み合わせ、（24M、12M、12M）の組み合わせ、または（24M、12M、10M）の組み合わせであってもよい。これは単に一例として使用されており、限定されない。
【００６０】
カラーカメラは、目標シーンのカラー情報を取り込んでカラー写真を撮ることができるRGBセンサとして理解することができる。白黒カメラは、白黒シーンのみを取り込むモノクロセンサとして理解することができる。モノクロセンサはシーンからより多くの詳細を取り込むことができるため、白黒カメラは目標シーンの詳細と輪郭を取り込むことができる。
【００６１】
白黒カメラの撮像原理により、同じ解像度のカラーカメラと比較して、白黒カメラの方がより高い解像力とより詳細な表現能力を有することを理解されたい。具体的には、白黒カメラとカラーカメラの解像度とピクセルサイズ（pixelsize）が同じ場合、白黒カメラで撮影した画像の対角線方向の解像力は、カラーカメラで撮影した画像の対角線方向の解像力の2倍である。さらに、例えば、より高い解像度の白黒カメラが使用される場合には、カラーカメラの出力解像度に対する白黒カメラの出力解像度の比はTであり、白黒カメラとカラーカメラを使用してそれぞれ取得した画像で構成される出力画像では、カラーカメラのズーム能力と比較して、水平および垂直方向の光学ズーム能力はT倍に増加し、対角線方向の光学ズーム能力は2T倍に増加する。例えば、カラーカメラの解像度が12M（3968＊2976）で、白黒カメラの解像度が20M（5120＊3840）である場合には、光学ズーム能力は、カラーカメラのズーム能力と比較して5120／3968倍に増加する。カメラの解像度はレンズ設計ベンダーによって決定され、製造技術と材料に関連している。従来技術では、異なる解像度の多様なカメラが存在する。これは単に一例として使用されているだけであり、本発明では限定されない。
【００６２】
白黒カメラとカラーカメラの両方が撮像に参加している場合には、カラーカメラで取り込まれた豊富なカラー情報は、白黒カメラで取り込まれた鮮明な詳細と融合して、より高品質の写真を取得することができる。
【００６３】
具体的には、ステップ21において、目標ズーム比を取得することは、例えば1．5xズーム（1．5x）、2xズーム（2x）、3xズーム（3x）など、ユーザが選択した倍率を取得することを意味する。予め設定された視野は、目標ズーム比の基準として使用することができ、予め設定された視野は、ユーザまたは設計者によって柔軟に選択することができ、例えば、78度FOVが基準として使用される。目標ズーム比の値をnで表す。例えば、カメラの焦点距離の調整可能な精度が0．1である場合には、nxは1．1x、1．2x、または1．3xとすることができ、または、調整可能な精度が0．5である場合には、nxは1．5x、2．0x、2．5xなどとすることができる。
【００６４】
ユーザは、撮影デバイスのズーム比ボタンを使用することによって、または撮影デバイスの表示画面上でジェスチャコマンドを入力することによって、ズーム比を選択できることを理解されたい。あるいは、ズーム比は、特定の位置に対するユーザの入力に基づいてシステムによって決定されてもよい。
【００６５】
さらに、ユーザが撮影デバイスの撮影ボタンを押すか、または撮影デバイスの画面上で入力されたジェスチャコマンドを受け取る、すなわちシャッターがトリガされると、目標カメラが目標シーンを含む画像を取り込む。具体的には、目標カメラは露光時間内に少なくとも1つの画像を取り込むことができ、端末は取り込まれた写真を処理して目標シーンの出力画像を取得する。
【００６６】
目標シーンは、ユーザが撮影を期待しているシーンであり、カメラシステムを調整して対象ズーム比を適用したときのプレビュー画像が、ユーザにとって最も直感的な目標シーンの知覚である。しかしながら、本発明において提供されるすべてのカメラは、プライムレンズを使用するカメラである。プライムレンズを使用するカメラの撮影距離が固定されている場合には、ショットビジョンは固定される。したがって、目標カメラによって実際に取り込まれた画像は、目標シーンよりも大きなビジョン有し、つまり、目標シーンを含む画像が取り込まれる。
【００６７】
図2を参照すると、図3は、本発明の実施形態による比較的特定のカメラ設計方式を示している。設計は、プライムレンズを使用した3台のカメラを含む。3つのカメラの異なる特徴を参照して、異なるズーム比で、少なくとも1台のカメラを選択的に有効にして画像を取り込み、取り込んだ画像に対して画像処理を実行して、約5xのロスレスズームを実現する。簡単に言うと、カメラでnxのズームで撮影した画像と、ズームなしで被写体から1／nの距離で撮影した画像の場合、2つの画像の詳細と鮮明度が同等であれば、nxのズームがロスレスズームとして参照される。通常、光学ズームがベンチマークとして使用され、光学ズームはロスレスとみなされる。したがって、ズームの効果が光学ズームの効果に類似している場合には、ズームをロスレスズームと呼ぶことができる。画像の解像能力と鮮明度を測定するために使用できる客観的なテストがいくつかあり、例えば、Image Engineering（IE）社が提供するジーメンス星図がある。
【００６８】
本発明は、携帯電話またはタブレットなどのモバイル携帯端末またはスマート撮影端末で実施することができる。ユーザがズームモードに入り、ズーム比を選択すると、有効化する必要のあるカメラは、ユーザのズーム比と予め設定されたカメラの組み合わせモードに基づいて、端末の撮影システムによって決定される。有効化されたカメラを使用して、複数フレームの画像を連続して撮影し（有効化されたカメラが複数ある場合は、複数のカメラが同期して撮影を行い）、予め設定された対応するアルゴリズムを使用することにより、撮影されたマルチフレーム画像から鮮明なズーム画像が得られる。
【００６９】
図3に基づいて、以下は特定の例を使用して、事例に基づいて、異なる目標ズーム比での本発明で提供される異なる撮影方式および画像処理方式を説明する。
第1のカメラの具体的なパラメータは次の通りである。
27mmの等価焦点距離、カラーカメラ、および10Mの解像度。
第2のカメラの具体的なパラメータは次の通りである。
27mmの等価焦点距離、白黒カメラ、および20Mの解像度。
第3のカメラの具体的なパラメータは次の通りである。
80mmの等価焦点距離、カラーカメラ、解像度10M。
【００７０】
事例1
図4を参照することができる。
【００７１】
S101．目標ズーム比が1x〜3xの範囲内である場合、端末は第1のカメラと第2のカメラを有効にする。
【００７２】
ユーザがカメラパラメータを調整すると、ユーザが設定した目標ズーム比が区間（1、3）内になると、端末は第1のカメラ（主カメラ）と第2のカメラ（副カメラ）を有効にする。この場合、プレビュー画像はそれに応じて変化し、プレビュー画像は、ユーザが撮影することを期待する目標シーンの画像である。第1のカメラは主カメラであり、第2のカメラは副カメラである。したがって、プレビュー画像は、第1のカメラで実際に取り込まれた画像の一部であり、その部分のサイズは、出力画像の目標ズーム比と予め設定された縦横比（たとえば、4：3または16：9）の両方によって決定される。第1のカメラおよび第2のカメラが実際に撮影した画像は、実際のプレビュー画像の画像内容とは異なる（以下の説明では、第3のカメラにも当てはまる）ことを理解されたい。第1のカメラおよび第2のカメラによって実際に取り込まれた画像は、ユーザには見えない可能性がある。プレビュー画像は、ユーザが撮影することを期待している目標シーンのユーザの直感的な知覚であり、目標ズーム比の最も直感的な表現である。
【００７３】
説明を簡単にするために、第1のカメラが実際に撮影した画像の幅をw0、高さをh0、第1のカメラの解像度をw0＊h0で表す。また、第2のカメラが実際に撮影した画像の幅をw1、高さをh1、第1のカメラの解像度をw1＊h1で表す。第1のカメラの解像度と第2のカメラの解像度は確定しているため、w0、h0、w1、およびh1は定数とみなすことができる。
【００７４】
一事例では、w0とh0が出力画像の予め設定された縦横比に一致する場合には、最終的な出力画像の幅と高さもw0とh0になる。別の事例では、w0とh0が出力画像の予め設定された長さ対幅の比と一致せず、最終的な出力画像の幅と高さがw0’とh0’である場合には、カメラシステムは実際に取り込まれたw0＊h0の画像からw0’＊h0’の画像に変換してから、後続の画像処理を実行する。以下のアルゴリズムの説明を容易にするために、事例1から5の5つの例はすべて、前の事例に基づいて説明されていることを理解されたい。次の事例は、通常の数学的知識を使用することにより、当業者によって導き出すことができる。詳細は、本発明では説明しない。
【００７５】
S102．撮影機能がトリガされると、第1のカメラと第2のカメラがそれぞれ実際に撮影したシーンを連続撮影し、m0フレームのカラー画像とm1フレームの白黒画像をそれぞれ取得し、ここで、m0とm1は正の整数であり、m0はm1と等しくてもよい。本発明では、m0とm1の値の関係、およびm0とm1の具体的な値は限定されない。一実施態様では、m0およびm1の値は4、6などであってもよく、カラー画像のm0フレームは時系列で連続的または不連続であってもよく、白黒画像のm1フレームもまた時系列で連続的または不連続であってもよい。
【００７６】
一実施態様では、m0またはm1は1であってもよいが、この場合、後続のマルチフレームズーム操作は適用されず、すなわち、後続のS103が実行された後に、S105における白黒とカラーの融合の操作が直接実行される。しかし、m0またはm1は通常1より大きい必要があり、この場合、後続のマルチフレームズーム操作が適用され、すなわち、後続のS103、S104、およびS105が実行される。
【００７７】
第1のカメラおよび第2のカメラは、プライムレンズを使用するカメラであることを理解されたい。したがって、実際に撮影された画像は、ユーザが撮影することを期待し、プレビュー画像でユーザに見えるズーム目標シーンのみを含むのではなく、プレビュー画像とは異なる他のコンテンツをさらに含む。
【００７８】
S103．カラー画像のm0フレームでセンターエリアクロッピング（略してセンタークロッピングとも呼ばれる）を実行して、第1のカメラで実際に撮影された画像からサイズがw0＊h0／n2のカラー画像のm0フレームをクロッピングする。白黒画像のm1フレームでセンターエリアクロッピングを実行して、第2のカメラで実際に撮影された画像から、サイズがw1＊h1／n2の白黒画像のm1フレームをクロッピングする。
【００７９】
センターエリアクロッピングは、ユーザが撮影することを期待している領域をクロッピングすること、つまり、入力画像の中心が変更されないようにしながら、指定されたサイズの有効な領域をクロッピングすることとして理解できる。クロッピングされた領域は、ユーザが指定した目標ズーム比とカメラの等価焦点距離の両方によって決定される。
【００８０】
したがって、ユーザの直感的な知覚からは、目標シーンは、目標ズーム比でのプレビュー画像を狭義に意味してもよく、中央領域から切り取られた領域を広義に意味してもよい。
【００８１】
S104．w0＊h0／n2のサイズのカラー画像のm0フレームにマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0／n2のカラーフレーム画像の1フレームを取得する。サイズがw0＊h0／n2の白黒画像のm1フレームにマルチフレームズームを実行して、白黒マルチフレームズーム結果、すなわちw0＊h0／n2の白黒ズーム画像の1フレームを取得する。
【００８２】
実際に取り込んだ画像から目標シーンをクロッピングし、マルチフレームズームを利用して目標シーンの1フレームの画像を取得する。目標シーンの画像領域とサイズ変更については、図5を参照されたい。
【００８３】
特定の実施プロセスでは、撮影中にユーザが撮影デバイスを手に持っているため、必然的にジッターが発生する。したがって、複数フレームの画像は必然的に異なる画像コンテンツを有し、目標シーン内の同じ被写体の画像の異なるフレームは、鮮明度においてわずかに異なる。したがって、複数の画像フレームの位置からサンプリングされた情報を使用して互いに補完し、より高い解像能力、より高い鮮明度、およびより低いノイズを備えた1つの画像フレームに融合することができる。
【００８４】
任意選択のマルチフレームズームアルゴリズムの手順は次の通りである。
【００８５】
（1）参照フレームを選択する。一般的な方法は、フレーム1の選択、中間の瞬間に撮影されたフレームの選択、または最も鮮明なフレームの選択を含む。例えば、最初の2つのフレームのうちのより鮮明なフレームを参照フレームとして選択することができる。
【００８６】
（2）入力画像の他の各フレームを参照フレームに位置合わせし、参照フレームに基づいて位置合わせされた画像に対して動き補償を実行してから、ステップ（3）またはステップ（4）を実行する。
【００８７】
（3）動き補償画像の複数フレームに対してバイキュービックまたはランチョスなどの手法を用いて補間増幅を行い、中央領域の画像のサイズをw0＊h0／n2からw0＊h0に変更し、中央領域の画像コンテンツが変更されないようにする。このステップは任意である。
【００８８】
（4）ステップ（2）で取得した複数フレームの画像を予め訓練された畳み込みニューラルネットワークに入力して1フレームのズーム画像を取得し、中央領域の画像のサイズをw0＊h0／n2からw0＊h0に変更し、中央領域の画像コンテンツが変更されないようにする。あるいは、ステップ（3）で取得した複数の画像フレームを別の予め訓練された畳み込みニューラルネットワークに入力して、画像のサイズがw0＊h0である1フレームのズーム画像を取得する。
【００８９】
前述の手順において、動き補償、補間増幅、畳み込みニューラルネットワークなどは、多くの方法で実施することができる。マルチフレームズームアルゴリズムはまた、様々な方法で実施することができ、アルゴリズムは本発明において限定されない。当業者は、前述の手順を実施するために呼び出すことができる多くのオープンソースアルゴリズムがあり、したがって、詳細は本明細書では説明されないことを理解されたい。
【００９０】
S105．カラーズーム画像のフレームとS104で取得した白黒ズーム画像のフレームで白黒とカラーの融合を行い、w0＊h0の1フレームのカラー出力画像、すなわち目標シーンの出力画像を取得し、これはユーザが保存できる画像である。ここで、目標シーンの出力画像の解像度は、第1のカメラの解像度および第3のカメラの解像度と同じである。
【００９１】
白黒とカラーの融合アルゴリズムの任意選択の手順は次の通りである。
【００９２】
アルゴリズムの手順：
（1）シーンからの距離などの要素に基づいて融合ブランチを選択する。例えば、白黒に基づいて色情報を融合させることができる。あるいは、色情報に基づいて高い周波数の白黒が融合される。
【００９３】
（2）グローバルレジストレーションとローカルブロックマッチングを組み合わせる方法を使用して、白黒画像をカラー画像に位置合わせする。
【００９４】
（3）ステップ（1）で選択したブランチに基づいて、位置合わせされた白黒画像とカラー画像に対して情報融合を実行し、融合結果を取得する。
【００９５】
（4）融合結果をシャープにする。
【００９６】
前述のアルゴリズム手順において、関連する処理方式は、融合、位置合わせ、シャープニングなどの従来技術の成熟したアルゴリズムを使用することができ、これらは限定されず、本発明では説明されない。
【００９７】
上記のように、白黒カメラとカラーカメラの両方が撮像に参加している場合には、カラーカメラで取り込まれた豊富なカラー情報は、白黒カメラで取り込まれた鮮明な詳細と融合して、より高品質の写真を取得する。
【００９８】
事例2
図6を参照することができる。
【００９９】
S201．目標ズーム比が3x〜5xの範囲内である場合、システムは目標シーンが暗い環境にあるかどうかを判定する必要がある。目標シーンが暗い環境にない場合には、端末は第3のカメラを有効にする。
【０１００】
暗い環境は、予め設定された条件が満たされるかどうかに基づいて決定されてもよい。明るさが100ルクスより低い場合には、目標シーンは暗い環境にあるとみなされる。また、照明条件が100ルクスの場合には、目標シーンは暗い環境にないとみなされる。この予め設定された照度値は、本発明では限定されないが、ユーザまたは端末設計ベンダーによって決定される。特定の実施プロセスでは、端末は、通常の露出中に使用されるISO値を使用して決定を実行することができる。ISO値が400以上の場合には、目標シーンは暗い環境にあるとみなされる。または、ISO値が400より小さい場合には、目標シーンは暗い環境にはないとみなされる。予め設定されたISO値は、本発明では限定されないが、ユーザまたは端末設計製造業者によって決定される。
【０１０１】
ユーザがカメラパラメータを調整する場合、ユーザが設定した目標ズーム比が区間［3、5］内になると、第3のカメラが有効になる。この場合、プレビュー画像はそれに応じて変化し、プレビュー画像は、第3のカメラによって実際に取り込まれた画像の一部分である。その部分のサイズは、目標ズーム比と出力画像の予め設定された縦横比の両方によって決定される。
【０１０２】
S202．撮影機能がトリガされると、第3のカメラが実際に撮影されたシーンを連続して撮影し、m2フレームのカラー画像を取得する。
【０１０３】
第3のカメラで撮影した画像の幅をw2、高さをh2で表し、第3のカメラの解像度はw2＊h2である。第3のカメラの解像度は第1のカメラの解像度と同じであるため、w2＝w0、およびh2＝h0である。また、m2はm0と同じであってもよく、w0、h0、m0を用いて残りのステップや添付図面を代替的に表現してもよい。
【０１０４】
S203．m0フレームのカラー画像でセンターエリアクロッピングを実行し、第3のカメラで実際に撮影された画像から、サイズがw0＊h0／（n／n0）2のm0フレームのカラー画像をクロッピングする。第3のカメラの等価焦点距離は80mmであり、つまり第3のカメラは、望遠レンズを使用したカメラであり、標準レンズを使用したカメラと比較して、第3のカメラで同じ撮影距離で撮影した画像は大きくなるが、視野は狭くなる。したがって、中央領域は、目標ズーム比と等価焦点距離の両方によって決定される。ここで、n0は3（80 mm／27 mm）にほぼ等しく、カメラの等価焦点距離によって決定される。
【０１０５】
S204．サイズがw0＊h0／（n／n0）2のm0フレームのカラー画像にマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0の1フレームのカラーズーム画像を取得し、これは目標シーンの出力画像であり、ユーザが保存できる画像でもある。ここで、目標シーンの出力画像の解像度は、第1のカメラの解像度および第3のカメラの解像度と同じである。
【０１０６】
S204のマルチフレームズームアルゴリズムについては、S104のマルチフレームズームアルゴリズムを参照されたい。
【０１０７】
事例3
図7を参照することができる。
【０１０８】
S301．目標ズーム比が3x〜5xの範囲内である場合、システムは目標シーンが暗い環境にあるかどうかを判定する必要がある。目標シーンが暗い環境にある場合、端末は第2のカメラと第3のカメラを有効にする。暗い環境の判定については、S201を参照されたい。
【０１０９】
ユーザがカメラパラメータを調整する場合、ユーザが設定した目標ズーム比が区間［3、5］内になると、第3のカメラ（主カメラ）と第2のカメラ（副カメラ）が有効になる。この場合、プレビュー画像はそれに応じて変化し、プレビュー画像は、第3のカメラによって実際に取り込まれた画像の一部分である。その部分のサイズは、目標ズーム比と出力画像の予め設定された縦横比の両方によって決定される。
【０１１０】
S302．撮影機能がトリガされると、第3のカメラと第2のカメラがそれぞれ実際に撮影したシーンを連続撮影し、m2フレームのカラー画像とm1フレームの白黒画像をそれぞれ取得する。
【０１１１】
第3のカメラで実際に撮影した画像の幅をw2、高さをh2で表し、第3のカメラの解像度はw2＊h2である。第3のカメラの解像度は第1のカメラの解像度と同じであるため、w2＝w0、およびh2＝h0である。また、m2はm0と同じであってもよく、w0、h0、m0を用いて残りのステップや添付図面を代替的に表現してもよい。
【０１１２】
第2のカメラで実際に撮影した画像の幅をw1、高さをh1で表し、第2のカメラの解像度はw1＊h1である。
【０１１３】
第3のカメラおよび第2のカメラは、プライムレンズを使用するカメラであることを理解されたい。したがって、実際に撮影された画像は、ユーザが撮影することを期待し、プレビュー画像でユーザに見えるズーム目標シーンのみを含むのではなく、プレビュー画像とは異なる他のコンテンツをさらに含む。
【０１１４】
S303．m0フレームのカラー画像でセンターエリアクロッピングを実行して、第3のカメラで実際に撮影された画像から、サイズがw0＊h0／（n／n0）2のm0フレームのカラー画像をクロッピングする。白黒画像のm1フレームでセンターエリアクロッピングを実行して、第2のカメラで実際に撮影された画像から、サイズがw1＊h1／n2の白黒画像のm1フレームをクロッピングする。ここで、n0は3にほぼ等しい。
【０１１５】
S304．S303で取得したw0＊h0／（n／n0）2のサイズのカラー画像のm0フレームにマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0のカラーズーム画像の1フレームを取得する。S303で取得したサイズがw0＊h0／n2の白黒画像のm1フレームにマルチフレームズームを実行して、白黒マルチフレームズーム結果、すなわちw0＊h0／n2の白黒ズーム画像の1フレームを取得する。
【０１１６】
S304のマルチフレームズームアルゴリズムについては、S104のマルチフレームズームアルゴリズムを参照されたい。
【０１１７】
S305．w0＊h0のカラーズーム画像のフレームと、S304で取得したw0＊h0／n2の白黒ズーム画像のフレームに望遠（Tele−photo）と白黒の融合を実行して、w0＊h0のカラー出力画像の1フレーム、すなわち目標シーンの出力画像を取得する。ここで、目標シーンの出力画像の解像度は、第1のカメラの解像度および第3のカメラの解像度と同じである。
【０１１８】
望遠と白黒の融合アルゴリズムの任意選択の手順は次の通りである。
【０１１９】
（1）望遠レンズに対応するカラーズーム画像（望遠写真ともいう）を基準として用いて、白黒ズーム画像を望遠写真に位置合わせして、モーションエリアマスクを得る。
【０１２０】
（2）望遠写真、位置合わせされた白黒画像、およびモーションエリアマスクを予め訓練された畳み込みニューラルネットワークに入力して、融合された結果を取得する。
【０１２１】
（3）ステップ（2）で融合された結果をシャープにする。
【０１２２】
望遠と白黒の融合を採用、つまり、解像力の高さと望遠写真の高い鮮明度のメリットを生かし、さらに白黒画像のノイズの低減というメリットを生かし、これにより、暗い環境で高ズーム比のシーンの画質を確保し、ほとんどロスのないレベルを実現する。
【０１２３】
前述のアルゴリズム手順において、関連する処理方式は、融合、位置合わせ、シャープニングなどの従来技術の成熟したアルゴリズムを使用することができ、これらは限定されず、本発明では説明されない。
【０１２４】
事例4
図8を参照することができる。
【０１２５】
S401．目標ズーム比が5x〜10xの範囲内である場合、システムは目標シーンが暗い環境にあるかどうかを判定する必要がある。目標シーンが暗い環境にない場合には、端末は第3のカメラを有効にする。暗い環境の判定については、S201を参照されたい。
【０１２６】
ユーザがカメラパラメータを調整する場合、ユーザが設定した目標ズーム比が区間（5、10］内になると、第3のカメラが有効になる。この場合、プレビュー画像はそれに応じて変化し、プレビュー画像は、第3のカメラによって実際に取り込まれた画像の一部分である。その部分のサイズは、目標ズーム比と出力画像の予め設定された縦横比の両方によって決定される。
【０１２７】
S402．撮影機能がトリガされると、第3のカメラが実際に撮影されたシーンを連続して撮影し、m2フレームのカラー画像を取得する。
【０１２８】
第3のカメラで撮影した画像の幅をw2、高さをh2で表し、第3のカメラの解像度はw2＊h2である。第3のカメラの解像度は第1のカメラの解像度と同じであるため、w2＝w0、およびh2＝h0である。また、m2はm0と同じであってもよく、w0、h0、m0を用いて残りのステップや添付図面を代替的に表現してもよい。
【０１２９】
S403．m0フレームのカラー画像でセンターエリアクロッピングを実行し、第3のカメラで実際に撮影された画像から、サイズがw0＊h0／（n／n0）2のm0フレームのカラー画像をクロッピングする。第3のカメラの等価焦点距離は80mm、つまり第3のカメラは、望遠レンズを使用したカメラであり、標準レンズを使用したカメラと比較して、同じ撮影距離で撮影した画像は大きくなる。したがって、中央領域は、目標ズーム比と等価焦点距離の両方によって決定される。ここで、n0は3（80 mm／27 mm）にほぼ等しい。
【０１３０】
S404．w0＊h0／（n／n0）2のサイズのカラー画像のm0フレームにマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0／（n／n1）2のカラーフレーム画像の1フレームを取得する。ここで、n1は端末の撮影システムのロスレスズーム能力、すなわちロスレス条件下での最大ズーム比であり、例えばこの例では5xである。ここで、n1は、端末の撮影システム全体のパラメータ性能で決まり、定数とみなすことができる。
【０１３１】
S404のマルチフレームズームアルゴリズムについては、S104のマルチフレームズームアルゴリズムを参照されたい。
【０１３２】
S405．S404で取得したw0＊h0／（n／n1）2のカラーズーム画像のフレームにデジタルズームを実行し、w0＊h0のカラーズーム画像の1フレーム、すなわち目標シーンの出力画像を取得する。ここで、目標シーンの出力画像の解像度は、第1のカメラの解像度または第3のカメラの解像度と同じである。
【０１３３】
デジタルズームには多くの方法、例えば補間増幅があり、補間増幅の一般的な方法には、bilinear、bicubic、Lanczosなどが含まれる。デジタルズームは、画像の解像度を目標解像度に拡大するためにのみ使用できるが、画像の鮮明度と解像能力を保証することはできない。したがって、デジタルズームは、ロスレスズームと比較して、特定の損失を伴うズームとみなされるが、カメラの特定の撮像機能も示す。
【０１３４】
事例5
図9を参照することができる。
【０１３５】
S501．目標ズーム比が5x〜10xの範囲内である場合、システムは目標シーンが暗い環境にあるかどうかを判定する必要がある。目標シーンが暗い環境にある場合、端末は第2のカメラと第3のカメラを有効にする。暗い環境の判定については、S201を参照されたい。
【０１３６】
ユーザがカメラパラメータを調整する場合、ユーザが設定した目標ズーム比が区間（5、10］内になると、第3のカメラ（主カメラ）と第2のカメラ（副カメラ）が有効になる。この場合、プレビュー画像はそれに応じて変化し、プレビュー画像は、第3のカメラによって実際に取り込まれた画像の一部分である。その部分のサイズは、目標ズーム比と出力画像の予め設定された縦横比の両方によって決定される。
【０１３７】
S502．撮影機能がトリガされると、第3のカメラと第2のカメラがそれぞれ実際に撮影したシーンを連続撮影し、m2フレームのカラー画像とm1フレームの白黒画像をそれぞれ取得する。
【０１３８】
第3のカメラで実際に撮影した画像の幅をw2、高さをh2で表し、第3のカメラの解像度はw2＊h2である。第3のカメラの解像度は第1のカメラの解像度と同じであるため、w2＝w0、およびh2＝h0である。また、m2はm0と同じであってもよく、w0、h0、m0を用いて残りのステップや添付図面を代替的に表現してもよい。
【０１３９】
第2のカメラで実際に撮影した画像の幅をw1、高さをh1で表し、第2のカメラの解像度はw1＊h1である。
【０１４０】
第3のカメラおよび第2のカメラは、プライムレンズを使用するカメラであることを理解されたい。したがって、実際に撮影された画像は、ユーザが撮影することを期待し、プレビュー画像でユーザに見えるズーム目標シーンのみを含むのではなく、プレビュー画像とは異なる他のコンテンツをさらに含む。
【０１４１】
S503．m0フレームのカラー画像でセンターエリアクロッピングを実行して、第3のカメラで実際に撮影された画像から、サイズがw0＊h0／（n／n0）2のm0フレームのカラー画像をクロッピングする。白黒画像のm1フレームでセンターエリアクロッピングを実行して、第2のカメラで実際に撮影された画像から、サイズがw1＊h1／n2の白黒画像のm1フレームを取得する。ここで、n0は3にほぼ等しい。
【０１４２】
S504．S503で取得したw0＊h0／（n／n0）2のサイズのカラー画像のm0フレームにマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0／（n／n1）2のカラーズーム画像の1フレームを取得する。S503で取得したサイズがw0＊h0／n2の白黒画像のm1フレームにマルチフレームズームを実行して、白黒マルチフレームズーム結果、すなわちw0＊h0／（n／n1）2の白黒ズーム画像の1フレームを取得する。
【０１４３】
S504のマルチフレームズームアルゴリズムについては、S104のマルチフレームズームアルゴリズムを参照されたい。
【０１４４】
S505．w0＊h0／（n／n1）2のカラーズーム画像のフレームとS504で取得したw0＊h0／（n／n1）2の白黒ズーム画像のフレームに望遠（Tele−photo）と白黒の融合を実行して、w0＊h0／（n／n1）2のカラーズーム画像の1フレームを取得する。ここで、n1は端末の撮影システムのロスレスズーム能力、すなわちロスレス条件下での最大ズーム比であり、例えば5xである。ここで、n1は、端末の撮影システム全体のパラメータ性能で決まり、定数とみなすことができる。
【０１４５】
S506．S505で取得したw0＊h0／（n／n1）2のカラーズーム画像のフレームにデジタルズームを実行し、w0＊h0のカラーズーム画像の1フレーム、すなわち目標シーンの出力画像を取得する。ここで、目標シーンの出力画像の解像度は、第1のカメラの解像度および第3のカメラの解像度と同じである。
【０１４６】
デジタルズームのアルゴリズムは、従来技術において成熟した技術であり、S405を参照することができる。
【０１４７】
前述の5つの事例は、本発明におけるいくつかの任意選択的な実施態様にすぎず、上述の特定のパラメータは、カメラのパラメータの設計、アルゴリズムの実施態様、ユーザ設定、端末のオペレーティングシステム、および端末の環境によって異なることを理解されたい。さらに、いくつかのパラメータの表現は、種々の参照の基準によって異なる。特定のパラメータの設定をすべて列挙することはできない。本発明は、ユーザの異なるズーム要求に応じて、画像を取得するために異なるレンズの組み合わせ方法を用いて、対応するアルゴリズムに従って最終的な画像を取得し、1x〜5xの広いズーム範囲全体でロスレス撮像品質を達成することを目的としていることを、当業者は理解されたい。ロスレス条件下での最大目標ズーム比が適切に調整されている場合には、当業者は、本発明の実施形態によるレンズの組み合わせ方法に従って、レンズパラメータを適応的に変更するか、または異なるタイプのアルゴリズムを使用して近似的なロスレスズームを達成することができる。ユーザがズーム画像の鮮明度の限定的な低下を許容する場合、または端末デバイスがより大きな望遠レンズの使用を可能にする場合には、前述の実施形態におけるズーム範囲およびレンズの組み合わせは、前述の理論に基づいて、すべて対応して調整され、ユーザの要求を満たす画像を取得することができる。これらの変形例の技術的解決策は、本発明の保護範囲に含まれるものとする。
【０１４８】
さらに、ユーザによる使用のプロセスでは、ユーザの実際の要求により、合焦のプロセスの間、異なるズーム範囲が短時間で継続的に使用されることを理解されたい。これらのズーム範囲を変更すると、カメラの有効化が直接変更される。上記の5つの事例を例として使用している。各カメラの特定の有効化ステータスについては、図3の異なるズーム範囲内の3つのカメラのステータスを参照されたい。例えば、最初は、目標ズーム比が1．5の場合、第1のカメラと第2のカメラが有効になり、第3のカメラは無効になる。目標ズーム比が1．5から3．5に調整され、目標シーンが暗い環境にある場合、第3のカメラと第2のカメラが有効になり、第1のカメラは無効になる。
【０１４９】
前述の実施形態では、出力画像の解像度は、第1のカメラの解像度または第3のカメラの解像度と同じであり、第2のカメラの解像度よりも低いことをさらに理解されたい。実際には、出力画像の解像度は、ユーザの鮮明度に対する要求を満たしている必要があるが、第1のカメラの解像度または第3のカメラの解像度と必ずしも同じではない。通常、第1のカメラまたは第3のカメラは、様々な撮影モードでの撮影端末の最も基本的な撮像性能を表している。したがって、出力画像の最大解像度は、第1のカメラの解像度または第3のカメラの解像度とおおよそ同じである。通常、端末の出荷時に、出力画像の最大解像度が基本的に決定され、ユーザはユーザの要求に応じてカメラシステムで出力画像の解像度を設定することができる。
【０１５０】
加えて、特定の実施プロセスでは、撮影システムは、目標シーンのズームモードに従って光学ズームモジュールの撮像パラメータを調整するようにさらに構成される。撮像パラメータには、ノイズ低減パラメータ、シャープニングパラメータ、コントラストのうちの少なくとも1つが含まれ、中間プロセス中の画像のノイズ低減、シャープニング、コントラスト、およびダイナミックレンジを制御する。例えば、明るいシーンでは、ISPモジュールがノイズ低減およびシャープニングモジュールを無効にするように制御され、低照度シナリオでは、ISPモジュールがノイズ低減およびシャープニングモジュールを有効にし、パラメータを適切なレベルに調整するように制御される。さらに、ズームモードのコントラストとダイナミックレンジのパラメータは一般的な撮影モードのパラメータとは異なるため、コントラストとダイナミックレンジのパラメータは、異なるズームモードでカスタマイズされた方法で調整することができる。したがって、本発明の実施形態における方法によれば、撮像パラメータは、最終的な画像の撮像品質を保証するために、異なるシナリオに応じて構成することができる。
【０１５１】
本発明によれば、スマートフォンで約5xのロスレスズーム効果を得ることができ、暗い環境下でも解像能力とノイズのバランスを比較的良好に保つことができる。大型の機能デバイスの代わりにプライムレンズを使用する複数のカメラの組み合わせを使用しても、端末の厚さが大幅に増加することはないので、それによって特に携帯電話などのスマートハンドヘルドデバイスの端末の美観が保証され、小型薄型端末と大きなズームでのロスレス撮像に対するユーザの要件が満たされ、ユーザの使用エクスペリエンスが向上する。
【０１５２】
前述の実施形態で提供される撮影方法に基づいて、本発明の一実施形態は撮影装置700を提供し、この装置700は、様々な撮影デバイスに適用することができる。図10に示すように、装置700は、取得モジュール701、決定モジュール702、取り込みモジュール703、画像処理モジュール704、第1のカメラ、第2のカメラ、および第3のカメラを含み、第1のカメラおよび第3のカメラはカラーカメラであり、第2のカメラは白黒カメラであり、第2のカメラの解像度は、第1のカメラの解像度よりも高く、かつ第3のカメラの解像度よりも高く、第1のカメラ、第2のカメラ、第3のカメラはすべてプライムレンズを使用するカメラであり、第3のカメラの等価焦点距離は、第1のカメラの等価焦点距離および第2のカメラの等価焦点距離の両方より大きい。関連する特徴については、前述の方法の実施形態の説明を参照されたい。
【０１５３】
取得モジュール701は、目標ズーム比を取得するように構成され、取得モジュール701は、外部の入力に基づいて対応するプログラム命令を呼び出すプロセッサによって取得され得る。
【０１５４】
決定モジュール702は、目標ズーム比に基づいて、第1のカメラ、第2のカメラ、および第3のカメラのうちから少なくとも1つのカメラを目標カメラとして決定するように構成され、決定モジュール702は、プロセッサがメモリに格納されたプログラム命令を呼び出すことにより、前述の3つのカメラを選択的に有効にすることができる。
【０１５５】
取り込みモジュール703は、目標カメラを使用して、目標シーンを含む画像を取り込むように構成され、取り込みモジュール703は、プロセッサによって実装され、取り込まれた画像をメモリに格納することができる。
【０１５６】
画像処理モジュール704は、目標シーンを含む取り込まれた画像に基づいて目標シーンの出力画像を取得するように構成される。画像処理モジュール704は、プロセッサによって実装することができ、また、対応する計算のためにローカルメモリまたはクラウドサーバ内のデータおよびアルゴリズムを呼び出すことによって実現されてもよく、ユーザが取得することを期待する目標シーンの写真が出力される。
【０１５７】
特定の実施プロセスでは、取得モジュール701は、ステップ21で述べた方法および同等に交換可能な方法を実行するように特に構成され、決定モジュール702は、ステップ22で述べた方法および同等に交換可能な方法を実行するように特に構成され、取り込みモジュール703は、ステップ23で述べた方法および同等に交換可能な方法を実行するように特に構成され、画像処理モジュール704は、ステップ24で述べた方法および同等に交換可能な方法を実行するように特に構成される。
【０１５８】
より具体的には、様々な目標ズーム比で、
取得モジュール701および決定モジュール702は、S101、S201、S301、S401、またはS501の方法を協調して実行することができ、
取り込みモジュール703は、S102、S202、S302、S402、またはS502の方法を実行することができ、
画像処理モジュール704は、S103〜S105、S203およびS204、S303〜S305、S403〜S405、またはS503〜S506の方法を実行することができる。
【０１５９】
前述の特定の方法の実施形態、ならびに実施形態における技術的特徴の複数の実施形式の説明、記述、および拡張は、装置における方法の実行にも適用可能である。詳細は、装置の実施形態では説明されない。
【０１６０】
本発明は、画像処理装置700を提供する。異なるズーム要件に応じて異なるカメラの組み合わせを使用して、大体積デバイスを使用せずに画像を撮影および処理して約5xのロスレスズーム効果を実現し、ユーザの端末使用エクスペリエンスと画質要求を向上させることができる。
【０１６１】
装置700のモジュールの分割は、単に論理機能の分割であることを理解されたい。実際の実施態様では、モジュールの全部または一部を物理的実体に統合してもよく、あるいは物理的に分離してもよい。例えば、モジュールは、別個に配置された処理要素であってもよく、または実装のために端末のチップに統合されてもよい。さらに、モジュールは、コントローラの記憶要素にプログラムコードの形で格納され、モジュールの機能を実行するためにプロセッサの処理要素によって呼び出されてもよい。さらに、モジュールは統合されても、独立して実装されてもよい。本明細書の処理要素は、集積回路チップであってもよく、信号処理能力を有する。実施プロセスでは、前述の方法または前述のモジュールのステップは、処理要素内のハードウェア集積論理回路を使用することによって、またはソフトウェアの形態の命令を使用することによって実装されてもよい。処理要素は、汎用プロセッサ、例えば、中央処理装置（central processing unit、略してCPU）であってもよく、あるいは前述の方法を実施するための1つまたは複数の集積回路、例えば1つまたは複数の特定用途向け集積回路（application−specific integrated circuit、略してASIC）、1つまたは複数のデジタル信号プロセッサ（digital signal processor、略してDSP）、あるいは1つまたは複数のフィールドプログラマブルゲートアレイ（field−programmable gate array、略してFPGA）として構成されてもよい。
【０１６２】
当業者は、本発明の実施形態が、方法、システム、またはコンピュータプログラム製品として提供され得ることを理解されたい。したがって、本発明は、ハードウェアのみの実施形態、ソフトウェアのみの実施形態、またはソフトウェアとハードウェアとの組み合わせを有する実施形態の形態を使用することができる。さらに、本発明は、コンピュータで使用可能なプログラムコードを含む1つまたは複数のコンピュータで使用可能な記憶媒体（ディスクメモリ、CD−ROM、光メモリなどを含むがこれらに限定されない）上に実装されるコンピュータプログラム製品の形態を使用してもよい。
【０１６３】
本発明は、本発明の実施形態による方法、デバイス（システム）、およびコンピュータプログラム製品のフローチャートおよび／またはブロック図を参照して説明されている。コンピュータプログラム命令を使用して、フローチャートおよび／またはブロック図における各プロセスおよび／または各ブロック、ならびにフローチャートおよび／またはブロック図におけるプロセスおよび／またはブロックの組み合わせを実施することができることを理解されたい。これらのコンピュータプログラム命令は、機械を生成するために、汎用コンピュータ、専用コンピュータ、組み込みプロセッサ、または別のプログラム可能なデータ処理デバイスのプロセッサに提供することができ、その結果、コンピュータまたは別のプログラム可能なデータ処理装置のプロセッサは、フローチャート内の1つもしくは複数のプロセスおよび／またはブロック図の1つもしくは複数のブロックの特定の機能を実現するための装置を生成する。
【０１６４】
これらのコンピュータプログラム命令は、コンピュータまたは別のプログラム可能なデータ処理デバイスが特定の仕方で動作するように命令することができるコンピュータ可読メモリに格納され、コンピュータ可読メモリに格納された命令が命令装置を含むアーティファクトを生成する。命令装置は、フローチャートの1つもしくは複数のプロセスおよび／またはブロック図の1つもしくは複数のブロックの特定の機能を実現する。
【０１６５】
これらのコンピュータプログラム命令は、コンピュータまたは別のプログラム可能なデータ処理デバイスにロードすることができ、コンピュータまたは別のプログラム可能な装置上で一連の動作およびステップが実行され、それによってコンピュータにより実行される処理が生成される。したがって、コンピュータまたは別のプログラム可能なデバイス上で実行される命令は、フローチャートの1つもしくは複数のプロセスおよび／またはブロック図の1つもしくは複数のブロックの特定の機能を実現するステップを提供する。
【０１６６】
本発明のいくつかの実施形態が説明されているが、当業者は、基本的な発明概念を学ぶと、これらの実施形態に変更および修正を加えることができる。したがって、列挙された実施形態および本発明の範囲内にあるすべての変更と修正を包含するものとして、以下の特許請求の範囲を解釈することが意図されている。明らかに、当業者は、本発明の実施形態の趣旨および範囲から逸脱することなく、本発明の実施形態に対して様々な修正および変形を行うことができる。本発明は、本発明の実施形態の修正および変形を網羅することを意図し、これらの修正および変形は、特許請求の範囲およびそれらの均等な技術によって定義される保護の範囲内にある。
【符号の説明】
【０１６７】
100  端末
110  無線周波数ユニット
120  メモリ
130  入力ユニット
131  タッチスクリーン
132  別の入力デバイス
140  表示ユニット
141  ディスプレイパネル
150  カメラ
160  オーディオ回路
161  スピーカ
162  マイクロフォン
163  イヤホンジャック
170  プロセッサ
180  外部インターフェース
190  電源
700  撮影装置
701  取得モジュール
702  決定モジュール
703  取り込みモジュール
704  画像処理モジュール
【図１】
2021507646.tif 000003
【図２】
2021507646.tif 000004
【図３】
2021507646.tif 000005
【図４】
2021507646.tif 000006
【図５】
2021507646.tif 000007
【図６】
2021507646.tif 000008
【図７】
2021507646.tif 000009
【図８】
2021507646.tif 000010
【図９】
2021507646.tif 000011
【図１０】
2021507646.tif 000012
【手続補正書】
【提出日】令和2年7月14日(2020.7.14)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像またはビデオ撮影のための方法であって、
端末に含まれる第1のカメラ、第2のカメラ、および第3のカメラから、目標シーンを含む少なくとも1つの画像を取り込むための前記第1、第2、および第3のカメラのうちの少なくとも1つのカメラを選択するステップであって、前記第1のカメラおよび前記第3のカメラはカラーカメラであり、前記第2のカメラは白黒カメラであり、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラはプライムレンズを使用するカメラであり、前記第3のカメラの等価焦点距離は、前記第1のカメラの等価焦点距離および前記第2のカメラの等価焦点距離の両方より大きく、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラは前記端末の後側にあり、前記第3のカメラの前記等価焦点距離は、前記第1のカメラの前記等価焦点距離の2〜4倍である、ステップと、
前記目標シーンを含む前記少なくとも1つの画像に基づいて、前記目標シーンの出力画像を取得するステップと、を含む、方法。
【請求項２】
現在のズーム比が（1、3）のズーム範囲内にある場合に、前記第1のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像および少なくとも1つの白黒画像をそれぞれ取り込むステップをさらに含む、請求項1に記載の方法。
【請求項３】
現在のズーム比が［3、10］のズーム範囲内にあり、前記目標シーンの照度が予め設定されたしきい値よりも低い場合に、前記第3のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像および少なくとも1つの白黒画像をそれぞれ取り込むステップをさらに含む、請求項1に記載の方法。
【請求項４】
現在のズーム比が［3、10］のズーム範囲内にあり、前記目標シーンの照度が予め設定されたしきい値よりも低くない場合に、前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像を取り込むステップをさらに含む、請求項1に記載の方法。
【請求項５】
前記第1のカメラの前記等価焦点距離は26mmまたは27mmである、請求項1に記載の方法。
【請求項６】
前記第1のカメラの口径値は1．7または1．8である、請求項1に記載の方法。
【請求項７】
前記第3のカメラの口径値は2．4または2．2である、請求項1に記載の方法。
【請求項８】
前記第1のカメラの解像度は10Mまたは12Mであり、前記第3のカメラの解像度は8M、10Mまたは12Mである、請求項1に記載の方法。
【請求項９】
端末であって、
第1のカメラ、第2のカメラ、および第3のカメラであって、前記第1のカメラおよび前記第3のカメラはカラーカメラであり、前記第2のカメラは白黒カメラであり、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラはプライムレンズを使用するカメラであり、前記第3のカメラの等価焦点距離は、前記第1のカメラの等価焦点距離および前記第2のカメラの等価焦点距離の両方より大きく、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラは前記端末の後側にあり、前記第3のカメラの前記等価焦点距離は前記第1のカメラの前記等価焦点距離の2〜4倍である、第1のカメラ、第2のカメラ、および第3のカメラと、
プロセッサと、
コンピュータプログラムおよび命令を格納するために前記プロセッサに結合されたメモリと、を含み、前記コンピュータプログラムおよび命令は、前記プロセッサによって実行された時、前記プロセッサに、
前記第1のカメラ、前記第2のカメラ、および前記第3のカメラから、目標シーンを含む少なくとも1つの画像を取り込むための前記第1、第2、および第3のカメラのうちの少なくとも1つのカメラを選択する操作と、
前記目標シーンを含む前記少なくとも1つの画像に基づいて、前記目標シーンの出力画像を取得する操作と、を含む操作を実行させる、端末。
【請求項１０】
前記操作は、
現在のズーム比が（1，3）のズーム範囲内にある場合に、前記第1のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像および少なくとも1つの白黒画像をそれぞれ取り込む操作、または、
前記現在のズーム比が［3、10］のズーム範囲内にあり、前記目標シーンの照度が予め設定されたしきい値よりも低い場合に、前記第3のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像および少なくとも1つの白黒画像をそれぞれ取り込む操作、または、
前記現在のズーム比が［3、10］のズーム範囲内にあり、前記目標シーンの照度が予め設定されたしきい値よりも低くない場合に、前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像を取り込む操作、をさらに含む、
請求項9に記載の端末。
【請求項１１】
前記第1のカメラの前記等価焦点距離は26mmまたは27mmである、請求項9に記載の端末。
【請求項１２】
前記第1のカメラの口径値は1．7または1．8である、請求項9に記載の端末。
【請求項１３】
前記第3のカメラの口径値は2．4または2．2である、請求項9に記載の端末。
【請求項１４】
前記第1のカメラの解像度は10Mまたは12Mであり、前記第3のカメラの解像度は8M、10Mまたは12Mである、請求項9に記載の端末。
【請求項１５】
画像またはビデオ撮影のための装置であって、
端末に含まれる第1のカメラ、第2のカメラ、および第3のカメラから、目標シーンを含む少なくとも1つの画像を取り込むための前記第1、第2、および第3のカメラのうちの少なくとも1つのカメラを選択するように構成された取り込みモジュールであって、前記第1のカメラおよび前記第3のカメラはカラーカメラであり、前記第2のカメラは白黒カメラであり、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラはプライムレンズを使用するカメラであり、前記第3のカメラの等価焦点距離は、前記第1のカメラの等価焦点距離および前記第2のカメラの等価焦点距離の両方より大きく、前記第1のカメラ、前記第2のカメラ、および前記第3のカメラは前記端末の後側にあり、前記第3のカメラの前記等価焦点距離は前記第1のカメラの前記等価焦点距離の2〜4倍である、取り込みモジュールと、
前記目標シーンを含む前記少なくとも1つの画像に基づいて、前記目標シーンの出力画像を取得するように構成された画像処理モジュールと、を含む、装置。
【請求項１６】
現在のズーム比が（1、3）のズーム範囲内にある場合に、前記取り込みモジュールは、前記第1のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像および少なくとも1つの白黒画像をそれぞれ取り込むようにさらに構成され、または、
前記現在のズーム比が［3、10］のズーム範囲内にあり、前記目標シーンの照度が予め設定されたしきい値よりも低い場合に、前記取り込みモジュールは、前記第3のカメラおよび前記第2のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像および少なくとも1つの白黒画像をそれぞれ取り込むようにさらに構成され、または、
前記現在のズーム比が［3、10］のズーム範囲内にあり、前記目標シーンの照度が予め設定されたしきい値よりも低くない場合に、前記取り込みモジュールは、前記第3のカメラを使用して、前記目標シーンを含む少なくとも1つのカラー画像を取り込むようにさらに構成される、請求項15に記載の装置。
【請求項１７】
前記第1のカメラの前記等価焦点距離は26mmまたは27mmである、請求項15に記載の装置。
【請求項１８】
前記第1のカメラの口径値は1．7または1．8である、請求項15に記載の装置。
【請求項１９】
前記第3のカメラの口径値は2．4または2．2である、請求項15に記載の装置。
【請求項２０】
前記第1のカメラの解像度は10Mまたは12Mであり、前記第3のカメラの解像度は8M、10Mまたは12Mである、請求項15に記載の装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
第1のカメラおよび第2のカメラと比較して、第3のカメラは望遠レンズを使用するカメラである。適度な目標ズーム比の要件の下で、カラー画像を取り込むために第3のカメラが使用される。目標シーンに十分な光がある場合、すなわち目標シーンが暗くない環境にある場合には、センタークロッピングとマルチフレームズームの方法を使用することにより、ロスレスズームをほぼ実現することができる。目標シーンに十分な光がない場合、すなわち目標シーンが暗い環境にある場合には、第2のカメラを有効にして、第3のカメラで取り込まれたカラー画像の詳細を補足するために黒い画像を取り込む必要があり、また、センタークロッピング、マルチフレームズーム、ならびに望遠、白黒、およびカラーの融合などの方法を使用して、ロスレスズームをほぼ達成できるため、適度な目標ズーム比で鮮明な撮像を実現することができる。これらのアルゴリズムは、画像処理モジュールによって実行されてもよい。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００２０
【補正方法】変更
【補正の内容】
【００２０】
第1のカメラおよび第2のカメラと比較して、第3のカメラは望遠レンズを使用するカメラである。高い目標ズーム比の要件の下で、カラー画像を取り込むために第3のカメラが使用される。目標シーンに十分な光がある場合、すなわち目標シーンが暗くない環境にある場合には、センタークロッピング、マルチフレームズーム、およびデジタルズームの方法を使用することにより、ロスレスズームをほぼ実現することができる。目標シーンに十分な光がない場合、すなわち目標シーンが暗い環境にある場合には、第2のカメラを有効にして、第3のカメラで取り込まれたカラー画像の詳細を補足するために黒い画像を取り込む必要がさらにあり、また、センタークロッピング、マルチフレームズーム、デジタルズーム、ならびに望遠、白黒、およびカラーの融合などの方法を使用して、ロスレスズームをほぼ達成できるため、高い目標ズーム比で鮮明な撮像を実現することができる。これらのアルゴリズムは、画像処理モジュールによって実行されてもよい。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００８１
【補正方法】変更
【補正の内容】
【００８１】
S104．w0＊h0／n2のサイズのカラー画像のm0フレームにマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0／n2のカラーフレーム画像の1フレームを取得する。サイズがw1＊h1／n2の白黒画像のm1フレームにマルチフレームズームを実行して、白黒マルチフレームズーム結果、すなわちw1＊h1／n2の白黒ズーム画像の1フレームを取得する。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０１１５
【補正方法】変更
【補正の内容】
【０１１５】
S304．S303で取得したw0＊h0／（n／n0）2のサイズのカラー画像のm0フレームにマルチフレームズームを実行して、カラーマルチフレームズーム結果、すなわちw0＊h0のカラーズーム画像の1フレームを取得する。S303で取得したサイズがw1＊h1／n2の白黒画像のm1フレームにマルチフレームズームを実行して、白黒マルチフレームズーム結果、すなわちw1＊h1／n2の白黒ズーム画像の1フレームを取得する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】０１６６
【補正方法】変更
【補正の内容】
【０１６６】
本発明のいくつかの実施形態が説明されているが、当業者は、基本的な発明概念を学ぶと、これらの実施形態に変更および修正を加えることができる。したがって、列挙された実施形態および本発明の範囲内にあるすべての変更と修正を包含するものとして、以下の特許請求の範囲を解釈することが意図されている。明らかに、当業者は、本発明の実施形態の範囲から逸脱することなく、本発明の実施形態に対して様々な修正および変形を行うことができる。本発明は、本発明の実施形態の修正および変形を網羅することを意図し、これらの修正および変形は、特許請求の範囲およびそれらの均等な技術によって定義される保護の範囲内にある。
【国際調査報告】
2021507646.tif 000013
2021507646.tif 000014
2021507646.tif 000015
2021507646.tif 000016