(57)【特許請求の範囲】
【請求項１】
端末であって、
表示パネル、プロセッサ、および少なくとも2つのフロントカメラを備え、
前記少なくとも2つのフロントカメラが、前記表示パネルの後ろに配置され、前記表示パネルの、前記少なくとも2つのカメラの位置に対応する領域が、第1の領域であり、前記表示パネルの、前記第1の領域以外の領域が、第2の領域であり、前記第1の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第2の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第1の領域における前記透明部分の割合が、前記第2の領域における前記透明部分の割合よりも大きく、
前記プロセッサが、
前記少なくとも2つのカメラによって撮影されたN枚の写真を取得し、前記N枚の写真のそれぞれには、前記第1の領域の前記不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数であり、
前記遮蔽領域が完全または部分的に復元された写真を取得するために、前記少なくとも2つのカメラによって撮影された写真に基づいて前記遮蔽領域を補完することによって前記N枚の写真を処理するように構成されている、端末。
【請求項２】
前記第1の領域の前記透明部分または前記第2の領域の前記透明部分が、透明ガラスまたは透明プラスチックフィルムであり、前記第1の領域の前記不透明部分または前記第2の領域の前記不透明部分が、各画素ユニットに薄膜トランジスタおよび金属配線を備える、請求項1に記載の端末。
【請求項３】
前記第1の領域の、1インチ当たりの画素数PPIが、前記第2の領域のPPIの1／Mであり、Mが、1よりも大きい、請求項1または2に記載の端末。
【請求項４】
前記第1の領域では内部補償のない画素回路が使用されており、前記第2の領域では内部補償のある画素回路が使用されている、請求項1から3のいずれか一項に記載の端末。
【請求項５】
前記プロセッサが、
前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素に対して補間動作を、前記遮蔽画素の隣接画素の情報を使用して実行するようにさらに構成されている、請求項1から4のいずれか一項に記載の端末。
【請求項６】
前記プロセッサが、
前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素の物理情報を認識し、
前記認識された物理情報の内容に基づいて、前記遮蔽領域が部分的に復元された前記写真内の前記遮蔽画素の情報を復元するようにさらに構成されている、請求項1から5のいずれか一項に記載の端末。
【請求項７】
前記プロセッサが、
前記第1の領域の輝度曲線と前記第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、前記第1の領域の全体の輝度を増加させるようにさらに構成されている、請求項1から6のいずれか一項に記載の端末。
【請求項８】
前記プロセッサが、
撮影中に黒フレームを前記表示パネルに挿入するようにさらに構成されている、請求項1から7のいずれか一項に記載の端末。
【請求項９】
端末に適用可能な撮影方法であって、前記端末が、表示パネルおよび少なくとも2つのカメラを備え、前記少なくとも2つのカメラが、前記表示パネルの後ろに配置され、前記表示パネルの、前記少なくとも2つのカメラの位置に対応する領域が、第1の領域であり、前記表示パネルの、前記第1の領域以外の領域が、第2の領域であり、前記第1の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第2の領域の各画素ユニットが、透明部分および不透明部分を備え、前記第1の領域における前記透明部分の割合が、前記第2の領域における前記透明部分の割合よりも大きく、前記方法が、
前記少なくとも2つのカメラによって撮影されたN枚の写真を取得するステップであって、前記N枚の写真のそれぞれには、前記第1の領域の前記不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、ステップと、
前記遮蔽領域が完全または部分的に復元された写真を取得するために、前記少なくとも2つのカメラによって撮影された写真に基づいて前記遮蔽領域を補完することによって前記N枚の写真を処理するステップとを含む、方法。
【請求項１０】
前記遮蔽領域が部分的に復元された前記写真が取得される場合、前記方法が、
前記遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用して、前記遮蔽領域が部分的に復元された前記写真を処理するステップをさらに含む、請求項9に記載の方法。
【請求項１１】
画像処理アルゴリズムを使用して、前記遮蔽領域が部分的に復元された前記写真を処理する前記ステップが、
前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素に対して補間動作を、前記遮蔽画素の隣接画素の情報を使用して実行するステップを含む、請求項10に記載の方法。
【請求項１２】
画像処理アルゴリズムを使用して、前記遮蔽領域が部分的に復元された前記写真を処理する前記ステップが、
前記遮蔽領域が部分的に復元された前記写真内の遮蔽画素の物理情報を認識するステップと、
前記認識された物理情報の内容に基づいて、前記遮蔽領域が部分的に復元された前記写真内の前記遮蔽画素の情報を復元するステップとを含む、請求項10に記載の方法。
【請求項１３】
前記第1の領域のPPIが、前記第2の領域のPPIの1／Mであり、Mが、1よりも大きく、前記方法が、
前記第1の領域内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮するステップをさらに含む、請求項9から12のいずれか一項に記載の方法。
【請求項１４】
前記方法が、
前記第1の領域の輝度曲線と前記第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、前記第1の領域の全体の輝度を増加させるステップをさらに含む、請求項13に記載の方法。
【請求項１５】
前記第1の領域では内部補償のない画素回路が使用され、前記方法が、
前記第1の領域の前記画素ユニットに対して外部補償を実行するステップをさらに含む、請求項9から14のいずれか一項に記載の方法。
【請求項１６】
前記方法が、
撮影中に黒フレームを前記表示パネルに挿入するステップをさらに含む、請求項9から15のいずれか一項に記載の方法。
【請求項１７】
命令を含むコンピュータ可読記憶媒体であって、前記コンピュータ可読記憶媒体がコンピュータ上で動作されるとき、前記コンピュータが、請求項9から16のいずれか一項に記載の方法を実行することが可能である、コンピュータ可読記憶媒体。
【請求項１８】
命令を含むコンピュータプログラムであって、前記コンピュータプログラムがコンピュータ上で動作されるとき、前記コンピュータが、請求項9から16のいずれか一項に記載の方法を実行することが可能である、コンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本出願は、端末技術の分野に関し、特に、カメラを備えた端末および撮影方法に関する。
【背景技術】
【０００２】
市場が、携帯電話のより高い画面対本体比をますます要求しているため、主要な製造業者はすべて、全画面コンセプトの端末デバイス、例えばXiaomiのMIXおよびSharpのAquos Crystalを発売している。現在、端末デバイス開発の目標は、画面が全体に及ぶフロントパネルを有する端末を提供することである。
【０００３】
現在、例えば指紋／復帰機能のHomeボタンを画面に移すまたは組み込む解決策がすでに利用可能である。しかしながら、前面カメラに関して、カメラを画面の表示領域に組み込む望ましい解決策は存在しない。考えられる1つの方法は、画面の一部を切除するために画面の変則的な切断を行い、カメラなどの構成要素を組み込むために、画面の切断によって作られたスペースを使用することである。
【０００４】
しかしながら、前面カメラが、このようにして画面と一体化される場合、切除された部分は何かを表示することができなくなる。画面が点灯されたとき、暗い隅または溝が現れる。これは、非理想的な工業設計（industrial design、ID）効果であり、画面の全体表示に影響を及ぼし、表示パネルのコストを増加させる。
【発明の概要】
【課題を解決するための手段】
【０００５】
本出願の実施形態は、工業設計効果および画面の全体表示に影響を及ぼすことなく前面カメラを表示領域に組み込むために、カメラを備えた端末および撮影方法を提供する。
【０００６】
本出願の実施形態の第1の態様は、カメラを備えた端末であって、プロセッサ、メモリ、表示パネル、および少なくとも1つのカメラを含み、少なくとも1つのカメラが、表示パネルの後ろに配置され、表示パネルの、少なくとも1つのカメラの位置に対応する領域が、第1の領域であり、表示パネルの、第1の領域以外の領域が、第2の領域であり、第1の領域の各画素ユニットが、透明部分および不透明部分を含み、第2の領域の各画素ユニットが、透明部分および不透明部分を含み、第1の領域における透明部分の割合が、第2の領域における透明部分の割合よりも大きい、端末を提供する。
【０００７】
可能な設計において、本出願の実施形態の第1の態様の第1の実施態様では、透明部分は、透明ガラスまたは透明プラスチックフィルムであり、不透明部分は、画素ユニット内に配置され、かつ薄膜トランジスタ素子および金属配線を備えた部分を含む。この実施態様では、透明部分および不透明部分の構成が詳述されている。このようにして、本出願の実施形態はより機能可能になる。
【０００８】
可能な設計において、本出願の実施形態の第1の態様の第2の実施態様では、端末は、マイクロモータをさらに含み、マイクロモータは、ハウジングを含む。
【０００９】
可能な設計において、端末は、マイクロモータをさらに含み、少なくとも1つのカメラが存在し、
マイクロモータは、カメラに物理的に接続され、移動させるために少なくとも1つのカメラを駆動するように構成される。
【００１０】
可能な設計において、本出願の実施形態の第1の態様の第3の実施態様では、第1の領域の、1インチ当たりの画素数PPIは、第2の領域のPPIの1／Mであり、Mは、1よりも大きい。この実施態様では、第1の領域のPPIは、第2の領域のPPIの1／Mであり、Mは、1よりも大きい。このようにして、第1の領域の透明率は、第2の領域の透明率よりも大きく、これは本出願の実施形態の実施態様に追加される。
【００１１】
可能な設計において、本出願の実施形態の第1の態様の第4の実施態様では、第1の領域では内部補償のない画素回路が使用され、第2の領域では内部補償のある画素回路が使用される。この実施態様では、透明率を高める、内部補償のない画素回路の使用が、詳述されており、これは本出願の実施形態の実施態様に追加される。
【００１２】
本出願の実施形態の第2の態様は、カメラを備えた端末に適用可能な撮影方法を提供する。端末は、表示パネルおよび少なくとも1つのカメラを含み、少なくとも1つのカメラは、表示パネルの後ろに配置され、表示パネルの、少なくとも1つのカメラの位置に対応する領域は、第1の領域であり、表示パネルの、第1の領域以外の領域は、第2の領域であり、第1の領域の各画素ユニットは、透明部分および不透明部分を含み、第2の領域の各画素ユニットは、透明部分および不透明部分を含み、第1の領域における透明部分の割合は、第2の領域における透明部分の割合よりも大きい。撮影方法は、表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得するステップであって、N枚の写真のそれぞれには、第1の領域の不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、ステップと、遮蔽領域が完全または部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理するステップとを含む。
【００１３】
可能な設計において、本出願の実施形態の第2の態様の第1の実施態様では、端末は、マイクロモータをさらに含み、マイクロモータは、移動させるために少なくとも1つのカメラを駆動するためにカメラに物理的に接続される。表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得するステップは、マイクロモータによって、撮影中に移動させるために少なくとも1つのカメラを駆動するステップと、少なくとも1つのカメラの移動中に、表示パネルに対して異なる位置でN枚の写真を迅速に撮影するように少なくとも1つのカメラを制御するステップとを含む。画像合成方法を使用してN枚の写真を処理するステップは、少なくとも1つのカメラが移動したときの、表示パネルに対するカメラの複数の位置に基づいてN枚の写真を処理するステップを含む。この実施態様では、端末の少なくとも1つのカメラを移動させることによって、複数の写真が処理のために撮影され得る。このようにして、本出願の実施形態の詳述されている動作モードが提供される。
【００１４】
可能な設計において、本出願の実施形態の第2の態様の第2の実施態様では、少なくとも2つのカメラが存在する。画像合成方法を使用してN枚の写真を処理するステップは、少なくとも2つのカメラによって撮影された写真に基づいて遮蔽領域を補完することによってN枚の写真を処理するステップを含む。この実施態様では、端末が少なくとも2つのカメラを備える場合、N枚の写真は、カメラによって撮影された写真を補完することによって処理される。このようにして、本出願の実施形態はより機能可能になる。
【００１５】
可能な設計において、本出願の実施形態の第2の態様の第3の実施態様では、遮蔽領域が部分的に復元された写真が取得される場合、本方法は、遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理するステップをさらに含む。この実施態様では、遮蔽領域は、画像処理アルゴリズムを使用して復元され得、これは本出願の実施形態の実施態様に追加される。
【００１６】
可能な設計において、本出願の実施形態の第2の態様の第4の実施態様では、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理するステップは、遮蔽領域が部分的に復元された写真内の遮蔽画素に対して補間動作を、遮蔽画素の隣接画素の情報を使用して実行するステップを含む。この実施態様では、補間動作は、遮蔽領域を復元するために、隣接画素の情報を使用して実行される。このようにして、本出願の実施形態はより細かく、より機能可能になる。
【００１７】
可能な設計において、本出願の実施形態の第2の態様の第5の実施態様では、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理するステップは、遮蔽領域が部分的に復元された写真内の遮蔽画素の物理情報を認識するステップと、認識された物理情報の内容に基づいて、遮蔽領域が部分的に復元された写真内の遮蔽画素の情報を復元するステップとを含む。この実施態様では、遮蔽領域は、物理情報に基づいて復元され、これは本出願の実施形態の実施態様に追加される。
【００１８】
可能な設計において、本出願の実施形態の第2の態様の第6の実施態様では、第1の領域のPPIは、第2の領域のPPIの1／Mであり、Mは、1よりも大きく、本方法は、第1の領域内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮するステップをさらに含む。この実施態様では、PPIが低減された結果、表示効果を保証するために、第1の領域の表示データが圧縮される。
【００１９】
可能な設計において、本出願の実施形態の第2の態様の第7の実施態様では、本方法は、第1の領域の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、第1の領域の全体の輝度を増加させるステップをさらに含む。この実施態様では、PPIが低減されると、発光画素領域の割合が小さくなる。したがって、表示効果を保証するために、輝度が高められる必要がある。
【００２０】
可能な設計において、本出願の実施形態の第2の態様の第8の実施態様では、第1の領域では内部補償のない画素回路が使用され、本方法は、第1の領域の画素ユニットに対して外部補償を実行するステップをさらに含む。この実施態様では、内部補償のない画素回路が第1の領域で使用される場合、色収差を除去するために外部補償が実行される必要がある。
【００２１】
可能な設計において、本出願の実施形態の第2の態様の第9の実施態様では、本方法は、撮影中に黒フレームを表示パネルに挿入するステップをさらに含む。この実施態様では、カメラの前の表示パネルによって発せられる光の干渉を回避するために、黒フレームが、表示パネルに挿入される。
【００２２】
可能な設計において、本出願の実施形態の第2の態様の第10の実施態様では、撮影中に黒フレームを表示パネルに挿入するステップは、撮影命令が受信されたときに黒フレーム挿入動作を開始するステップと、黒フレーム挿入動作が完了したと判断されたときに撮影を開始するステップと、撮影完了命令が受信されたときに画面を復元するステップとを含む。この実施態様では、黒フレームを追加するタイミングが詳述されている。このようにして、本出願の実施形態はより機能可能になる。
【００２３】
可能な設計において、本出願の実施形態の第2の態様の第11の実施態様では、黒フレームは、全画面黒フレーム、または第1の領域を黒画面に変える黒フレームである。この実施態様では、黒フレームが、全画面であり得るか、または第1の領域でのみ使用され得ることが詳述されており、これは本出願の実施形態の実施態様に追加される。
【００２４】
本出願の実施形態の第3の態様は、命令を含むコンピュータ可読記憶媒体であって、コンピュータ可読記憶媒体がコンピュータ上で動作されるとき、コンピュータが、前述の態様による方法を実行することが可能である、コンピュータ可読記憶媒体を提供する。
【００２５】
本出願の実施形態の第4の態様は、命令を含むコンピュータプログラム製品であって、コンピュータプログラム製品がコンピュータ上で動作されるとき、コンピュータが、前述の態様による方法を実行することが可能である、コンピュータプログラム製品を提供する。
【００２６】
本出願の実施形態によって提供される技術的解決策では、本出願の実施形態は、カメラを画面の画素領域の後ろに配置することを含み、カメラの前の領域は、表示画面の画素領域の第1の領域である。本出願の実施形態では、カメラは、画面の完全性および正常な表示を保証するように画面の画素領域の後ろに配置され、カメラの前の第1の領域は、カメラによる正常な撮影を保証するように透明部分を有する。このようにして、工業設計効果および画面の全体表示に影響を及ぼすことなく、表示領域への前面カメラの組み込みが実施される。
【図面の簡単な説明】
【００２７】
【図１】本出願の一実施形態による、カメラを備えた端末の部分構造のブロック図である。
【図２】本出願の一実施形態による、端末における表示パネルとカメラとの間の位置関係の概略図である。
【図３】本出願の一実施形態による、画素領域における画素ユニットの配置の概略図である。
【図４】本出願の一実施形態による元の写真撮影の結果の概略図である。
【図５】本出願の一実施形態による写真合成処理の概略図である。
【図６ａ】本出願の一実施形態による、1つのカメラによる写真撮影の概略図である。
【図６ｂ】本出願の一実施形態による、1つのカメラによる写真撮影の別の概略図である。
【図７】本出願の一実施形態による、マイクロモータとカメラとを接続する調整装置の概略図である。
【図８】本出願の一実施形態による、2つのカメラによる写真撮影の概略図である。
【図９ａ】本出願の一実施形態による画像処理の概略図である。
【図９ｂ】本出願の一実施形態による画像処理の別の概略図である。
【図１０】本出願の一実施形態による、1インチ当たりの画素数の低減に関する概略図である。
【図１１】本出願の一実施形態による、表示データの圧縮に関する概略図である。
【図１２】本出願の一実施形態による7T1C回路の概略構造図である。
【図１３】本出願の一実施形態による2T1C回路の概略構造図である。
【図１４】本出願の一実施形態による撮影方法の概略フローチャートである。
【図１５】本出願の一実施形態による撮影方法の別の概略フローチャートである。
【発明を実施するための形態】
【００２８】
以下では、本出願の実施形態の添付図面を参照して本出願の実施形態の技術的解決策を明確かつ完全に説明する。明らかに、説明されている実施形態は、本出願の実施形態の一部でしかなく、本出願の実施形態の全部ではない。創造的な努力なしに本出願の実施形態に基づいて当業者によって得られる他のすべての実施形態は、本出願の保護範囲内に含まれるものとする。
【００２９】
従来技術では、カメラは、全画面効果を達成するために表示領域に組み込まれ得る。しかしながら、この効果は、カメラモジュール用のスペースを設けるために画面の一部を切除することによって達成される。その結果、カメラモジュールが配置される領域は、何かを表示することができず、画面が点灯されたとき、暗い隅が現れる。これは、非理想的な工業設計効果であり、画面の全体表示に影響を及ぼす。
【００３０】
本出願の技術的解決策では、端末は、表示パネルおよび前面カメラを備えたユーザ機器である。この端末は、主に前面カメラが表示パネルの後ろに配置される点で、従来の端末とは異なる。
【００３１】
図1は、本出願の一実施形態による端末の部分構造のブロック図である。
【００３２】
端末は、表示パネル101および少なくとも1つのカメラ102を含む。
【００３３】
端末は、プロセッサ180、メモリ120、ワイヤレスフィデリティ（wireless fidelity、Wi−Fi）モジュール170、無線周波数（radio frequency、RF）回路110、入力ユニット130、表示ユニット140、音声回路160、およびセンサ150などをさらに含み得る。当業者は、図1に示されている端末構造が端末に対する制限を構成しないことを理解し得る。端末は、図1に示されている構成要素よりも多くのもしくは少ない構成要素、一部の構成要素の組み合わせ、または異なる構成要素配置を含み得る。
【００３４】
表示ユニット140は、画像を表示するように構成され得る。表示ユニット140は、表示パネル101を含む。さらに、タッチパネル131が、表示パネル101を覆い得る。タッチパネル131上またはその近くでのタッチ操作を検出した後、タッチパネル131は、タッチイベントタイプを判定するためにタッチ操作をプロセッサ180に送信し、次に、プロセッサ180は、タッチイベントタイプに基づいて、対応する視覚出力を表示パネル101に提供する。図1のタッチパネル131および表示パネル101は、端末の入力および出力機能を実施する2つの別個の構成要素として示されているが、一部の実施形態では、タッチパネル131は、端末の入力および出力機能を実施するために表示パネル101と一体化され得る。
【００３５】
入力ユニット130は、設定インタフェース上でユーザが例えばターゲットアプリケーションを選択し、プロンプト情報に従ってフィードバックを行うように構成され得る。具体的には、入力ユニット130は、タッチパネル131および別の入力デバイス132を含み得る。タッチ画面とも呼ばれるタッチパネル131は、タッチパネル131上またはその近くでユーザによって行われたタッチ操作を収集し得る。任意選択で、タッチパネル131は、2つの構成要素、すなわちタッチ検出装置およびタッチコントローラを含み得る。タッチ検出装置は、ユーザのタッチ位置を検出し、タッチ操作によってもたらされる信号を検出し、この信号をタッチコントローラに送信する。タッチコントローラは、タッチ検出装置からタッチ情報を受信し、このタッチ情報をタッチ点の座標に変換し、この座標をプロセッサ180に送信し、プロセッサ180によって送信されるコマンドを受信し実行し得る。加えて、タッチパネル131は、抵抗タイプ、コンデンサタイプ、赤外線タイプ、および弾性表面波タイプなどの複数のタイプで実施され得る。入力ユニット130は、タッチパネル131に加えて、別の入力デバイス132をさらに含み得る。具体的には、別の入力デバイス132は、物理キーボード、機能ボタン（音量調節ボタンまたは電源ボタンなど）、トラックボール、マウス、およびジョイスティックのうちの1つ以上を含み得るが、これらに限定されない。
【００３６】
Wi−Fiは、短距離無線送信技術である。端末は、例えば、電子メールを送信／受信し、ウェブページをブラウジングし、またストリーミングメディアにアクセスするためにWi−Fiモジュール170を使用し得、これにより、ワイヤレスブロードバンドインターネットアクセスが提供される。
【００３７】
RF回路110は、バスによってプロセッサ180に接続される。RF回路110は、インターネットへのデータの送信またはインターネットからのデータの受信を担当し、また、通話中に情報を受信／送信するまたは信号を受信／送信するように構成され得る。特に、基地局のダウンリンク情報を受信した後、RF回路110は、ダウンリンク情報を処理のためにプロセッサ180に送信する。加えて、RF回路110は、アップリンク送信に関連するデータを基地局に送信する。一般に、RF回路110は、アンテナ、少なくとも1つの増幅器、トランシーバ、カプラ、低雑音増幅器（low noise amplifier、LNA）、およびデュプレクサを含むが、これらに限定されない。加えて、RF回路110は、ワイヤレス通信によってネットワークおよび別のデバイスとも通信し得る。ワイヤレス通信は、グローバル・システム・フォー・モバイル・コミュニケーションズ（global system of mobile communication、GSM（登録商標））、汎用パケット無線サービス（general packet radio service、GPRS）、符号分割多元接続（code division multiple access、CDMA）、広帯域符号分割多元接続（wideband code division multiple access、WCDMA（登録商標））、ロングタームエボリューション（long term evolution、LTE）、電子メール、およびショートメッセージングサービス（short messaging service、SMS）を含むが、これらに限定されない通信規格またはプロトコルを使用し得る。
【００３８】
メモリ120は、ソフトウェアプログラムおよびモジュールを記憶するように構成され得る。プロセッサ180は、端末の機能アプリケーションおよびデータ処理を実行するために、メモリ120に記憶されているソフトウェアプログラムおよびモジュールを実行する。メモリ120は、プログラム記憶領域およびデータ記憶領域を主に含み得る。プログラム記憶領域は、オペレーティングシステム、ならびに少なくとも1つの機能のアプリケーションプログラム（例えば、音声再生機能および画像再生機能）などを記憶し得る。データ記憶領域は、モバイル端末の使用に応じて作成されるデータ（例えば、音声データおよび電話帳）などを記憶し得る。加えて、メモリ120は、高速ランダムアクセスメモリを含み得、また、不揮発性メモリ、例えば少なくとも1つの磁気ディスク記憶デバイス、フラッシュメモリデバイス、または別の揮発性固体メモリデバイスをさらに含み得る。
【００３９】
本出願の実施形態では、カメラ102は、表示パネル101の後ろに配置される。これを理解するために、図2に示されている、表示パネルとカメラとの間の位置関係を参照されたい。
【００４０】
表示パネルは、ガラスカバープレート201、被包ガラス202、シーラント203、画素領域204、および薄膜トランジスタガラス205を含み得る。
【００４１】
画素ユニットは、画像表示のために画素領域204に配置される。
【００４２】
薄膜トランジスタは、画素領域204内の画素ユニットを駆動するために薄膜トランジスタガラス205に組み込まれる。
【００４３】
カメラの前の領域は、表示パネルの画素領域204の第1の領域206であり、第1の領域206の各画素ユニットは、透明部分および不透明部分を含む。第1の領域206以外の領域は、第2の領域であり、第2の領域の各画素ユニットも、透明部分および不透明部分を含む。第1の領域における透明部分の割合は、第2の領域における透明部分の割合よりも大きい。これを理解するために、図3に示されている画素領域204における画素ユニットの配置を参照されたい。
【００４４】
図3は、画素領域204における画素ユニットの配置の概略図である。均等に配置されているものはすべて、画素ユニット301であり、各画素ユニット301は、透明部分302および不透明部分303を含む。透明部分302は、透明ガラスまたは透明プラスチックフィルムであり、不透明部分303は、画素ユニット301内に配置され、かつ薄膜トランジスタ素子および金属配線を備えた部分を含む。カメラ102は、これらの透明部分を通して外部の光景の写真を撮影し得る。
【００４５】
図3は、画素領域204における画素ユニットの配置の概略図に過ぎず、画素領域204における画素ユニットの配置の特定の方式または各画素ユニットのサイズおよび形状を限定しないことに留意されたい。画素ユニットは、普通のRGB配置方式、RGBB配置方式、PenTile配置方式、または別の配置方式で配置され得る。これはここでは限定されない。
【００４６】
表示パネルは、前述の透明部分を有することのみを必要とすることが理解され得る。任意選択で、表示パネル101は、有機発光ダイオード（organic light−emitting diode、OLED）技術、マイクロ発光ダイオード（micro light−emitting diode、MICRO LED）技術、またはアクティブマトリクス有機発光ダイオード（active−matrix organic light emitting diode、AMOLED）技術などを使用して構成され得る。これはここでは限定されない。
【００４７】
本出願のこの実施形態では、カメラ102は、画面の完全性および正常な表示を保証するために表示パネル101の後ろに配置される。カメラ102の前の領域は、表示パネル101の画素領域204の第1の領域である。第1の領域は、透明部分を有し、これにより、カメラ102の正常な撮影が保証され、工業設計効果および画面の全体表示に影響を及ぼすことなく表示領域へのカメラの組み込みが実施される。
【００４８】
表示パネルの表面には偏光子が取り付けられ、表示パネルの表面の偏光子は、偏光子によって反射される光を制限する機能を有することが理解され得る。不透明部分は、カメラを遮るためにルーバのように機能する。カメラの外形は、表示パネルを通しては不可視である。さらに、カメラは端末の内部に配置され、それは端末の内部ではかなり暗い。カメラはユーザから隠されるため、工業設計効果は影響を受けない。
【００４９】
さらに、カメラ102の前の第1の領域は、透明部分だけでなく不透明部分も有し、この不透明部分は、カメラ102の撮影を遮る。したがって、撮影された元の写真は、交互に離間された遮蔽領域を含む、図4に示されているもののようになり得る。このとき、端末は、復元された写真を取得するために、撮影された元の写真を処理し得る。複数の特定の処理方法が使用され得、これらのうちのいくつかが、以下の説明のために選択される。
【００５０】
第1の処理方法は、写真合成である。
【００５１】
任意選択で、プロセッサ180は、以下の動作、すなわち、
撮影のためにカメラ102を呼び出すとき、異なる位置でN枚の写真を迅速に撮影するようにカメラ102に命令する動作であって、各写真には、不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、動作と、
遮蔽領域が復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する動作とを実行するために、メモリ120に記憶されている動作命令を呼び出し得る。
【００５２】
遮蔽領域は、撮影された複数の写真で同じではないことが理解され得る。例えば、領域Aは、第1の写真では遮蔽されるが、第2の写真では遮蔽されない。したがって、複数の写真を合成することは、遮蔽領域が復元された写真を出力し得る。これを理解するために、図5を参照されたい。
【００５３】
図5に示されているように、撮影された両方の写真は、遮蔽領域を有するが、これらの写真の遮蔽領域は異なる。遮蔽領域が復元された完全な写真は、2つの写真が合成された後に取得される。
【００５４】
具体的には、異なる遮蔽領域を有する複数の写真を取得する複数の方法が存在する。
【００５５】
方法1：端末は、マイクロモータをさらに含み得、少なくとも1つのカメラ102が存在する。
【００５６】
任意選択で、異なる位置でN枚の写真を迅速に撮影するようにカメラ102に命令するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
移動させるために少なくとも1つのカメラを駆動するようにマイクロモータに命令するステップと、
少なくとも1つのカメラの移動中に、画面に対して異なる位置でN枚の写真を迅速に撮影するように少なくとも1つのカメラに命令するステップとを実行し得る。
【００５７】
画像合成方法を使用してN枚の写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
少なくとも1つのカメラが移動したときの、表示パネルに対するカメラの複数の位置に基づいてN枚の写真を処理するステップを実行し得る。
【００５８】
撮影中、プロセッサ180は、移動中に異なる角度で写真を撮影するために、マイクロモータを使用して、移動させるためにカメラ102を駆動することが理解され得る。撮影が完了した後、プロセッサ180は、遮蔽領域が復元された写真を取得するために、カメラ102が移動したときの、表示パネル101に対するカメラ102の複数の位置に基づいて写真を合成し得る。これを理解するために、図6aおよび図6bを参照されたい。
【００５９】
図6aおよび図6bは、移動中の1つのカメラによる写真撮影の概略図である。図6aでは、カメラによって撮影される元の写真の対象の一部は、不透明部分による遮蔽のために遮蔽され、遮蔽部分が、遮蔽領域である。カメラは、マイクロモータの駆動下で移動する。画素ユニットが横切られるとき、カメラによって撮影される元の写真で対象が遮蔽される領域は、実際のパネルに対するカメラの位置が異なり、撮影角度が異なるため、前に撮影された写真の遮蔽領域とは異なる。したがって、異なる遮蔽領域を有する複数の写真が取得される。
【００６０】
このようにして、1つのカメラしか存在しない場合でも、撮影された複数の写真を処理することによって、遮蔽領域が復元された写真が取得され得る。
【００６１】
カメラを遮蔽する画素ユニットの構造サイズは、数十マイクロメートルであり、したがって、微小距離を移動させるように単にカメラを押し動かすことによって、半分の画素に相当する距離が横切られ得、これにより、異なる遮蔽領域を有する複数の写真が取得されることに留意されたい。
【００６２】
移動させるためにカメラを駆動するマイクロモータは、レンズ駆動モータであり、複数の可能な形態を有することに留意されたい。マイクロモータは、さまざまな方向に移動させる目的で少なくとも1つのカメラを駆動するためにカメラに物理的に接続される。図7は、マイクロモータとカメラとを物理的に接続する調整装置の例を示す。調整装置は、ハウジング10、カメラに接続される垂直スライダ30、垂直調整アセンブリ40、カメラに接続される水平スライダ50、および水平調整アセンブリ60を含む。水平スライダ50および垂直スライダ30は、ハウジング10の底面から順に中空ハウジング10内に配置され、垂直調整アセンブリ40は、垂直スライダ30に接続され、水平調整アセンブリ60は、水平スライダ50に接続される。2つのマイクロモータ80は、垂直調整アセンブリ40および水平調整アセンブリ60をそれぞれ制御する。加えて、カバープレート20が、ハウジング10を密閉し、カバープレート20の隅には、帯状の制限孔24が作られ、カバープレート20の中央には、カメラ102に適合されたレンズ取付孔26が設けられる。
【００６３】
方法2：代わりに、少なくとも2つのカメラ102が存在してもよい。図8は、2つのカメラによる写真撮影の概略図である。ディスプレイの後ろの2つのカメラの位置が異なり、このため、撮影角度が異なる。したがって、2つのカメラによって撮影される写真の遮蔽領域も異なる。
【００６４】
任意選択で、画像合成方法を使用してN枚の写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
少なくとも2つのカメラによって撮影された写真に基づいて遮蔽領域を補完することによってN枚の写真を処理するステップを実行し得る。
【００６５】
このようにして、カメラが移動されることなく、異なる遮蔽領域を有する複数の写真が同様に取得され得、遮蔽領域が復元された写真が、処理によって取得され得る。
【００６６】
第2の処理方法は、写真データ処理である。
【００６７】
任意選択で、プロセッサ180は、以下の動作、すなわち、
写真を撮影する動作であって、写真には、不透明部分による遮蔽に起因する遮蔽領域が存在する、動作と、
遮蔽領域が復元された写真を取得するために、画像処理アルゴリズムを使用して写真を処理する動作とを実行するために、メモリ120に記憶されている動作命令を呼び出し得る。
【００６８】
画像処理アルゴリズムを使用して写真を処理する複数の特定の方法が存在する。
【００６９】
方法1：任意選択で、画像処理アルゴリズムを使用して写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
写真内の隣接画素の情報を使用して写真内の遮蔽画素に対して補間動作を実行するステップを実行し得る。
【００７０】
例えば、写真内のある画素が遮蔽されており、この画素の左側の画素が赤であり、右側の画素が青である。このとき、補間動作が実行され得る。画素の左側および右側の画素情報を合成することによって取得される画素情報が、遮蔽画素の情報として使用される。代わりに、補間動作は、他の隣接画素の情報を合成することによって実行されてもよいことが理解され得る。これはここでは限定されない。
【００７１】
方法2：任意選択で、画像処理アルゴリズムを使用して写真を処理するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
写真内の遮蔽画素の物理情報を認識するステップと、
認識された物理情報の内容に基づいて写真内の遮蔽画素の情報を復元するステップとを実行し得る。
【００７２】
これを理解するために、図9aおよび図9bを参照されたい。図9aは、遮蔽領域を有する撮影された写真を示す。端末は、人間の顔の目の一部および顔の一部である、写真内の遮蔽画素の物理情報を認識し得る。したがって、遮蔽画素の情報は、目および顔の一般的な構成に基づいて復元され得、最終的に図9bに示されている写真が取得される。
【００７３】
第3の処理方法は、写真合成とそれに続く写真データ処理である。
【００７４】
任意選択で、プロセッサ180は、以下の動作、すなわち、
撮影のためにカメラ102を呼び出すとき、異なる位置でN枚の写真を迅速に撮影するようにカメラ102に命令する動作であって、各写真には、不透明部分による遮蔽に起因する遮蔽領域が存在し、Nが、1よりも大きい正の整数である、動作と、
遮蔽領域が部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する動作と、
写真を取得する動作であって、写真には、不透明部分による遮蔽に起因する遮蔽領域が存在する、動作と、
遮蔽領域が復元された写真を取得するために、画像処理アルゴリズムを使用して写真を処理する動作とを実行するために、メモリ120に記憶されている動作命令を呼び出し得る。
【００７５】
異なる遮蔽領域を有する複数の写真を取得する特定の方法および画像処理アルゴリズムを使用して写真を処理する特定の方法は、第1の処理方法および第2の処理方法のものと同様であり、ここではさらに説明されない。
【００７６】
遮蔽領域が復元された写真を取得するために、写真が合成される前に、写真に対してデータ処理が実行されてもよいし、または前述の処理方法は、他の方法で組み合わされてもよいことが理解され得る。これはここでは限定されない。
【００７７】
前述の実施形態では、撮影された写真内の、不透明部分による遮蔽に起因する遮蔽領域は、さまざまな方法で復元され得る。さらに、画素構造または画素設計を変更することによって、第1の領域206における透明部分の割合は、第2の領域における透明部分の割合よりも大きくされる。このようにして、撮影された写真内の遮蔽領域の数またはサイズが低減される。
【００７８】
第1の領域206における透明部分の割合を増加させる2つの方法が以下で説明される。
【００７９】
方法1：1インチ当たりの画素数（pixels per inch、PPI）を低減する。
【００８０】
任意選択で、第1の領域206のPPIが第2の領域のPPIの1／Mとなるように、画素設計が変更され、ただし、Mは、1よりも大きい。
【００８１】
これを理解するために、図10を参照されたい。図10に示されているように、第1の領域のPPIは、第2の領域のPPIの1／2に低減されている、すなわち、第1の領域206の画素ユニットは半分に低減されている。したがって、第1の領域における画素ユニット間の透明部分は大幅に増大されている。図10は、PPI低減の概略図に過ぎないことに留意されたい。実際の適用では、一般に、画像の正常な表示を保証するために3つの隣接するRGB画素が削除される。
【００８２】
任意選択で、第1の領域206のPPIが低減されると、これに対応して、データを表示し得る、第1の領域内の画素ユニットは、第2の領域に対して低減される。画像の表示効果を保証するために、プロセッサ180は、以下のステップ、すなわち、
第1の領域206内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮するステップをさらに実行し得る。
【００８３】
表示データの圧縮率は、PPI低減率に応じて変更されることが理解され得る。図11に示されているように、例えば、第1の領域206のPPIは、別の領域のPPIの1／2である。したがって、表示される画像の6つの画素の表示データは、第1の領域206の3つの対応する画素ユニットに圧縮される必要があり、表示される画像の6つの画素のうちのR色の表示データは、R1およびR2であり、G色の表示データは、G1およびG2であり、B色の表示データは、B1およびB2である。この場合、第1の領域206の3つの対応する画素ユニットの表示データR3、G3、およびB3は、R3＝（R1＋R2）／2、G3＝（G1＋G2）／2、およびB3＝（B1＋B2）／2という計算によって取得され得る。
【００８４】
任意選択で、第1の領域206のPPIが低減されると、第1の領域206全体は、第2の領域に比べて暗くなる。画像の表示効果を高めるために、プロセッサ180は、以下のステップ、すなわち、
第1の領域の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、第1の領域206の全体の輝度を増加させるステップをさらに実行し得る。
【００８５】
具体的には、プロセッサ180は、画素領域204における第1の領域206の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、同じVdataの下で画素の出力電流を増加させ、第1の領域の全体の輝度を比例的に増加させるために、第1の領域206の画素のDTFTの幅対長さ比を適切に調整する（Ipixel−Vdata曲線を制御する）ように表示パネル101に命令し得る。
【００８６】
代わりに、第1の領域206の全体の輝度は、他の方法で、例えば、より正確な調整を実行するために外部補償を使用して、または表示データが圧縮されるときに表示データの色の輝度を増加させる補正を行うことで増加され得ることが理解され得る。これはここでは限定されない。
【００８７】
方法2：回路構造を変更する。
【００８８】
任意選択で、第2の領域のものとは異なる画素回路が、第1の領域206で使用される。第1の領域206で使用される画素回路の構成要素は、第2の領域で使用される画素回路の構成要素よりも少ないことが理解され得る。画素回路が簡略化されるため、デバイスおよび接続線の数が低減される。したがって、カメラのためにより多くの透明部分が得られる。
【００８９】
画素回路を簡略化する複数の特定の方法が存在し、そのうちの1つが、例として以下で説明される。第1の領域では、内部補償のない画素回路が使用される。
【００９０】
通常、内部補償のある画素回路、例えば、7T1C回路またはより多くの薄膜トランジスタを有する回路が、表示パネル101の画素領域204で使用されることに留意されたい。7T1C回路の特定の回路構造が、図12に示されている。すなわち、7つの薄膜トランジスタ（Thin Film Transistor、TFT）および1つのコンデンサが、1つの画素ユニットを駆動し、T1からT7は、回路内の7つのTFTである。
【００９１】
一方、内部補償のない画素回路は通常、2T1C回路である。特定の回路構造が、図13に示されている。すなわち、2つの薄膜トランジスタおよび1つのコンデンサが、1つの画素ユニットを駆動し、スイッチングTFTおよび駆動TFTは、回路内の2つのTFTである。
【００９２】
第1の領域で内部補償のない画素回路を使用することにより、例えば、2T1C回路を使用することにより、画素回路の構造が簡略化され、デバイスおよび接続線の数が低減され、これにより、第1の領域206における透明部分の割合が増加される。
【００９３】
任意選択で、内部補償のない画素回路が第1の領域206で使用されるため、第2の領域の表示と比較して色収差があり得る。したがって、プロセッサ180は、以下のステップ、すなわち、
第1の領域206の画素ユニットに対して外部補償を実行するステップを実行するようにさらに構成され得る。
【００９４】
具体的には、外部補償の主な動作ステップは以下の通りである、すなわち、
1．表示パネルの各グレースケールおよび色状態における2T1C領域の表示輝度および色を取得し、
2．各小領域または各点によって表示される輝度の、理想値からの偏差を計算し、
3．偏差に基づいて、この表示状態における2T1C領域内の各画素のデータ電圧に必要な補正を計算し、
4．補正をルックアップテーブルとして集積回路（integrated circuit、IC）に書き込み、実際の表示では、ICが、さまざまな条件に基づいて補正量を選択し、補正量を出力Gamma電圧に重ね合わせる。
【００９５】
第1の領域と第2の領域との間の色収差は、第1の領域206の画素ユニットを外部的に補償することによって補正される。このようにして、簡略化された画素回路でも比較的良好な表示効果が得られ得る。
【００９６】
前述の実施形態では、第1の領域206における透明部分の割合は、さまざまな方法で増加される。さらに、カメラが撮影を実行するとき、カメラの前の表示パネルによって発せられる光が、撮影品質に干渉し得る。この干渉を回避するために、撮影中に黒フレームが挿入され得る。
【００９７】
任意選択で、プロセッサ180は、以下のステップ、すなわち、
カメラが撮影のために呼び出されたときに表示パネルに黒フレームを挿入するステップを実行するようにさらに構成される。
【００９８】
さらに、黒フレームを挿入する正しいタイミングを保証するために、カメラが撮影のために呼び出されたときに黒フレームを表示パネルに挿入するステップを実行するとき、プロセッサ180は、具体的には、以下のステップ、すなわち、
撮影命令が受信されたときに黒フレーム挿入動作を開始するステップと、
黒フレーム挿入動作が完了したと判断されたときに、撮影を開始するようにカメラに命令するステップと、
撮影完了命令が受信されたときに画面を復元するステップとを実行し得る。
【００９９】
黒フレームは、全画面黒フレーム、または第1の領域206を黒画面に変える黒フレームであり得ることが理解され得る。これはここでは限定されない。
【０１００】
表示パネルの応答時間は非常に短く、マイクロ秒単位であり、現在のカメラの典型的な露出時間は、1フレームの時間よりも短いことに留意されたい。したがって、画面表示を保証し、撮影への影響を回避するためには、カメラ画像の取得と黒フレームのリフレッシュの同期のみが必要とされる。
【０１０１】
本出願の実施形態における、カメラを備えた端末が上で説明されている。本出願の実施形態における撮影方法が以下で説明される。本出願の実施形態では、撮影方法は、カメラを備えた前述の端末に基づくことが理解され得る。端末は、表示パネル101および少なくとも1つのカメラ102を含む。少なくとも1つのカメラ102は、表示パネル101の後ろに配置され、表示パネル101の、少なくとも1つのカメラ102の位置に対応する領域は、第1の領域206であり、表示パネル101の、第1の領域206以外の領域は、第2の領域である。第1の領域206の各画素ユニット301は、透明部分302および不透明部分303を含み、第2の領域の各画素ユニットは、透明部分および不透明部分を含み、第1の領域における透明部分の割合は、第2の領域における透明部分の割合よりも大きい。第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくする2つの特定の方法が存在することが理解され得る。1つは、第1の領域のPPIを低減することであり、もう1つは、第1の領域の画素構造設計を簡略化することである。以下では、これら2つの場合の撮影方法について説明する。
【０１０２】
1．第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくするために第1の領域のPPIを低減する。
【０１０３】
図14は、本出願の実施形態における撮影方法の一実施形態を示す。
【０１０４】
1401：表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得する。
【０１０５】
N枚の写真のそれぞれには、第1の領域の不透明部分による遮蔽に起因する遮蔽領域が存在し、Nは、1よりも大きい正の整数であることに留意されたい。
【０１０６】
N枚の写真を取得するさまざまな方法が存在することが理解され得る。例えば、端末は、マイクロモータを含み得、マイクロモータは、撮影中に移動させるために少なくとも1つのカメラを駆動し、少なくとも1つのカメラの移動中、端末は、表示パネルに対して異なる位置でN枚の写真を迅速に撮影するように少なくとも1つのカメラを制御し得る。代わりに、端末は、異なる位置に少なくとも2つのカメラを備え、この場合、少なくとも2つのカメラが撮影を実行するときにN枚の写真が取得され得る。
【０１０７】
1402：遮蔽領域が完全または部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する。
【０１０８】
N枚の写真に対して画像合成処理を実行する特定の方法は、N枚の写真を取得する方法に応じて異なり得ることが理解され得る。マイクロモータによって駆動される少なくとも1つのカメラの移動中にN枚の写真が撮影される場合、N枚の写真は、少なくとも1つのカメラが移動したときの、表示パネルに対するカメラの複数の位置に基づいて処理され得、N枚の写真が、異なる位置の少なくとも2つのカメラによって撮影される場合、N枚の写真は、少なくとも2つのカメラによって撮影された写真に基づいて遮蔽領域を補完することによって処理され得る。
【０１０９】
図5に示されているように、取得されたN枚の写真を画像合成方法を使用して処理することによって、遮蔽領域が完全に復元された写真が取得され得ることに留意されたい。処理された写真が依然としていくつかの遮蔽領域を含む可能性もある。すなわち、遮蔽領域が部分的に復元された写真が取得される。
【０１１０】
1403：遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理する。
【０１１１】
遮蔽領域が部分的に復元された取得写真については、画像処理アルゴリズムが、遮蔽領域が完全に復元された写真を取得する目的で写真を処理するために使用され得る。
【０１１２】
画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理する複数の方法が存在する。
【０１１３】
遮蔽画素の隣接画素の情報を使用して、遮蔽領域が部分的に復元された写真内の遮蔽画素に対して補間動作が実行され得る。例えば、写真内のある画素が遮蔽されており、この画素の左側の画素が赤であり、右側の画素が青である。このとき、補間動作が実行され得る。画素の左側および右側の画素情報を合成することによって取得される画素情報が、遮蔽画素の情報として使用される。代わりに、補間動作は、他の隣接画素の情報を合成することによって実行されてもよいことが理解され得る。これはここでは限定されない。
【０１１４】
代わりに、遮蔽領域が部分的に復元された写真内の遮蔽画素の物理情報が認識され得、遮蔽領域が部分的に復元された写真内の遮蔽画素の情報は、認識された物理情報の内容に基づいて復元される。例えば、図9aは、遮蔽領域を有する写真である。端末は、人間の顔の目の一部および顔の一部である、遮蔽画素の物理情報を認識し得る。したがって、遮蔽画素の情報は、目および顔の一般的な構成に基づいて復元され得、最終的に図9bに示されている写真が取得される。
【０１１５】
端末が撮影を実行するときに、ステップ1401から1403が実行され得ることが理解され得る。ステップ1403は、ステップ1402で取得された写真が、遮蔽領域が部分的に復元された写真である場合にのみ実行され、そうでなければ、それは実行されなくてもよい。
【０１１６】
1404：第1の領域内のM個の隣接画素の表示データを、表示のために1画素の表示データに圧縮する。
【０１１７】
第1の領域のPPIが低減されると、第1の領域の画素ユニットが低減されることに留意されたい。第1の領域のPPIが第2の領域のPPIの1／Mに低減される場合、第1の領域の画素ユニットも、第2の領域のそれらの1／Mに低減される。これを理解するために、図10を参照されたい。図10に示されているように、第1の領域のPPIは、第2の領域のPPIの1／2に低減されている、すなわち、第1の領域206の画素ユニットは半分に低減されている。したがって、第1の領域における画素ユニット間の透明部分は大幅に増大されている。図10は、PPI低減の概略図に過ぎないことに留意されたい。実際の適用では、一般に、画像の正常な表示を保証するために3つの隣接するRGB画素が削除される。
【０１１８】
したがって、PPIが低減されると、PPI低減率に応じて表示データの圧縮率が変更される。図11に示されているように、例えば、第1の領域206のPPIは、別の領域のPPIの1／2である。したがって、表示される画像の6つの画素の表示データは、第1の領域206の3つの対応する画素ユニットに圧縮される必要があり、表示される画像の6つの画素のうちのR色の表示データは、R1およびR2であり、G色の表示データは、G1およびG2であり、B色の表示データは、B1およびB2である。この場合、第1の領域206の3つの対応する画素ユニットの表示データR3、G3、およびB3は、R3＝（R1＋R2）／2、G3＝（G1＋G2）／2、およびB3＝（B1＋B2）／2という計算によって取得され得る。
【０１１９】
1405：第1の領域の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、第1の領域の全体の輝度を増加させる。
【０１２０】
第1の領域206のPPIが低減されると、発光画素ユニットが低減されるため、第1の領域206全体は第2の領域に比べて暗くなることに留意されたい。したがって、ステップ1405は、画像の表示効果を高めるために実行され得る。
【０１２１】
第1の領域の全体の輝度を高める複数の特定の方法が存在する。例えば、1つの可能な方法は、画素領域204における第1の領域206の輝度曲線と第2の領域の輝度曲線の類似性がプリセット値よりも大きくなるように、同じVdataの下で画素の出力電流を増加させ、第1の領域の全体の輝度を比例的に増加させるために、第1の領域206の画素のDTFTの幅対長さ比を適切に調整する（Ipixel−Vdata曲線を制御する）ことである。代わりに、外部補償を使用してより正確な調整が実行されてもよいし、または表示データが圧縮されるときに表示データの色の輝度を増加させる補正が行われてもよい。これはここでは限定されない。
【０１２２】
ステップ1404および1405は、端末の電源がオンされているときに実行されてもよいし、またはシステムのハードウェアに組み込まれてもよいことが理解され得る。これはここでは限定されない。
【０１２３】
1406：撮影中に黒フレームを表示パネルに挿入する。
【０１２４】
カメラは、表示パネルの後ろに配置され、感光撮影のために表示パネルの透明部分を通して外光が採られるため、カメラの前に配置された表示パネルの第1の領域によって発せられる光が、カメラの外光の採光に影響を及ぼすことが理解され得る。したがって、より良好な撮影効果を得るために、黒フレームが、撮影中に表示パネルに挿入され得る。
【０１２５】
黒フレーム挿入と撮影の一貫したタイミングを保証するために、撮影と黒フレーム挿入は時間同期されるように制御され得る。例えば、以下のステップ、すなわち、撮影命令が受信されたときに黒フレーム挿入動作を開始するステップと、黒フレーム挿入動作が完了したと判断されたときに撮影を開始するステップと、撮影完了命令が受信されたときに画面を復元するステップとが実行され得る。
【０１２６】
このステップは、撮影中に第1の領域によって発せられる光による、外光の採光への影響を回避するためのものであることが理解され得る。したがって、黒フレームは、第1の領域を黒画面に変える単なる黒フレームであってもよいし、または全画面黒フレームであってもよい。これはここでは限定されない。
【０１２７】
本出願のこの実施形態では、第1の領域における透明部分の割合が、第2の領域における透明部分の割合よりも大きくなるように、第1の領域のPPIが低減され、これにより、工業設計効果および画面の全体表示に影響を及ぼすことなく、カメラの正常な撮影が保証され、表示領域への前面カメラの組み込みが実施される。取得されたN枚の写真を処理するために画像合成方法を使用することにより、撮影された写真の完全性が保証される。合成写真が、遮蔽領域が部分的に復元された写真である場合、写真は、遮蔽領域が完全に復元された写真を取得するために、画像処理アルゴリズムを使用してさらに処理され得、これにより、写真効果がさらに保証される。さらに、第1の領域内のM個の隣接画素の表示データは、表示のために1画素の表示データに圧縮され、第1の領域の全体の輝度が増加される。このようにして、撮影された写真の効果が保証され、表示パネルは、影響を受けることなく画像を表示することが可能であり、このため、比較的良好な表示効果が得られる。撮影中、黒フレームが、第1の領域によって発せられる光による、撮影効果への影響を回避するために表示パネルに挿入され、これにより、撮影品質が改善される。
【０１２８】
2．第1の領域の透明部分の割合を第2の領域の透明部分の割合よりも大きくするために画素構造を簡略化する。
【０１２９】
画素構造は、2T1C回路などの、内部補償のない画素回路を第1の領域で使用し、7T1C回路などの、内部補償のある画素回路を第2の領域で使用することによって簡略化され得ることが理解され得る。
【０１３０】
図15は、本出願の実施形態における撮影方法の別の実施形態を示す。
【０１３１】
1501：表示パネルに対して異なる位置でカメラによって迅速に撮影されたN枚の写真を取得する。
【０１３２】
1502：遮蔽領域が完全または部分的に復元された写真を取得するために、画像合成方法を使用してN枚の写真を処理する。
【０１３３】
1503：遮蔽領域が復元された写真を取得するために、画像処理アルゴリズムを使用して、遮蔽領域が部分的に復元された写真を処理する。
【０１３４】
ステップ1501から1503は、ステップ1401から1403と同様であり、ここではさらに説明されない。
【０１３５】
1504：撮影中に黒フレームを表示パネルに挿入する。
【０１３６】
ステップ1504は、ステップ1406と同様であり、ここではさらに説明されない。
【０１３７】
1505：第1の領域の画素ユニットに対して外部補償を実行する。
【０１３８】
内部補償のない画素回路が第1の領域で使用されると、異なる画素回路構造に起因して、第1の領域と第2の領域との間に色収差が生じ得ることが理解され得る。したがって、第1の領域の画素ユニットは、外部的に補償され得る。具体的には、外部補償動作の主なステップは以下の通りである、すなわち、
1．表示パネルの各グレースケールおよび色状態における2T1C領域の表示輝度および色を取得し、
2．各小領域または各点によって表示される輝度の、理想値からの偏差を計算し、
3．偏差に基づいて、この表示状態における2T1C領域内の各画素のデータ電圧に必要な補正を計算し、
4．補正をルックアップテーブルとして集積回路（integrated circuit、IC）に書き込み、実際の表示では、ICが、さまざまな条件に基づいて補正量を選択し、補正量を出力Gamma電圧に重ね合わせる。
【０１３９】
第1の領域と第2の領域との間の色収差は、第1の領域206の画素ユニットを外部的に補償することによって補正される。このようにして、簡略化された画素回路でも比較的良好な表示効果が得られ得る。
【０１４０】
本出願のこの実施形態では、第1の領域における透明部分の割合が第2の領域における透明部分の割合よりも大きくなるように、第1の領域の画素ユニットの構造が簡略化される。これにより、カメラの正常な撮影が保証され、工業設計効果および画面の全体表示に影響を及ぼすことなく表示領域への前面カメラの組み込みが実施される。
【０１４１】
第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくする前述の2つの方法が単なる例に過ぎないことが理解され得る。実際の適用では、他の方法、例えば、前述の2つの方法の組み合わせが、第1の領域における透明部分の割合を第2の領域における透明部分の割合よりも大きくするために使用され得る。これはここでは限定されない。
【０１４２】
本出願の明細書、特許請求の範囲、および添付図面において、用語「第1」、「第2」、「第3」、および「第4」など（もしあれば）は、同様の対象を区別することを意図されており、必ずしも特定の順序または順番を示すものではない。このような方法で呼ばれる所与は、適切な状況で交換可能であり、したがって、ここで説明されている実施形態が、図示されている順序またはここで説明されている順序とは異なる他の順序で実施され得ることを理解されたい。さらに、用語「備える」、「備えた」、およびこれらの任意の他の異形は、非排他的包含に該当するものである。例えば、ステップまたはユニットのリストを含むプロセス、方法、システム、製品、またはデバイスは、必ずしもこれらのステップまたはユニットに限定されず、明示的にリストされていないまたはそのようなプロセス、方法、システム、製品、もしくはデバイスに固有である他のステップまたはユニットを含み得る。
【符号の説明】
【０１４３】
10  ハウジング
20  カバープレート
24  制限孔
26  レンズ取付孔
30  垂直スライダ
40  垂直調整アセンブリ
50  水平スライダ
60  水平調整アセンブリ
80  マイクロモータ
101  表示パネル
102  カメラ
110  RF回路
120  メモリ
130  入力ユニット
131  タッチパネル
132  入力デバイス
140  表示ユニット
150  センサ
160  音声回路
170  Wi−Fiモジュール
180  プロセッサ
190  電源
201  ガラスカバープレート
202  被包ガラス
203  シーラント
204  画素領域
205  薄膜トランジスタガラス
206  第1の領域
301  画素ユニット
302  透明部分
303  不透明部分
【図１】
0006892549.tif 000002
【図２】
0006892549.tif 000003
【図３】
0006892549.tif 000004
【図４】
0006892549.tif 000005
【図５】
0006892549.tif 000006
【図６ａ】
0006892549.tif 000007
【図６ｂ】
0006892549.tif 000008
【図７】
0006892549.tif 000009
【図８】
0006892549.tif 000010
【図９ａ】
0006892549.tif 000011
【図９ｂ】
0006892549.tif 000012
【図１０】
0006892549.tif 000013
【図１１】
0006892549.tif 000014
【図１２】
0006892549.tif 000015
【図１３】
0006892549.tif 000016
【図１４】
0006892549.tif 000017
【図１５】
0006892549.tif 000018