(57)【要約】      （修正有）【課題】携帯可能な撮像装置によって原稿の全面に亘って焦点が合っている画像を取得する。【解決手段】画像読取装置は、矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像部と、原稿画像の見かけの形状に基づいて、原稿面と撮像部との間の距離が相互に相違するＮ個の位置で焦点が合っているＮ個の第１の画像データを生成する撮像制御部と、第１の画像データによって表される原稿画像の見かけの形状に基づいて、原稿画像の垂直方向から見たと仮定した場合に想定される矩形の平面形状を有する原稿面に表された原稿画像となるようにＮ個の画像データのそれぞれを処理してＮ個の第２の画像データを生成する画像処理部と、Ｎ個の第２の画像データによって表されるＮ個の原稿画像から焦点が合っている領域を含む領域であるＮ個の合焦点領域を抽出し、Ｎ個の合焦点領域を合成して原稿画像を再現する第３の画像データを生成する画像合成部とを備える。【選択図】図１
2019036876.tif 000002
【特許請求の範囲】
【請求項１】
矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像部と、
前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部との間の距離が相互に相違するＮ個（Ｎは２以上の整数）の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する撮像制御部と、
前記第１の画像データによって表される前記原稿画像の見かけの形状に基づいて、前記原稿画像の垂直方向から見たと仮定した場合に想定される前記矩形の平面形状を有する原稿面に表された原稿画像となるように前記Ｎ個の画像データのそれぞれを処理して前記Ｎ個の第２の画像データを生成する画像処理部と、
前記Ｎ個の第２の画像データによって表される前記Ｎ個の原稿画像から前記焦点が合っている領域を含む領域である前記Ｎ個の合焦点領域を抽出し、前記Ｎ個の合焦点領域を合成して前記原稿画像を再現する第３の画像データを生成する画像合成部と、
を備える画像読取装置。
【請求項２】
請求項１記載の画像読取装置であって、
前記撮像制御部は、前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部の最短距離の位置と最長距離の位置とを結ぶ直線を推定し、前記直線に沿った前記Ｎ個の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する画像読取装置。
【請求項３】
請求項１又は２に記載の画像読取装置であって、
前記撮像制御部は、前記原稿面と前記撮像部の最短距離と最長距離の差である変動距離量と、前記撮像部の被写界深度とに基づいて前記Ｎの数を決定する画像読取装置。
【請求項４】
請求項１乃至３のいずれか１項に記載の画像読取装置であって、
前記画像合成部は、前記合焦点領域がテキスト又は線画を含んでいる場合には、画像マッチング処理を使用して前記合焦点領域を合成する画像読取装置。
【請求項５】
請求項１乃至４のいずれか１項に記載の画像読取装置であって、
前記画像合成部は、前記合焦点領域が写真を含んでいる場合には、アルファブレンディング処理を使用して前記合焦点領域を合成する画像読取装置。
【請求項６】
画像形成装置であって、
請求項１乃至５のいずれか１項に記載の画像読取装置と、
印刷媒体に画像を形成する画像形成部と、
を備える画像形成装置。
【請求項７】
撮像部を使用して矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像工程と、
前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部との間の距離が相互に相違するＮ個（Ｎは２以上の整数）の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する撮像制御工程と、
前記第１の画像データによって表される前記原稿画像の見かけの形状に基づいて、前記原稿画像の垂直方向から見たと仮定した場合に想定される前記矩形の平面形状を有する原稿面に表された原稿画像となるように前記Ｎ個の画像データのそれぞれを処理して前記Ｎ個の第２の画像データを生成する画像処理工程と、
前記Ｎ個の第２の画像データによって表される前記Ｎ個の原稿画像から前記焦点が合っている領域を含む領域である前記Ｎ個の合焦点領域を抽出し、前記Ｎ個の合焦点領域を合成して前記原稿画像を再現する第３の画像データを生成する画像合成工程と、
を備える画像読取方法。
【請求項８】
矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像部を有する画像読取装置を制御するための画像読取プログラムであって、
前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部との間の距離が相互に相違するＮ個（Ｎは２以上の整数）の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する撮像制御部、
前記第１の画像データによって表される前記原稿画像の見かけの形状に基づいて、前記原稿画像の垂直方向から見たと仮定した場合に想定される前記矩形の平面形状を有する原稿面に表された原稿画像となるように前記Ｎ個の画像データのそれぞれを処理して前記Ｎ個の第２の画像データを生成する画像処理部、及び
前記Ｎ個の第２の画像データによって表される前記Ｎ個の原稿画像から前記焦点が合っている領域を含む領域である前記Ｎ個の合焦点領域を抽出し、前記Ｎ個の合焦点領域を合成して前記原稿画像を再現する第３の画像データを生成する画像合成部として前記画像読取装置を機能させる画像読取プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、原稿をカメラで撮像して生成された焦点距離が相違する複数の原稿画像から１つの画像を生成する技術に関する。
【背景技術】
【０００２】
原稿の画像は、スキャナーを使用して読み取ることが一般的である。スキャナーは、安定した光源で原稿を一様に照射し、ラインスキャナーを走査させることによって高解像度で画像を取得することができる。一方、撮像機能を有するスマートフォンの普及によって、スマートフォンを使用して原稿の画像を読み取ることも望まれるようになってきた。原稿画像の読み取りでは、特にテキストを明瞭に撮像するために焦点が正確に合わせられていることが好ましい。
【０００３】
しかしながら、スマートフォンは、ラインスキャナーと相違し、原稿に対して位置が固定されていない。よって、スマートフォンから原稿面の各領域への距離がばらつくことがあり、原稿面の全体へ焦点を正確に合わせることが困難である。このような問題に関して、たとえば特許文献１は、被写界深度に含まれる複数の画像の中から、ブロック毎にコントラスト（あるいはエッジ成分）が最も高い画像を選択し、ブロック毎に選ばれた複数の部分画像を繋ぎ合わせて１枚の合成画像を生成する技術を提案している（段落００６３及び００６４）。特許文献２は、高解像度化のための画素ずらし合成処理が行われた画像取得領域の画像データのみについて深度合成処理を行うことで、深度合成処理の処理負荷を軽減し、処理時間を短縮する技術を提案している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１３−１４１２６３号公報
【特許文献２】国際公開２０１６／０７２１０３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本願発明者は、手持ちのスマートフォン等の携帯可能な撮像装置で原稿画像を取得する観点から迅速且つ簡易に深度合成処理を実現する方法を検討した。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、携帯可能な撮像装置によって原稿の全面に亘って焦点が合っている画像を取得するための技術を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の画像読取装置は、矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像部と、前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部との間の距離が相互に相違するＮ個（Ｎは２以上の整数）の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する撮像制御部と、前記第１の画像データによって表される前記原稿画像の見かけの形状に基づいて、前記原稿画像の垂直方向から見たと仮定した場合に想定される前記矩形の平面形状を有する原稿面に表された原稿画像となるように前記Ｎ個の画像データのそれぞれを処理して前記Ｎ個の第２の画像データを生成する画像処理部と、前記Ｎ個の第２の画像データによって表される前記Ｎ個の原稿画像から前記焦点が合っている領域を含む領域である前記Ｎ個の合焦点領域を抽出し、前記Ｎ個の合焦点領域を合成して前記原稿画像を再現する第３の画像データを生成する画像合成部とを備える。
【０００８】
本発明の画像形成装置は、前記画像読取装置と、印刷媒体に画像を形成する画像形成部とを備える。
【０００９】
本発明の画像読取方法は、撮像部を使用して矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像工程と、前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部との間の距離が相互に相違するＮ個（Ｎは２以上の整数）の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する撮像制御工程と、前記第１の画像データによって表される前記原稿画像の見かけの形状に基づいて、前記原稿画像の垂直方向から見たと仮定した場合に想定される前記矩形の平面形状を有する原稿面に表された原稿画像となるように前記Ｎ個の画像データのそれぞれを処理して前記Ｎ個の第２の画像データを生成する画像処理工程と、前記Ｎ個の第２の画像データによって表される前記Ｎ個の原稿画像から前記焦点が合っている領域を含む領域である前記Ｎ個の合焦点領域を抽出し、前記Ｎ個の合焦点領域を合成して前記原稿画像を再現する第３の画像データを生成する画像合成工程とを備える。
【００１０】
本発明は、矩形の平面形状を有する原稿面に表された原稿画像を撮像する撮像部を有する画像読取装置を制御するための画像読取プログラムを提供する。前記画像読取プログラムは、前記原稿画像の見かけの形状に基づいて、前記原稿面と前記撮像部との間の距離が相互に相違するＮ個（Ｎは２以上の整数）の位置で焦点が合っている前記Ｎ個の第１の画像データを生成する撮像制御部、前記第１の画像データによって表される前記原稿画像の見かけの形状に基づいて、前記原稿画像の垂直方向から見たと仮定した場合に想定される前記矩形の平面形状を有する原稿面に表された原稿画像となるように前記Ｎ個の画像データのそれぞれを処理して前記Ｎ個の第２の画像データを生成する画像処理部、及び前記Ｎ個の第２の画像データによって表される前記Ｎ個の原稿画像から前記焦点が合っている領域を含む領域である前記Ｎ個の合焦点領域を抽出し、前記Ｎ個の合焦点領域を合成して前記原稿画像を再現する第３の画像データを生成する画像合成部として前記画像読取装置を機能させる。
【発明の効果】
【００１１】
本発明によれば、携帯可能な撮像装置によって原稿の全面に亘って焦点が合っている画像を取得することができる。
【図面の簡単な説明】
【００１２】
【図１】は、本発明の一実施形態に係る画像読取システム１０の機能構成を示すブロックダイアグラムである。
【図２】は、一実施形態に係る原稿画像生成処理の内容を示すフローチャートである。
【図３】は、一実施形態に係るスマートフォン２００による撮像開始の様子を示す説明図である。
【図４】は、一実施形態に係る深度合成用連続撮像処理の内容を示すフローチャートである。
【図５】は、一実施形態に係るスマートフォン２００による撮像の様子を示す説明図である。
【図６】は、一実施形態に係るスマートフォン２００によって撮像された複数の撮像画像データを示す説明図である。
【図７】は、一実施形態に係るスマートフォン２００によって撮像された複数の画像領域が合成されている様子を示す説明図である。
【図８】は、一実施形態に係る原稿画像生成処理によって合成された画像の確認を促す表示画面を示す説明図である。
【発明を実施するための形態】
【００１３】
以下、本発明を実施するための形態（以下、「実施形態」という）を、図面を参照して説明する。
【００１４】
図１は、本発明の一実施形態に係る画像読取システム１０の機能構成を示すブロックダイアグラムである。画像読取システム１０は、画像形成装置１００と、スマートフォン２００とを備えている。画像形成装置１００は、制御部１１０と、画像形成部１２０と、操作表示部１３０と、記憶部１４０と、通信インターフェース部（通信Ｉ／Ｆ部）１５０と、自動原稿送り装置（ＡＤＦ）１６０とを備えている。画像形成部１２０は、印刷媒体上に画像を形成する。画像形成部１２０は、原稿から画像を読み取って画像データを生成する画像読取部１２１と、画像処理部１２２と、画像合成部１２３とを備える。画像処理部１２２及び画像合成部１２３の機能については後述する。
【００１５】
スマートフォン２００は、制御部２１０と、操作表示部２３０と、記憶部２４０と、通信インターフェース部（通信Ｉ／Ｆ部）２５０と、撮像部２６０とを備えている。スマートフォン２００は、通信インターフェース部２５０と通信インターフェース部１５０とを使用して近距離無線通信で画像形成装置１００と接続される。近距離無線通信は、本実施形態では、ＢＬＵＥＴＯＯＴＨ（登録商標）のＣＬＡＳＳ１を使用している。ＢＬＵＥＴＯＯＴＨ（登録商標）のＣＬＡＳＳ１は、出力１００ｍＷの通信であり、画像形成装置１００とスマートフォン２００との距離が１００ｍ以内程度での通信が可能な近距離無線通信である。
【００１６】
画像形成装置１００の操作表示部１３０及びスマートフォン２００の操作表示部２３０は、タッチパネルとして機能し、様々なメニューを入力画面として表示し、顧客の操作入力を受け付ける。
【００１７】
制御部１１０，２１０及び画像形成部１２０は、ＲＡＭやＲＯＭ等の主記憶手段、及びＭＰＵ（Ｍｉｃｒｏ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）やＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等の制御手段を備えている。また、制御部１１０，２１０は、各種Ｉ／Ｏ、ＵＳＢ（ユニバーサル・シリアル・バス）、バス、その他ハードウェア等のインターフェースに関連するコントローラ機能を備えている。制御部１１０，２１０は、それぞれ画像形成装置１００及びスマートフォン２００の全体を制御する。
【００１８】
記憶部１４０，２４０は、非一時的な記録媒体であるハードディスクドライブやフラッシュメモリー等からなる記憶装置で、それぞれ制御部１１０，２１０が実行する処理の制御プログラムやデータを記憶する。記憶部１４０には、スマートフォン２００にインストールするための原稿画像取得アプリケーションプログラム１４１（単にアプリケーションとも呼ばれる。）が記憶されている。
【００１９】
この例では、スマートフォン２００は、画像形成装置１００の記憶部１４０から原稿画像取得アプリケーションプログラム１４１をダウンロードして、記憶部２４０にインストール済みであるものとする。
【００２０】
図２は、一実施形態に係る原稿画像生成処理の内容を示すフローチャートである。ステップＳ１０では、ユーザーは、操作表示部２３０を操作してスマートフォン２００の作動モードを原稿撮像モードに設定する。原稿撮像モードは、原稿画像取得アプリケーションプログラム１４１によってサポートされている撮像モードである。この撮像モードは、スマートフォン２００による原稿画像の取得用に構成された作動モードである。
【００２１】
図３は、一実施形態に係るスマートフォン２００による撮像開始の様子を示す説明図である。操作表示部２３０には、原稿画像を表す画像ＢＰ１が表示されている。撮像対象である原稿Ｄは、矩形の平面形状を有するＡ４あるいはＢ４といった規格化されているサイズの用紙である。原稿Ｄは、平面を有するデスクその他の任意の場所に置くことができる。原稿Ｄに対してスマートフォン２００が傾斜した方向から撮像されているので、原稿Ｄは、見かけの形状として台形の形状を有している。
【００２２】
ステップＳ２０では、ユーザーは、スマートフォン２００の撮像部２６０で原稿Ｄの全体を捕捉する。すなわち、ユーザーは、図３（ａ）に示されるように、操作表示部２３０で確認しつつ撮像部２６０の視野角の範囲内に原稿Ｄの全体像を入れる。
【００２３】
図４は、一実施形態に係る深度合成用連続撮像処理の内容を示すフローチャートである。ステップＳ３０では、制御部２１０は、撮像制御部として機能し、深度合成用連続撮像処理を実行する。ステップＳ３１では、制御部２１０は、輪郭抽出処理を実行する。輪郭抽出処理では、制御部２１０は、原稿画像を表す画像ＢＰ１の輪郭を抽出する。
【００２４】
ステップＳ３２では、制御部２１０は、抽出された輪郭に基づいて形状解析処理を実行する。形状解析処理では、制御部２１０は、原稿Ｄが矩形の平面形状を有すると仮定して３次元空間におけるスマートフォン２００に対する原稿Ｄの位置関係を推定する。
【００２５】
図５は、一実施形態に係るスマートフォン２００による撮像の様子を示す説明図である。図５（ａ）に示されるように、原稿Ｄは、４つの角Ａｄ，Ｂｄ，Ｃｄ及びＤｄを有するＡ４サイズの矩形形状を有しているものとする。４つの角Ａｄ，Ｂｄ，Ｃｄ及びＤｄは、撮像部２６０のイメージセンサ２６０ｓに投影画像ＢＰ０として投影されている。投影画像ＢＰ０では、４つの角Ａｄ，Ｂｄ，Ｃｄ及びＤｄを有する矩形は、４つの角Ａ，Ｂ，Ｃ及びＤを有する台形として投影されている。
【００２６】
この例では、原稿画像の辺ＡｄＢｄと辺ＣｄＤｄとが同一の長さを有しているのに対して、投影画像ＢＰ０の辺ＣＤは、辺ＡＢよりも短くなっている。この理由は、図５（ｂ）に示されるように、辺ＣｄＤｄからイメージセンサ２６０ｓへの距離Ｌ０が辺ＡｄＢｄからイメージセンサ２６０ｓへの距離Ｌ５よりも長いからである。
【００２７】
ステップＳ３３では、制御部２１０は、変動距離検出処理を実行する。変動距離検出処理では、３次元空間におけるスマートフォン２００に対する原稿Ｄの位置関係に基づいて撮像部２６０からの最短距離（この例では、距離Ｌ５）と最長距離（この例では、距離Ｌ０）の差である変動距離量ｄＬを検出する（図５（ｂ）参照）。
【００２８】
ステップＳ３４では、制御部２１０は、変動距離量ｄＬと閾値とを比較する。閾値は、撮像部２６０の被写界深度に基づいて予め設定されている。この例では、撮像部２６０は、絞り機構を備えておらず、被写界深度は固定されているものとする。ただし、絞り機構を備える撮像部を使用する場合には、絞り量に応じて変化する被写界深度に基づいて閾値を調整するようにしてもよい。
【００２９】
制御部２１０は、変動距離量ｄＬが閾値以上の場合には、処理をステップＳ３５に進め、変動距離量ｄＬが閾値未満の場合には、ステップＳ３８に進める。ステップＳ３８では、制御部２１０は、撮像部２６０に画像データ生成処理を実行させる。画像データ生成処理では、撮像部２６０は、原稿Ｄの中央部において焦点を合わせて一つの撮像画像データを生成する。
【００３０】
ステップＳ３５では、制御部２１０は、距離変動軸特定処理を実行する。距離変動軸特定処理では、制御部２１０は、３次元空間における撮像部２６０に対する原稿Ｄの位置関係に基づいて、最短距離の位置と最長距離の位置とを結ぶ直線として距離変動軸ＣＬを特定する（図３（ａ）参照）。この例では、距離変動軸ＣＬは、原稿Ｄの図心位置を通っている。
【００３１】
この例では、辺ＡＢ及び辺ＣＤは、撮像部２６０の投影面（イメージセンサ２６０ｓ）と平行なので、投影画像ＢＰ０において辺ＡＢと辺ＣＤとは相互に平行となっている。これに伴い、距離変動軸ＣＬは、原稿面と撮像部２６０との間の距離が顕著（この例では最も）に変動する特定方向の直線として、辺ＡＢ及び辺ＣＤと垂直な方向を有している。これに対して、たとえば辺ＡＢと辺ＣＤとが平行でない場合には、図３（ｂ）に示されるように、距離変動軸ＣＬａは、辺ＡＢ及び辺ＣＤに対して傾斜した方向を有することになる。
【００３２】
ステップＳ３６では、制御部２１０は、焦点位置決定処理を実行する。焦点位置決定処理では、制御部２１０は、変動距離量ｄＬに基づいて撮像部２６０の被写界深度で十分にピントの合ったとされる撮像画像データが生成できるような数の焦点位置を決定する。この例では、操作表示部２３０は、原稿画像を表す画像ＢＰ１に重畳して、距離変動軸ＣＬと４個の焦点位置とを表示している（図３（ａ）参照）。
【００３３】
ステップＳ３７では、制御部２１０は、ユーザーによるシャッター操作に応じてステップＳ３６で決定された数（Ｎ個：Ｎは２以上の整数）の焦点位置で原稿Ｄを自動的に瞬時に撮像する。この例では、Ｎ個は、変動距離量ｄＬに基づいて４個に決定されたものとする。撮像順序は、たとえば焦点距離を長距離から短距離に変更しつつ焦点位置ＦＰ１，ＦＰ２，ＦＰ３及びＦＰ４の順に、あるいは逆方向で撮像すれば短い時間で撮像を完了させることができるので、原稿Ｄを略同一の位置から撮像することができる。この際、絞り量を調整可能な撮像装置を使用する場合においても、円滑な深度合成処理を実現するために絞り量を固定した状態で撮像することが好ましい。
【００３４】
図６は、一実施形態に係るスマートフォン２００によって撮像された複数の撮像画像データ（第１の画像データとも呼ばれる。）を示す説明図である。ステップＳ３８では、制御部２１０は、撮像部２６０に画像データ生成処理を実行させる。画像データ生成処理では、撮像部２６０は、撮像部２６０からの距離が相互に相違し、距離変動軸ＣＬに沿った複数（この例では４個）の位置で焦点が合っている４つの撮像画像データＩＤ１〜ＩＤ４を生成する。
【００３５】
撮像画像データＩＤ１は、撮像部２６０から距離Ｌ１（図５（ｂ）参照）だけ離れている焦点位置ＦＰ１に焦点を合わせて撮像された画像を示している（図６（ａ）参照）。撮像画像データＩＤ２は、撮像部２６０から距離Ｌ２だけ離れている焦点位置ＦＰ２に焦点を合わせて撮像された画像を示している（図６（ｂ）参照）。撮像画像データＩＤ３は、撮像部２６０から距離Ｌ３だけ離れている焦点位置ＦＰ３に焦点を合わせて撮像された画像を示している（図６（ｃ）参照）。撮像画像データＩＤ３は、撮像部２６０から距離Ｌ４だけ離れている焦点位置ＦＰ４に焦点を合わせて撮像された画像を示している（図６（ｄ）参照）。
【００３６】
撮像画像データＩＤ１〜ＩＤ４は、それぞれ合焦点領域ＺＤ１〜ＺＤ４（ハッチング領域）を有している。合焦点領域ＺＤ１〜ＺＤ４は、それぞれ撮像部２６０の被写界深度内でピントが合っているとされる領域である。撮像画像データＩＤ１〜ＩＤ４は、それぞれ距離Ｌ１〜距離Ｌ４に紐付けて管理される。距離Ｌ１〜距離Ｌ４は、撮像画像データＩＤ１〜ＩＤ４の画像撮像時において焦点距離の調整時に撮像部２６０で取得されるデータである。
【００３７】
図７は、一実施形態に係るスマートフォン２００によって撮像された複数の画像領域が合成されている様子を示す説明図である。ステップＳ４０（図２参照）では、画像処理部１２２は、歪み補正処理を実行する。歪み補正処理は、原稿Ｄの表面の三次元形状の推定結果（ステップＳ３２）と距離Ｌ１〜距離Ｌ４とに基づいて、原稿画像を垂直方向から見たと仮定した場合に想定される規格化（たとえばＡ４サイズ）されている矩形の平面形状を有する原稿面に表された原稿画像となるように画像を変形させる処理である。
【００３８】
具体的には、歪み補正処理は、原稿Ｄの４つの角Ａ，Ｂ，Ｃ及びＤで構成される台形画像を、原稿Ｄの４つの角Ａｒ，Ｂｒ，Ｃｒ及びＤｒで構成されるＡ４サイズのアスペクト比を有する矩形に再現する。歪み補正処理では、各合焦点領域ＺＤ１〜ＺＤ４は、それぞれ変形されて各再現領域ＺＤ１ｒ〜ＺＤ４ｒの画像を含む画像を表す各再現画像データ（第２の画像データとも呼ばれる。）が生成される。
【００３９】
ステップＳ５０では、画像合成部１２３は、深度合成処理を実行する。深度合成処理では、各再現画像データから各再現領域ＺＤ１ｒ〜ＺＤ４ｒの画像を抽出し、各再現領域ＺＤ１ｒ〜ＺＤ４ｒを合成して原稿画像を再現する深度合成画像データＩＤ５（第３の画像データとも呼ばれる。）を生成する。深度合成画像データＩＤ５では、原稿Ｄの４つの角Ａｒ，Ｂｒ，Ｃｒ及びＤｒがＡ４サイズのアスペクト比を有する矩形を形成している。
【００４０】
画像の合成は、たとえば再現領域ＺＤ１ｒと再現領域ＺＤ２ｒの合成は、その境界領域に設定されているオーバーラップ領域（図示略）での画像マッチング処理を利用して行われる。画像マッチング処理は、再現領域ＺＤ２ｒと再現領域ＺＤ３ｒの境界領域に設定されているオーバーラップ領域（図示略）と、再現領域ＺＤ３ｒと再現領域ＺＤ４ｒの境界領域に設定されているオーバーラップ領域（図示略）とにおいても実行される。
【００４１】
なお、オーバーラップ領域での画像処理は、画像マッチング処理に限定されず、たとえば所定の透過度を有する半透明の画像としてアルファブレンディング処理を使用してもよい。画像マッチング処理は、たとえばテキストや線画を表す画像に適している一方、アルファブレンディング処理は、写真や中間調を多用するイラストといった画像に適している。よって、オーバーラップ領域の画像がテキストや線画を表す画像である場合には、画像マッチング処理が使用され、オーバーラップ領域の画像が写真等を表す画像である場合には、アルファブレンディング処理が使用されるようにしてもよい。
【００４２】
図８は、一実施形態に係る原稿画像生成処理によって合成された画像の確認を促す表示画面を示す説明図である。操作表示部２３０には、深度合成画像ＢＰ２が表示されている。ステップＳ６０では、ユーザーは、必要に応じてタッチパネルとして機能する操作表示部２３０を操作して、深度合成画像ＢＰ２を拡大して確認することができる。
【００４３】
ユーザーは、取得画像が満足できるものでなかった場合には、処理をステップＳ７０に進め、取得画像が満足できるものであった場合には、処理をステップＳ８０に進める。ステップＳ７０では、ユーザーは、撮像再開アイコン２３２をタッチして再度の撮像を行う。
【００４４】
ステップＳ８０では、ユーザーは、保存アイコン２３１をタッチして保存処理を実行する。これにより、制御部１１０は、生成された深度合成画像データＩＤ５を記憶部１４０に記憶する。
【００４５】
このように、本実施形態に係る画像読取システム１０は、予め既知の原稿の形状とサイズ（たとえばＡ４サイズの矩形）と、撮像部２６０と原稿Ｄとの間の距離Ｌ１〜Ｌ４とを使用して、原稿Ｄの原稿画像の垂直方向から見たと仮定した場合に想定される矩形の平面形状を有する原稿面に表された原稿画像を再現することができる。
【００４６】
これにより、画像読取システム１０は、少ない処理量で簡易に深度合成画像データを生成することができるので、処理能力が必ずしも高くない携帯可能な撮像装置（たとえばスマートフォン）を使用して原稿の全面に亘って焦点が合っている画像を取得することができる。
【００４７】
本発明は、上記各実施形態だけでなく、以下のような変形例でも実施することができる。
【００４８】
変形例１：上記実施形態では、本発明は、スマートフォン２００と画像形成装置１００とを有する画像読取システム（画像読取装置とも呼ばれる。）１０として具現化されているが、必ずしも画像形成装置１００は必要ではない。具体的には、たとえばスマートフォンが画像処理部や画像合成部を備え、スマートフォン単体で画像読取を完了するように構成してもよい。
【００４９】
変形例２：上記実施形態では、スマートフォンが使用されているが、本発明は、撮像が可能であればノートＰＣやタブレットといった携帯端末に適用可能である。携帯端末は、絞り機構が省略された小型の光学系を有し、開放Ｆ値での撮像が行われることが多いので、被写界深度が浅く顕著な効果が期待される。
【符号の説明】
【００５０】
１０  画像読取システム
１００  画像形成装置
１１０  制御部
１２０  画像形成部
１３０  操作表示部
１４０，２４０  記憶部
１５０，２５０  通信インターフェース部
１６０  自動原稿送り装置（ＡＤＦ）
２００  スマートフォン
２１０  制御部
２３０  操作表示部
【図１】
2019036876.tif 000003
【図２】
2019036876.tif 000004
【図３】
2019036876.tif 000005
【図４】
2019036876.tif 000006
【図５】
2019036876.tif 000007
【図６】
2019036876.tif 000008
【図７】
2019036876.tif 000009
【図８】
2019036876.tif 000010