(57)【要約】【課題】携帯可能な撮像装置によって高品質の画像を取得するための技術を提供する。【解決手段】画像読取装置は、原稿面に表された原稿画像を撮影する撮像部と、撮像部の光軸と交差する方向への撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御部と、共通画像領域の画像を表す画像データを使用して原稿面の三次元形状を推定し、推定された三次元形状に基づいて共通画像領域の画像を表す画像の歪みを補正して原稿面が平面であると仮定した場合の共通画像領域の画像である平面画像を表す補正画像データを生成する画像解析部と、複数の平面画像を合成して、原稿面が平面であると仮定した場合の原稿画像を表す画像データを生成する画像合成部とを備える。【選択図】図１
2018056784.tif 000002
【特許請求の範囲】
【請求項１】
画像読取装置であって、
原稿面に表された原稿画像を撮影する撮像部と、
前記撮像部の光軸と交差する方向への前記撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御部と、
前記共通画像領域の画像を表す画像データを使用して前記原稿面の三次元形状を推定し、前記推定された三次元形状に基づいて前記共通画像領域の画像を表す画像の歪みを補正して前記原稿面が平面であると仮定した場合の前記共通画像領域の画像である平面画像を表す補正画像データを生成する画像解析部と、
前記複数の平面画像を合成して、前記原稿面が平面であると仮定した場合の前記原稿画像を表す画像データを生成する画像合成部と、
を備える画像読取装置。
【請求項２】
請求項１記載の画像読取装置であって、
前記撮像制御部は、前記原稿面の略正面に向かって前記原稿面の輪郭の全体を含む画像を前記撮像部に取得させ、
前記画像合成部は、前記輪郭の形状に合致するように前記複数の平面画像を合成する画像読取装置。
【請求項３】
請求項２に記載の画像読取装置であって、
前記原稿面の輪郭は、第１の輪郭と前記第１の輪郭と反対側の第２の輪郭を含み
前記撮像制御部は、前記並進移動に伴う前記第１の輪郭の検知に応じて前記連続撮像を開始し、前記第２の輪郭の非検知に応じて前記連続撮像を停止する画像読取装置。
【請求項４】
請求項１乃至３のいずれか１項に記載の画像読取装置であって、さらに、
前記撮像部の方向を計測するジャイロセンサを備え、
前記撮像制御部は、前記連続撮像で取得される複数の画像データと前記計測された撮像部の方向とをそれぞれ紐づけて取得し、
前記画像解析部は、前記複数の画像データの画像のそれぞれの相対的方向を前記複数の画像データのそれぞれに紐づけられている前記撮像部の方向を使用して補正する画像読取装置。
【請求項５】
請求項１乃至４のいずれか１項に記載の画像読取装置であって、さらに、
前記撮像部の加速度を計測する加速度センサを備え、
前記撮像制御部は、前記連続撮像で取得される複数の画像データと前記計測された撮像部の加速度を使用して算出された前記撮像部の位置とをそれぞれ紐づけて取得し、
前記画像解析部は、前記複数の画像データの画像のそれぞれの相対的位置を前記複数の画像データのそれぞれに紐づけられている前記撮像部の位置を使用して補正する画像読取装置。
【請求項６】
画像形成装置であって、
請求項１乃至５のいずれか１項に記載の画像読取装置と、
印刷媒体に画像を形成する画像形成部と、
を備える画像形成装置。
【請求項７】
画像読取方法であって、
撮像部を用いて原稿面に表された原稿画像を撮影する撮像工程と、
前記撮像部の光軸と交差する方向への前記撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御工程と、
前記共通画像領域の画像を表す画像データを使用して前記原稿面の三次元形状を推定し、前記推定された三次元形状に基づいて前記共通画像領域の画像を表す画像の歪みを補正して前記原稿面が平面であると仮定した場合の前記共通画像領域の画像である平面画像を表す補正画像データを生成する画像解析工程と、
前記複数の平面画像を合成して、前記原稿面が平面であると仮定した場合の前記原稿画像を表す画像データを生成する画像合成工程と、
を備える画像読取方法。
【請求項８】
画像読取装置を制御するための画像読取プログラムであって、
原稿面に表された原稿画像を撮影する撮像部、
前記撮像部の光軸と交差する方向への前記撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御部、
前記共通画像領域の画像を表す画像データを使用して前記原稿面の三次元形状を推定し、前記推定された三次元形状に基づいて前記共通画像領域の画像を表す画像の歪みを補正して前記原稿面が平面であると仮定した場合の前記共通画像領域の画像である平面画像を表す補正画像データを生成する画像解析部、及び
前記複数の平面画像を合成して、前記原稿面が平面であると仮定した場合の前記原稿画像を表す画像データを生成する画像合成部として前記画像読取装置を機能させる画像読取プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラで原稿を撮影して生成された複数の画像から１つの画像を生成する技術に関する。
【背景技術】
【０００２】
原稿の画像は、スキャナーを使用して読み取ることが一般的である。スキャナーは、安定した光源で原稿を一様に照射し、ラインスキャナーを走査させることによって高解像で画像を取得することができる。一方、撮影機能を有するスマートフォンの普及によって、スマートフォンを使用して原稿の画像を読み取ることも望まれるようになってきた。このようなニーズに対して、特許文献１は、カメラ画像から用紙部分を切り取って台形補正を行うことで文書の直上からの撮影を行わずに長方形の撮影データを得る技術を提案している。特許文献２は、カメラで原稿を撮影して生成されたカメラ画像からブック原稿の歪みを補正する技術を提案している。特許文献３は、多点測距して測距データを取得し、測距データに基づいて湾曲歪を補正する技術を提案している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−７７４８９号公報
【特許文献２】特許第４８４７５９２号公報
【特許文献３】特開２０１３−９３７０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、本願発明者は、カメラ画像を使用する原稿読取には、以下の課題があることを新たに見いだした。すなわち、撮像解像度やＭｏｄｕｌａｔｉｏｎ  Ｔｒａｎｓｆｅｒ  Ｆｕｎｃｔｉｏｎ（ＭＴＦ）、歪み補正等の画像処理に伴う解像度低下といった課題である。具体的には、６００ｄｐｉでＡ４原稿の画像読取を行うためには、約７０００×５０００の非常に多数の画素数が必要となる。ＭＴＦの改善には、光学系の高コスト化や大型化が伴う。カメラ画像においては、歪み補正等の画像処理は回避が困難である。
【０００５】
本発明は、このような状況に鑑みてなされたものであり、携帯可能な撮像装置によって高品質の画像を取得するための技術を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の画像読取装置は、原稿面に表された原稿画像を撮影する撮像部と、前記撮像部の光軸と交差する方向への前記撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御部と、前記共通画像領域の画像を表す画像データを使用して前記原稿面の三次元形状を推定し、前記推定された三次元形状に基づいて前記共通画像領域の画像を表す画像の歪みを補正して前記原稿面が平面であると仮定した場合の前記共通画像領域の画像である平面画像を表す補正画像データを生成する画像解析部と、前記複数の平面画像を合成して、前記原稿面が平面であると仮定した場合の前記原稿画像を表す画像データを生成する画像合成部とを備える。
【０００７】
本発明の画像読取方法は、撮像部を用いて原稿面に表された原稿画像を撮影する撮像工程と、前記撮像部の光軸と交差する方向への前記撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御工程と、前記共通画像領域の画像を表す画像データを使用して前記原稿面の三次元形状を推定し、前記推定された三次元形状に基づいて前記共通画像領域の画像を表す画像の歪みを補正して前記原稿面が平面であると仮定した場合の前記共通画像領域の画像である平面画像を表す補正画像データを生成する画像データ解析工程と、前記複数の平面画像を合成して、前記原稿面が平面であると仮定した場合の前記原稿画像を表す画像データを生成する画像合成工程とを備える。
【０００８】
本発明の画像読取プログラムは、画像読取装置を制御する。前記画像読取プログラムは、原稿面に表された原稿画像を撮影する撮像部、前記撮像部の光軸と交差する方向への前記撮像部の並進移動に伴う連続撮像を行って相互に視差を有して共通する共通画像領域を有する複数の画像データを生成する撮像制御部、前記共通画像領域の画像を表す画像データを使用して前記原稿面の三次元形状を推定し、前記推定された三次元形状に基づいて前記共通画像領域の画像を表す画像の歪みを補正して前記原稿面が平面であると仮定した場合の前記共通画像領域の画像である平面画像を表す補正画像データを生成する画像解析部、及び前記複数の平面画像を合成して、前記原稿面が平面であると仮定した場合の前記原稿画像を表す画像データを生成する画像合成部として前記画像読取装置を機能させる。
【発明の効果】
【０００９】
本発明によれば、携帯可能な撮像装置によって高品質の画像を取得するための技術を提供する。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施形態に係る画像読取システム１０の機能構成を示すブロックダイアグラムである。
【図２】一実施形態に係る原稿画像生成処理の内容を示すフローチャートである。
【図３】一実施形態に係るスマートフォン２００による撮像開始の様子を示す説明図である。
【図４】一実施形態に係るスマートフォン２００による撮像の様子を示す説明図である。
【図５】一実施形態に係るスマートフォン２００によって撮像された複数の画像が合成されている様子を示す説明図である。
【図６】一実施形態に係る原稿画像生成処理によって合成された画像の一部に不鮮明な部分が存在する状況が表示されている様子を示す説明図である。
【図７】一実施形態に係る原稿画像生成処理によって合成された画像の確認を促す表示画面を示す説明図である。
【発明を実施するための形態】
【００１１】
以下、本発明を実施するための形態（以下、「実施形態」という）を、図面を参照して説明する。
【００１２】
図１は、本発明の一実施形態に係る画像読取システム１０の機能構成を示すブロックダイアグラムである。画像読取システム１０は、画像形成装置１００と、スマートフォン２００とを備えている。画像形成装置１００は、制御部１１０と、画像形成部１２０と、操作表示部１３０と、記憶部１４０と、通信インターフェース部１５０と、自動原稿送り装置（ＡＤＦ）１６０とを備えている。画像形成部１２０は、印刷媒体上に画像を形成する。画像形成部１２０は、原稿から画像を読み取って画像データを生成する画像読取部１２１と、画像解析部１２２と、画像合成部１２３とを備える。画像解析部１２２及び画像合成部１２３の機能については後述する。
【００１３】
スマートフォン２００は、制御部２１０と、操作表示部２３０と、記憶部２４０と、通信インターフェース部２５０と、撮像部２６０とを備えている。スマートフォン２００は、通信インターフェース部２５０と通信インターフェース部１５０とを使用して近距離無線通信で画像形成装置１００と接続される。近距離無線通信は、本実施形態では、ＢＬＵＥＴＯＯＴＨ（登録商標）のＣＬＡＳＳ１を使用している。ＢＬＵＥＴＯＯＴＨ（登録商標）のＣＬＡＳＳ１は、出力１００ｍＷの通信であり、画像形成装置１００とスマートフォン２００との距離が１００ｍ以内程度での通信が可能な近距離無線通信である。
【００１４】
画像形成装置１００の操作表示部１３０及びスマートフォン２００の操作表示部２３０は、タッチパネルとして機能し、様々なメニューを入力画面として表示し、顧客の操作入力を受け付ける。
【００１５】
制御部１１０，２１０及び画像形成部１２０は、ＲＡＭやＲＯＭ等の主記憶手段、及びＭＰＵ（Ｍｉｃｒｏ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）やＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）等の制御手段を備えている。また、制御部１１０，２１０は、各種Ｉ／Ｏ、ＵＳＢ（ユニバーサル・シリアル・バス）、バス、その他ハードウェア等のインターフェースに関連するコントローラ機能を備えている。制御部１１０，２１０は、それぞれ画像形成装置１００及びスマートフォン２００の全体を制御する。
【００１６】
記憶部１４０，２４０は、非一時的な記録媒体であるハードディスクドライブやフラッシュメモリー等からなる記憶装置で、それぞれ制御部１１０，２１０が実行する処理の制御プログラムやデータを記憶する。記憶部１４０には、スマートフォン２００にインストールするための原稿画像取得アプリケーションプログラム１４１（単にアプリケーションとも呼ばれる。）が記憶されている。
【００１７】
この例では、スマートフォン２００は、画像形成装置１００の記憶部１４０から原稿画像取得アプリケーションプログラム１４１をダウンロードして、記憶部２４０にインストール済みであるものとする。
【００１８】
図２は、一実施形態に係る原稿画像生成処理の内容を示すフローチャートである。ステップＳ１０では、ユーザーは、操作表示部２３０を操作してスマートフォン２００の作動モードを原稿撮影モードに設定する。原稿撮影モードは、原稿画像取得アプリケーションプログラム１４１によってサポートされている撮影モードである。この撮影モードは、スマートフォン２００による原稿画像の取得用に構成された作動モードである。
【００１９】
図３は、一実施形態に係るスマートフォン２００による撮像開始の様子を示す説明図である。操作表示部２３０には、原稿を表す画像ＢＰが表示されている。撮像対象である原稿Ｄ（図４参照）は、デスクその他の任意の場所に置くことができる。原稿Ｄは、見開き状態で配置されている本としての原稿（ブック原稿とも呼ばれる。）である。ブック原稿としての原稿Ｄは、三次元形状を有する原稿面に画像を表している。
【００２０】
ステップＳ２０では、ユーザーは、スマートフォン２００で原稿Ｄの全体を撮影する。スマートフォン２００は、画像の取得に応じて画像データを画像形成装置１００に送信する。これにより、スマートフォン２００は、原稿Ｄの輪郭形状を含む画像を取得することができる。画像データの送信は、上述の近距離無線通信を介して行われる。
【００２１】
画像解析部１２２は、原稿Ｄの全体を撮影に応じて、スマートフォン２００を並進移動させつつ連続撮影すべき軌道を設定する。この例では、アスペクト比（縦横比）に基づいて略矩形の輪郭形状を有する原稿Ｄの長手方向に沿った軌道ＳＬＩが設定される。操作表示部２３０は、軌道ＳＬＩを原稿Ｄの画像ＢＰに重畳させて表示する。この際、制御部２１０は、原稿Ｄの原稿面の略正面に向かって原稿面の輪郭の全体を含む画像を撮像部２６０に取得させる。なお、制御部２１０は、撮像制御部とも呼ばれる。
【００２２】
ステップＳ３０では、ユーザーは、軌道ＳＬに沿って原稿Ｄを連続撮影する。画像解析部１２２は、撮像部２６０によって撮像されている原稿Ｄと撮像部２６０との位置関係を計算し、軌道ＳＬ（図４参照）の始端の方向からの軌道ＳＬに沿った並進移動に伴う連写を開始する。連続撮影は、並進移動に伴う原稿Ｄの軌道ＳＬの始端側の輪郭（第１の輪郭とも呼ばれる。）の検知に応じて開始し、原稿Ｄの軌道ＳＬの終端側（反対側）の輪郭（第２の輪郭とも呼ばれる。）の非検知（消失）に応じて自動的に停止するようにしてもよい。
【００２３】
図４は、一実施形態に係るスマートフォン２００による原稿Ｄの撮像の様子を示す説明図である。スマートフォン２００の制御部２１０は、上述のように、撮像部２６０に撮影領域ＳＴ１の画像、撮影領域ＳＴ２の画像、撮影領域ＳＴ３の画像、撮影領域ＳＴ４の画像、撮影領域ＳＴ５の画像及び撮影領域ＳＴ６の画像を取得させることができる。
【００２４】
図５は、一実施形態に係るスマートフォン２００によって撮像された複数の画像が合成されている様子を示す説明図である。図５は、撮影領域ＳＴ１〜ＳＴ６の３つの画像のうち撮影領域ＳＴ１〜ＳＴ３の３つの画像が取得される様子と、撮影領域ＳＴ１〜ＳＴ３の３つの画像によって生成される平面画像ＢＤの一部とを示している。
【００２５】
ステップＳ４０では、画像解析部１２２は、三次元形状推定処理を実行する。三次元形状推定処理では、画像解析部１２２は、撮影領域ＳＴ１の画像と撮影領域ＳＴ２の画像の共通画像領域である曲面画像領域ＳＴ１２ｃの画像が表されている原稿面の三次元形状を推定する処理である。曲面画像領域ＳＴ１２ｃの原稿面の三次元形状は、撮影領域ＳＴ１の画像と撮影領域ＳＴ２の画像の視差を利用して推定される。曲面画像領域ＳＴ２３ｃの原稿面の三次元形状は、曲面画像領域ＳＴ１２ｃと同様に、撮影領域ＳＴ２の画像と撮影領域ＳＴ３の画像の視差を利用して行われる。
【００２６】
撮影領域ＳＴ１の画像と撮影領域ＳＴ２の画像は、２つのステレオ画像として取り扱われる。画像解析部１２２は、たとえばブロックマッチング法等の画像マッチング処理を用いて対応点を探索し、各対応点の距離や撮像部２６０からの距離を計算する。画像解析部１２２は、各対応点の距離等を使用して原稿面の三次元形状を特定することができる。画像マッチング処理においては、撮影領域ＳＴ１の画像と撮影領域ＳＴ２の画像は、原稿Ｄの輪郭の形状に合致するように変形・配置するようにしてもよい。なお、共通画像領域は、２つの撮影領域の画像に共通する領域に限られず、３つ以上の撮影領域の画像に共通する領域であってもよい。
【００２７】
画像マッチング処理には、たとえばアフィン変換を使用することができる。画像解析部１２２は、曲面画像領域ＳＴ１２ｃの画像と曲面画像領域ＳＴ２３ｃの画像を表す複数の画像ＳＴ１〜ＳＴ３の画像データを、明るさを表す輝度値のデータである輝度データに変換する。輝度値は、たとえば所定の計算式（輝度値≒０．３Ｒ＋０．６Ｇ＋０．１Ｂ）を使用してＲＧＢの各階調値から算出することができる。
【００２８】
このアフィン変換は、たとえばアフィン不変な特徴量（すなわちアフィン変換に対して変動が抑制されている特徴量（たとえば輝度勾配方向ヒストグラム））を使用して原稿画像が所定の縦横比を有する矩形となるように行われる。具体的には、たとえば画像中の図形やテキストの角部に着目したＨａａｒ−ｌｉｋｅ特徴量を使用してアフィン変換を行うようにしてもよい。あるいは、Ｓｃａｌｅ−Ｉｎｖａｒｉａｎｔ  Ｆｅａｔｕｒｅ  Ｔｒａｎｓｆｏｒｍ（ＳＩＦＴ）特徴量（たとえば輝度勾配方向ヒストグラム）を使用して、拡大縮小（スケール変換）と回転を使用して原稿画像の全体が相互に近づくように変換処理を行ってもよい。
【００２９】
なお、ＳＩＦＴの代わりに、たとえば処理速度が速いＳＵＲＦ（Ｓｐｅｅｄｅｄ−Ｕｐ  Ｒｏｂｕｓｔ  Ｆｅａｔｕｒｅｓ）をするようにしてもよい。これにより、対応点の探索や各対応点の距離や撮像部２６０からの距離の算出が可能となる。
【００３０】
ステップＳ５０では、画像解析部１２２は、歪み補正処理を実行する。歪み補正処理は、具体的には、原稿Ｄの表面の三次元形状の推定結果に基づいて、原稿Ｄの原稿面が平面であると仮定した場合の撮影領域ＳＴ１の画像と撮影領域ＳＴ２の画像の共通画像領域の画像である平面画像ＢＤを表す補正画像データを生成する処理である。
【００３１】
画像解析部１２２は、推定された曲面画像領域ＳＴ１２ｃの三次元形状に基づいて平面画像領域ＳＴ１２ｆの平面画像を表す補正画像データを生成するとともに、推定された曲面画像領域ＳＴ２３ｃの三次元形状に基づいて平面画像領域ＳＴ２３ｆの平面画像を表す補正画像データを生成する。
【００３２】
ステップＳ６０では、画像解析部１２２は、画像合成処理を実行する。画像合成処理では、画像解析部１２２は、平面画像領域ＳＴ１２ｆの画像を表す画像データと平面画像領域ＳＴ２３ｆの画像を表す画像データとを使用して、合成平面画像を生成する。この例では、平面画像領域ＳＴ１２ｆの画像に対して、平面画像領域ＳＴ２３ｆの画像が合成される。
【００３３】
画像の合成は、たとえば平面画像領域ＳＴ１２ｆの画像と平面画像領域ＳＴ２３ｆの画像の画像マッチング処理を利用して行われる。画像解析部１２２は、さらに、撮影領域ＳＴ３〜ＳＴ６の画像も同様に処理して、平面画像ＢＤを表す補正画像データを生成することができる。平面画像ＢＤは、原稿Ｄの原稿面が平面であると仮定した場合における原稿Ｄの表面に表されている画像を再現する画像である。画像マッチング処理では、原稿Ｄの輪郭の形状に合致するように複数の画像を変形・配置するようにしてもよい。
【００３４】
図６は、一実施形態に係る原稿画像生成処理によって合成された画像の一部に不鮮明な部分が存在する状況が表示されている様子を示す説明図である。スマートフォン２００の操作表示部２３０は、平面画像ＢＲ１において不鮮明領域ＲＳＴが存在することを示している。この例では、スマートフォン２００は、操作表示部２３０において、「楕円で囲まれた部分の画像が不鮮明です。」というユーザーの注意を喚起するメッセージとともに、合成画像の全体を表示する。不鮮明領域ＲＳＴの検出は、たとえばコントラストや文字認識のエラーに基づいて行うことができる。
【００３５】
ステップＳ７０では、ユーザーは、必要に応じてタッチパネルとして機能する操作表示部２３０を操作して、合成画像を拡大して確認することができる。ユーザーは、上述のメッセージも踏まえて、取得画像が満足できるものであった場合には、処理をステップＳ９０に進め、取得画像が満足できるものでなかった場合には、処理をステップＳ８０に進める。
【００３６】
ステップＳ８０では、ユーザーは、撮影再開アイコン２３２をタッチして、不鮮明領域ＲＳＴにおいて再度の撮像を行う。画像解析部１２２は、既に取得されている不鮮明領域ＲＳＴをカバーする領域（たとえば撮影領域ＳＴ３〜ＳＴ５）の画像と、新規に撮像された画像とを使用して、三次元形状推定処理（ステップＳ４０）及び歪み補正処理（ステップＳ５０）を実行する。
【００３７】
これにより、画像解析部１２２は、不鮮明領域ＲＳＴにおける鮮明な平面画像を取得することができる。画像解析部１２２は、不鮮明領域ＲＳＴにおける鮮明な平面画像と、他の平面画像とを使用して、平面画像ＢＲ２を生成することができる（ステップＳ６０）。
【００３８】
図７は、一実施形態に係る原稿画像生成処理によって合成された画像の確認を促す表示画面を示す説明図である。ステップＳ９０では、ユーザーは、保存アイコン２３１をタッチして保存処理を実行する。これにより、制御部１１０は、生成された平面画像ＢＲ２を記憶部１４０に記憶する。
【００３９】
このように、本実施形態によれば、撮像部２６０を原稿Ｄに対して並進移動させつつ複数回撮像して相互に視差を有する複数の画像を取得することによって原稿Ｄの原稿画像面の三次元形状を推定し、この推定に基づいて歪みを補正し、合成して高解像度の画像を取得することができる。これにより、スマートフォン２００の撮像部２６０のような小型のカメラを使用しつつも撮像解像度やＭＴＦの問題を解決して高品質の画像の取得を実現している。
【００４０】
なお、本実施形態は、連続して撮像された複数の画像間で共通する特徴点を探索し、合成する点でパノラマ合成に一見すると似ている技術である。しかしながら、パノラマ合成は、カメラを引いても画角に収まらない横長の風景等の撮影をカメラの光軸方向を回転させることによって実現しているのに対し、カメラを引けば十分に画角に収まる原稿Ｄの撮像をカメラとしての撮像部２６０の光軸に交差する方向に並進移動させて視差を発生させている点で本質的に相違する。
【００４１】
本実施形態は、撮像部２６０の画角からはみ出るほどに原稿Ｄに撮像部２６０を近づけて、撮像時の解像度を高めているのである。上述の実施例では、原稿Ｄの画像取得に６回の撮像を行っているが、回数に制限はなく、たとえば６回より多くの撮像を行っても良いし、動画像を使用するようにしてもよい。
【００４２】
本発明は、上記各実施形態だけでなく、以下のような変形例でも実施することができる。
【００４３】
変形例１：上記実施形態では、本発明は、スマートフォン２００と画像形成装置１００とを有する画像読取システム（画像読取装置とも呼ばれる。）１０として具現化されているが、必ずしも画像形成装置１００は必要ではない。具体的には、たとえばスマートフォンが画像解析部や画像合成部を備え、スマートフォン単体で画像読取を完了するように構成してもよい。
【００４４】
変形例２：上記実施形態では、図示しないジャイロセンサや加速度センサといったセンサ類は使用していないが、スマートフォン２００にジャイロセンサや加速度センサが装備されている場合には、使用しても良い。これにより、撮像された複数の画像の相互の位置関係や方向を補正することもできる。
【００４５】
スマートフォン２００がジャイロセンサを装備する場合には、制御部２１０は、連続撮像で取得される複数の画像データと計測された撮像部２６０の方向とをそれぞれ紐づけて取得することができる。画像解析部１２２は、複数の画像データの画像のそれぞれの相対的な方向を複数の画像データのそれぞれに紐づけられている撮像部２６０の方向を使用して補正するようにしてもよい。こうすれば、三次元形状推定や画像合成処理の精度を向上させる事ができる。
【００４６】
スマートフォン２００が加速度センサを装備する場合には、制御部２１０は、連続撮像で取得される複数の画像データと計測された撮像部２６０の加速度を使用して算出された撮像部２６０の位置とをそれぞれ紐づけて取得することができる。画像解析部１２２は、複数の画像データの画像のそれぞれの相対的位置を複数の画像データのそれぞれに紐づけられている撮像部２６０の位置を使用して補正するようにしてもよい。こうすれば、三次元形状推定や画像合成処理の精度を向上させる事ができる。
【００４７】
変形例３：上記実施形態では、原稿Ｄは、見開き状態で配置されている本として曲面を含む三次元形状を有しているが、たとえば原稿は、平面状であって、カメラに対して僅かに傾斜している場合も広く三次元形状と呼ばれる。
【００４８】
変形例４：上記実施形態では、スマートフォンが使用されているが、本発明は、撮影が可能であればノートＰＣやタブレットといった携帯端末に適用可能である。なお、撮像部は、原稿画像を相互に相違する位置から複数回撮像して複数の画像データを生成することが可能となる携帯端末等として構成されていればよい。
【符号の説明】
【００４９】
１０  画像読取システム
１００  画像形成装置
１１０  制御部
１２０  画像形成部
１３０  操作表示部
１４０，２４０  記憶部
１５０，２５０  通信インターフェース部
１６０  自動原稿送り装置（ＡＤＦ）
２００  スマートフォン
２１０  制御部
２３０  操作表示部
【図１】
2018056784.tif 000003
【図２】
2018056784.tif 000004
【図３】
2018056784.tif 000005
【図４】
2018056784.tif 000006
【図５】
2018056784.tif 000007
【図６】
2018056784.tif 000008
【図７】
2018056784.tif 000009