(57)【要約】【課題】サイズの大きな媒体から情報を良好に取得できる情報取得方法および情報取得システムを提供する。【解決手段】長尺の締めレシートＲを、携帯通信端末によって、２つの分割部分Ｒ１，Ｒ２に分けて個別に撮影する。分割部分Ｒ１を含む第１の分割エリアＥ１の第１の矩形枠２が第１の境界情報２３によって規定されている。分割部分Ｒ２を含む第２の分割エリアＥ２の第２の矩形枠３０が第２の境界情報２４によって規定されている。そして、撮影された画像のうちの分割画像を複数連結して、締めレシートＲの全体画像である連結画像を作成する。そして、連結後の全体画像に含まれる情報を認識する。【選択図】図６
2020086664.tif 000002
【特許請求の範囲】
【請求項１】
所定の情報が印字された媒体から前記情報を取得する情報取得方法であって、
前記媒体を複数分割して撮影するときに、前記媒体の分割部分を含む分割エリアの境界を規定する境界情報を前記媒体に付与する境界情報付与ステップと、
複数の前記分割エリアを、当該分割エリアの境界を規定する前記境界情報を含めた形で個別に撮影する撮影ステップと、
前記撮影ステップにおいて撮影された画像のうち前記分割エリアの画像である分割画像を、複数連結して前記媒体の全体画像を作成する画像連結ステップと、
前記全体画像に含まれる前記情報を認識する情報認識ステップとを含む、情報取得方法。
【請求項２】
前記撮影ステップにおいて撮影されている画像のうち前記分割画像を、前記境界情報の画像に基づいて特定する分割画像特定ステップと、
前記分割画像特定ステップにおいて特定された前記分割画像を記憶する分割画像記憶ステップとをさらに含み、
前記画像連結ステップが、前記分割画像記憶ステップにおいて記憶された複数の前記分割画像を連結する第１の画像連結ステップを含む、請求項１に記載の情報取得方法。
【請求項３】
前記撮影ステップにおいて撮影された画像を、前記分割画像および前記境界情報の画像を含めた形で記憶する画像記憶ステップをさらに含み、
前記画像連結ステップが、前記画像記憶ステップにおいて記憶された画像に含まれる前記分割画像を複数、前記境界情報の画像に基づいて連結する第２の画像連結ステップを含む、請求項１に記載の情報取得方法。
【請求項４】
前記第２の画像連結ステップが、
前記画像記憶ステップにおいて記憶されている画像同士を連結するステップと、
連結後の画像から、前記境界情報の画像を削除する境界情報削除工程とを含む、請求項３に記載の情報取得方法。
【請求項５】
前記第２の画像連結ステップが、連結対象の前記分割画像に対応する前記境界情報の画像同士が合致するように複数の前記分割画像を連結するステップを含む、請求項３または４に記載の情報取得方法。
【請求項６】
前記境界情報付与ステップが、前記分割エリアの撮影順序を示す順序識別情報を前記媒体に付与するステップをさらに含み、
前記撮影ステップが、前記分割エリア、前記境界情報および前記順序識別情報を撮影するステップを含み、
前記画像連結ステップが、複数の前記分割画像を、個々の前記分割画像に対応する前記順序識別情報に基づく順序で連結するステップを含む、請求項１〜５のいずれか一項に記載の情報取得方法。
【請求項７】
前記画像連結ステップにおける複数の前記分割画像の連結に先立って、前記分割画像のサイズを調整する分割画像リサイズステップをさらに含む、請求項１〜６のいずれか一項に記載の情報取得方法。
【請求項８】
前記媒体が、締めレシートを含む、請求項１〜７のいずれか一項に記載の情報取得方法。
【請求項９】
前記分割エリアが、前記媒体に印字されている前記情報を前記情報認識ステップによって認識可能なサイズに設定されている、請求項１〜８のいずれか一項に記載の情報取得方法。
【請求項１０】
所定の情報が印字された媒体から前記情報を取得する情報取得システムであって、
前記媒体を複数分割して撮影するときに、前記媒体の分割部分を含む分割エリアの境界を規定する境界情報を前記媒体に付与する境界情報付与部と、
複数の前記分割エリアを、当該分割エリアの境界を規定する前記境界情報を含めた形で個別に撮影する撮影部と、
前記撮影部によって撮影された画像のうち前記分割エリアの画像である分割画像を複数連結して前記媒体の全体画像を作成する画像連結部と、
前記全体画像に含まれる前記情報を認識する情報認識部とを含む、情報取得システム。
【請求項１１】
前記撮影部によって撮影された画像のうち前記分割画像を、前記境界情報の画像に基づいて特定する分割画像特定部と、
前記分割画像特定部によって特定された前記分割画像を記憶する分割画像記憶部とをさらに含み、
前記画像連結部が、前記分割画像記憶部に記憶されている複数の前記分割画像を連結する第１の画像連結部を含む、請求項１０に記載の情報取得システム。
【請求項１２】
前記撮影部によって撮影された画像を、前記分割画像および前記境界情報の画像を含めた形で記憶する画像記憶部をさらに含み、
前記画像連結部が、前記画像記憶部に記憶されている画像に含まれる前記分割画像を複数、前記境界情報の画像に基づいて連結する第２の画像連結部を含む、請求項１０に記載の情報取得システム。
【請求項１３】
第２の画像連結部が、前記画像記憶部に記憶されている画像同士を連結し、連結後の画像から、前記境界情報の画像を削除する、請求項１２に記載の情報取得システム。
【請求項１４】
前記第２の画像連結部が、連結対象の前記分割画像に含まれる前記境界情報の画像同士が合致するように複数の前記分割画像を連結する、請求項１２または１３に記載の情報取得システム。
【請求項１５】
前記分割エリアの撮影順序を示す順序識別情報を前記媒体に付与する順序識別情報付与部をさらに含み、
前記撮影部が、前記分割エリア、前記境界情報および前記順序識別情報を撮影し、
前記画像連結部が、複数の前記分割画像を、個々の前記分割画像に対応する前記順序識別情報に基づく順序で連結する、請求項１０〜１４のいずれか一項に記載の情報取得システム。
【請求項１６】
連結前の前記分割画像のサイズを調整する分割画像リサイズ部をさらに含む、請求項１０〜１５のいずれか一項に記載の情報取得システム。
【請求項１７】
前記媒体が、締めレシートを含む、請求項１０〜１６のいずれか一項に記載の情報取得システム。
【請求項１８】
前記分割エリアが、前記媒体に印字されている前記情報を前記情報認識部によって認識可能なサイズに設定されている、請求項１０〜１７のいずれか一項に記載の情報取得システム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、媒体から情報を取得する情報取得方法および情報取得システムに関する。
【背景技術】
【０００２】
下記特許文献１には、レシートを撮影してそのレシートに記載されている情報を読み取る店舗別売上データ管理システムが記載されている。特許文献１では、店舗ごとの売上データが印字されたレシートを携帯通信端末で撮影している。撮影画像は、ネットワークを介してデータ収集装置に送られる。データ収集装置にはＯＣＲ機能が搭載されている。データ収集装置は、送信されてきたレシートの画像を解析して、レシートに印字されている文字情報や数字情報を認識する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１４−２０６９４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１では、スマートフォンやタブレット等の携帯通信端末に搭載されているカメラによって、レシート全体が１つの画像に収まるようにレシートを撮影する。レシートが短尺であれば、画像全体に対する、レシートに印字されている字（文字や数字）の割合を大きく保てるのであるが、レシートが長尺であると、撮影画像全体に対するレシートの印字情報（文字情報や数字情報）のサイズが小さくなってしまい、解像度が低下する。この場合、データ収集装置に搭載されているＯＣＲ機能によっては、レシートに記載されている情報を上手く認識できない場合がある。
【０００５】
これは、レシートに限られず、サイズの大きな媒体から情報を取得する場合の全般に共通する課題である。
そこで、本発明の目的は、サイズの大きな媒体から情報を良好に取得できる情報取得方法および情報取得システムを提供することである。
【課題を解決するための手段】
【０００６】
この発明は、所定の情報が印字された媒体から前記情報を取得する情報取得方法であって、前記媒体を複数分割して撮影するときに、前記媒体の分割部分を含む分割エリアの境界を規定する境界情報を前記媒体に付与する境界情報付与ステップと、複数の前記分割エリアを、当該分割エリアの境界を規定する前記境界情報を含めた形で個別に撮影する撮影ステップと、前記撮影ステップにおいて撮影された画像のうち前記分割エリアの画像である分割画像を、複数連結して前記媒体の全体画像を作成する画像連結ステップと、前記全体画像に含まれる前記情報を認識する情報認識ステップとを含む、情報取得方法を提供する。
【０００７】
この発明の一実施形態では、前記情報取得方法が、前記撮影ステップにおいて撮影されている画像のうち前記分割画像を、前記境界情報の画像に基づいて特定する分割画像特定ステップと、前記分割画像特定ステップにおいて特定された前記分割画像を記憶する分割画像記憶ステップとをさらに含む。そして、前記画像連結ステップが、前記分割画像記憶ステップにおいて記憶された複数の前記分割画像を連結する第１の画像連結ステップを含む。
【０００８】
この発明の他の実施形態では、前記情報取得方法が、前記撮影ステップにおいて撮影された画像を、前記分割画像および前記境界情報の画像を含めた形で記憶する画像記憶ステップをさらに含む。そして、前記画像連結ステップが、前記画像記憶ステップにおいて記憶された画像に含まれる前記分割画像を複数、前記境界情報の画像に基づいて連結する第２の画像連結ステップを含む。
【０００９】
この場合、前記第２の画像連結ステップが、前記画像記憶ステップにおいて記憶されている画像同士を連結するステップと、連結後の画像から、前記境界情報の画像を削除する境界情報削除工程とを含んでいてもよい。
さらにこの場合、前記第２の画像連結ステップが、連結対象の前記分割画像に対応する前記境界情報の画像同士が合致するように複数の前記分割画像を連結するステップを含んでいてもよい。
【００１０】
また、この発明の一実施形態では、前記境界情報付与ステップが、前記分割エリアの撮影順序を示す順序識別情報を前記媒体に付与するステップをさらに含む。そして、前記撮影ステップが、前記分割エリア、前記境界情報および前記順序識別情報を撮影するステップを含む。そして、前記画像連結ステップが、複数の前記分割画像を、個々の前記分割画像に対応する前記順序識別情報に基づく順序で連結するステップを含む。
【００１１】
また、この発明の一実施形態では、前記情報取得方法が、前記画像連結ステップにおける複数の前記分割画像の連結に先立って、前記分割画像のサイズを調整する分割画像リサイズステップをさらに含む。
また、この発明の一実施形態では、前記媒体が、締めレシートを含む。
また、この発明の一実施形態では、前記分割エリアが、前記媒体に印字されている前記情報を前記情報認識ステップによって認識可能なサイズに設定されている。
【００１２】
この発明は、所定の情報が印字された媒体から前記情報を取得する情報取得システムであって、前記媒体を複数分割して撮影するときに、前記媒体の分割部分を含む分割エリアの境界を規定する境界情報を前記媒体に付与する境界情報付与部と、複数の前記分割エリアを、当該分割エリアの境界を規定する前記境界情報を含めた形で個別に撮影する撮影部と、前記撮影部によって撮影された画像のうち前記分割エリアの画像である分割画像を複数連結して前記媒体の全体画像を作成する画像連結部と、前記全体画像に含まれる前記情報を認識する情報認識部とを含む、情報取得システムを提供する。
【００１３】
この発明の一実施形態では、前記情報取得システムが、前記撮影部によって撮影された画像のうち前記分割画像を、前記境界情報の画像に基づいて特定する分割画像特定部と、前記分割画像特定部によって特定された前記分割画像を記憶する分割画像記憶部とをさらに含む。そして、前記画像連結部が、前記分割画像記憶部に記憶されている複数の前記分割画像を連結する第１の画像連結部を含む。
【００１４】
この発明の他の実施形態では、前記情報取得システムが、前記撮影部によって撮影された画像を、前記分割画像および前記境界情報の画像を含めた形で記憶する画像記憶部をさらに含む。そして、前記画像連結部が、前記画像記憶部に記憶されている画像に含まれる前記分割画像を複数、前記境界情報の画像に基づいて連結する第２の画像連結部を含む。
この場合、第２の画像連結部が、前記画像記憶部に記憶されている画像同士を連結し、連結後の画像から、前記境界情報の画像を削除してもよい。
【００１５】
さらにこの場合、前記第２の画像連結部が、連結対象の前記分割画像に含まれる前記境界情報の画像同士が合致するように複数の前記分割画像を連結してもよい。
この発明の一実施形態では、前記情報取得システムが、前記分割エリアの撮影順序を示す順序識別情報を前記媒体に付与する順序識別情報付与部をさらに含む。そして、前記撮影部が、前記分割エリア、前記境界情報および前記順序識別情報を撮影する。そして、前記画像連結部が、複数の前記分割画像を、個々の前記分割画像に対応する前記順序識別情報に基づく順序で連結する。
【００１６】
この発明の一実施形態では、前記情報取得システムが、連結前の前記分割画像のサイズを調整する分割画像リサイズ部をさらに含む。
この発明の一実施形態では、前記媒体が、締めレシートを含む。
この発明の一実施形態では、前記分割エリアが、前記媒体に印字されている前記情報を前記情報認識部によって認識可能なサイズに設定されている。
【発明の効果】
【００１７】
本発明によれば、媒体を複数の分割部分に分けて個別に撮影する。このとき、分割部分を含む分割エリアの境界が境界情報によって規定されている。そして、撮影された画像のうち、分割エリアの分割画像を複数連結して媒体の全体画像を作成する。そして、連結後の全体画像に含まれる情報を認識する。これにより、サイズの大きな媒体から情報を良好に取得できる。
【図面の簡単な説明】
【００１８】
【図１】図１は、本発明の第１の実施形態に係る情報取得システムが適用されたレシート情報管理システムを説明するための図である。
【図２】図２は、前記レシート情報管理システムの電気的構成を示すブロック図である。
【図３】図３は、前記レシート情報管理システムによる情報取得の対象になるレシートの一例を示す図である。
【図４】図４は、前記レシートに境界情報を付与するエンベロープの斜視図である。
【図５】図５は、前記エンベロープの平面図である。
【図６】図６は、前記エンベロープに前記レシートを収容した状態を示す平面図である。
【図７】図７は、図６を切断面線IV-IVから見た断面図である。
【図８】図８は、撮影処理の流れを説明するフローチャートである。
【図９】図９は、第１の分割エリアを撮影した第１の画像を示す図である。
【図１０】図１０は、前記第１の画像から抽出した第１の分割画像を示す図である。
【図１１】図１１は、第２の分割エリアを撮影した第２の画像を示す図である。
【図１２】図１２は、前記第２の画像から抽出した第２の分割画像を示す図である。
【図１３】図１３は、図１に示すレシート情報管理サーバによって実行される連結／認識処理の流れを説明するフローチャートである。
【図１４】図１４は、合成画像を示す図である。
【図１５】図１５は、本発明の第２の実施形態に係る情報取得システムにおける撮影処理の流れを説明するフローチャートである。
【図１６】図１６は、レシート情報管理サーバによって実行される連結／認識処理の流れを説明するフローチャートである。
【図１７】図１７は、合成画像を示す図である。
【図１８】図１８は、エンベロープおよび分割エリアの第１の変形例を説明するための図である。
【図１９】図１９は、エンベロープおよび分割エリアの第２の変形例を説明するための図である。
【図２０】図２０は、エンベロープおよび分割エリアの第３の変形例を説明するための図である。
【図２１】図２１は、エンベロープおよび分割エリアの第４の変形例を説明するための図である。
【図２２】図２２は、エンベロープおよび分割エリアの第５の変形例を説明するための図である。
【発明を実施するための形態】
【００１９】
以下では、この発明の実施の形態を、添付図面を参照して詳細に説明する。
図１は、本発明の第１の実施形態に係る情報取得システムが適用されたレシート情報管理システム１を説明するための図である。
レシート情報管理システム１は、レシートに印字されている情報（以下、「印字情報」という）を、レシートから取得するシステムである。
【００２０】
以下では、レシート情報管理システム１を、食堂チェーンに適用した場合を例に挙げて説明する。食堂チェーンは多拠点展開しており、本部施設が店舗３の売り上げを管理している。食堂チェーンの各店舗３には、券売機４が設置されている。本部施設は、店舗の外の施設であり、系列の複数の店舗を統括している。券売機４は、本部施設内に配置された本部ＰＣ５と通信可能に設けられている。各店舗３の券売機４の日毎／月毎の売り上げのデータは、券売機４からネットワークを介して、日毎／月毎に本部ＰＣ５に送信される。
【００２１】
レシート情報管理システム１は、携帯通信端末６と、レシート情報管理サーバ（情報取得サーバ）７と、本部ＰＣ５とを含み、これらがネットワーク８を介して通信可能に接続されている。ネットワーク８は、たとえばインターネットであるが、ＬＡＮを含んでいてもよい。
携帯通信端末６は、カメラ１４を備えかつ携帯可能に設けられている。図１の例では、携帯通信端末６の例はタブレットである。このタブレットは、店舗３の店員が所有しているものである。携帯通信端末６は、ネットワーク８を介してレシート情報管理サーバ７と通信可能に接続されている。
【００２２】
レシート情報管理サーバ７は、パソコン等のコンピュータである。レシート情報管理サーバ７は、ネットワーク８を介して、携帯通信端末６や本部ＰＣ５と通信可能に接続されている。
本部ＰＣ５は、各店舗３の売り上げの管理を行う本部管理装置である。本部ＰＣ５は、ネットワーク８を介してレシート情報管理サーバ７と通信可能に接続されている。
【００２３】
本部施設は、各店舗３の券売機４の日毎／月毎の売り上げを現物確認するため、締めレシート（媒体）Ｒの情報を管理しておく必要がある。従前は、締めレシートＲの現物がそのまま本部施設に郵送されていたが、ペーパーレス化の要請のため、レシート情報管理システム１では、締めレシートＲの印字情報をデジタルデータ（テキストデータ）化し、それを管理している。
【００２４】
具体的には、各店舗３の店員等のユーザは、携帯通信端末６を用いて、当該店舗３における締め作業の際に券売機４のレシート発行口９から発行される締めレシートＲを撮影する。そして、撮影した画像を電子帳票に貼り付け、レシート情報管理サーバ７に送信する。レシート情報管理サーバ７は、撮影した画像に含まれる印字情報を読み取り、読み取った印字情報をデジタルデータ（テキストデータ）化して管理している。本部施設の職員は、本部ＰＣ５を用いて、これらのデジタルデータ（テキストデータ）を確認したり、これらのデジタルデータ（テキストデータ）を集計したりする。具体的には、本部施設の職員は、各店舗３から送られてくる売り上げと、締めレシートＲの印字情報から読み取られたデジタルデータ（テキストデータ）とを照合する。
【００２５】
図２は、レシート情報管理システム１の電気的構成を示すブロック図である。図２では、レシート情報管理システム１のうち、携帯通信端末６およびレシート情報管理サーバ７の電気的構成を、主として示している。
携帯通信端末６は、コンピュータによって構成されている。携帯通信端末６は、制御部１１と、通信Ｉ／Ｆ部１２と、記憶部１３と、カメラ１４と、表示部１５（図１も併せて参照）と、操作部１６とを含む。
【００２６】
制御部１１は、ＣＰＵおよびメモリを含む。制御部１１は、オペレーティングシステム（ＯＳ）、各種制御プログラムに従って各種の制御動作を実行する。
通信Ｉ／Ｆ部１２は、ネットワーク８を介して、レシート情報管理サーバ７、他のコンピュータ（図示しない）等と通信する。通信Ｉ／Ｆ部１２は、また、ネットワーク８を介して、レシート情報管理サーバ７、他のコンピュータ（図示しない）等と、各種データや各種制御プログラムの授受を行う。つまり、携帯通信端末６が、レシート情報管理サーバ７や他のコンピュータから制御プログラムをダウンロードできるようになっている。通信Ｉ／Ｆ部１２の一例として、ＷｉＦｉ（登録商標）通信デバイスやイーサーネット（登録商標）を挙げることができるが、これらに限られないはもちろんのことである。
【００２７】
記憶部１３は、ハードディスク、フラッシュメモリ等を含む。記憶部１３に記憶されている制御プログラムやデータが制御部１１のＣＰＵに読み出されて実行されることにより、携帯通信端末６の各種機能が実行される。制御部１１のＣＰＵは、携帯通信端末６によって実行される制御プログラムや各種のデータを格納する。
カメラ１４は、たとえば標準的な解像度を有するカメラである。カメラ１４は、締めレシートＲ（図３参照）を撮影する。
【００２８】
表示部１５は、たとえば矩形の液晶パネルである。
操作部１６は、各種ボタンやスイッチ、キー、タッチパネル等を含む。
携帯通信端末６のカメラ１４によって締めレシートＲを複数（この実施形態では２つ）の分割部分Ｒ１，Ｒ２（図６参照）に分けて撮影する。
レシート情報管理システム１は、複数の分割部分Ｒ１，Ｒ２を個別に撮影する撮影部と、撮影部によって撮影された画像のうち分割部分Ｒ１，Ｒ２を含む分割エリアＥ１，Ｅ２（図６参照）の画像である分割画像ＩＳ１，ＩＳ２（図１０、図１２等参照）を、特定する分割画像特定部と、撮影部によって撮影された画像ＩＭ１，ＩＭ２（図９、図１１等参照）を表示部１５に表示させる画像表示部と、分割画像特定部によって特定された分割画像ＩＳ１，ＩＳ２を記憶部１３に記憶させる分割画像記憶部と、分割画像記憶部に記憶されている複数の分割画像をレシート情報管理サーバ７に送信する画像送信部とを含む。撮影部、分割画像特定部、画像表示部、分割画像記憶部および画像送信部の各機能は、携帯通信端末６のハードウェアに、レシート情報管理サーバ７からの制御プログラムがインストールされ、この制御プログラムが作動することにより実行される。
【００２９】
レシート情報管理サーバ７は、コンピュータによって構成されている。レシート情報管理サーバ７は、制御部３１と、通信Ｉ／Ｆ部３２と、記憶部３３とを含む。
制御部３１は、ＣＰＵおよびメモリを含む。制御部３１は、オペレーティングシステム（ＯＳ）、各種制御プログラムに従って各種の制御動作を実行する。
通信Ｉ／Ｆ部３２は、ネットワーク８を介して、携帯通信端末６、本部ＰＣ５、他のコンピュータ（図示しない）等と通信する。通信Ｉ／Ｆ部３２は、また、ネットワーク８を介して、レシート情報管理サーバ７や他のコンピュータ（図示しない）と各種データや各種制御プログラムの授受を行う。通信Ｉ／Ｆ部３２の一例として、ＷｉＦｉ（登録商標）通信デバイスやイーサーネット（登録商標）を挙げることができるが、これらに限られない。
【００３０】
記憶部３３は、ハードディスク、フラッシュメモリ等を含む。記憶部３３に記憶されている制御プログラムやデータが制御部３１のＣＰＵに読み出されて実行されることにより、レシート情報管理サーバ７の各種機能が実行される。制御部３１のＣＰＵは、携帯通信端末６によって実行される制御プログラムや各種のデータを格納する。
レシート情報管理システム１は、記憶部３３に記憶されている複数の分割画像ＩＳ１，ＩＳ２を連結する第１の画像連結部と、連結前の分割画像ＩＳ１，ＩＳ２の台形歪みやサイズを調整する分割画像リサイズ部とをさらに含む。第１の画像連結部および分割画像リサイズ部の各機能は、レシート情報管理サーバ７によって実行される。
【００３１】
図３は、レシート情報管理システム１による情報取得の対象になる締めレシートＲの一例を示す図である。
この実施形態では、レシート情報管理システム１による情報取得の対象になるレシートは、たとえば、店舗３に設置されている券売機４から発行される締めレシートＲである。図３の例では、締めレシートＲとして、日毎の締めレシートを示している。しかし、締めレシートＲが、月毎や週毎の締めレシートであってもよいのは言うまでもない。
【００３２】
締めレシートＲには、印字情報として、店舗３の名称である店舗名称表示４１、締め対象期間の期間表示４２、各商品（料理メニュー）についての券売状況を表示する個別券売状況表示４３、店舗全体の券売状況を表示する全体券売状況表示４４が印字されている。
個別券売状況表示４３は、商品のコード番号を表示するコード番号表示４５、商品名を表示する商品名表示４６、商品の単価を表示する商品単価表示４７、締め対象期間における商品毎の発券枚数を表示する商品発券枚数表示４８、締め対象期間における商品毎の売り上げ額を表示する商品売り上げ表示４９等を含む。
【００３３】
全体券売状況表示４４は、締め対象期間における店舗全体の発券枚数を表示する全体枚数表示５０、締め対象期間における店舗全体の売り上げ額を表示する全体売り上げ表示５１等を含む。
図３に示す締めレシートＲは、長尺である。締めレシートＲの長さ方向Ｌのサイズは、Ａ４サイズの用紙の縦方向寸法（２９７ｍｍ）よりも長い。締めレシートＲの幅方向Ｗのサイズは、約６０ｍｍ以下の所定大きさに設定されている。すなわち、締めレシートＲは、幅寸法に比べ、長さ寸法が極めて大きい。
【００３４】
締めレシートＲが図３に示すように長尺であると、次の述べるような問題がある。
従来の手法（特許文献１に示す手法）では、レシート全体が１つの画像に収まるように、携帯通信端末６のカメラ１４によってレシートを撮影している。長尺の締めレシートＲであっても、携帯通信端末６のカメラ１４の機能（パノラマ機能等）を活用すれば、レシート全体を１つの画像に収めることは可能である。しかしながら、図３に示すように、締めレシートＲの個別券売状況表示４３や全体券売状況表示４４は比較的小さな字（文字または数字）で記載されている。そのため、長尺の締めレシートＲの全体を１つの画像に収めると、個別券売状況表示４３や全体券売状況表示４４の画像全体に対する大きさが小さくなり、解像度が低下する。その結果、個別券売状況表示４３や全体券売状況表示４４が、ＯＣＲ機能によって上手く認識できないという問題がある。印字情報の大きさにもよるが、撮影対象がＡ４サイズ（２９７ｍｍ×２１０ｍｍ）からはみ出る大きさである場合には、このような問題が生じる。
【００３５】
そこで、レシート情報管理システム１では、長尺の締めレシートＲを複数（たとえば２つ）の分割部分Ｒ１，Ｒ２（図６参照）に分けて個別に撮影している。つまり、締めレシートＲを複数回に分けて撮影している。そして、撮影された画像のうちの分割画像ＩＳ１，ＩＳ２（図１０、図１２等参照）を複数連結して、締めレシートＲの全体画像である連結画像ＩＢ（図１４参照）を作成する。そして、連結後の全体画像に含まれる情報を認識する。これにより、情報取得対象のレシートが図３の締めレシートＲのように長尺である場合であっても、締めレシートＲの印字情報をレシート情報管理システム１によって良好に取得できる。
【００３６】
図４は、締めレシートＲに境界情報２３，２４を付与するエンベロープ（順序識別情報付与部、境界情報付与部）２０の斜視図である。図５は、エンベロープ２０の平面図である。図６は、エンベロープ２０に締めレシートＲを収容した状態を示す平面図である。図７は、図６を切断面線IV-IVから見た断面図である。
エンベロープ２０は、締めレシートＲに境界情報を付与する境界情報付与部の一例である。
【００３７】
エンベロープ２０は、上シート２１と下シート２２とからなる薄いシートを２枚組み合わせて構成されている。図４の例では、左閉じであるが、右閉じや、上閉じ、下閉じであってもよい。撮影対象の締めレシートＲを上下に挟むことで締めレシートＲを保持する（境界情報付与ステップ）。上シート２１は、透明のシートである。携帯通信端末６によって締めレシートＲを撮影する際には、エンベロープ２０によって締めレシートＲを上下に挟み、その状態で、上シート２１の上方から締めレシートＲを撮影する（撮影ステップ）。
【００３８】
上シート２１は、矩形の樹脂製の透明シートである。上シート２１には、次に述べる画像取得領域２７に含まれる複数（図４等の例では２つ）の分割エリア（第１の分割エリアＥ１、第２の分割エリアＥ２）の境界を規定するための境界情報が付されている。この境界情報は、第１の境界情報２３および第２の境界情報２４を含む。
第１の境界情報２３は、幅方向Ｗに間隔を空けて配置された一対の第１の帯状部２５を含む。第２の境界情報２４は、幅方向Ｗに間隔を空けて配置された一対の第２の帯状部２６を含む。第１の帯状部２５は、長い長方形状であり、その全域に黒色が付されている。第１の帯状部２５は、白の背景色を有する締めレシートＲとの間で、明度（濃淡）が異ならされている。
【００３９】
第１の境界情報２３には、第１の境界情報２３によって境界が付与される第１の分割エリアＥ１の撮影順序を示す第１の順序コード（第１の順序識別情報）Ｃ１が付されている。第１の順序コードＣ１は、第１の帯状部２５の他方（図５および図６の例では右側）に付されている。
第２の帯状部２６の一方（図５および図６の例では左側）は、第１の帯状部２５の一方（図５および図６の例では左側）の下端に連なり、かつ第１の帯状部２５の一方に沿って延びている。第２の帯状部２６の他方（図５および図６の例では右側）は、第１の帯状部２５の他方（図５および図６の例では右側）の下端に連なり、かつ第１の帯状部２５の他方に沿って延びている。第２の帯状部２６は、長い長方形状であり、その全域に赤色が付されている。第２の帯状部２６は、白の背景色を有する締めレシートＲとの間で、明度（濃淡）が異ならされているだけでなく、第１の帯状部２５との間でも明度（濃淡）が異ならされている。すなわち、第１の帯状部２５および第２の帯状部２６と締めレシートＲとの間で、幅方向Ｗの明度差が付与されており、第１の帯状部２５と第２の帯状部２６との間で、長さ方向Ｌの明度差が付されている。
【００４０】
第２の境界情報２４には、第２の境界情報２４によって境界が付与される第２の分割エリアＥ２の撮影順序を示す第２の順序コード（第２の順序識別情報）Ｃ２が付されている。第２の順序コードＣ２は、第２の帯状部２６の他方（図５および図６の例では右側）に付されている。
一対の第１の帯状部２５の互いに対向する側辺２５ａは、互いに平行にかつ直線状に延びている。一対の第２の帯状部２６の互いに対向する側辺２６ａは、互いに平行にかつ直線状に延びている。
【００４１】
第１の帯状部２５の一方および第２の帯状部２６の一方と、第１の帯状部２５の他方および第２の帯状部２６の他方との間に、長い矩形の透明領域が形成される。この透明領域が、読み取り対象となる画像を取得するための画像取得領域２７を構成する。画像取得領域２７の内側に、締めレシートＲの全域が収容されるように、締めレシートＲがエンベロープ２０に挟まれる。
【００４２】
互いに対向する側辺２５ａ，２６ａ同士の幅方向Ｗの間隔は、たとえば６０ｍｍである。この間隔は、締めレシートＲの幅寸法よりも大きい。第１および第２の帯状部２５，２６の長さ方向Ｌの寸法は、Ａ４サイズの用紙の縦方向の寸法（２９７ｍｍ）の半分（１４８．５ｍｍ）よりも大きく、かつＡ４サイズの用紙の縦方向の寸法（２９７ｍｍ）以内に設定されている。すなわち、第１および第２の帯状部２５，２６の長さ方向の寸法は、携帯通信端末６によって撮影される画像に含まれる締めレシートＲの印字情報が、レシート情報管理サーバ７に搭載されているＯＣＲによって識別できる範囲の大きさに設定されている。
【００４３】
この上シート２１の透明領域は、無色透明であることが好ましい。しかし、締めレシートＲからの印字情報の読み取りに影響を与えないのであれば、上シート２１の透明領域が、半透明であってもよい。なお、上シート２１の透明領域には、画像取得領域２７を部分的に遮蔽するような模様等は一切設けない。
画像取得領域２７は、平面視で締めレシートＲの分割部分Ｒ１を含む矩形の第１の分割エリアＥ１と、平面視で締めレシートＲの分割部分Ｒ２を含む矩形の第２の分割エリアＥ２とを含む。
【００４４】
第１の分割エリアＥ１の境界となる第１の矩形枠２９（図６に太字の二点鎖線で図示）は、第１の帯状部２５の上端２５ｂと、第１の帯状部２５の互いに対向する一対の側辺２５ａと、第１の帯状部２５の下端２５ｃ（または第２の帯状部２６の上端２６ｂ）とによって規定（区画）される。
第２の分割エリアＥ２の境界となる第２の矩形枠３０（図６に太字の破線で図示）は、第２の帯状部２６の上端２６ｂ（または第１の帯状部２５の下端２５ｃ）と、第２の帯状部２６の互いに対向する一対の側辺２６ａと、第２の帯状部２６の下端２６ｃとによって規定（区画）される。
【００４５】
下シート２２は、透明であってもよいし、着色されていてもよい。
図８は、携帯通信端末６によって実行される撮影処理の流れを説明するフローチャートである。図９は、第１の分割エリアＥ１を撮影した第１の画像ＩＭ１を示す図である。図１０は、第１の画像ＩＭ１から抽出した第１の分割画像ＩＳ１を示す図である。図１１は、第２の分割エリアＥ２を撮影した第２の画像ＩＭ２を示す図である。図１２は、第２の画像ＩＭ２から抽出した第２の分割画像ＩＳ２を示す図である。以下、図１〜図８を参照しながら撮影処理の流れを説明する。図９〜図１２については、適宜参照する。
【００４６】
携帯通信端末６による締めレシートＲの撮影に先立って、締めレシートＲの全域が正面視で前述の画像取得領域２７に含まれるように締めレシートＲをエンベロープ２０内に収容する。そして、この状態（図６に示す状態）のエンベロープ２０をテーブル等に載置する。そして、締めレシートＲの分割部分Ｒ１，Ｒ２を（すなわち、境界情報２３，２４によって規定（区画）された分割エリアＥ１，Ｅ２）を、携帯通信端末６を用いてユーザが順に撮影する。
【００４７】
まず、ユーザは、携帯通信端末６のカメラ１４を用いて、画像取得領域２７における最初の撮影エリアである第１の分割エリアＥ１を撮影する（図８のステップＳ１；撮影ステップ）。このとき、図９に示すように、第１および第２の境界情報２３，２４を含む形で、第１の分割エリアＥ１が撮影される。これにより、第１の分割エリアＥ１の画像を含む第１の画像ＩＭ１が制御部１１によって得られる。このとき、制御部１１は、取得している第１の画像ＩＭ１を、携帯通信端末６の表示部１５に逐次表示する。
【００４８】
また、制御部１１は、第１の画像ＩＭ１に含まれている順序コード、すなわち、第１の境界情報２３に含まれている第１の順序コードＣ１を認識する（図８のステップＳ２）。
また、制御部１１は、第１の画像ＩＭ１に含まれている第１および第２の境界情報２３，２４の長さ方向Ｌおよび幅方向Ｗの明度差に基づいて、第１の分割エリアＥ１を区画する第１の矩形枠２９を検知する。図９に二点鎖線で示すように、この第１の矩形枠２９も表示部１５に表示される。そして、制御部１１は、検知した第１の矩形枠２９に基づいて、第１の画像ＩＭ１から、第１の分割エリアＥ１の画像である第１の分割画像ＩＳ１を抽出す（抜き取）る（図８のステップＳ３；分割画像特定ステップ）。抽出後の第１の分割画像ＩＳ１を図１０に示す。
【００４９】
そして、次に述べる台形補正／リサイズ後に、店員等によって画像確認が行われると（図８のステップＳ５）、制御部１１は、画像確認の時点で抽出されている第１の分割画像ＩＳ１を記憶部１３に記憶する（図８のステップＳ６；分割画像記憶ステップ）。締めレシートＲが長尺であるので、抽出された第１の分割画像ＩＳ１は正対していないことが多い。そのため、制御部１１は、記憶部１３への記憶に先立って、抽出された第１の分割画像ＩＳ１に対して台形補正を行う（図８のステップＳ４）。台形補正により、締めレシートＲを正面から撮影した場合に得られるはずの画像が得られる。
【００５０】
また、制御部１１は、台形補正後の第１の分割画像ＩＳ１に対し、幅方向Ｗが所定の基準長さになるように第１の分割画像ＩＳ１のサイズを拡大または縮小することにより、画素数の調整を行う（図８のステップＳ４；リサイズステップ）。リサイズによって、次に述べる第２の分割画像ＩＳ２との間で幅寸法を揃えることができる。そして、台形補正およびリサイズが施された後の第１の分割画像ＩＳ１が、記憶部１３に記憶される（図８のステップＳ６）。
【００５１】
次いで、ユーザは、携帯通信端末６のカメラ１４を用いて、画像取得領域２７における次の撮影エリアである第２の分割エリアＥ２を撮影する（図８のステップＳ７；撮影ステップ）。このとき、図１１に示すように、第１および第２の境界情報２３，２４を含む形で、第２の分割エリアＥ２が撮影される。これにより、第２の分割エリアＥ２の画像を含む第２の画像ＩＭ２が制御部１１によって得られる。このとき、制御部１１は、取得している第２の画像ＩＭ２を、携帯通信端末６の表示部１５に逐次表示する。
【００５２】
また、制御部１１は、第２の画像ＩＭ２に含まれている順序コード、すなわち、第２の境界情報２４に含まれている第２の順序コードＣ２を認識する（図８のステップＳ８）。
制御部１１は、第２の画像ＩＭ２に含まれている第１および第２の境界情報２３，２４の長さ方向Ｌおよび幅方向Ｗの明度差に基づいて、第２の分割エリアＥ２を区画する第２の矩形枠３０を検知する。図１１に二点鎖線で示すように、この第２の矩形枠３０も表示部１５に表示される。そして、制御部１１は、検知した第２の矩形枠３０に基づいて、第２の画像ＩＭ２から、第２の分割エリアＥ２の画像である第２の分割画像ＩＳ２を抽出す（抜き取）る（図８のステップＳ９；分割画像特定ステップ）。抽出後の第２の分割画像ＩＳ２を図１２に示す。
【００５３】
そして、次に述べる台形補正／リサイズ後に、店員等によって画像確認が行われると（図８のステップＳ１１）、制御部１１は、画像確認の時点で抽出されている第２の分割画像ＩＳ２を記憶部１３に記憶する（図８のステップＳ１２；分割画像記憶ステップ）。締めレシートＲが長尺であるので、抽出された第２の分割画像ＩＳ２は正対していないことが多い。そのため、制御部１１は、記憶部１３への記憶に先立って、抽出された第２の分割画像ＩＳ２に対して台形補正を行う（図８のステップＳ１０）。台形補正により、締めレシートＲを正面から撮影した場合に得られるはずの画像が得られる。
【００５４】
また、制御部１１は、台形補正後の第２の分割画像ＩＳ２に対し、幅方向Ｗが所定の基準長さになるように第２の分割画像ＩＳ２のサイズを拡大または縮小することにより、画素数の調整を行う（図８のステップＳ１０；リサイズステップ）。リサイズによって、第２の分割画像ＩＳ２との間でサイズを相互に合わせることができる。そして、台形補正およびリサイズが施された後の第２の分割画像ＩＳ２が、記憶部１３に記憶される（図８のステップＳ１２）。第２の分割画像ＩＳ２は、同時に撮影された順序コードＣ２に基づく順序情報に対応付けた形で記憶部１３に記憶される。
【００５５】
さらに、後続の分割エリアが残存している場合（第３の分割エリアＥ３（図１９、図２０、図２２等参照）、第４の分割エリアＥ４（図１９、図２０、図２２等）等がある場合。図８のステップＳ１３でＹＥＳ）には、撮影エリアの後続がなくなるまで、図８のステップＳ７〜Ｓ１２が繰り返される。
そして、後続の分割エリアがなくなると（図８のステップＳ１３でＮＯ）、制御部１１は、通信Ｉ／Ｆ部１２を介して、携帯通信端末６の記憶部１３に記憶されている分割画像（第１の分割画像ＩＳ１、第２の分割画像ＩＳ２）をレシート情報管理サーバ７に送信する（図８のステップＳ１４）。レシート情報管理サーバ７によって受信された分割画像ＩＳ１，ＩＳ２は、レシート情報管理サーバ７の記憶部３３に記憶される。
【００５６】
図１３は、レシート情報管理サーバ７によって実行される連結／認識処理の流れを説明するフローチャートである。図１４は、合成画像ＩＣ１を示す図である。以下、図１〜図７および図１３を参照しながら連結／認識処理の流れを説明する。図１４については、適宜参照する。
制御部３１は、記憶部３３に記憶されている第１の分割画像ＩＳ１および第２の分割画像ＩＳ２、ならびに当該分割画像ＩＳ１，ＩＳ２に対応付けて記憶されている順序情報（順序コードＣ１に基づく順序情報、および順序コードＣ２に基づく順序情報）を読み出す。
【００５７】
制御部３１は、読み出した分割画像ＩＳ１，ＩＳ２を、順序情報によって指定された順序になるように、かつ第１の分割画像ＩＳ１の幅方向Ｗの左右端が揃うように、第１の分割画像ＩＳ１の長さ方向Ｌの端辺（図１０の下辺）および第２の分割画像ＩＳ２の長さ方向Ｌの端辺（図１２の上辺）が合致するように並べる。そして、制御部３１は、第１の分割画像ＩＳ１および第２の分割画像ＩＳ２を連結する（図１３のステップＳ２１；第１の画像連結ステップ）。これにより、図１４に示す合成画像ＩＣ１が得られる。合成画像ＩＣ１は、分割画像ＩＳ１，ＩＳ２を連結した連結画像ＩＢである。そして、制御部３１は、記憶部３３に連結画像ＩＢ（つまり、合成画像ＩＣ１）を記憶させる（図１３のステップＳ２２）。
【００５８】
次いで、制御部３１は、記憶部３３に記憶されている連結画像ＩＢを解析し、締めレシートＲの印字情報を読み取り、デジタルの文字コードに変換する（図１３のステップＳ２３）。そして、制御部３１は、変換後のデジタルデータ（たとえばテキストデータ）を、レシート情報として記憶部３３に記憶させる。
具体的には、制御部３１は、連結画像ＩＢに対してたとえばＯＣＲ（Optical Character Recognition/Reader）を行うことにより、締めレシートＲから印字情報を読み取る。このＯＣＲを行うための文字認識エンジンとしては、読み取り対象の帳票（締めレシートＲ）のフォーマット位置への依存なく、必要なデジタルデータを読み出し可能なタイプのエンジンである。図３に示す締めレシートＲには、締め対象期間に発券した商品についての個別券売状況表示４３のみが印字されており、締め対象期間に発券されていない商品についての個別券売状況表示４３は印字されない。そのため、個別券売状況表示４３については、締め対象期間に発券した商品を上に詰めて記載していく。そのため、締めレシートＲの所定位置に、必ず同じ商品の個別券売状況表示４３が配置されるわけではない。しかしながら、前述のようなタイプのエンジンを用いている。これにより、締めレシートＲのどの位置に記載されていても、個別券売状況表示４３を正確に読み取ることができる。
【００５９】
また、境界情報２３，２４の帯状部２５，２６の幅方向Ｗの間隔は、前述のように一定に決められている。制御部３１は、現在の（すなわち、リサイズ後の）単位画素当たりの寸法を把握している。そのため、現在の連結画像ＩＢに含まれる画素数に基づいて、連結画像ＩＢの寸法を得ることができる。制御部３１は、連結画像ＩＢの幅方向の画素数に基づいて、締めレシートＲの幅方向Ｗの寸法（締めレシートＲの幅）を算出して割り出す（図１３のステップＳ２４）。さらに、制御部３１は、連結画像ＩＢの長さ方向の画素数に基づいて、締めレシートＲの長さ方向Ｌの寸法（すなわち、締めレシートＲの長さ）幅を算出して割り出す（図１３のステップＳ２５）。
【００６０】
ところで、本部施設の職員は、本部ＰＣ５を介して、締めレシートＲの連結画像ＩＢを参照することができるようになっている。この場合に、連結画像ＩＢを表示すると、長尺であるために視認性が低くなるから、連結画像ＩＢをブロック単位または項目単位に分けて表示するようにしてもよい。
以上により第１の実施形態によれば、締めレシートＲを複数（たとえば２つ）の分割部分Ｒ１，Ｒ２に分けて個別に撮影する。このとき、分割部分Ｒ１を含む第１の分割エリアＥ１の境界（第１の矩形枠２９）が第１の境界情報２３によって規定されている。また、分割部分Ｒ２を含む第２の分割エリアＥ２の境界（第２の矩形枠３０）が第２の境界情報２４によって規定されている。そして、得られた複数の分割画像（第１の分割画像ＩＳ１、第２の分割画像ＩＳ２）を連結して、締めレシートＲの全体画像である連結画像ＩＢを作成する。そして、この連結画像ＩＢを画像認識することにより、締めレシートＲの印字情報（文字情報や数字情報）を読み取り、読み取り可能なデジタルデータ化（たとえばテキストデータ化）する。締めレシートＲを複数の分割エリアＥ１，Ｅ２に分けて個別に撮影するので、各分割画像ＩＳ１，ＩＳ２に含まれる締めレシートＲの印字情報のサイズの、当該分割画像ＩＳ１，ＩＳ２の全体に占める大きさが比較的大きい。そのため、連結画像ＩＢに含まれる締めレシートＲの印字情報のサイズを大きく保つことができる。これにより、連結画像ＩＢに含まれる締めレシートＲの印字情報を良好に認識できる。ゆえに、締めレシートＲが長尺である場合であっても、締めレシートＲから印字情報を良好に取得できる。
【００６１】
また、各分割エリアＥ１，Ｅ２は、当該分割エリアＥ１，Ｅ２の境界を規定する境界情報２３，２４を含めた形で撮影される。境界情報２３，２４を含めて分割エリアＥ１，Ｅ２が撮影するので、撮影している画像（第１の画像ＩＭ１、第２の画像ＩＭ２）から分割画像ＩＳ１，ＩＳ２を良好に特定することができる。
また、撮影されている画像ＩＭ１，ＩＭ２のうち分割画像ＩＳ１，ＩＳ２が、境界情報２３，２４の画像に基づいて特定され、こうして特定された分割画像ＩＳ１，ＩＳ２が記憶部３３に記憶される。そして、画像ＩＭ１，ＩＭ２から抜き出された分割画像ＩＳ１，ＩＳ２を複数連結することにより連結画像ＩＢが作成される。これにより、携帯通信端末６からレシート情報管理サーバ７に送られるデータのサイズを小さく抑制できる。
【００６２】
また、締めレシートＲに付与された順序コード（第１の順序コードＣ１、第２の順序コードＣ２）が、分割エリアＥ１，Ｅ２および境界情報２３，２４と共に撮影される。そして、複数の分割画像ＩＳ１，ＩＳ２が、個々の分割画像ＩＳ１，ＩＳ２に対応する順序コードＣ１，Ｃ２に基づく順序で互いに連結される。これにより、複数の分割画像ＩＳ１，ＩＳ２を、締めレシートＲ全体の画像における所期の配置位置に正確に配置できる。
【００６３】
また、分割画像ＩＳ１，ＩＳ２のサイズが調整された後に複数の分割画像ＩＳ１，ＩＳ２が連結される。撮影した画像に含まれる分割画像ＩＳ１，ＩＳ２の大きさが分割画像ごとに異なる場合がある。連結対象の分割画像ＩＳ１，ＩＳ２の同士の幅寸法を揃えることにより、連結対象の分割画像ＩＳ１，ＩＳ２に含まれる印字情報の大きさを揃えることができる。
【００６４】
また、連結前の分割画像ＩＳ１，ＩＳ２ではなく、連結後の連結画像ＩＢに対して、画像認識による印字情報の読み取りが行われる。図９や図１１に示すように、分割エリアＥ１，Ｅ２の境界が、印字情報（個別券売状況表示４３）の途中部を通過する場合には、図１０や図１２に示すように、ある個別券売状況表示４３が、第１の分割画像ＩＳ１と第２の分割画像ＩＳ２とに分断されるおそれがある。この場合、連結前の分割画像ＩＳ１，ＩＳ２に対して印字情報の読み取りを行うと、分断している個別券売状況表示４３を上手く読み取ることができない。連結後の連結画像ＩＢに対して印字情報の読み取りを行うことにより、分割エリアＥ１，Ｅ２の境界が印字情報を通過する場合であっても、締めレシートＲの印字情報の読み取りを良好に行うことができる。
【００６５】
図１５は、本発明の第２の実施形態に係るレシート情報管理システム２０１における撮影処理の流れを説明するフローチャートである。
レシート情報管理システム２０１が、第１の実施形態に係るレシート情報管理システム１と相違する点は、携帯通信端末６において、撮影された画像（第１の画像ＩＭ１、第２の画像ＩＭ２）を、分割画像（第１の分割画像ＩＳ１、第２の分割画像ＩＳ２）および境界情報（第１の境界情報２３、第２の境界情報２４）の画像を含めた形のまま記憶部１３に記憶する点である。また、レシート情報管理サーバ７において、撮影された画像（第１の画像ＩＭ１、第２の画像ＩＭ２）同士を連結し、連結後の画像から、境界情報２３，２４の画像を削除する点である。
【００６６】
レシート情報管理システム２０１は、複数の分割部分Ｒ１，Ｒ２を個別に撮影する撮影部と、撮影部によって撮影された画像ＩＭ１，ＩＭ２（図９、図１１等参照）を、分割部分Ｒ１，Ｒ２を含む分割エリアＥ１，Ｅ２（図６参照）の画像である分割画像ＩＳ１，ＩＳ２（図１０、図１２等参照）および境界情報２３，２４の画像を含めた形で記憶部１３に記憶させる画像記憶部と、記憶部１３に記憶されている画像ＩＭ１，ＩＭ２をレシート情報管理サーバ７に送信する画像送信部とを含む。撮影部、画像記憶部および画像送信部の各機能は、携帯通信端末６のハードウェアに、レシート情報管理サーバ７からの制御プログラムがインストールされ、この制御プログラムが作動することにより実行される。
【００６７】
レシート情報管理システム２０１は、記憶部３３に記憶されている複数の画像ＩＭ１，ＩＭ２を連結する第２の画像連結部と、連結前の、分割画像ＩＳ１，ＩＳ２を含む画像ＩＭ１，ＩＭ２の台形歪みやサイズを調整する分割画像リサイズ部とをさらに含む。第２の画像連結部および分割画像リサイズ部の各機能は、レシート情報管理サーバ７によって実行される。
【００６８】
以下、レシート情報管理システム２０１が、レシート情報管理システム１と相違する点を中心に説明する。
ユーザは、携帯通信端末６のカメラ１４を用いて、画像取得領域２７における最初の撮影エリアである第１の分割エリアＥ１を撮影する（図１５のステップＳ３１；撮影ステップ）。このとき、図９に示すように、第１および第２の境界情報２３，２４を含む形で、第１の分割エリアＥ１が撮影される。これにより、第１の分割エリアＥ１の画像を含む第１の画像ＩＭ１が制御部１１によって得られる。なお、第２の実施形態では、表示部１５に第１の矩形枠２９は表示されない。また、制御部１１は、第１の画像ＩＭ１に含まれている順序コード、すなわち、第１の境界情報２３に含まれている第１の順序コードＣ１を認識する（図１５のステップＳ３２）。ステップＳ３１およびＳ３２は、それぞれステップＳ１およびＳ２（図８参照）と同等のステップである。
【００６９】
そして、次に述べる台形補正／リサイズ後に、店員等によって画像確認が行われると（図１５のステップＳ３４）、制御部１１は、画像確認の時点の画像（第１の画像ＩＭ１）を記憶部１３に記憶する（図１５のステップＳ３５；画像記憶ステップ）。記憶部１３への記憶に先立って、撮影されている第１の画像ＩＭ１に対して台形補正を行う（図１５のステップＳ３３）。台形補正により、締めレシートＲを正面から撮影した場合に得られるはずの画像が得られる。
【００７０】
また、制御部１１は、補正後の第１の画像ＩＭ１に対し、幅方向Ｗが所定の基準長さになるように第１の画像ＩＭ１のサイズを拡大または縮小することにより、画素数の調整を行う（図１５のステップＳ３３；リサイズステップ）。リサイズによって、次に述べる第２の画像ＩＭ２との間で幅寸法を揃えることができる。そして、台形補正およびリサイズが施された後の第１の画像ＩＭ１が、記憶部１３に記憶される（図１５のステップＳ３５）。第１の画像ＩＭ１は、同時に撮影された順序コードＣ１に基づく順序情報に対応付けた形で記憶部１３に記憶される。
【００７１】
次いで、ユーザは、携帯通信端末６のカメラ１４を用いて、画像取得領域２７における次の撮影エリアである第２の分割エリアＥ２を撮影する（図１５のステップＳ３６；撮影ステップ）。このとき、図１１に示すように、第１および第２の境界情報２３，２４を含む形で、第２の分割エリアＥ２が撮影される。これにより、第２の分割エリアＥ２の画像を含む第２の画像ＩＭ２が制御部１１によって得られる。なお、第２の実施形態では、表示部１５に第２の矩形枠３０は表示されない。また、制御部１１は、第２の画像ＩＭ２に含まれる順序コード、すなわち、第２の境界情報２４に含まれている第２の順序コードＣ２を認識する（図１５のステップＳ３７）。ステップＳ３６およびＳ３７は、それぞれステップＳ７およびＳ８（図８参照）と同等のステップである。
【００７２】
そして、次に述べる台形補正／リサイズ後に、店員等によって画像確認が行われると（図１５のステップＳ３９）、制御部１１は、画像確認の時点の画像（第２の画像ＩＭ２）を記憶部１３に記憶する（図１５のステップＳ４０；画像記憶ステップ）。記憶部１３への記憶に先立って、撮影されている第２の画像ＩＭ２に対して台形補正を行う（図１５のステップＳ３８）。台形補正により、締めレシートＲを正面から撮影した場合に得られるはずの画像が得られる。
【００７３】
また、制御部１１は、補正後の第２の画像ＩＭ２に対し、幅方向Ｗが所定の基準長さになるように第１の画像ＩＭ２のサイズを拡大または縮小することにより、画素数の調整を行う（図１５のステップＳ３８；分割画像リサイズステップ）。リサイズによって、次に述べる第２の画像ＩＭ２との間で幅寸法を揃えることができる。そして、台形補正およびリサイズが施された後の第２の画像ＩＭ２が、記憶部１３に記憶される（図１５のステップＳ４０）。
【００７４】
さらに、後続の分割エリアが残存している場合（第３の分割エリアＥ３（図１９、図２０、図２２等参照）、第４の分割エリアＥ４（図１９、図２０、図２２等）等がある場合。図１５のステップＳ４１でＹＥＳ）には、撮影エリアの後続がなくなるまで、図１５のステップＳ３６〜Ｓ４０が繰り返される。
そして、後続の分割エリアがなくなると（図１５のステップＳ４１でＮＯ）、制御部１１は、通信Ｉ／Ｆ部１２を介して、携帯通信端末６の記憶部１３に記憶されている画像（第１の画像ＩＭ１、第２の画像ＩＭ２）をレシート情報管理サーバ７に送信する（図１５のステップＳ４２）。レシート情報管理サーバ７によって受信された画像ＩＭ１，ＩＭ２は、レシート情報管理サーバ７の記憶部３３に記憶される。
【００７５】
図１６は、レシート情報管理サーバ７によって実行される連結／認識処理の流れを説明するフローチャートである。図１７は、合成画像ＩＣ２を示す図である。以下、図１〜図７および図１６を参照しながら連結／認識処理の流れを説明する。図１７については、適宜参照する。
制御部３１は、記憶部３３に記憶されている第１の画像ＩＭ１および第２の画像ＩＭ２を読み出す。制御部３１は、第１の画像ＩＭ１および第２の画像ＩＭ２を画像解析することにより、第１の画像ＩＭ１に含まれる順序コードＣ１から順序情報を読み出すとともに、第２の画像ＩＭ２に含まれる順序コードＣ２から順序情報を読み出す。
【００７６】
制御部３１は、画像ＩＭ１，ＩＭ２を、順序情報によって指定された順序になるように、かつ第１の画像ＩＭ１に含まれる第１の境界情報２３の画像と第２の画像ＩＭ２に含まれる第２の境界情報２４の画像同士が合致するように長さ方向Ｌに並べる。そして、制御部３１は、第１の画像ＩＭ１および第２の画像ＩＭ２を連結する（図１６のステップＳ５１）。これにより、図１７に示す合成画像ＩＣ２が得られる。
【００７７】
そして、制御部３１は、合成画像ＩＣ２から境界情報２３，２４の画像を削除する（図１６のステップＳ５２）。これにより、図１４に示す連結画像ＩＢが得られる。そして、制御部３１は、記憶部３３に連結画像ＩＢを記憶させる（図１６のステップＳ５３）。
その後、制御部３１は、記憶部３３に記憶されている連結画像ＩＢを解析し、締めレシートＲの印字情報を読み取り、テキストデータ等の文字コードに変換する（図１６のステップＳ５４）。また、制御部３１は、締めレシートＲの幅方向Ｗの寸法（締めレシートＲの幅）を算出して割り出す（図１６のステップＳ５５）。さらに、制御部３１は、締めレシートＲの長さ方向Ｌの寸法（すなわち、締めレシートＲの長さ）幅を算出して割り出す（図１６のステップＳ５６）。ステップＳ５４〜Ｓ５６は、それぞれステップＳ２３〜Ｓ２５（図１３参照）と同等のステップである。
【００７８】
第２の実施形態によれば、第１の実施形態において奏した作用効果に加え、次に述べる作用効果を奏する。
すなわち、この第２実施形態では、撮影された画像（第１の画像ＩＭ１、第２の画像ＩＭ２）が、分割画像（第１の分割画像ＩＳ１、第２の分割画像ＩＳ２）および境界情報（第１の境界情報２３、第２の境界情報２４）の画像を含めた形のまま記憶部１３に記憶される。そして、記憶されている画像ＩＭ１，ＩＭ２に含まれる分割画像ＩＳ１，ＩＳ２が複数連結される。この連結は、連結対象の分割画像ＩＳ１，ＩＳ２に対応する境界情報２３，２４の画像同士が合致するように（境界情報２３，２４の画像に基づいて）連結される。境界情報２３，２４の画像に基づいて連結されるので、分割画像ＩＳ１，ＩＳ２同士を正確に位置合わせできる。
【００７９】
以上、この発明の２つの実施形態について説明したが、この発明はさらに他の形態で実施できる。
たとえば、前述の各実施形態では、締めレシートＲを２つの分割部分Ｒ１，Ｒ２に分割する場合を例に挙げて説明したが、締めレシートＲを３つ以上の分割部分に分割するようにしてもよい。図１８では、締めレシートＲを、分割部分Ｒ１，Ｒ２，Ｒ３，Ｒ４に分割する場合を例に挙げている。この場合、画像取得領域２７は、長さ方向Ｌに沿って並ぶ４つの分割エリアＥ１，Ｅ２，Ｅ３，Ｅ４を含む。この場合、エンベロープ２０に付与される境界情報は、分割エリアＥ１，Ｅ２に対応する境界情報２３，２４だけでなく、分割エリアＥ３，Ｅ４に対応する境界情報１２３，１２４も含む。境界情報１２３，１２４には、それぞれ第３の順序コードＣ３および第４の順序コードＣ４が付されている。
【００８０】
また、前述の各実施形態では、順序コードＣ１，Ｃ２，Ｃ３，Ｃ４を境界情報２３，２４，１２３，１２４の中に設ける場合について説明したが、順序コードＣ１，Ｃ２，Ｃ３，Ｃ４が、境界情報２３，２４，１２３，１２４と分離した形でエンベロープ２０に付されていてもよい。
また、前述の各実施形態において、エンベロープ２０から順序コードを省略してもよい。この場合、分割エリアの撮影順に、分割画像を一方向に連結するようにしてもよい。
【００８１】
また、前述の各実施形態では、境界情報付与部としてエンベロープ２０を用いた。しかし、境界情報付与部は、上シート２１だけあれば、下シート２２は省略してもよい（すなわち、エンベロープの態様でなくてもよい）。
また、前述の各実施形態では、エンベロープ２０の上シート２１に境界情報２３,２４を設けるとして説明したが、エンベロープ２０の下シート２２に設けてもよい。この場合、エンベロープ２０の上シート２１のうち、境界情報２３,２４や透明領域に対向する部分の全域が透明にする必要がある。
【００８２】
また、前述の各実施形態において、携帯通信端末６としてタブレットを例に挙げて説明したが、携帯通信端末６はスマートフォン、携帯電話機、ノートパソコン等であってもよい。また、携帯通信端末６は、店舗３の店員所有のものでなく店舗所有のものであってもよい。この場合、携帯通信端末６は、締め作業専用に限られず、他の用途と共用されていてもよい。さらに、携帯通信端末６は、必ずしも各店舗専用の装置でなく、各店舗間で共用されてもよい。
【００８３】
また、前述の各実施形態において、締めレシートＲを正面から撮影した場合と同質の画質を得るための補正として台形補正を例に挙げて説明したが、このような補正は、台形補正に限定されず、回転補正など、この目的のために使用される他の補正処理を含む趣旨である。
また、第２の実施形態において、リサイズや台形補正を、携帯通信端末６側でなく、レシート情報管理サーバ７側で行うようにしてもよい。
【００８４】
また、前述の各実施形態において、画像の連結を、携帯通信端末６側で行うようにしてもよい。
また、第１の実施形態や第２の実施形態の連結／認識処理において、レシートの幅やレシートの長さの割り出し（Ｓ２４，Ｓ２５，Ｓ５５，Ｓ５６）を省略してもよい。
また、前述の各実施形態では、売り上げの現物確認に用いるべく、締めレシートＲの印字情報をデジタルデータ（テキストデータ）化するとして説明したが、デジタルデータ（テキストデータ）化によって、本部施設への売り上げの報告を行うようにしてもよい。
【００８５】
また、前述の各実施形態では、締めレシートＲとして、券売機４から発行されるものを例に挙げて説明したが、締めレシートＲが、ＰＯＳ、レジスター等から出力されていてもよい。この場合、レシート情報管理システム１，２０１を、食堂チェーンではなく、テナントを複数備えたショッピングモールに適用してもよいし、店舗を多数有する洋服チェーン等の店舗チェーンに適用してもよい。
【００８６】
また、印字情報の取得対象のレシートは、締めレシートＲに限られず、その他の目的のために用いられるレシートであってもよい。
さらに、印字情報の取得対象の媒体は、レシートに限られず、納品書、請求書、領収書等の他の帳票であってもよいし、帳票以外の紙用紙であってもよい。
この場合、媒体の大きさがＡ４サイズ以内であれば、媒体を分割エリアに分けて撮影しなくても、得られる画像が十分な解像度を有しているが、媒体の大きさがＡ４サイズを超えると、十分な解像度を有さない場合も生じると考えられる。たとえば、Ａ３サイズの媒体に境界情報２３，２４を付与する場合を図１９に示す。また、Ａ２サイズの媒体に境界情報を付与する場合を図２０に示す。この場合、境界情報２２３，２２４，２２５，２２６によって４の分割エリアＥ１，Ｅ２，Ｅ３，Ｅ４が区画されている。分割エリアＥ１と、分割エリアＥ３とが横方向（幅方向Ｗ）に並んでいる。また、分割エリアＥ２と、分割エリアＥ４とが横方向（幅方向Ｗ）に並んでいる。つまり、分割エリアが、長さ方向Ｌだけでなく横方向（幅方向Ｗ）複数並んでいる。この場合、分割エリアの境界を規定する関係上、長さ方向Ｌの分割エリアおよび横方向（幅方向Ｗ）の分割エリアの少なくとも一方が、２つ以内である必要がある。
【００８７】
また、境界情報は、境界情報２３，２４のような明度差を有しているものに限られない。境界情報は、分割エリアを規定できれば足り、図２１に示すマーク（境界情報）３０１であってもよい。また、Ａ２サイズの媒体にマーク（境界情報）３０１を付与する場合を図２２に示す。
その他、特許請求の範囲に記載された事項の範囲で種々の設計変更を施すことが可能である。
【符号の説明】
【００８８】
１      ：レシート情報管理システム（情報取得システム）
６      ：携帯情報端末
７      ：レシート情報管理サーバ
２０    ：エンベロープ（順序識別情報付与部、境界情報付与部）
２３    ：第１の境界情報
２４    ：第２の境界情報
２９    ：第１の矩形枠（境界）
３０    ：第２の矩形枠（境界）
４１    ：店舗名称表示（情報）
４２    ：期間表示（情報）
４３    ：個別券売状況表示（情報）
４４    ：全体券売状況表示（情報）
１２３  ：第３の境界情報
１２４  ：第４の境界情報
２０１  ：レシート情報管理システム（情報取得システム）
２２３  ：境界情報
２２４  ：境界情報
２２５  ：境界情報
２２６  ：境界情報
３０１  ：マーク（境界情報）
Ｃ１    ：第１の順序コード（順序識別情報）
Ｃ２    ：第２の順序コード（順序識別情報）
Ｃ３    ：第３の順序コード（順序識別情報）
Ｃ４    ：第４の順序コード（順序識別情報）
Ｅ１    ：第１の分割エリア
Ｅ２    ：第２の分割エリア
Ｅ３    ：第３の分割エリア
Ｅ４    ：第４の分割エリア
ＩＢ    ：連結画像
ＩＭ１  ：第１の画像
ＩＭ２  ：第２の画像
ＩＳ１  ：第１の分割画像
ＩＳ２  ：第２の分割画像
Ｒ      ：締めレシート（媒体）
Ｒ１    ：分割部分
Ｒ２    ：分割部分
【図１】
2020086664.tif 000003
【図２】
2020086664.tif 000004
【図３】
2020086664.tif 000005
【図４】
2020086664.tif 000006
【図５】
2020086664.tif 000007
【図６】
2020086664.tif 000008
【図７】
2020086664.tif 000009
【図８】
2020086664.tif 000010
【図９】
2020086664.tif 000011
【図１０】
2020086664.tif 000012
【図１１】
2020086664.tif 000013
【図１２】
2020086664.tif 000014
【図１３】
2020086664.tif 000015
【図１４】
2020086664.tif 000016
【図１５】
2020086664.tif 000017
【図１６】
2020086664.tif 000018
【図１７】
2020086664.tif 000019
【図１８】
2020086664.tif 000020
【図１９】
2020086664.tif 000021
【図２０】
2020086664.tif 000022
【図２１】
2020086664.tif 000023
【図２２】
2020086664.tif 000024