(57)【要約】【課題】複数頁を組とする画像が組の中での順序が不定であっても、順序を整列させることができる画像処理装置を提供する。【解決手段】頁順序判定部１１は、与えられた複数頁からなる画像について、少なくとも隣接する頁の画像の内容に従って、画像の並び順を判定する。この判定結果に基づいて、頁順序置換部１２は与えられた画像を予め決められた並び順に入れ替える。集約部１３は、１組の画像をその画像の数より少ない画像にまとめる。例えば葉書の表裏の画像であれば、頁順序判定部１１では連続する奇数頁の画像と偶数頁の画像について、郵便番号の領域などの特徴等を用いて表面と裏面の画像を判定する。頁順序置換部１２では、奇数頁の画像が裏面で偶数頁の画像が表面であれば入れ替える。集約部１３が２頁分の画像ごとに１頁の画像にまとめれば、表面の画像と裏面の画像の配置が揃う。【選択図】図１
2014138377.tif 000002
【特許請求の範囲】
【請求項１】
与えられた複数頁からなる画像について少なくとも隣接する頁の画像の内容に従って前記画像の並び順を判定する頁順序判定手段と、前記判定結果に基づいて画像を予め決められた並び順に入れ替える頁順序置換手段を有することを特徴とする画像処理装置。
【請求項２】
前記頁順序判定手段は、連続する奇数頁の画像と偶数頁の画像を判定の対象とし、さらに、前記頁順序置換手段から出力される画像の奇数頁と偶数頁の画像を並べて１頁の画像にまとめる集約手段を有することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記頁順序判定手段は、画像の絵柄として予め決められた形状を含む場合に前記並び順の判定を行うことを特徴とする請求項１または請求項２に記載の画像処理装置。
【請求項４】
前記頁順序判定手段は、画像の絵柄として予め決められた形状を含み、当該形状を扱うモードでない場合に警告を出力することを特徴とする請求項１または請求項２に記載の画像処理装置。
【請求項５】
複数頁の画像として１以上の葉書の表面と裏面の画像が与えられ、前記頁順序判定手段は、葉書の表面の特徴を検出して並び順を判定し、前記頁順序置換手段は、前記頁順序判定手段が奇数頁で葉書の表面の特徴を検出せず、かつ、隣接する偶数頁で葉書の表面の特徴を検出した場合に当該奇数頁と偶数頁の画像の並び順を入れ替えることを特徴とする請求項１から請求項４のいずれか１項に記載の画像処理装置。
【請求項６】
コンピュータに、請求項１から請求項５のいずれか１項に記載の画像処理装置の機能を実行させるものであることを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置および画像処理プログラムに関するものである。
【背景技術】
【０００２】
年賀状などの葉書や、名刺などを整理する際に、画像読取装置によって画像として読み取って保存することが行われている。年賀状などでは、差出人の住所や氏名が表面に記載されている場合もあれば裏面に記載されている場合もあり、読み取る際には表面と裏面の両方の画像を読み取るとよい。名刺でも、裏面に種々の情報が記載されている場合もあり、やはり表面と裏面を読み取っておくとよい。葉書や名刺以外にも、証書や免許証、その他のカードや表裏面からなる書類などでも、表面と裏面を読み取って組にして管理するとよい。表面と裏面の画像を読み取って頁番号付けを行う技術が特許文献１に記載されている。なお表裏面に限らず、ページ数が固定されている定型文書などでも、固定されている頁数を組として管理するとよい。
【０００３】
電子化された葉書や名刺、書類などの表面と裏面の画像を紙などに形成したり、表示させたりする場合、表面と裏面の画像が並んでいると見やすい。例えば特許文献２には、２頁や４頁など、Ｎ頁の画像を１つに集約する技術が記載されており、表面の画像と裏面の画像を１つに集約して出力するとよい。
【０００４】
葉書や名刺、書類などの原稿を画像読取装置によって読み取らせる際に、葉書や文書などの原稿が裏返っていると、原稿の裏面が表面として読み取られ、原稿の表面が裏面として読み取られる場合がある。すると、表面と裏面の画像を並べて１つの画像に集約する際に、集約された画像においては、左側に表面、右側に裏面の画像が並ぶ場合と、右側に表面、左側に裏面の画像が並ぶ場合が生じる。いずれかに統一されていれば問題とならない場合もあるが、両者が混在すると並び順に統一感がなくなって見づらくなる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平０６−１３９３２８号公報
【特許文献２】特開２００７−０８８７６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、複数頁を組とする画像が組の中での順序が不定であっても、順序を整列させることができる画像処理装置および画像処理プログラムを提供することを目的とするものである。
【課題を解決するための手段】
【０００７】
本願請求項１に記載の発明は、与えられた複数頁からなる画像について少なくとも隣接する頁の画像の内容に従って前記画像の並び順を判定する頁順序判定手段と、前記判定結果に基づいて画像を予め決められた並び順に入れ替える頁順序置換手段を有することを特徴とする画像処理装置である。
【０００８】
本願請求項２に記載の発明は、本願請求項１に記載の発明における前記頁順序判定手段が、連続する奇数頁の画像と偶数頁の画像を判定の対象とし、さらに、前記頁順序置換手段から出力される画像の奇数頁と偶数頁の画像を並べて１頁の画像にまとめる集約手段を有することを特徴とする画像処理装置である。
【０００９】
本願請求項３に記載の発明は、本願請求項１または請求項２に記載の発明における前記頁順序判定手段が、画像の絵柄として予め決められた形状を含む場合に前記並び順の判定を行うことを特徴とする画像処理装置である。
【００１０】
本願請求項４に記載の発明は、本願請求項１または請求項２に記載の発明における前記頁順序判定手段が、画像の絵柄として予め決められた形状を含み、当該形状を扱うモードでない場合に警告を出力することを特徴とする画像処理装置である。
【００１１】
本願請求項５に記載の発明は、本願請求項１から請求項４のいずれか１項に記載の発明において、複数頁の画像として１以上の葉書の表面と裏面の画像が与えられ、前記頁順序判定手段は、葉書の表面の特徴を検出して並び順を判定し、前記頁順序置換手段は、前記頁順序判定手段が奇数頁で葉書の表面の特徴を検出せず、かつ、隣接する偶数頁で葉書の表面の特徴を検出した場合に当該奇数頁と偶数頁の画像の並び順を入れ替えることを特徴とする画像処理装置である。
【００１２】
本願請求項６に記載の発明は、コンピュータに、請求項１から請求項５のいずれか１項に記載の画像処理装置の機能を実行させるものであることを特徴とする画像処理プログラムである。
【発明の効果】
【００１３】
本願請求項１に記載の発明によれば、与えられた画像の順序が不定であっても、順序を整列させることができるという効果がある。
【００１４】
本願請求項２に記載の発明によれば、２頁を組とする画像の順序が不定であっても、順序が統一された集約画像を得ることができる。
【００１５】
本願請求項３に記載の発明によれば、整列の対象である画像を自動判別して整列の処理を行うことができる。
【００１６】
本願請求項４に記載の発明によれば、整列の対象である画像を判別した場合に、整列の対象であることを利用者に報知することができる。
【００１７】
本願請求項５に記載の発明によれば、葉書の画像を対象として、その並び順を整列させることができる。
【００１８】
本願請求項６に記載の発明によれば、本願請求項１から請求項５のいずれか１項に記載の発明の効果を得ることができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の実施の一形態を示す構成図である。
【図２】本発明の実施の一形態における動作の一例を示す流れ図である。
【図３】与えられた画像の一例の説明図である。
【図４】集約された画像の一例の説明図である。
【図５】入れ替えを行わない場合の集約された画像の一例の説明図である。
【図６】与えられた画像の別の例の説明図である。
【図７】集約された画像の別の例の説明図である。
【図８】本発明の画像処理装置の実施の一形態で説明した機能をコンピュータプログラムで実現した場合におけるコンピュータプログラム及びそのコンピュータプログラムを格納した記憶媒体とコンピュータの一例の説明図である。
【発明を実施するための形態】
【００２０】
図１は、本発明の実施の一形態を示す構成図である。図中、１１は頁順序判定部、１２は頁順序置換部、１３は集約部である。以下の説明では、複数頁からなる画像が与えられるが、与えられる画像は、複数頁を組とし、その組が１組以上続けられているものとする。例えば表面と裏面の２つの画像を組とし、その組が１以上与えられる。例えば４頁を組とするなら、４頁１組の画像が１以上与えられることになる。１組の画像の数は予め設定されているものとする。画像は、例えば画像読取装置で逐次読み取った画像であっても、予め用意されている画像であってもよい。
【００２１】
頁順序判定部１１は、与えられた複数頁からなる画像について、少なくとも隣接する頁の画像の内容に従って、画像の並び順を判定する。例えば１組が２頁で構成されていれば、連続する奇数頁の画像と偶数頁の画像を判定の対象とすればよい。例えば１組が４頁の画像で構成されていれば、連続する４頁の画像を判定の対象とすればよい。もちろん、１組の頁数が３または５頁以上でも、その１組の頁数ごとに判定の対象とすればよい。
【００２２】
画像の判定は、画像の特徴を抽出して、予め決められた特徴を有しているか否かを判定すればよく、例えば、絵柄として予め決められた形状を含むか否か、さらにレイアウトなども考慮して判定するとよい。１組の画像中に予め決められた特徴を有している画像が存在する場合、その特徴を有している画像が１組の画像のうちの何番目の画像としなければならないか、すなわち並び順の判定を行い、判定結果を頁順序置換部１２に画像とともに伝える。なお、画像が予め決められた特徴を有しているにもかかわらず、当該特徴を用いたモードに設定されていない場合、利用者に警告を出力して、当該特徴を用いたモードの利用を促してもよい。
【００２３】
頁順序置換部１２は、頁順序判定部１１による頁順序の判定結果に基づいて、与えられた画像を予め決められた並び順に入れ替える。例えば２頁が１組の場合に、連続する前後の画像のうち後ろの画像が前に存在すべき画像の特徴を有していると頁順序判定部１１で判定されている場合、前後の画像の並び順を入れ替える。もちろん、予め決められた並び順で並んでいる画像についてはそのままとする。
【００２４】
集約部１３は、頁順序置換部１２から出力される画像について、１組の画像をその画像の数より少ない画像にまとめる。例えば２頁１組の画像であれば、２頁分の画像を１頁の画像にまとめる。４頁１組であれば、４頁分の画像を１頁の画像に、あるいは２頁ずつ２頁の画像にまとめればよい。もちろん、３頁１組、５頁以上を１組とする場合でも、１組の頁数よりも少ない頁の画像に集約すればよい。なお、並べ替えられた画像を処理結果とする場合には、この集約部１３を設けずに構成してもよい。
【００２５】
図２は、本発明の実施の一形態における動作の一例を示す流れ図である。この動作の例では、表面と裏面からなる２頁の画像を１組とした画像が与えられるものとし、表面の画像に特徴が存在しているものとしている。
【００２６】
Ｓ１において、与えられた未処理の画像が存在するか否かを判定し、存在しなければ処理を終える。
【００２７】
未処理の画像が存在すれば、Ｓ２において、奇数頁の画像と偶数頁の画像を取得する。
【００２８】
Ｓ３において、頁順序判定部１１はまず奇数頁の画像が表面の画像であるか否かを判定する。例えば、表面の画像に特有の特徴が奇数頁の画像に存在するか否かを判定すればよい。奇数頁の画像が表面の画像であれば、さらにＳ４において、偶数頁の画像が表面の画像であるか否かを判定する。頁順序判定部１１は、この判定結果を頁順序置換部１２に伝える。
【００２９】
Ｓ３で奇数頁の画像が表面の画像であると判定され、Ｓ４で偶数頁の画像が表面の画像でないと判定された場合には、この奇数頁の画像と偶数頁の画像とは正規の順序で並べられているものとし、Ｓ５では頁順序置換部１２での順序の入れ替えは行わない。そしてＳ９において、集約部１３は奇数頁の画像と偶数頁の画像とを、この順で１頁の画像に集約して出力する。そして、Ｓ１へ戻る。
【００３０】
Ｓ３で奇数頁の画像が表面の画像ではないと判定された場合には、さらにＳ７において、偶数頁の画像が表面の画像であるか否かを判定する。頁順序判定部１１は、この判定結果を頁順序置換部１２に伝える。
【００３１】
Ｓ３で奇数頁の画像が表面の画像でないと判定され、Ｓ７で偶数頁の画像が表面の画像であると判定された場合には、この奇数頁の画像と偶数頁の画像とは逆の順序で並べられているものとし、Ｓ８では頁順序置換部１２で奇数頁の画像と偶数頁の画像の順序を入れ替える。そしてＳ９において、集約部１３は入れ替えられた順序で２つの画像を１頁の画像に集約して出力する。そして、Ｓ１へ戻る。
【００３２】
なお、Ｓ３で奇数頁の画像が表面の画像であると判定されたにもかかわらず、Ｓ４で偶数頁の画像も表面の画像であると判定された場合には、表面の画像が並んでいることになる。また、Ｓ３で奇数頁の画像が表面の画像でないと判定されたにもかかわらず、Ｓ７で偶数頁の画像も表面の画像でないと判定された場合には、裏面の画像が並んでいることになる。これらの場合には、Ｓ６において、並び順が異常であると判定し、異常の際の処理を行う。例えば、利用者に対して画像の並び順が異常である旨を通知するとよい。あるいはさらに利用者に対して処置を要求してもよい。あるいは、当該２頁の画像については除去してもよいし、異常である旨が分かるようにしてＳ９で集約してもよい。もちろん、異常の際の処理はこれらに限られず、種々の処理を行ってもよい。
【００３３】
この動作例では、表面の画像に特徴が存在しているものとしているが、これに限らず、裏面に存在する特徴を判定してもよく、表面の特徴と裏面の特徴の両方を用いてもよいことは言うまでもない。また、ここでは２頁の画像を１組とした場合について示したが、３頁以上の画像を１組とした場合についても、１組となる頁数の画像について、その並び順を判定し、正規の並び順でなければ入れ替えを行えばよい。
【００３４】
ここでは、上述の処理を行うことを前提として画像が与えられるものとしているが、これに限らず、画像を参照して予め決められた特徴、上述の動作例では表面の画像に特有の特徴を有していたら、上述の処理に移行してもよい。あるいは、当該特徴が検出されたら利用者に対して警告を発し、上述の処理を行うモードへの移行を促してもよい。
【００３５】
以下、具体例を用いて説明する。図３は、与えられた画像の一例の説明図、図４は、集約された画像の一例の説明図、図５は、入れ替えを行わない場合の集約された画像の一例の説明図である。ここでは具体例として葉書の画像が与えられる場合を用いる。図３（Ａ）に示すように、葉書は表面に切手に相当する領域や郵便番号の領域などが予め配置され、宛先が記載されている。また、差出人の情報や、年賀状などでは抽選番号なども記載されている。葉書の裏面は、差出人が自由に記載している。葉書を対象とする場合には、表面と裏面の２頁の画像を１組と考えればよい。また、表面の画像と裏面の画像を判定するには、表面にある切手に相当する領域や郵便番号の領域の存在を特徴として捉えればよい。
【００３６】
この具体例では、図３（Ａ）に示す葉書の画像が、図３（Ｂ）に示す順序で与えられたものとする。１枚目の葉書については、表面、裏面の順で画像が与えられているが、２枚目の葉書については、裏面、表面の順で画像が与えられている。例えば画像読取装置で両面の画像を読み取る際に、２枚目の葉書が裏返っていた場合には、このような順序で画像が与えられることになる。
【００３７】
このような順序で与えられた画像を、そのまま２頁ずつ１頁に集約した例を図５に示している。集約された画像の１頁目と２頁目で左右に配置される葉書の面が逆になり、並び順の統一感がなくなり見づらくなっている。
【００３８】
図３（Ｂ）に示す画像の列が与えられた場合、隣接する奇数頁の画像と偶数頁の画像を１組にして判定する。まず１頁目と２頁目の画像を取得し、１頁目の画像に、葉書の表面に存在すべき特徴があるか否かを判定する。例えば郵便番号枠や切手に相当する領域などが存在するか否かを判定すればよい。この例では、１頁目の画像には郵便番号枠や切手に相当する領域などが存在する。従って、１頁目の画像は葉書の表面であると判定する。
【００３９】
続いて２頁目の画像に、葉書の表面に存在すべき特徴があるか否かを判定する。２頁目の画像には郵便番号枠や切手に相当する領域などが存在せず、表面にあるべき特徴が存在しない。従って、２頁目の画像は葉書の表面でないと判定する。
【００４０】
これらの判定から、１頁目の画像は葉書の表面であり、２頁目の画像は葉書の表面でないと判定され、この場合には頁順序置換部１２は１頁目と２頁目の画像の入れ替えは行わない。
【００４１】
次に３頁目と４頁目の画像を取得し、３頁目の画像に、葉書の表面に存在すべき特徴があるか否かを判定する。例えば郵便番号枠や切手に相当する領域などが存在するか否かを判定すればよい。３頁目の画像には郵便番号枠や切手に相当する領域などが存在しない。従って、３頁目の画像は葉書の表面でないと判定する。
【００４２】
続いて４頁目の画像に、葉書の表面に存在すべき特徴があるか否かを判定する。４頁目の画像には郵便番号枠や切手に相当する領域などが存在することから、葉書の表面であると判定する。
【００４３】
これらの判定から、３頁目の画像は葉書の表面ではなく、４頁目の画像は葉書の表面であると判定される。この場合には、頁順序置換部１２は３頁目と４頁目の画像の入れ替えを行う。
【００４４】
これらの処理により得られた画像の列を図４（Ａ）に示している。図３（Ｂ）における３頁目と４頁目が入れ替わっている。この順序が入れ替えられた画像の列をもとに、集約部１３が２頁ずつ１頁の画像に集約した例を図４（Ｂ）に示している。集約した画像の左右に配置された画像が、葉書の表面と裏面の画像に統一されており、図５に示した例に比べて見やすくなる。
【００４５】
ここでは葉書を具体例として説明したが、名刺、証書、免許証、種々のカード、その他の表裏面からなる書類などでも、表面あるいは裏面、または表面と裏面の画像の特徴から順序を判定し、順序が逆であれば入れ替えを行えばよい。
【００４６】
図６は、与えられた画像の別の例の説明図、図７は、集約された画像の別の例の説明図である。上述の具体例では、表裏面の２頁を１組とする場合について説明したが、これに限らず、頁数が固定されている定型文書などでも、固定されている頁数を組として管理するとよい。この具体例では、４頁（４面）が１組となるアンケートなどの回答用紙の例を示している。回答用紙の各頁には、それぞれ回答欄の配置が異なっている。この回答欄の配置を特徴として各頁を判定すればよい。この具体例では、図６（Ａ）に示す回答用紙の画像が、図６（Ｂ）に示すように第４面，第３面，第２面，第１面の順序で与えられたものとする。
【００４７】
図６（Ｂ）に示す画像の列が与えられた場合、隣接する４頁の画像を１組にして判定する。頁順序判定部１１は、回答欄の配置などを特徴量として各画像を判定し、１頁目の画像が回答用紙の第４面、２頁目の画像が回答用紙の第３面、３頁目の画像が回答用紙の第２面、４頁目の画像が回答用紙の第１面であると判定する。頁順序置換部１２は、この頁順序判定部１１での判定結果をもとに、４頁目の画像を最初に、３頁目の画像を２頁目に、２頁目の画像を３頁目に、１頁目の画像を４頁目に、それぞれ入れ替える。入れ替えた後の画像の並びを図７（Ａ）に示している。
【００４８】
また、入れ替え後の画像の列を、集約部１３で４頁を１頁に集約した例を図７（Ｂ）に示している。この場合も、集約された画像で回答用紙の各頁の画像の配置位置が統一され、配置がばらばらの場合に比べて一覧性と見やすさが向上する。
【００４９】
以上、具体例として２頁の画像を１組とする場合及び４頁の画像を１組とする場合について示したが、もちろん、３頁あるいは５頁以上を１組とする場合であってもよい。また、集約する際に、１組の画像を１頁に集約するほか、２頁以上に集約してもよいことは言うまでもない。２頁に集約して媒体の両面に画像を形成すれば、複数枚に分かれていた１組の情報を、頁順を揃えて表裏にまとめられ、複数枚に分かれていた場合よりも一覧性が向上する。
【００５０】
図８は、本発明の画像処理装置の実施の一形態で説明した機能をコンピュータプログラムで実現した場合におけるコンピュータプログラム及びそのコンピュータプログラムを格納した記憶媒体とコンピュータの一例の説明図である。図中、２１はプログラム、２２はコンピュータ、３１は光磁気ディスク、３２は光ディスク、３３は磁気ディスク、３４はメモリ、４１はＣＰＵ、４２は内部メモリ、４３は読取部、４４はハードディスク、４５はインタフェース、４６は通信部である。
【００５１】
上述の本発明の画像処理装置の実施の一形態として説明した各部の機能の全部あるいは部分的に、コンピュータが実行するプログラム２１によって実現してもよい。その場合、そのプログラム２１およびそのプログラムが用いるデータなどは、コンピュータによって読み取られる記憶媒体に記憶させておけばよい。記憶媒体とは、コンピュータのハードウェア資源に備えられている読取部４３に対して、プログラムの記述内容に応じて、磁気、光、電気等のエネルギーの変化状態を引き起こして、それに対応する信号の形式で、読取部４３にプログラムの記述内容を伝達するものである。例えば、光磁気ディスク３１，光ディスク３２（ＣＤやＤＶＤなどを含む）、磁気ディスク３３，メモリ３４（ＩＣカード、メモリカード、フラッシュメモリなどを含む）等である。もちろんこれらの記憶媒体は、可搬型に限られるものではない。
【００５２】
これらの記憶媒体にプログラム２１を格納しておき、例えばコンピュータ２２の読取部４３あるいはインタフェース４５にこれらの記憶媒体を装着して、コンピュータからプログラム２１を読み出し、内部メモリ４２またはハードディスク４４（磁気ディスクやシリコンディスクなどを含む）に記憶し、ＣＰＵ４１によってプログラム２１を実行し、上述の本発明の画像処理装置の実施の一形態として説明した機能が全部又は部分的に実現される。あるいは、通信路を介してプログラム２１をコンピュータ２２に転送し、コンピュータ２２では通信部４６でプログラム２１を受信して内部メモリ４２またはハードディスク４４に記憶し、ＣＰＵ４１によってプログラム２１を実行して実現してもよい。
【００５３】
コンピュータ２２には、このほかインタフェース４５を介して様々な装置が接続されていてもよい。例えば画像読取装置がインタフェース４５を介して接続され、画像読取装置で読み取った画像を処理対象の画像として与えるように構成してもよい。また、例えば出力装置がインタフェース４５を介して接続され、集約した画像を出力装置から出力するように構成してもよい。なお、各構成が１台のコンピュータにおいて動作する必要はなく、処理段階に応じて別のコンピュータにより処理が実行されてもよい。
【００５４】
また、他の用途に適用する場合には、その用途におけるプログラムと一体として構成してもよい。さらに、部分的にハードウェアによって構成してもよいし、あるいは、すべてをハードウェアで構成してもよい。
【符号の説明】
【００５５】
１１…頁順序判定部、１２…頁順序置換部、１３…集約部、２１…プログラム、２２…コンピュータ、３１…光磁気ディスク、３２…光ディスク、３３…磁気ディスク、３４…メモリ、４１…ＣＰＵ、４２…内部メモリ、４３…読取部、４４…ハードディスク、４５…インタフェース、４６…通信部。
【図１】
2014138377.tif 000003
【図２】
2014138377.tif 000004
【図３】
2014138377.tif 000005
【図４】
2014138377.tif 000006
【図５】
2014138377.tif 000007
【図６】
2014138377.tif 000008
【図７】
2014138377.tif 000009
【図８】
2014138377.tif 000010