(57)【要約】【課題】品質の高いプリントを行う際にオペレータが行う画像処理の負担を軽減する。【解決手段】入力された画像データに対し、画像解析とオペレータの判断とによって画像の特徴情報が特定される。プリンタのデータベースには、過去に行われた画像処理の履歴として、画像の特徴情報とその画像に使用された画像処理パラメータとを含むサンプル情報が蓄積されている。画像の特徴情報が合致するサンプル情報がデータベースから検索される。適当なサンプル情報が見つかると、その画像処理パラメータを使用した画像処理が実行される。適当なサンプル情報が存在しない場合は、他店のプリンタのデータベースを検索する。いずれのデータベースにも適当なサンプル情報が存在しない場合には、オペレータが画像処理パラメータを設定する。オペレータにより設定された画像処理パラメータは、新規のサンプル情報としてデータベースに登録される。【選択図】図４
2007143047.tif 000002
【特許請求の範囲】
【請求項１】
画像処理パラメータに従って画像データに画像処理を行う画像処理手段と、
画像の特徴情報及びその画像に適用された画像処理パラメータを含むサンプル情報が蓄積されるデータベースと、
新規の画像データが入力された際に、その画像の特徴情報と合致するサンプル情報を前記データベースから検索するサンプル情報検索手段と、
前記サンプル情報検索手段により特徴情報の合致するサンプル情報が得られた際、このサンプル情報に含まれる画像処理パラメータに従って、新規の画像データの画像処理を前記画像処理手段に実行させる画像処理指示手段と、
前記サンプル情報検索手段により特徴情報の合致するサンプル情報が得られなかった際、新規画像の特徴情報とその画像に適用された画像処理パラメータとを含む新規のサンプル情報を前記データベースに登録するサンプル情報登録手段とを備えたことを特徴とする画像処理システム。
【請求項２】
画像データを解析し、前記特徴情報を算出する画像解析手段を備えたことを特徴とする請求項１記載の画像処理システム。
【請求項３】
前記画像解析手段は、画像中の人物の顔を検出する顔検出手段と、検出された顔の肌色を識別する肌色識別手段とを有することを特徴とする請求項２記載の画像処理システム。
【請求項４】
前記画像解析手段は、画像の特徴情報として画像データに付加された撮影情報を抽出することを特徴とする請求項２又は３記載の画像処理システム。
【請求項５】
前記データベースは、前記画像処理手段及び前記サンプル情報検索手段を有する複数の画像処理装置のそれぞれに設けられ、
前記複数の画像処理装置は、ネットワークを介して互いに接続されていることを特徴とする請求項１ないし４のいずれか１項に記載の画像処理システム。
【請求項６】
前記データベースは、前記サンプル情報検索手段を有するサーバに設けられ、
前記サーバは、前記画像処理手段を有する画像処理装置とネットワークを介して接続されており、
前記サーバは、前記画像処理装置からサンプル情報が要求された時に前記データベースからサンプル情報を検索し、前記画像処理装置にサンプル情報を送信することを特徴とする請求項１ないし４のいずれか１項に記載の画像処理システム。
【請求項７】
画像処理パラメータに従って画像データに画像処理を行う画像処理手段と、
新規の画像データが入力された際に、画像の特徴情報及びその画像に適用された画像処理パラメータを含むサンプル情報が蓄積されたデータベースから、新規画像の特徴情報と合致するサンプル情報を検索するサンプル情報検索手段と、
前記サンプル情報検索手段により特徴情報の合致するサンプル情報が得られた際、このサンプル情報に含まれる画像処理パラメータに従って、新規の画像データの画像処理を前記画像処理手段に実行させる画像処理指示手段と、
前記サンプル情報検索手段により特徴情報の合致するサンプル情報が得られなかった際、新規画像の特徴情報とその画像に使用された画像処理パラメータとを含む新規のサンプル情報を前記データベースに登録するサンプル情報登録手段としてコンピュータを機能させることを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像のプリント時に予め画像処理を行うための画像処理システム及び画像処理プログラムに関する。
【背景技術】
【０００２】
デジタルカメラにより得られる画像データ、或いは現像処理された写真フイルムを光学的に読み取ることで得られる画像データに基づいて、印画紙にプリント処理を行うデジタルフォトプリンタが知られている（例えば、特許文献１参照）。デジタルフォトプリンタは、プリント処理の前に色調及び明暗濃度等を適切に補正する画像処理手段を備え、例えば撮影に失敗した画像であっても見栄えのよいプリント写真を作成できる。
【０００３】
画像処理を行う際には、明度補正、コントラスト補正、シャープネス補正、ホワイトバランス補正、彩度補正等の処理内容が予め決められた画像処理項目を選択し、さらに画像処理項目ごとに用意された画像処理パラメータを選択することによって補正の強さを決定する。高品質のプリント写真を作成するためには、例えば天候の違いによる画像の明るさや色合いの違いに応じて、適切な画像処理を行う必要があり、１枚の画像ごとに異なる撮影条件に応じて適切な画像処理項目とパラメータが決定される。このため、画像処理パラメータの選択を伴う高度な画像処理は熟練したオペレータによって行われていた。
【０００４】
画像処理が特に難しいのは人物の写る画像である。人の肌の色には個人差があり、民族の違いや地域の違いによって、茶褐色に近い肌色、赤みを帯びた黄色に近い肌色、青みを帯びた白色に近い肌色のように肌の色は異なる。また、人物への光の当たり方、女性であれば化粧の有無等で肌色は変化する。さらに、森林や湖などの背景となる風景の違いに応じて適切な色合いは異なり、撮影者の好みや文化的な風習の違いによる好みによって適切な色合いは変わってくる。
【特許文献１】特開２００５−１８４６２７号公報（特に００２８〜００４３段落）
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、画像に写る人物や撮影者の好み等に応じて異なる画像処理を行うことは大変な手間がかかる。また、作業能率を高めるために、一定の画像処理を行うだけでは、プリント品質の向上は不可能である。
【０００６】
本発明は、上記問題点を考慮してなされたもので、オペレータによる画像処理の負担を軽減し、高いプリント品質を保ちながら画像処理の能率を向上できる画像処理システム及びそのための画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の画像処理システムは、画像処理パラメータに従って画像データに画像処理を行う画像処理手段と、画像の特徴情報及びその画像に適用された画像処理パラメータを含むサンプル情報が蓄積されるデータベースと、新規の画像データが入力された際に、その画像の特徴情報と合致するサンプル情報を前記データベースから検索するサンプル情報検索手段と、前記サンプル情報検索手段により特徴情報の合致するサンプル情報が得られた際、このサンプル情報に含まれる画像処理パラメータに従って、新規の画像データの画像処理を前記画像処理手段に実行させる画像処理指示手段と、前記サンプル情報検索手段により特徴情報の合致するサンプル情報が得られなかった際、新規画像の特徴情報とその画像に使用された画像処理パラメータとを含む新規のサンプル情報を前記データベースに登録するサンプル情報登録手段とを備えたことを特徴とする。
【０００８】
また、画像データを解析し、前記特徴情報を算出する画像解析手段を備えたことを特徴とする。
【０００９】
また、前記画像解析手段は、画像中の人物の顔を検出する顔検出手段と、検出された顔の肌色を識別する肌色識別手段とを有することを特徴とする
【００１０】
また、前記画像解析手段は、画像の特徴情報として画像データに付加された撮影情報を抽出することを特徴とする。
【００１１】
また、前記データベースは、前記画像処理手段及び前記サンプル情報検索手段を有する複数の画像処理装置のそれぞれに設けられ、前記複数の画像処理装置は、ネットワークを介して互いに接続されていることを特徴とする。
【００１２】
また、前記データベースは、前記サンプル情報検索手段を有するサーバに設けられ、前記サーバは、前記画像処理手段を有する画像処理装置とネットワークを介して接続されており、前記サーバは、前記画像処理装置からサンプル情報が要求された時に前記データベースからサンプル情報を検索し、前記画像処理装置にサンプル情報を送信することを特徴とする。
【発明の効果】
【００１３】
本発明の画像処理システムによれば、専門知識を有するオペレータにより行われた画像処理の内容を示す履歴データとして、画像の特徴情報と画像処理パラメータとを含むサンプル情報を蓄積するから、過去に画像処理が行われた画像と特徴が共通する画像に対しては、過去に行われた画像処理を基本処理として行い、画像ごとに異なる細かな違いはパラメータを微調整することで補正できる。すなわち、画像処理パラメータを最初から設定する場合よりもオペレータの作業量を軽減することができる。これにより、画像処理の作業能率が向上し、人件費等のコストを削減できる。また、専門知識が不十分なオペレータであっても、熟練したオペレータと同等な高品位の画像に仕上げる画像処理が容易に行える。また、過去に画像処理が行われていないタイプの画像に対しては、使用された画像処理パラメータを画像の特徴情報とともにデータベースに登録するから、様々な画像に対応できる充実したデータベースを実現でき、オペレータの作業量をさらに軽減できるようになる。
【００１４】
また、画像の特徴情報は、画像データを解析して得られる特徴情報を使用するから、オペレータの視覚では判断のつきにくい画像の特徴情報をサンプル情報に盛り込むことができ、適切な画像処理パラメータを抽出する精度を高めることができる。
【００１５】
また、画像データを解析する際に、抽出された人物の顔から肌の色を識別するから、人物の写る画像に対して画像処理を行う際に、画像の特徴情報として肌の色が共通したサンプル情報を検索することができるから、人物の写る画像に対して適切な画像処理を行うための適切な画像処理パラメータを抽出する精度を高めることができる。
【００１６】
また、ＡＰＳ対応の写真フイルムに磁気データとして記録された撮影条件に関するデータや、デジタルカメラにおいて画像データに付加される撮影条件に関するデータなどを画像情報の一部とすることにより、撮影環境により異なる画像の明るさや色合いを適切に補正できる画像処理パラメータを抽出できる。
【００１７】
また、データベースを有するフォトプリンタでネットワークを構築することにより、適切なサンプル情報が蓄積されていないデータベースを有するフォトプリンタであっても、他のフォトプリンタのデータベースからサンプル情報を検索することが可能となり、画像のプリント時に予め行われる画像処理により高品位なプリントが行える。また、高度な画像処理を自動化して、プリント処理の能率を向上できる。また、データベースを一括管理するサーバとフォトプリンタを接続することでサンプル情報の蓄積が直ちに行われ、データベースが最新の状態に更新されるから、画像の特徴情報の合致しないことが発生する頻度を少なくできる。
【発明を実施するための最良の形態】
【００１８】
図１において、複数のプリントサービス店にプリンタ１０がそれぞれ設置されている。プリンタ１０は、デジタルフォトプリンタであり、入力された画像データに画像処理を行い、画質を補正する画像処理装置と、画像処理のなされた画像データに基づいて印画紙にプリントを行うプリンタとしての機能を備えている。なお、印画紙にプリントを行う際は、画像データに基づいて印画紙を露光する画像の焼付けと、印画紙の現像、水洗い、乾燥等の一連の作業を１台で行うことができる。各プリントサービス店では、撮影済みの写真フイルム又はデジタルカメラ等により画像データが記憶された記憶媒体を一般の顧客から預かり、プリンタ１０を使用して印画紙に画像をプリントするサービスを行う。
【００１９】
プリンタ１０はデータベース１１を有している。プリンタ１０はその内部で生成された新規のデータをデータベース１１に記録でき、既に記録されたデータを必要な時に読み出すことができる。各店舗のプリンタ１０は、専用回線により互いに接続されており、互いにデータの送受信が行える。例えば、特定のプリンタ１０のデータベース１１から他のプリンタ１０のデータベースにデータをコピーすることができる。
【００２０】
図２において、プリンタ１０は、他のプリンタ１０との間でデータの送受信を行うための通信部１５と、ＣＰＵ１６により実行されるシステムプログラムが記憶されたプログラム記憶部１７と、入力された画像データに基づいて印画紙に画像を光学的に記録し、印画紙の現像処理、乾燥処理等を行うプリント実行部１８と、オペレータが入力操作を行うためのキーボード等が設けられた入力操作部１９と、プリントされる画像等を表示する画像表示部２０と、各種の記憶媒体から画像データを入力するための画像データ入力部２１とを備えている。
【００２１】
ＣＰＵ１６は、プログラム記憶部１７に記憶されたシステムプログラムを実行し、画像解析部２２、画像処理部２３、システム制御部２４、サンプル検索部２５、サンプル登録部２６として機能する。画像解析部２２は、入力された画像データを解析し、ヒストグラム算出、平均色算出、人物検出、背景識別等を行う。画像解析部２２は、人物を検出する際に画像から肌色の領域を検出し、肌色の領域内に存在する両眼を検出することにより顔を識別する。また、背景を識別する際には、背景に多く使用されている色を画素レベルで判別し、その色に応じた背景の種類の候補をピックアップし、オペレータに背景の種類を候補の中から選択させる。例えば、背景の色が青色であれば、空、海、湖などが候補としてピックアップされ、緑であれば、森林、芝、公園などがピックアップされる。背景が人工物の場合には、オペレータによって人工物の種類が選択される場合もある。
【００２２】
画像処理部２３は、プリント写真を作成する際に画質を補正するための画像処理を行う。プリンタ１０には、画像処理のパターンとして数十種類の画像処理項目が用意されており、画像処理部２３はオペレータ又はシステム制御部２４により選択された画像処理項目を実行し、画像データに画像処理を行う。特定の画像処理項目が実行される際には、画像処理項目ごとに決められた画像処理パラメータが選択される。例えば、明るさのレベルを補正する画像処理項目では、画像の明るさの増減の強さを決めるパラメータ値が画像処理パラメータであり、カラーバランスを補正する画像処理項目では、三原色の色味を強めるかその補色の色味を強めるかを決めるパラメータ値が画像処理パラメータである。
【００２３】
システム制御部２４は、プログラムにより決められたシーケンスに従って、プリンタ１０の各部を制御する。システム制御部２４は、画像データ入力部２１から入力された画像データをデータベース１１に格納し、画像のプリント時にはデータベース１１から画像データを読み出す。
【００２４】
図３において、データベース１１には、入力された画像データと、特定の画像データになされた画像処理の履歴となるサンプル情報Ｄ１が記憶されている。サンプル情報Ｄ１は、画像処理の行われた元の画像データと、画像の特徴を表す画像特徴情報と、画像処理に使用された画像処理パラメータとによって構成される。画像特徴情報は、画像中の人物の肌色の種別を表す肌色種別情報、画像が撮影された時間帯を表す撮影時間帯情報、撮影された風景や人物の背景の種別を表す背景種別情報、画像中の人物数、撮影者及び画像中の人物の国籍等、画像の内容を特徴付ける情報が含まれている。また、画像特徴情報は、画像の特徴だけでなく、写真フイルムに付加記録された撮影データやデジタルカメラで記録された画像データに組み込まれる撮影データがあり、さらに、画像解析部２２によって得られる情報と、オペレータの判断で入力される情報とがある。
【００２５】
画像処理パラメータは、画像特徴情報が求められた特定の画像データに対して適用された画像処理項目ごとのパラメータ値である。例えば、レベル補正、カラーバランス補正、シャープネス補正、コントラスト補正等の画像処理項目のパラメータ値である。各パラメータ値は、画像中の人物の肌の色や、人種、撮影環境に応じて異なる値となり、画像特徴情報が同一であれば、各パラメータ値もほぼ同一となる。
【００２６】
サンプル検索部２５は、画像のプリント処理に伴って予め画像処理が行われる時に、プリントされる画像の特徴情報と合致するサンプル情報Ｄ１をデータベース１１から検索し、該当するサンプル情報Ｄ１を抽出する。また、サンプル検索部２５は、自店のデータベース１１に該当するサンプル情報Ｄ１が存在しなかった場合、プリントしようとする画像の特徴情報を他店のプリンタ１０に送信する。また、サンプル検索部２５は、例えば他店のプリンタ１０から画像の特徴情報を受信した際に、自店のデータベース１１からその特徴情報と合致するサンプル情報Ｄ１を検索し、該当するサンプル情報を抽出する。抽出されたサンプル情報Ｄ１は、他店のプリンタ１０に送信される。該当するサンプル情報Ｄ１が存在しなかった場合には、該当データが無い事を表す情報を他のプリンタ１０に送信する。
【００２７】
サンプル登録部２６は、自店及び他店のデータベース１１から目的のサンプル情報Ｄ１が見つからなかった場合、プリントしようとする画像の画像データと、画像データから得られた特徴情報と、その画像に対してオペレータが設定した画像処理パラメータをデータベース１１に登録する。
【００２８】
次にプリンタ１０の作用について説明する。図４において、一般の顧客は、撮影の終わった写真フイルムや、デジタルカメラで使用したメモリカード、画像データの記録されたＣＤＲＯＭ等をプリントサービス店であるＡ店に持ち込み、画像のプリントを依頼する。写真フイルムは現像処理がなされる。プリンタ１０にはフイルムスキャナ、メモリカードリーダ、ＣＤＲＯＭドライブを備えた画像データ入力部２１が設けられており、写真フイルムの画像はフイルムスキャナで読み取られ、画像データとして入力される。メモリカード又はＣＤＲＯＭドライブからは画像データが読み出される。
【００２９】
システム制御部２４は、フイルムスキャナから入力された画像データ、メモリカード又はＣＤＲＯＭドライブから読み取られた画像データをデータベース１１に格納する。オペレータは入力操作部１９を介してプリントを行う画像データを選択する操作を行う。画像解析部２２は、プリントを行うために選択された画像データの解析を行う。画像解析部２２は、ヒストグラム算出、平均色算出、人物検出、背景識別等を行い、画像に写る人数が求められ、肌の色が識別される。また、写真フイルムの付加情報として磁気記録された撮影データや画像データに組み込まれた撮影データから画像の撮影地や撮影日時等が読み出される。オペレータは、画像解析部２２が導出した画像の特徴情報に加え、画像に写る人物や顧客の出身地域に関わる人種の情報等を画像の特徴情報として入力する。
【００３０】
画像解析部２２とオペレータとによって画像の特徴情報が決定すると、サンプル検索部２５は、この特徴情報と合致するサンプル情報をデータベース１１から検索する。サンプル検索部２５は、プリントしようとする画像の特徴情報とデータベース１１にサンプル情報として登録されている画像の特徴情報とを比較して、特徴情報の合致するサンプル情報を抽出する。なお、抽出されたサンプル情報が複数種類あった場合、オペレータは該当するサンプル情報の画像データを呼び出し、プリントしようとする画像と登録されている画像とを見比べ、最も類似した画像を元にしているサンプル情報を選択することができる。
【００３１】
一方、自店のデータベース１１から特徴情報の合致したサンプル情報が見つからなかった場合、サンプル検索部２５は、他店の複数のプリンタ１０を対象に画像の特徴情報を送信する。このとき送信される特徴情報は、画像中に写る人物の人種に関する情報のみである。他店のプリンタ１０では、人種情報の合致するサンプル情報が検索される。自店のプリンタ１０には他店のデータベース１１に登録されている人種情報の合致するサンプル情報の該当数が送信される。サンプル検索部２５は、人物情報の合致するサンプル情報の該当数が最も多かった店舗のプリンタ１０に対し、人種情報以外の全ての特徴情報を送信する。これにより、例えば、プリントしようとする画像に写る人物が白人であれば、白人の写る画像のサンプル情報が多く登録されているデータベースからサンプル情報が検索される。他店のプリンタ１０では、自店のプリンタ１０と同様に、画像の特徴情報に基づいてこれと合致するサンプル情報が検索される。
【００３２】
他店のプリンタ１０において、画像の特徴情報が合致するサンプル情報が見つかると、これが自店のプリンタ１０に送信されてくる。一方、特徴情報の合致するサンプル情報が見つからなかった場合、該当するサンプル情報がなかったことが通知される。自店及び他店のデータベース１１に画像の特徴情報が合致するサンプル情報が存在しなかった場合、プリントしようとする画像は、オペレータにより画像処理パラメータが設定される。
【００３３】
自店又は他店のデータベース１１から画像の特徴情報が合致したサンプル情報が見つかった場合、サンプル情報に含まれる画像処理パラメータが抽出される。画像処理部２３は、抽出されたパラメータに従って画像処理を実行する。自店及び他店のデータベース１１から画像の特徴情報が合致したサンプル情報が見つからなかった場合、画像処理部２３は、オペレータにより設定された画像処理パラメータに従って画像処理を実行する。画像の特徴情報が合致したサンプル情報が見つかった場合では、オペレータは画像処理パラメータに微調整を行う程度の作業を行えばよく、オペレータ自身が画像処理パラメータを初めから設定する場合に比べて、その作業量は大幅に少なくなる。
【００３４】
サンプル登録部２６は、画像の特徴情報が合致するサンプル情報が得られずにオペレータによって全ての画像処理パラメータが設定された画像データが存在した場合、その画像データと、画像データから得られた特徴情報と、オペレータにより設定された画像処理パラメータとからなる新規のサンプル情報を作成し、データベース１１に登録する。
【００３５】
１枚の画像処理が行われると、次の画像データが読み出され、同様にして特徴情報が決定され、サンプル情報の検索が行われる。該当するサンプル情報が得られると、その画像処理データが適用された画像処理が行われる。該当するサンプル情報が得られなければ、オペレータにより画像処理パラメータが設定され、サンプル情報の新規登録がなされる。画像処理が行われた画像データは、プリント実行部１８に送られる。プリント実行部１８では、画像データに基づいて印画紙に露光焼付が行われ、印画紙の現像、水洗い、乾燥等が行われ、注文ごとに仕分けながらプリント写真が作成される。
【００３６】
なお、本発明は上記実施形態に限られず、適宜の変更が可能である。例えば、他店のデータベースからサンプル情報を検索する場合、人物の写る画像であれば、人種情報を優先し、人種が同一の人物が写る画像に関するサンプル情報の登録数が多いデータベースから、特徴情報の合致するサンプル情報を検索するようにしているが、風景画である場合には、最も多く使用されている色を表す代表色や、画像全体の色を平均した平均色を優先してサンプル情報を検索できるようにしてもよい。例えば、雪の降らない地域の店舗に、雪景色の画像が持ち込まれた際、雪の多い地域の店舗で用いられる雪景色の画像のパラメータを使用することができる。また、画像の特徴情報として顧客識別用のＩＤ情報を付加し、同じ顧客が過去に持ち込んだ画像のサンプル情報を優先して検索するようにすれば、顧客の好みに合ったプリント写真を提供することも可能となる。
【００３７】
また、画像の特徴情報が全て合致するサンプル情報が得られない場合には、合致する特徴情報の多い順にサンプル情報を抽出し、オペレータが適切なサンプル情報を選択するようにしてもよい。また、図５に示すように、データベースを一括管理するサーバ３０を備え、各サーバとプリンタをネットワークで接続し、サンプル情報の検索と新規登録をサーバ３０によって一元管理することもできる。このシステムであれば、サンプル情報を検索する際に複数のデータベースに照会する必要がなく、サンプル情報を迅速に検索できる。
【図面の簡単な説明】
【００３８】
【図１】プリントシステムの概念図である。
【図２】プリンタのブロック図である。
【図３】データベースの概念図である。
【図４】プリントが行われる際の作業の流れを示すフローチャートである。
【図５】サーバを備えたプリントシステムの概念図である。
【符号の説明】
【００３９】
１０  プリンタ
１１  データベース
１５  通信部
１６  ＣＰＵ
１７  プログラム記憶部
１８  プリント実行部
１９  入力操作部
２０  画像表示部
２１  画像データ入力部
２２  画像解析部
２３  画像処理部
２４  システム制御部
２５  サンプル検索部
２６  サンプル登録部
【図１】
2007143047.tif 000003
【図２】
2007143047.tif 000004
【図３】
2007143047.tif 000005
【図４】
2007143047.tif 000006
【図５】
2007143047.tif 000007