(57)【特許請求の範囲】
【請求項１】
入力される画像情報に基づいて対象物に印刷を行う印刷手段と、指定された香料を対象物に付着させる香り付着手段と、香り付着対象となる画像を登録する画像登録手段と、入力される画像情報に類似した画像をデータベースから検索する機能、検出した類似画像に対応する香りを設定する香り設定機能、及び設定した香りを対象物に付着させるように香り付着手段を制御する機能を有する制御手段と、を備え、前記制御手段は、入力される画像情報から図または写真領域を抽出画像として抽出する領域識別機能、抽出画像から対応する香りを設定する機能を有する画像形成装置において、
前記制御手段は、画像情報における前記抽出画像の座標から、香り付着位置を制御する機能を有し、
香料を付着させたい画像データに対する香り設定用の文字列の距離が所定の基準値より小さい場合、当該文字列に対応付けられている香りを、抽出された特定画像データの特定領域にのみ付着するよう制御することを特徴とする画像形成装置。
【請求項２】
香り付着対象となる文字列を登録する文字列登録手段を備え、前記領域識別機能は、さらに入力される画像情報から文字領域を抽出するものであり、前記制御手段は、さらに文字領域の抽出画像に対する距離が前記基準値より小さいかどうかを判断する位置認識機能、文字領域から文字情報を抽出するＯ Ｃ Ｒ 処理機能、抽出した文字情報と一致する文字列を文字列登録手段から検索する文字列検索機能を有し、前記香り設定機能は前記文字列検索機能により検出した文字列に対応する香りを前記検出した類似画像に対応する香りとして設定するものであることを特徴とする請求項１に記載の画像形成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタル複写機、プリンタ、ファクシミリ装置、多機能を併せ持つ複合機などの画像形成装置に関する。
【背景技術】
【０００２】
従来、紙などにトナーを定着させることによって、画像を形成するプリンタとして、所謂レーザープリンタが知られている。このレーザープリンタは、各種の着色トナーを点として紙につけることによって、人間の目から見たときに、カラー画像として見えるようになっている。
近年のカラーレーザープリンタ技術の進歩によって、画像が印刷された結果を見て、人々は対象物への想像力をより一層掻き立てられるようになってきており、印刷が文化として定着している。
しかしながら、画像の綺麗さからの想像だけではなく、日本には古来より香を焚いて楽しんだりする習慣や、単なる流行から定着化されつつあるアロマセラピーや、香水などのように、香りにより個人を表現するなどに見受けられる香りによる想像力の発揮という文化がある。
印刷と香りという二つの文化は個別に発展をしてきて、別の世界観を築き、それぞれが独自の方向での想像力の啓発へと利用されているのが現状である。これら印刷と香りとを結び付ける技術として、例えば特許文献１に記載されているように、任意の香りを任意の場所につけると共に画像印刷を行うようにしたものが提案されている。
また、特許文献２に記載されているように、印刷する画像情報が鑑賞者に与える印象を検出し、検出された画像印象に対応する香りを対象物に付着させるようにした技術が提案されている。
このように、レーザープリンタによって印刷を行う際に、トナーだけでなく、香り成分をも付着させることによって、印刷物からも香りが発生するようになり、画像と香りという二つのアプローチから、より臨場感のある情報を利用者に伝えることができる。
【特許文献１】特開平１１−３４８３７４号公報
【特許文献２】特開２００２−９６５３０公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上記従来の技術にあっては、どの香りを付着させるかという判断を利用者が行っているため、利便性が低い。また、印刷画像の印象に対応させて香りを決定するような場合には、画像が鑑賞者に与える印象を視覚的特徴量から算出しているため、鑑賞者が実際に持つ印象と必ずしも一致するとは限らない。画像に対して鑑賞者が持つ印象が、視覚的特徴量から算出した印象と異なる場合には、印象と異なる香りが付着されることになって違和感を与える。
また、従来の技術では、画像の情報を基に香りを決定しているが、画像に含まれる文字情報を基に香りを決定することができれば、画像よりも直接的に香りを特定でき、作成者の意図した情報を利用者に与える上で有効であると考えられる。
本発明はこのような背景に鑑みてなされたものであり、画像の持つ情報に適した香り付けを行うことができる画像形成装置を提供することを目的とする。
【課題を解決するための手段】
【０００４】
上記目的を達成するために、請求項１に係る発明は、入力される画像情報に基づいて対象物に印刷を行う印刷手段と、指定された香料を対象物に付着させる香り付着手段と、香り付着対象となる画像を登録する画像登録手段と、入力される画像情報に類似した画像をデータベースから検索する機能、検出した類似画像に対応する香りを設定する香り設定機能、及び設定した香りを対象物に付着させるように香り付着手段を制御する機能を有する制御手段と、を備え、前記制御手段は、入力される画像情報から図または写真領域を抽出画像として抽出する領域識別機能、抽出画像から対応する香りを設定する機能を有する画像形成装置において、前記制御手段は、画像情報における前記抽出画像の座標から、香り付着位置を制御する機能を有し、香料を付着させたい画像データに対する香り設定用の文字列の距離が所定の基準値より小さい場合、当該文字列に対応付けられている香りを、抽出された特定画像データの特定領域にのみ付着するよう制御するものである。
請求項２に係る発明は、香り付着対象となる文字列を登録する文字列登録手段を備え、前記領域識別機能は、さらに入力される画像情報から文字領域を抽出するものであり、前記制御手段は、さらに文字領域の抽出画像に対する距離が前記基準値より小さいかどうかを判断する位置認識機能、文字領域から文字情報を抽出するＯ Ｃ Ｒ 処理機能、抽出した文字情報と一致する文字列を文字列登録手段から検索する文字列検索機能を有し、前記香り設定機能は前記文字列検索機能により検出した文字列に対応する香りを前記検出した類似画像に対応する香りとして設定するものである請求項１に記載の画像形成装置である。
【発明の効果】
【０００６】
本発明の画像形成装置は、入力される画像情報に基づいて対象物に印刷を行う印刷手段と、指定された香料を対象物に付着させる香り付着手段と、香り付着対象となる画像を登録する画像登録手段と、入力される画像情報に類似した画像をデータベースから検索する機能、検出した類似画像に対応する香りを設定する香り設定機能、及び設定した香りを対象物に付着させるように香り付着手段を制御する機能を有する制御手段と、を備え、前記制御手段は、入力される画像情報から図または写真領域を抽出画像として抽出する領域識別機能、抽出画像から対応する香りを設定する機能を有する画像形成装置において、前記制御手段は、画像情報における前記抽出画像の座標から、香り付着位置を制御する機能を有し、香料を付着させたい画像データに対する香り設定用の文字列の距離が所定の基準値より小さい場合、当該文字列に対応付けられている香りを、抽出された特定画像データの特定領域にのみ付着するよう制御するので、画像の持つ情報に適した香り付けを行うことができる。
【発明を実施するための最良の形態】
【０００７】
以下、本発明の実施の形態を図面に従って説明する。
図１は本発明の画像形成装置としてのデジタルカラー複合機を含むネットワーク構成図である。
デジタルカラー複合機１は、コピー機能、ファクシミリ（ＦＡＸ）機能、プリント機能、スキャナ機能及び入力画像（スキャナ機能による読み取り原稿画像やプリンタあるいはＦＡＸ機能により入力された画像）を配信する機能などを複合したものである。
このシステムは、デジタルカラー複合機１に、通信ネットワークであるＬＡＮ（Local Area Network）２を介し、各種の情報処理を実行するサーバコンピュータ３や複数台のクライアントコンピュータ４が接続されている。
サーバコンピュータ３は、例えばＦＴＰ、ＨＴＴＰプロトコルをサポートしたり、ＷｅｂサーバやＤＮＳ（ドメインネームサーバ）の機能を実現するものである。すなわち、このシステムにおいては、デジタルカラー複合機１が備えている画像入力機能（スキャナ機能）、画像出力機能（プリント機能）及び画像蓄積機能などの画像処理機能を、ＬＡＮ２上でシェアし得る環境が構築されている。
このようなシステムは、通信制御ユニット５を介してインターネット網６に接続され、インターネット網６を介して外部環境とデータ通信可能に構築されている。通信制御ユニット５としては、ルータ、交換機、モデム、ＤＳＬモデムなどが一般的であるが、最低限ＴＣＰ／ＩＰ通信が可能であればよい。また、ＬＡＮ２は有線通信に限るものではなく、無線通信（赤外線や電波など）であってもよい。また、光ファイバーを用いたものであってもよい。
【０００８】
次に、デジタルカラー複合機１について説明する。ここで、図２はデジタルカラー複合機１を概略的に示す外観斜視図、図３はデジタルカラー複合機１の各部の電気的接続を示すブロック図である。図２に示すように、デジタルカラー複合機１は、転写紙などの媒体に画像を形成する画像形成装置である印刷装置７の上部に、原稿から画像を読み取る画像読取装置８を配設した構成となっている。
また、画像読取装置８の装置外面には、利用者に対する表示と利用者からの機能設定などの各種の入力を許容する操作パネルＰが設けられている。さらに、操作パネルＰの下部には、光ディスク、フレキシブルディスクなどの記憶媒体Ｍ（図３参照）に記憶されているプログラムコードや画像データなどを読み取る、または、記憶媒体Ｍに対してプログラムコードや画像データなどを書き込む装置である外部メディア入出力装置９が、記憶媒体Ｍの挿入を許容する挿入口を外部に露出させて設けられている。
このようなデジタルカラー複合機１のストラクチャとしては、図３に示すように、画像処理ユニット部Ａと情報処理ユニット部Ｂとに大別されており、印刷装置７及び画像読取装置８は画像処理ユニット部Ａに属し、操作パネルＰ及び外部メディア入出力装置９は情報処理ユニット部Ｂに属している。
【０００９】
画像処理ユニット部Ａについて説明する。印刷装置７及び画像読取装置８を備える画像処理ユニット部Ａは、画像処理ユニット部Ａにおける画像処理全般の制御を行う画像処理制御ユニット１０を備えており、この画像処理制御ユニット１０には、印刷装置７を制御する印刷制御ユニット１１と、画像読取装置８を制御する画像読取制御ユニット１２とが接続されている。
印刷制御ユニット１１は、画像処理制御ユニット１０の制御に従って印刷装置７に対して画像データを含む印刷指示を出力し、印刷装置７に転写紙などの媒体に画像を形成して出力させる。印刷装置７はフルカラー印刷可能となっており、その印刷方式は、電子写真方式のほか、インクジェット方式、昇華型熱転写方式、銀塩写真方式、直接感熱記録方式、溶融型熱転写方式など、さまざまな方式を用いることができる。
画像読取制御ユニット１２は、画像処理制御ユニット１０の制御により画像読取装置８を駆動し、原稿の表面に対するランプ照射の反射光をミラー及びレンズにより受光素子（例えば、ＣＣＤ（Charge Coupled Device））に集光して読み取り、Ａ／Ｄ変換してＲＧＢ各８ビットのデジタル画像データを生成する。
このような画像処理制御ユニット１０は、メインプロセッサであるＣＰＵ（Central Processing Unit）１３と、画像読取装置８から読み込んだ画像データを印刷装置７による作像に供すべく一旦格納しておくＲＡＭ（Random Access Memory）１４と、制御プログラムなどを記憶したＲＯＭ（Read Only Memory）１５と、システムログ／システム設定／ログ情報などを記録しておく電源ＯＦＦ時にもデータの保持が可能なＮＶＲＡＭ１６とをバス接続したマイクロコンピュータ構成となっている。
【００１０】
また、画像処理制御ユニット１０には、多量の画像データの蓄積やジョブ履歴などの記憶装置となるＨＤＤ（Hard Disk Drive）１７、装置内部に設けられた集線装置であるＨＵＢ１９を介して画像処理ユニット部ＡをＬＡＮ２に接続するためのＬＡＮ制御部１８、ＦＡＸ制御を行うＦＡＸ制御ユニット２０が接続されている。このＦＡＸ制御ユニット２０は、公衆電話網２１に通じる構内交換器（ＰＢＸ）２２に接続されており、デジタルカラー複合機１は、遠隔のファクシミリ装置と交信することができる。
加えて、画像処理制御ユニット１０には、表示制御ユニット２３及び操作入力制御ユニット２４が接続されている。表示制御ユニット２３は、画像処理制御ユニット１０のコントロールによって制御パネルＩ／Ｆ２５に接続された通信ケーブル２６を介して情報処理ユニット部Ｂに対して画像表示制御信号を出力し、情報処理ユニット部Ｂの操作パネルＰに対して画像表示の制御を行う。
【００１１】
また、操作入力制御ユニット２４は、情報処理ユニット部Ｂの操作パネルＰからの利用者による機能設定や入力操作に応じた入力制御信号を、画像処理制御ユニット１０のコントロールによって制御パネルＩ／Ｆ２５に接続された通信ケーブル２６を介して入力する。すなわち、画像処理ユニット部Ａは、情報処理ユニット部Ｂの操作パネルＰを、通信ケーブル２６を介して直接モニタすることができる構成になっている。
従って、画像処理ユニット部Ａは、従来の画像処理装置が備える画像処理ユニットの機能に加えて、通信ケーブル２６を接続し、情報処理ユニット部Ｂの操作パネルＰを利用する機能を有するものである。すなわち、画像処理ユニット部Ａの表示制御ユニット２３及び操作入力制御ユニット２４は、操作パネルＰに接続されているものとして動作している。
このような構成により、画像処理ユニット部Ａは、外部（サーバコンピュータ３、クライアントコンピュータ４、ファクシミリ装置など）からの画像情報である印刷データ及びプリント指示するコマンドを解析し、印刷データを出力画像データとして印刷できる状態にビットマップ展開し、印刷モードをコマンドから解析し動作を決定している。その印刷データ及びコマンドをＬＡＮ制御部１８あるいはＦＡＸ制御ユニット２０を通じて受信し動作する。
また、画像処理ユニット部Ａは、ＲＡＭ１４やＨＤＤ１７に記憶されている印刷データ、原稿読み取りデータ、これらを出力用に処理した出力画像データ、及び、それらを圧縮した圧縮データを外部（サーバコンピュータ３、クライアントコンピュータ４、ファクシミリなど）に転送することができる。
さらに、画像処理ユニット部Ａは、画像読取装置８の読み取り画像データを画像処理制御ユニット１０に転送し、光学系及びデジタル信号への量子化に伴う信号劣化を補正し、該画像データをＲＡＭ１４に書き込む。このようにしてＲＡＭ１４に格納された画像データは、印刷制御ユニット１１で出力画像データに変換されて、印刷装置７に出力される。
【００１２】
次に、操作パネルＰを備える情報処理ユニット部Ｂについて説明する。情報処理ユニット部Ｂは、一般にパーソナルコンピュータといわれるような情報処理装置に用いられる汎用のＯＳ（Operating System）によって制御されるマイクロコンピュータ構成となっている。
情報処理ユニット部Ｂは、メインプロセッサであるＣＰＵ３１を有しており、このＣＰＵ３１には、ＣＰＵ３１の作業用領域となるＲＡＭや起動プログラムなどを記憶した読出し専用メモリであるＲＯＭで構成されるメモリユニット３２と、ＯＳやアプリケーションプログラムを記憶するＨＤＤなどの記憶装置３４に対するデータの入出力を制御する記憶装置制御ユニット３５とがバス接続されている。
また、ＣＰＵ３１には、情報処理ユニット部Ｂを、ＨＵＢ１９を介してＬＡＮ２に接続するための通信インターフェースであるＬＡＮ制御部３３が接続されている。このＬＡＮ制御部３３に割り当てられるネットワークアドレスであるＩＰアドレスは、前述した画像処理ユニット部ＡのＬＡＮ制御部１８に割り当てられるＩＰアドレスとは異なるものである。
すなわち、本実施の形態のデジタルカラー複合機１には、２つのＩＰアドレスが割り当てられていることになる。つまり、画像処理ユニット部Ａと情報処理ユニット部ＢとはそれぞれＬＡＮ２に接続されていることになり、画像処理ユニット部Ａと情報処理ユニット部Ｂとの間においてはデータ交換が可能な構成になっている。
なお、デジタルカラー複合機１はＨＵＢ１９を介してＬＡＮ２に接続されていることから、見かけ上は、１つのＬＡＮケーブルのみが接続されているように見える。従って、美観を損ねることはなく、結線などの取り扱いを容易にすることが可能になっている。
【００１３】
さらに、ＣＰＵ３１には、操作パネルＰを制御する表示制御ユニット３６及び操作入力制御ユニット３７が接続されている。ここで、図４は操作パネルＰの構成を示す平面図である。図４に示すように、操作パネルＰは、例えばＬＣＤ（Liquid Crystal Display）である表示装置４０と、操作入力装置４１とで構成されている。
操作入力装置４１は、表示装置４０の表面に積層された超音波弾性波方式などのタッチパネル４１ａと、複数のキーを有するキーボード４１ｂとで構成されている。キーボード４１ｂには、画像読み取りの開始を宣言するためのスタートキー、数値入力を行うためのテンキー、読み取った画像データの送信先を設定する読取条件設定キー、クリアキーなどが設けられている。
すなわち、表示制御ユニット３６は、画像表示制御信号を制御パネルＩ／Ｆ３８を介して表示装置４０に出力し、画像表示制御信号に応じた所定事項を表示装置４０に表示させる。一方、操作入力制御ユニット３７は、操作入力装置４１における利用者による機能設定や入力操作に応じた入力制御信号を、制御パネルＩ／Ｆ３８を介して受信する。
【００１４】
加えて、ＣＰＵ３１には、画像処理ユニット部Ａの制御パネルＩ／Ｆ２５と通信ケーブル２６を介して接続されている制御パネル通信ユニット３９が接続されている。制御パネル通信ユニット３９は、画像処理ユニット部Ａから出力された画像表示制御信号を受信し、また、操作パネルＰからの利用者による機能設定や入力操作に応じた入力制御信号を画像処理ユニット部Ａに転送する。
なお、詳細は後述するが、制御パネル通信ユニット３９で受信した画像処理ユニット部Ａからの画像表示制御信号は操作パネルＰの表示装置４０用にデータ変換処理されてから表示制御ユニット３６に出力され、また、操作パネルＰからの利用者による機能設定や入力操作に応じた入力制御信号は画像処理ユニット部Ａでの仕様に応じた形式にデータ変換処理されてから制御パネル通信ユニット３９に入力される。
上述したように記憶装置３４には、ＣＰＵ３１が実行するＯＳやアプリケーションプログラムが格納されている。この意味で、記憶装置３４は、アプリケーションプログラムを記憶する記憶媒体として機能する。このデジタルカラー複合機１では、利用者が電源を投入するとＣＰＵ３１がメモリユニット３２内の起動プログラムを起動させ、記憶装置３４よりＯＳをメモリユニット３２内のＲＡＭに読み込み、このＯＳを起動させる。このようなＯＳは、利用者の操作に応じてプログラムを起動したり、情報を読み込んだり、保存を行ったりする。
ＯＳのうち代表的なものとしては、Ｗｉｎｄｏｗｓ（登録商標）などが知られている。これらのＯＳ上で走る動作プログラムをアプリケーションプログラムと呼んでいる。情報処理ユニット部ＢのＯＳは、情報処理装置（サーバコンピュータ３やクライアントコンピュータ４など）と同種のＯＳ、すなわち汎用のＯＳ（例えば、Ｗｉｎｄｏｗｓ（登録商標）など）となっている。
【００１５】
なお、前述したように、本実施の形態のデジタルカラー複合機１には、ＯＳ、デバイスドライバや各種アプリケーションプログラムなどの各種のプログラムコード（制御プログラム）や画像データなどを記憶した記憶媒体Ｍ、すなわち、フレキシブルディスク、ハードディスク、光ディスク（ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−Ｒ、ＤＶＤ＋Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷなど）、光磁気ディスク（ＭＯ）、半導体メディアなどの記憶媒体Ｍに記憶されているプログラムコードや画像データなどを読み取る、または記憶媒体Ｍに対してプログラムコードや画像データなどを書き込む装置であるフレキシブルディスクドライブ装置、光ディスクドライブ装置、ＭＯドライブ装置、メディアドライブ装置などの外部メディア入出力装置９が搭載されている。このような外部メディア入出力装置９は、ＣＰＵ３１にバス接続されている入出力デバイス制御ユニット４２により制御される。
従って、記憶装置３４に記憶されているアプリケーションプログラムは、この記憶媒体Ｍに記録されたアプリケーションプログラムがインストールされたものであってもよい。このため、記憶媒体Ｍも、アプリケーションプログラムを記憶する記憶媒体となり得る。さらには、アプリケーションプログラムは、例えばインターネット網６及びＬＡＮ２を介して外部から取り込まれ、記憶装置３４にインストールされてもよい。
なお、入出力デバイス制御ユニット４２には、ＵＳＢ、ＩＥＥＥ１３９４、ＳＣＳＩなどの各種インターフェース４３も接続されており、各種インターフェース４３を介して様々な機器（デジタルカメラなど）が接続可能となっている。
【００１６】
また、このデジタルカラー複合機１は複数利用者による使用を想定した、利用者認証機能を有している。利用者認証機能としては、例えば利用者ＩＤとパスワードといった認証情報を使用する方法がある。
あらかじめ認証情報をＨＤＤ１７に保存しておいて、操作入力装置４１で利用者認証に必要な利用者ＩＤとパスワードを入力すると、入力された情報とＨＤＤ１７に保存されている情報を照合し、一致した場合、表示装置４０に利用者専用の画面を表示する。
また、このデジタルカラー複合機１は、印刷時に転写紙などの媒体に香料を付着するための香料付着装置４４を有している。香料付着装置４４は、例えばインクジェット方式のインク吐出構造を有して構成され、インクの代わりに香料が格納された複数のインク容器を備えるものである。
この香料付着装置４４を使用して、印刷時、香料を付着する動作について説明する。
デジタルカラー複合機１は、例えば記録媒体Ｍ上の画像データを外部メディア入出力装置９から読み込み、操作入力装置４１に表示することができ、利用者は操作入力装置４１に表示された画像を選択して印刷を指示する。
印刷が指示された場合、ＣＰＵ３１は後述する画像解析処理を行い、付着する香りを設定し、印刷データと共に、ＬＡＮを介して画像処理制御ユニット１０に送信する。画像処理制御ユニット１０は印刷制御ユニット１１に指示を送り、印刷制御ユニット１１は、画像処理制御ユニット１０の制御に従って印刷装置７に対して画像データを含む印刷指示を出力すると共に、香料付着装置４４に対して香り出力を指示する。香り付着装置４４は印刷装置７により搬送される媒体に対して、香料吐出部を移動させ、指定した香りを指定した位置に付着させる。
【００１７】
以下、印刷する画像データを解析して、付着する香りを設定する処理について説明する。
まず印刷前に、利用者は香りを付着する画像データの登録及び付着する香りに関する情報の登録を行う。図５はその登録画面の例である。
利用者による画像データの登録が行われた場合、図６に示すように、入力された画像データ５０に対して画像解析処理が行われ、画像特徴量７０が抽出される。抽出された画像特徴量７０と利用者により設定された香り情報７１は、記憶装置３４内の画像データベース６０に格納される。画像解析処理で抽出される画像特徴量としては、色、エッジ（輪郭）、及びテクスチャ（模様またはパターン）の３種類がある。
画像の色の特徴を抽出する場合には、先ず画像に含まれる各画素についてその色が、赤、緑、及び青夫々の階調値で特定されるＲＧＢ表色系を基にした３次元の色ベクトル空間のどの座標に対応付けられるかが特定される。このような対応付けを全ての画素について行うことにより形成されたＲＧＢヒストグラムを、画像の色特徴データとして用いる。
【００１８】
画像のエッジの特徴を抽出する場合には、画像データ全体を、例えばＳｏｂｅｌ演算子などにより１次差分された数字の配列に変換する。一般的に、画像のエッジに相当する配列領域においては、その１次差分値が大きな値を示す。従って、１次差分値が大きな値を示す配列付近には、エッジが存在すると考えられる。すなわち、１次差分値の配列は画像のエッジの特徴を数値化しているといえる。そこで、Ｓｏｂｅｌ演算子による１次差分値配列を、商品画像のエッジ特徴データとして用いる。
画像のテクスチャを抽出する場合には、画像の明るさを数値化して配列したデータをフーリエ変換して得られるパワースペクトルが、画像の明るさの模様またはパターンの方向性と画像要素の大きさの分布とを記述するといえる。そこで、画像の２次元座標である画素の配列を複素平面に変換した配列におけるパワースペクトルを商品画像のテクスチャ特徴データとして用いる。
なお、上記した色特徴データ、エッジ特徴データ、及びテクスチャ特徴データは、何れも、ベクトルデータとして表現される。
図７は画像データベースに記録された画像データの一例を示す。画像データは、利用者ＩＤ、画像ＩＤ、色特徴データ、エッジ特徴データ、テクスチャ特徴データ、香り種類、香り強度から構成されている。
【００１９】
次に、画像データベース６０に格納した情報を基に、印刷する画像データに対して付着する香りを設定する処理について、図８に示すフローチャートに基づいて説明する。
まず、印刷する画像データに対して画像解析処理が行われ、画像特徴量（色、エッジ、テクスチャ）が抽出される（Ｓ１）。次に画像特徴量の情報を基に、印刷する画像データに類似する画像を画像データベース６０内から検索する（Ｓ２）。
印刷する画像データの特徴量と、画像データベース６０に登録されている各特徴データとの間のユークリッド距離を、色特徴データ、エッジ特徴データ、及びテクスチャ特徴データの夫々について求めて、これら３種類のユークリッド距離を足し合わせる。
ここで、ユークリッド距離とは、ベクトルデータである２つの特徴データのベクトル終点間の距離として定義される。従って、上記３種類のユークリッド距離の合計が小さいほど、色、エッジ、及びテクスチャの特徴において、総合的な類似度が高いと判断される。このような画像検索装置としては、例えば、特開２０００−２８５１４１公報記載の技術がある。
本実施形態においては、求められたユークリッド距離が所定の基準値より小さい場合に、画像が類似していると判定するものとする（Ｓ３）。類似の画像が存在する場合はステップＳ４に進む。ステップＳ４では、ステップＳ３で特定された画像に対応する香り情報を画像データベース６０から抽出し、設定する。類似の画像が複数存在する場合は、上記３種類のユークリッド距離の合計値が最も小さい画像を採用する。類似の画像が存在しない場合は処理を終了する。
また、図９に示す画像データ５１のように、印刷の対象となる画像は図や写真だけでなく、文字や罫線と一緒に構成される場合もある。このような場合は、画像データ５１からいくつかの領域を抽出し、領域ごとに図、写真、文字、罫線などのいずれに属するか判別し、図または写真の領域（抽出画像データ５２）に対して、香り設定処理を行う。
【００２０】
画像データを分割するための画像識別方法としては、例えば、特開２００１−２９７３０３公報に示すような技術がある。この技術では、文書画像をデジタル画像として入力し、該文書画像の背景色を特定し、必要に応じて画像を縮小し、該背景色を用いて該文書画像から背景領域以外の画素を抽出し、該画素を統合して連結成分を生成し、該連結成分を少なくとも形状特徴を用いて所定の領域に分類して、該文書画像の領域識別の結果を得る。
この場合、画像データ５１内における抽出画像データ５２の座標を特定することができるので、画像データ５１内の抽出画像データ５２の部分にのみ香りを付着させることが可能である。
また香料を付着させたい画像データの付近に存在する文字情報を認識し、付着させる香りを設定することも可能である。例として、図１０に示す画像データ５３のように、文字と図から構成させる画像データに対して、画像データ内の図領域に対して香料を付着させたい場合で、図領域の付近に香りを設定するための文字列を入れた場合について説明する。
まず印刷前に、利用者は香りを付着する香り付着文字列の登録を行う。図１１はその登録画面の例である。利用者による香り付着文字列の登録が行われた場合、図１２に示すように、香り付着文字列７２と利用者により設定された香り情報７３は、記憶装置３４内の文字列データベース６１に格納される。
図１３は文字列データベースに記録された文字列データの一例を示す。文字列データは、利用者ＩＤ、文字列ＩＤ、香り付着文字列、香り種類、香り強度から構成されている。
【００２１】
次に、文字列データベース６１に格納した情報を基に、図領域の付近に香り設定用の文字列がある場合の、印刷する画像データに対して付着する香りを設定する処理について、図１４に示すフローチャートに基づいて説明する。
まずステップＳ１１の処理で、入力された画像データ５３に対していくつかの領域を抽出し、領域ごとに図、写真、文字、罫線などのいずれに属するか判別する。
ステップＳ１２では、ステップＳ１１の処理で抽出された、図または写真領域のそれぞれに対する、文字領域それぞれの距離を計算する。求められた距離が所定の基準値より小さい場合に、図領域の付近に文字領域があると判断し、ステップＳ１３に進む。図領域の付近に文字領域がなければ、処理を終了する。
ステップＳ１３では、図領域の付近にある文字領域それぞれについて、ＯＣＲ処理を行い、文字情報を取得する。ステップＳ１４では、取得した文字情報それぞれについて、文字列データベース６１の香り付着文字列と一致する文字列があるか検索を行う。一致する文字列が存在する場合は、ステップＳ１５に進む。一致する文字列がなければ、処理を終了する。
【００２２】
ステップＳ１５では、ステップＳ１４で特定された文字列に対応する香り情報を文字列データベース６１から抽出し、該当する図領域に付着する香りとして設定する。
ここで、類似画像検索により香りを設定する方法と画像付近の文字列により香りを設定する方法を組み合わせて使用してもよい。この場合、利用者は、図１５に示すように、香りを付着する画像データの登録及び付着する香りに関する情報の登録と共に、香りを付着する文字列の登録を行う。
画像データベースには、画像に関する情報以外に文字列情報が一緒に登録される。登録された文字列は、類似画像検索の閾値の設定に用いる。すなわち、登録された文字列が図または写真領域の付近に存在すれば、その領域に対する画像類似判定基準値を高く設定する。基準値が高くなると、画像が類似しているかどうかの判定が緩くなり、似通った画像に対しても香りを設定することができる。
画像データからいくつかの領域を抽出し、抽出した画像データに対して香り付けを行う場合、１つの媒体に対し、複数箇所に異なる種類の香りを付着させることになる可能性がある。
一般に香りには相性のいい香りと悪い香りがある。例えば、シトラス系の香りはフローラル系の香りやハーブ系の香りと相性がよい。また同一系の香りも相性がよいとされ、逆にそれ以外は相性が悪いということになる。
【００２３】
そこで、相性の悪い香り同士を同一の媒体に付着させないよう、付着する香りを特定する処理を行う。この処理について図１６のフローチャート及び図１７の概念図に基づいて説明する。
ステップＳ２１で、まず画像を解析して付着する香りを特定した結果、付着させる香りの種類が複数あるかどうか判断する。複数ある場合はステップＳ２２に進む。複数ない場合は処理を終了する。
ステップＳ２２では、付着する香りの種類が相性の悪いものかどうか、図１３に示す香り相性データベース６２の情報から判断する。例えば、付着させる香りが２種類あり、それぞれシトラス系とフローラル系の香りである場合は相性がよいとなり、シトラス系とグリーン系の香りである場合は相性が悪いとなる。相性の悪いものがある場合はステップＳ２３に進む。相性の悪いものがない場合は処理を終了する。
ステップＳ２３では、相性の悪い香りがあった場合、画像データの情報を基にどの香りを採用するか判断する。判断の方法としては、例えば、香りの元となる抽出画像データの面積に応じて採用する香りの優先順位を決める方法が考えられる。この場合、抽出画像データの面積の一番大きいものに対応した香りを、優先順位の最も高い香りとして設定し、その香りに対して相性の悪い香りは設定されない。
また他の判断方法として、抽出画像データの付近に香り設定用の文字列があるかどうかで判断する方法がある。香り設定用の文字列が付近にある抽出画像データに対応した香りを、付着する香りとして設定し、その香りに対して相性の悪い香りは設定されない。
また利用者によっては、たとえ相性がよくても、異なる種類の香りを同一の媒体に付着させることを好まないということも考えられる。その場合は、利用者からの設定で、異なる種類の香りを付着させないようにする。異なる種類の香りを付着させない設定をされた場合は、図１６におけるステップＳ２２の判断が除かれ、ステップＳ２３で付着する香りが特定される。
【００２４】
以上述べたように、本実施の形態によれば、紙などの記録媒体に、印刷する画像や画像付近の文字列に応じて香りを付けることが可能となる。具体的には以下の効果を奏する。
利用者によってあらかじめ画像とそれに付着する香りを登録し、印刷する画像データがその画像に該当するかどうかを類似画像検索により判断し、媒体に付着する香りを設定可能なため、利用者が画像に対して設定したい香りを自動的に設定することができる。
印刷する画像データから図や写真領域を抽出して、抽出した画像に対する類似画像を検索し香りを設定可能なため、印刷する画像データが図や写真のみで形成されていなくても香りを提供することができる。
印刷する画像データ上の図または写真領域に特定して香りを付着可能なため、画像データ上の香りと関係ある箇所のみに香りを付着させ、それ以外の箇所には香りを付着させないようにすることができる。
印刷する画像データの図または写真領域の付近にあらかじめ登録した文字列が存在する場合に、図または写真領域に対して香りを設定可能なため、利用者が画像に対して設定したい香りを自動的に設定することができる。また文字列による検索は、類似画像検索よりも高速かつ高精度で行うことができる。
【００２５】
印刷する画像データの図または写真領域の付近にあらかじめ登録した文字列が存在する場合に、図または写真領域の画像があらかじめ登録した画像に該当するかどうかを判断する基準を自動的に緩くすることが可能なため、画像が多少一致していなくても香りを設定することができる。
１つの画像に対して複数の香りが設定された場合に、付着する香りを相性のよいもののみに限定可能なため、相性の悪い香りを付着させ利用者に不快感を与えるのを防ぐことができる。また抽出画像情報に基づいて、付着する香りの優先順位を設定可能なため、香りを付着することがより効果的な画像に優先的に香り付けすることが可能である。
１つの画像に対して複数の香りが設定された場合に、付着する香りを１つに限定可能なため、相性の悪い香りを付着させ利用者に不快感を与えるのを防ぐことができる。また抽出画像情報に基づいて、付着する香りの優先順位を設定可能なため、香りを付着することがより効果的な画像のみに限定することが可能である。
１つの画像に対して複数の香りが設定された場合に、付着する香りを相性のよいもののみに限定可能なため、相性の悪い香りを付着させ利用者に不快感を与えるのを防ぐことができる。またあらかじめ登録した文字列が存在するかどうかに基づいて、付着する香りの優先順位を設定可能なため、利用者が意図的に文字列を追加することで、設定する香りの優先度を決めることが可能である。
１つの画像に対して複数の香りが設定された場合に、付着する香りを１つに限定可能なため、相性の悪い香りを付着させ利用者に不快感を与えるのを防ぐことができる。またあらかじめ登録した文字列が存在するかどうかに基づいて、付着する香りの優先順位を設定可能なため、利用者が意図的に文字列を追加することで、設定する香りを限定することが可能である。
【図面の簡単な説明】
【００２６】
【図１】本発明の画像形成装置としてのデジタルカラー複合機を含むネットワーク構成図。
【図２】デジタルカラー複合機を概略的に示す外観斜視図。
【図３】デジタルカラー複合機の各部の電気的接続を示すブロック図。
【図４】操作パネルの構成を示す平面図。
【図５】登録画面の例を示す図（その１）。
【図６】画像データを解析処理して画像データベースに登録する様子を示す図。
【図７】画像データベースに記録された画像データの一例を示す図。
【図８】本発明の第１の制御例を示すフローチャート。
【図９】画像データと抽出画像データを示す図。
【図１０】画像データ中の香り付着部分を示す図。
【図１１】登録画面の例を示す図（その２）。
【図１２】香り付着文字列と香り情報を文字列データベースに登録する様子を示す図。
【図１３】文字列データベースに記録された文字列データの一例を示す図。
【図１４】本発明の第２の制御例を示すフローチャート。
【図１５】登録画面の例を示す図（その３）。
【図１６】本発明の第３の制御例を示すフローチャート。
【図１７】香り相性データベースに記録されたデータを示す図。
【符号の説明】
【００２７】
７  印刷装置（印刷手段）、３１  ＣＰＵ（制御手段）、３４  記憶装置（画像登録手段）、４４  香料付着装置（香り付着手段）
【図１】
0004806275.tif 000002
【図２】
0004806275.tif 000003
【図３】
0004806275.tif 000004
【図４】
0004806275.tif 000005
【図５】
0004806275.tif 000006
【図６】
0004806275.tif 000007
【図７】
0004806275.tif 000008
【図８】
0004806275.tif 000009
【図９】
0004806275.tif 000010
【図１０】
0004806275.tif 000011
【図１１】
0004806275.tif 000012
【図１２】
0004806275.tif 000013
【図１３】
0004806275.tif 000014
【図１４】
0004806275.tif 000015
【図１５】
0004806275.tif 000016
【図１６】
0004806275.tif 000017
【図１７】
0004806275.tif 000018