(57)【要約】【目的】デジタルスチルカメラで録音した音声を解析し、テキストデータに変換して記録して、音声内容を撮影画像に反映させる画像処理装置の提供。【構成】音声録音機能を搭載したデジタルスチルカメラにおける撮影時の音声情報を付加した撮影画像データに対して画像処理を施す画像処理装置として、デジタルスチルカメラによる撮影時又はデジタルスチルカメラによる画像再生時に録音した音声をデジタルデータに変換する変換手段と、デジタルデータに変換された音声データを撮影画像データや撮影条件データと共に記録する記録手段と、上記記録した音声データを解析する解析手段と、上記解析手段により解析した音声データを印刷に反映させる処理を行う。【選択図】      図１
2004236115.tif 000002
【特許請求の範囲】
【請求項１】
音声録音機能を搭載したデジタルスチルカメラにおける撮影時の音声情報を付加した撮影画像データに対して画像処理を施す画像処理装置であって、
デジタルスチルカメラによる撮影時又はデジタルスチルカメラによる画像再生時に録音した音声をデジタルデータに変換する変換手段と、デジタルデータに変換された音声データを撮影画像データや撮影条件データと共に記録する記録手段と、上記記録した音声データを解析する解析手段と、上記解析手段により解析した音声データを印刷に反映させる処理を行うことを特徴とする画像処理装置。
【請求項２】
上記撮影画像データは、デジタルスチルカメラにより得られた撮影画像情報を含むことを特徴とする請求項１記載の画像処理装置。
【請求項３】
上記撮影条件データは、上記撮影画像情報取得時における露出、ストロボ、ホワイトバランス、撮影モード及びデジタルズームの少なくとも何れかの情報を含むことを特徴とする請求項１記載の画像処理装置。
【請求項４】
上記解析手段は、音声データをテキスト化する機能を有することを特徴とする請求項１記載の画像処理装置。
【請求項５】
上記解析手段は、上記撮影画像データを解析する機能を有することを特徴とする請求項１記載の画像処理装置。
【請求項６】
上記処理手段は、上記テキスト化した音声データを画像に付加する機能を有することを特徴とする請求項１記載の画像処理装置。
【請求項７】
複数の機器が互いに通信可能に接続されて成る画像処理システムであって、
上記複数の機器のうち少なくとも１つの機器は、請求項１〜６の何れかに記載の画像処理装置の機能を有することを特徴とする画像処理システム。
【請求項８】
音声録音機能を搭載したデジタルスチルカメラにおける撮影時の音声情報を付加した撮影画像データに対して画像処理を施す画像処理方法であって、
デジタルスチルカメラによる撮影時又はデジタルスチルカメラによる画像再生時に録音した音声データをテキストデータに変換する変換工程と、テキストデータに変換された音声データを撮影画像データや撮影条件データの情報と共に記録する記録工程と、上記記録した音声データを解析する解析工程と、上記解析工程により解析した音声データを撮影画像データに反映させる処理を行うことを特徴とする画像処理方法。
【請求項９】
上記画像情報をデジタルスチルカメラの撮影により取得する画像取得ステップを含むことを特徴とする請求項８記載の画像処理方法。
【請求項１０】
請求項１〜７の何れかに記載の画像処理装置の機能又は請求項７記載の画像処理システムの機能をコンピュータに実現させるためのプログラムを記録したコンピュータ読出可能な記憶媒体。
【請求項１１】
請求項８記載の画像処理方法の処理ステップをコンピュータに実行させるためのプログラムを記録したコンピュータ読取可能な記憶媒体。
【請求項１２】
請求項１〜６の何れかに記載の画像処理装置の機能をコンピュータに実現させるためのプログラム。
【請求項１３】
請求項８に記載の情報処理方法の処理ステップをコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、例えば、デジタルスチルカメラ等により撮影して取得したデジタル画像データをプリンタで印刷出力するための画像処理を実行する装置或はシステムに用いられる画像処理装置、画像処理システム、画像処理方法、それを実施するためのプログラムを記憶したコンピュータ読出可能な記憶媒体及び当該プログラムに関するものである。
【０００２】
【従来の技術】
近年では、例えば、デジタルスチルカメラの普及により、写真画像のデジタル化が手軽になり、特に、パーソナルコンピュータ（以下、単に「パソコン」と言う）上において、写真調の画像をデジタル画像データとして扱う機会が増えてきた。更に、パソコン上で各種のアプリケーションソフトウェアを使用することで、写真調の画像であるデジタル画像データに対して加工や編集処理を容易に行えるようになっている。
【０００３】
一方、フルカラーハードコピー技術に関しても急速に発展しており、特に、インクジェット方式による印刷技術では、インクドットによる粒状感を低減させる技術の向上により、その印刷出力結果の画質が銀塩写真の画質と同等のものとなりつつあり、又、比較的簡易な印刷技術であることにより広く普及している。
【０００４】
上述のような技術背景から、デジタルスチルカメラで撮影して取得したデジタル画像データを手軽に印刷出力できることが求められている。
【０００５】
又、近年のデジタルスチルカメラには、音声を録音し、デジタルデータとして保存する機能を掲載した機種も存在する。音声を録音する形式には、撮影直後に音声を録音する形式と、デジタルスチルカメラで画像を再生する時に音声を録音する形式がある。デジタルスチルカメラで音声を録音した画像を再生したときに、この録音した音声を撮影メモとして再生している。一方、この音声を録音した画像をプリンタ等の出力機器によって出力するときには、この録音した音声は不要なものになっていた。
【０００６】
【発明が解決しようとする課題】
しかし、デジタルスチルカメラを使って多くの枚数の画像を撮影した場合、パソコン上でアプリケーションソフトウェアを使って整理する必要がある。このとき、画像毎にテキスト化された撮影メモを付加する方が画像の整理を容易に行うことができる。又、印刷した画像に対して撮影メモを付加することで、どの場所で、どんな撮影シーンかを一目で認識できる。
【０００７】
一方、最近は撮影画像データと撮影条件データをインクジェットプリンタによる印刷に反映させる技術が提案されており、デジタルスチルカメラで録音した音声をデジタルスチルカメラで再生するのみに留まらず、録音した音声を撮影条件データに変換して印刷処理に反映させるシステムが望ましい。
【０００８】
そこで、本発明は、デジタルスチルカメラで録音した音声を解析し、テキストデータに変換して記録して、音声内容を撮影画像に反映させる画像処理装置、画像処理システム、画像処理方法、それを実施するためのプログラムを記憶したコンピュータ読出可能な記憶媒体及び当該プログラムを提供することを目的とする。
【０００９】
【課題を解決するための手段】
上記目的を達成するため、本発明は、画像取得時の条件情報を含む画像情報に対して画像処理を施す画像処理装置を、デジタルスチルカメラによる撮影時又はデジタルスチルカメラによる画像再生時に録音した音声データをテキストデータに変換する変換手段と、テキストデータに変換された音声データを撮影画像データや撮影条件データの情報と共に記録する記録手段と、上記記録した音声データを解析する解析手段と、上記解析手段により解析した音声データを撮影画像データに反映させる処理手段を含んで構成したことを特徴とする。
【００１０】
【発明の実施の形態】
以下に本発明の実施の形態を添付図面に基づいて説明する。
【００１１】
本発明は、例えば図１に示すような画像印刷システム１００に適用される。本実施の形態の画像印刷システム１００は、デジタルスチルカメラ１０１を用いた撮影時に、音声によって撮影シーンや場所を記録することで、得られた処理対象の画像データに付加された撮影条件を示す情報（付加情報）と共に、撮影時に録音された音声を示す情報に基づいて当該画像データの画像処理を実施することで、撮影時のユーザの意図をより反映した高付加価値の写真画像印刷結果を提供できるように構成されている。
【００１２】
以下、本実施形態の画像印刷システム１００の構成及び動作について具体的に説明する。
【００１３】
＜実施の形態１＞
［画像印刷システム１００の構成］
画像印刷システム１００は、上記図１に示すように、デジタルスチルカメラ１０１、画像処理装置１０８及びプリンタ１１５を含む構成としている。
【００１４】
デジタルスチルカメラ１０１は、撮影動作により撮影画像データ１０７及び音声認識データ１１９を取得すると共に、当該撮影動作における撮影条件データ１０６（付加情報）、撮影画像データ１０７、音声認識処理部１１８により変換処理された音声認識データ１１９を含む画像データ１０５に対して出力するものであり、撮影条件設定部１０２、撮影条件記録部１０３及び撮影画像記録部１０４と音声記録部１１６を備えている。
【００１５】
撮影条件設定部１０２は、撮影動作に必要な各種の撮影条件の設定を行う。撮影条件記録部１０３は、撮影条件設定部１０２で設定された撮影条件データ１０６を画像データ１０５中に記録する。
【００１６】
音声認識処理部１１８は、撮影時に入力された音声１１７をデジタル化し、バイナリデータへ変換を行う。該変換後のバイナリ形式のデータが音声認識データ１１９である。
【００１７】
音声記録部１１６は、音声認識処理部１１８により変換処理された音声認識データ１１９を、画像データ１０５中に記録する。撮影画像記録部１０４は、撮影条件設定部１０２で設定された撮影条件に従った撮影動作により取得された撮影画像データ１０７を画像データ１０５中に記録する。
【００１８】
ここで、画像データ１０５の画像ファイルフォーマットについて説明する。
【００１９】
デジタルスチルカメラで使用されている画像ファイルの構成を図２に示すと、１つの画像ファイル２００には１つの画像を表わす主画像データ２０４とその画像付属情報とが記録され、本実施の形態における画像付属情報は図に示すようにタグ（ＴＡＧ）形式にて記録されている。各タグ２０２ａ，２０２ｂ，…２０２ｎ，…には、画像データに関する詳細な情報として、撮影日時を示す情報及び撮影したカメラに関する情報等が記録される。本発明では、撮影画像データ１０７を図２中の主画像データ２０４として記録し、撮影条件データ１０６や音声１１７を音声認識処理部１１８で変換したバイナリデータ、つまり、音声認識データ１１９を上記タグ群４０２に記録する。
【００２０】
尚、画像データ１０５の画像処理装置１０８への供給方法としては、例えば、通信回線を介したデータ転送による方法或は任意の記録媒体又は記憶媒体に記録し、画像処理装置１０８に設けた所定読取装置を介する方法等が可能である。
【００２１】
画像処理装置１０８は、例えば、パーソナルコンピュータから成り、所定のアプリケーションソフトウェアの起動により、デジタルスチルカメラ１０１からの画像データ１０５の撮影画像データ１０７に対して画像補正処理を施してプリンタ１１５で印刷出力する。
【００２２】
このため、画像処理装置１０８は、リーダ部１０９、撮影条件解析部１１１、撮影画像解析部１１２、音声解析部１２０を含むデータ解析部１１０、画像処理部１１３及び印刷データ変換部１１４を備えており、これらの構成部の各機能は、上記の所定のアプリケーションソフトウェアの起動により実現される。
【００２３】
リーダ部１０９は、デジタルスチルカメラ１０１からの画像データ１０５を読み取る。
【００２４】
データ解析部１１０は、撮影条件解析部１１１により、リーダ部１０９で得られた画像データ１０５に含まれる撮影条件データ１０６を解析すると共に、撮影画像解析部１１２により、リーダ部１０９で得られた画像データ１０５に含まれる撮影画像データ１０７を解析し、当該解析結果に基づいて画像補正アルゴリズムを選択する。
【００２５】
画像処理部１１３は、データ解析部１１０で選択された画像補正アルゴリズムにより、撮影画像データ１０７に対して画像補正処理を施す。又、音声解析部１２０より、リーダ部１０９で得られた画像データ１０５に含まれる音声認識データ１１９を解析してテキストデータに変換し、該解析結果を画像補正処理後の撮影画像データ１０７に付加する。
【００２６】
＜実施の形態２＞
音声をテキストデータに変換する処理を実施の形態１ではカメラ側で行うが、本実施の形態では音声をテキストデータに変換しないで、バイナリデータ（例えば、ＷＡＶＥ形式）のままＴａｇに記録し、パソコン側で画像データから音声データを取り出して変換処理を行う。以下、実施の形態１と異なる部分のみ説明する。
【００２７】
本実施の形態で用いる画像印刷システム１００を図３に示す。デジタルスチルカメラ１０１は、撮影動作により音声１１７を取得し、これをＷＡＶＥ形式で録音した音声録音データ１２１を含む画像データ１０５を画像処理装置１０８に対して出力するものである。
【００２８】
本実施の形態では、音声１１７をＷＡＶＥ形式で記録したバイナリデータ、つまり音声録音データ１２１を図２に示す画像ファイルフォーマットのタグ群４０２の中に記録する。
【００２９】
画像処理装置１０８は、例えば、パーソナルコンピュータから成り、所定のアプリケーションソフトウェアの起動により、デジタルスチルカメラ１０１からの画像データ１０５の撮影画像データ１０７に対して画像補正処理を施してプリンタ１１５で印刷出力する。
【００３０】
本実施の形態における画像処理装置１０８は、実施の形態１と同様にリーダ部１０９、音声解析部１２０を含むデータ解析部１１０、画像処理部１１３及び印刷データ変換部１１４を備えるが、音声解析部１２０の中に音声認識部１１８を備える。
【００３１】
音声解析部１２０においては、リーダ部１０９で得られた画像データ１０５に含まれる音声録音データ１１９を音声認識部１１８においてテキストデータに変換し、該変換された音声データを画像補正処理後の撮影画像データ１０７に付加する。
【００３２】
＜実施の形態１，２共通＞
実施の形態１，２において、デジタルスチルカメラを使って多くの枚数の画像を撮影した場合、パソコン上でアプリケーションソフトウェアを使って整理する必要がある。このとき、画像毎に何らかの撮影メモを付加する方が画像の整理を容易に行うことができる。又、印刷した画像に対して撮影メモを付加することで、どの場所で、どんな撮影シーンかを一目で認識できる。
【００３３】
以下に述べる処理は、実施の形態１，２に共通している。画像補正アルゴリズムの選択（決定）について、具体的には例えば撮影画像解析部１１２が、撮影画像データ１０７の信号値を解析した結果により、撮影画像データ１０７の特性を認識し、この結果に該当する最適な補正条件を撮影条件解析部１１１による撮影条件データ１０６の解析結果により決定し、当該決定条件に基づいた画像補正アルゴリズムを選択する（画像補正処理としては、例えば、カラーバランス補正（色補正）、明るさ補正（印刷濃度補正）、スムージング補正等、入力撮影画像に適した処理を行う）。
【００３４】
音声認識データ１１９を画像補正処理後の撮影画像データ１０７に付加する際、付加する位置は画像の上下どちらでも良い。又、テキスト化した音声データの色、フォントはパソコン上のアプリで選択しても良い。
【００３５】
印刷データ変換部１１４は、画像処理部１１３での補正後の撮影画像データ１０７と音声認識データ１１９をプリンタ１１５で印刷可能な適切な形式のデータ（例えば、ＣＭＹＫデータ）に変換し、当該変換後データを所定のインタフェースを介してプリンタ１１５へ転送する。
【００３６】
従って、プリンタ１１５は、画像処理装置１０８の印刷データ変換部１１４から転送されてきたデータを印刷出力する。
【００３７】
プリンタ１１５としては、例えば、シリアルスキャン形式のインクジェット方式のプリンタ等を適用可能である。
【００３８】
尚、本実施の形態では、画像処理部１０８が備える構成部１０９〜１１４をパーソナルコンピュータ上で動作するアプリケーションソフトウェアの起動により実現するものとしているが、これに限られることはなく、例えば、ハードウェアにより実現するようにしても良い。更に具体的には、プリンタ１１５のドライバの形態で実現するようにしても良い。
【００３９】
又、例えば、画像処理部１０８としてパーソナルコンピュータを用いた場合、画像データ１０５を画像処理部１０８のハードディスク等の記憶媒体に保持し、或は画像処理部１０８に接続された別のパーソナルコンピュータ（サーバ等を含む）の記憶媒体に保持し、これを画像処理部１０８内で処理するようにしても良い。
【００４０】
又、デジタルスチルカメラ１０１から画像処理部１０８（画像処理部１０８としてパーソナルコンピュータを用いた場合には、その内部の記憶媒体等）への画像データ１０５の受け渡しについては、上述したように任意の通信回線や記録媒体又は記憶媒体を利用する方法等が適用可能であるが、更に具体的には例えば、カードリーダやケーブル接続、或は赤外線通信、或は無線通信を適用可能である。この場合、例えば、デジタルスチルカメラ１０１と画像処理部１０８をケーブル接続、或は赤外線通信、或は無線通信で接続し、画像処理部１０８がデジタルスチルカメラ１０１が保持するメモリカードや内蔵メモリ等から直接画像データ１０５を読み込むようにしても良い。
【００４１】
又、画像印刷システム１００のシステム形態としては、例えば、プリンタ１１５内部に対して画像処理装置１０８の機能を設けるように構成しても良い。この場合、画像処理装置１０８としてパーソナルコンピュータ等を用いる必要はない。又、この場合には、例えば、プリンタ１１５において、画像データ１０５をプリンタ１１５に設けられたカードリーダ等のデータ読取手段（リーダ部１０９の機能に相当）により、メモリカード等の記録媒体又は記憶媒体を介して読み取るようにしても良い。或は、デジタルスチルカメラ１０１とプリンタ１１５を有線ケーブル、或は赤外線通信、或は無線通信により接続し、プリンタ１１５がデジタルスチルカメラ１０１が保持するメモリカードや内蔵メモリ等から画像データ１０５を読み出すようにしても良い。
【００４２】
【発明の効果】
以上の説明で明らかなように、本発明によれば、デジタルスチルカメラ等により撮影した際に、画像データ、撮影条件データと共に、撮影時に音声によって撮影シーンや場所等の撮影情報を記録し、デジタルスチルカメラ或はパソコンによりテキスト化された音声データを撮影画像データに反映させることで、一目でどんな画像であるかを認識することができるという効果が得られる。
【図面の簡単な説明】
【図１】本発明の実施の形態１における画像印刷システムの構成を示すブロック図である。
【図２】本発明の実施の形態１，２における撮影画像データの画像ファイルフォーマットを示す概略図である。
【図３】本発明の実施の形態２における画像印刷システムの構成を示すブロック図である。
【符号の説明】
１０１      デジタルスチルカメラ
１０２      撮影条件設定部
１０３      撮影条件記録部
１０４      撮影画像記録部
１０５      画像データ
１０６      撮影条件データ
１０７      撮影画像データ
１０８      画像処理装置
１０９      リーダ部
１１０      データ解析部
１１１      撮影条件解析部
１１２      撮影画像解析部
１１３      画像補正処理部
１１４      印刷データ変換部
１１５      プリンタ
１１６      音声記録部
１１７      音声
１１８      音声認識処理部
１１９      音声認識データ
１２０      音声解析部
１２１      音声録音データ
【図１】
2004236115.tif 000003
【図２】
2004236115.tif 000004
【図３】
2004236115.tif 000005