(57)【特許請求の範囲】
【請求項１】
原画像データを記憶する原画像記憶手段と、
ユーザの入力動作の程度に従って決定された変数値に応じて、複数の画風の中から１つの画風を選択する画風選択手段と、
前記画風選択手段によって選択された前記１つの画風となるように前記原画像を変換して、変換画像を生成する画像変換手段と、を備え、
前記変数値は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする画像処理装置。
【請求項２】
前記複数の画風は、第１の画風と第２の画風とを含み、
前記画風選択手段は、
前記変数値が所定値以上であるときに、前記第１の画風を選択し、
前記変数値が所定値よりも小さいときに、前記第２の画風を選択することを特徴とする請求項１記載の画像処理装置。
【請求項３】
被接触面を有し、前記ユーザの入力動作による前記被接触面上における接触位置を検出する検出手段としての位置検出手段をさらに備え、
前記変数値は、前記ユーザの入力動作の速さを規定するものであり、
前記位置検出手段により検出される、前記ユーザの入力動作による前記被接触面上における前記接触位置の変位に基づいて、前記ユーザの入力動作の前記速さが計算されることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
被接触面を有し、前記ユーザの入力動作による前記被接触面への接触状態を検出する検出手段としての接触状態検出手段をさらに備え、
前記変数値は、前記ユーザの入力動作の持続時間を規定するものであり、
前記接触状態検出手段により検出される、前記ユーザの入力動作による前記被接触面への前記接触状態の時間変位に基づいて、前記ユーザの入力動作の前記持続時間が計算されることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項５】
被接触面を有し、前記ユーザの入力動作による前記被接触面への押圧力を検出する検出手段としての力検出手段をさらに備え、
前記変数値は、前記ユーザの入力動作の強さを規定するものであり、
前記力検出手段により検出される、前記ユーザの入力動作による前記被接触面への前記押圧力に基づいて、前記ユーザの入力動作の前記強さが計算されることを特徴とする請求項１又は２に記載の画像処理装置。
【請求項６】
前記原画像および前記変換画像を表示する表示手段と、
前記検出手段の前記被接触面への前記ユーザの入力動作による接触位置を、前記表示手段に表示された前記原画像の対応する位置に表示する表示制御手段をさらに備えることを特徴とする請求項３乃至５のいずれか一項に記載の画像処理装置。
【請求項７】
少なくとも、前記検出手段および前記表示手段は、通信手段を介して、前記画風選択手段および前記画像変換手段に接続されていることを特徴とする請求項６記載の画像処理装置。
【請求項８】
ユーザの入力動作の程度に従って変数の値を決定する変数値決定手段をさらに備えることを特徴とする請求項１乃至７のいずれか一項に記載の画像処理装置。
【請求項９】
原画像を変換して、変換画像を生成する画像処理方法において、
ユーザの入力動作の程度を規定する変数の値を決定する変数値決定処理と、
決定された前記変数値に応じて、複数の画風の中から１つの画風を選択する画風選択処理と、
選択された前記１つの画風となるように前記原画像を変換して、前記変換画像を生成する画像変換処理と、
を含み、
前記変数値は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする画像処理方法。
【請求項１０】
コンピュータに画像処理装置を制御させて、原画像を変換して、変換画像を生成する画像処理プログラムであって、
ユーザの入力動作の程度を規定する変数の値を決定する変数値決定処理と、
決定された前記変数値に応じて、複数の画風の中から１つの画風を選択する画風選択処理と、
選択された前記１つの画風となるように前記原画像を変換して、前記変換画像を生成する画像変換処理と、
を実行させ、
前記変数値は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、写真画像を任意の絵画風画像に変換する画像処理装置、画像処理方法および該画像処理装置を機能させるための画像処理プログラムに関する。
【背景技術】
【０００２】
近年、携帯電話機やデジタルカメラ、インターネット等の普及により、各種のデジタル画像の入手が容易になり、それらの表示方法が多様化している。例えば携帯電話機やデジタルカメラのディスプレイや、パーソナルコンピュータのモニター、デジタルフォトフレームの表示部に、上記デジタル画像をそのまま表示する手法や、スライドショー形式で表示する手法が知られている。さらに、近年においては、デジタル画像として入手した写真画像を任意の絵画風や画風に変換して表示する手法も知られており、これにより、ユーザを楽しませることができる効果的で趣向を凝らしたデジタル画像の表示方法が提供されている。
【０００３】
ここで、上述したような写真画像の絵画風画像への変換方法としては、例えば特許文献１に記載されているように、画家の描いた絵画に見られる特徴を擬似的に再現した絵画風画像を作成する画調変換方法が知られている。この画調変換方法は、具体的には、まず、変換処理のための入力情報として、処理対象となる原画像である写真画像に加え、実際の画家が描いた絵画の画像を入力し、当該画家の画像から色彩情報と筆触情報を抽出して解析する。そして、解析した情報をもとに原画像の色彩を疑似化させ、筆触を配置することにより、当該画家の描いた絵画に見られる特徴を有する絵画風画像が生成されるものである。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２１３５９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述した特許文献１に記載された画調変換方法においては、ユーザが予め入力した画家画像の解析情報に基づいて、原画像の色彩を疑似化させ、筆触を配置することにより、画家画像に疑似させた絵画風画像が生成されるものである。しかしながら、この画調変換方法においては、疑似させたい絵画の特徴（画風）は１つしかなく、複数の画風から１つを選択して、原画像を当該選択された画風に変換した絵画風画像を生成することができるものではなかった。すなわち、絵画風画像の作成にユーザが関与することができず、ユーザは、単に完成された絵画風画像を鑑賞することができるに過ぎなかった。そのため、上述した画調変換方法においては、ユーザの画像変換に対する興味を高めることができず、興趣性において不十分なものであった。
【０００６】
そこで、本発明は、上述した問題点に鑑み、ユーザの直感的な動作に応じて、複数の画風から任意の画風を選択して、原画像を当該画風に変換した絵画風画像を生成することにより、ユーザの画像変換に対する興味を高めることができる画像処理装置、画像処理方法および該画像処理装置を機能させるための画像処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明に係る画像処理装置は、
原画像データを記憶する原画像記憶手段と、
ユーザの入力動作の程度に従って決定された変数値に応じて、複数の画風の中から１つの画風を選択する画風選択手段と、
前記画風選択手段によって選択された前記１つの画風となるように前記原画像を変換して、変換画像を生成する画像変換手段と、を備え、
前記変数値は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする。
【０００８】
本発明に係る画像処理方法は、
原画像を変換して、変換画像を生成する画像処理方法において、
ユーザの入力動作の程度を規定する変数の値を決定する変数値決定処理と、
決定された前記変数値に応じて、複数の画風の中から１つの画風を選択する画風選択処理と、
選択された前記１つの画風となるように前記原画像を変換して、前記変換画像を生成する画像変換処理と、
を含み、
前記変数値は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする。
【０００９】
本発明に係る画像処理プログラムは、
コンピュータに画像処理装置を制御させて、原画像を変換して、変換画像を生成する画像処理プログラムであって、
ユーザの入力動作の程度を規定する変数の値を決定する変数値決定処理と、
決定された前記変数値に応じて、複数の画風の中から１つの画風を選択する画風選択処理と、
選択された前記１つの画風となるように前記原画像を変換して、前記変換画像を生成する画像変換処理と、
を実行させ、
前記変数値は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする。
【発明の効果】
【００１０】
本発明によれば、ユーザの直感的な動作に応じて、複数の画風から任意の画風を選択して、原画像を当該画風に変換した絵画風画像を生成することにより、ユーザの画像変換に対する興味を高めることができる。
【図面の簡単な説明】
【００１１】
【図１】本発明に係る画像処理装置を適用した画像表示装置の第１の実施形態のハードウェア構成を示す概略ブロック図である。
【図２】第１の実施形態に係る画像処理方法に適用される画像変換処理を示すフローチャートである。
【図３】第１の実施形態に係る画像変換処理に関連する操作方法および画像表示状態の一例を示す概略説明図である。
【図４】第１の実施形態に係る画像変換処理に関連する領域指定方法の他の例を示す概略説明図である。
【図５】第２の実施形態に係る画像処理方法に適用される画像変換処理を示すフローチャートである。
【図６】第２の実施形態に係る画像変換処理に関連する領域指定方法および画像表示状態の一例を示す概略説明図である。
【図７】第３の実施形態に係る画像処理方法に適用される画像変換処理を示すフローチャートである。
【図８】第３の実施形態に係る画像変換処理に関連する領域指定方法の一例を示す概略説明図である。
【図９】第４の実施形態に係る画像変換処理に関連する領域指定方法および画像表示状態の他の例を示す概略説明図である。
【図１０】本発明の第５の実施形態に係る画像表示装置のハードウェア構成を示す概略ブロック図である。
【図１１】本発明に係る画像処理装置を適用した画像表示装置を搭載した電子機器の構成例を示す概略図（その１）である。
【図１２】本発明に係る画像処理装置を適用した画像表示装置を搭載した電子機器の構成例を示す概略図（その２）である。
【発明を実施するための形態】
【００１２】
以下、本発明に係る画像処理装置、画像処理方法および画像処理プログラムについて、実施形態を示して詳しく説明する。
＜第１の実施形態＞
（画像処理装置／画像表示装置）
まず、本発明に係る画像処理装置を適用した画像表示装置のハードウェア構成について説明する。
【００１３】
図１は、本発明に係る画像処理装置を適用した画像表示装置の第１の実施形態のハードウェア構成を示す概略ブロック図である。なお、図１においては、図示の都合上、機能ブロック間の信号やデータのやりとりを表す矢印を全て示したが、実際には、これらのうちいずれかが単独で、もしくは、複数が有効となって所定の処理が実行される。
【００１４】
図１に示すように、本実施形態に係る画像表示装置１０は、データ処理部（画像変換手段）２０と、ユーザインタフェース部（以下、ユーザＩ／Ｆ部と記す）３０と、を備えている。データ処理部２０は、概略、中央演算処理装置（Central Processing Unit；以下、ＣＰＵと記す：変数値決定手段、画風選択手段）２１と、読み出し専用メモリ（Read Only Memory；以下、ＲＯＭと記す）２２と、ランダムアクセスメモリ（Random
Access Memory；以下、ＲＡＭと記す）２３と、内部メモリ（原画像記憶手段）２４と、表示制御部２５と、画像処理部２６と、を備えている。
【００１５】
また、ユーザＩ／Ｆ部３０は、概略、液晶表示パネル等からなる表示部（表示手段）３１と、操作スイッチ等からなり、ユーザの指示操作を受け付ける操作部３２と、タッチパネルからなり、特にユーザの直感的（又は感覚的）な動作に対応する指示操作を受け付ける入力部（位置検出手段）３３と、外部機器との間での通信を制御する通信部（通信手段）３４と、画像データが記憶されたメモリカード等のリムーバブル記憶媒体４０に対してデータの読み書きを行うメモリインタフェース部（以下、メモリＩ／Ｆ部と記す）３５と、を備えている。
【００１６】
ＲＯＭ２２には、例えば、後述する画像変換処理を含む、画像の表示、再生に関する各種処理、および、表示制御部２５、画像処理部２６、表示部３１、操作部３２、入力部３３、通信部３４、メモリＩ／Ｆ部３５を含む各種機能を実行するための各種プログラム（ソフトウェア）が記憶されている。ＣＰＵ２１は、ＲＯＭ２２に記憶されているプログラムに従って処理を行うことにより、表示制御部２５、画像処理部２６、表示部３１、操作部３２、入力部３３、通信部３４、メモリＩ／Ｆ部３５等における各種機能が実現される。特に、本実施形態においては、ＣＰＵ２１がＲＯＭ２２に記憶されている画像変換処理を実行するためのプログラムを読み出して実行することにより、画像処理部２６において原画像の画像データに対して、後述する入力部３３を介して入力されるユーザの直感的な動作に応じて決定される特定の画風で画像変換処理が実行される。
【００１７】
ＲＡＭ２３には、ＣＰＵ２１が各種の処理を実行する上で必要なデータ等が適宜記憶される。例えば後述する画像変換処理の対象となる原画像や、当該画像変換処理により生成された絵画風画像（変換画像）の画像データは、ＲＡＭ２３に記憶される。内部メモリ２４は、ダイナミックＲＡＭ（Dynamic Random Access Memory；以下、ＤＲＡＭと記す）やＲＯＭ等により構成される。ＤＲＡＭは、後述する画像変換処理により生成された画像データが一時的に記憶される表示バッファを構成するとともに、ＣＰＵ２１の作業領域を構成する。ＲＯＭには、例えば後述する画像変換処理や、画像の表示、再生に関する各種パラメータ等が記憶される。なお、内部メモリ２４には、メモリカード等のリムーバブル記憶媒体４０や通信回線等を介して取り込んだ原画像や、画像処理部２６により所定の画像変換処理を実行することにより生成された絵画風画像の、画像データの一時保存および読み出しを行うための表示メモリ領域も含まれている。
【００１８】
表示制御部（表示制御手段）２５は、内部メモリ２４の表示メモリ領域に格納された画像データを読み出し、当該画像データにより表現される画像を、ユーザＩ／Ｆ部３０の表示部３１に表示させる制御を実行する。例えば、表示制御部２５は、上記内部メモリ２４に保存された画像データに基づいてＲＧＢ信号を生成し、当該ＲＧＢ信号を表示部３１に供給することにより、原画像や絵画風画像を表示部３１に表示させる。
【００１９】
画像処理部２６は、デジタルシグナルプロセッサ（Digital Signal Processor；ＤＳＰ）等で構成され、内部メモリ２４に記憶された画像データに対して、ホワイトバランス補正処理やγ補正処理などの各種画像処理を実行する。加えて、本実施形態においては、画像処理部２６は、ＣＰＵ２１からの命令に基づいて、内部メモリ２４に一時保存された原画像を、タッチパネル等の入力部３３を介して入力されるユーザの直感的又は感覚的な動作を規定する変数（接触移動速度）に応じて、複数の画風から１つの画風を選択して、当該画風からなる絵画風画像に変換する画像変換処理を実行する。
【００２０】
ここで、画像処理部２６において、原画像を絵画風画像に変換する画像変換処理において選択可能なように予め用意される画風としては、次のような種類の画風を適用することができる。本実施形態においては、例えば油絵調や水彩画調、パステル画調、鉛筆画調、クレヨン画調、イラスト画調、点描画調、エアブラシ画調のような、絵画のジャンルに対応する各画風を適用することができる。また、本実施形態は、これに限定されるものではなく、例えば上記の油絵調をさらに画家の特徴に基づいて、ゴッホ調やモネ調、ピカソ調等の分類に対応する各画風を適用するものであってもよいし、画家の特徴に依存しない、例えば一般的な油絵調の画風の特徴に基づいて、重厚系やゴシック系、野獣派系等の分類に対応する各画風を適用するものであってもよい。このような各画風に変換するための画像変換処理のアルゴリズムに適用される各種パラメータは、例えば内部メモリ２４のＲＯＭに記憶されている。
【００２１】
また、操作部３２は、画像表示装置１０の本体に設けられた、電源ボタン、ズームキー、および、メニュー設定キー等の操作スイッチであって、ユーザによる各操作に基づいて所定の操作信号を発生してデータ処理部２０のＣＰＵ２１へ送出する。また、入力部３３は、例えば表示部３１の表示パネルのユーザ側（視野側）前面に設けられた、透過型のタッチパネルであって、表示部３１に表示された原画像に対応する任意の位置を、ユーザがタッチペンや指等（以下、タッチペン等と総称する）を接触させて指示する操作に基づいて所定の操作信号を発生してデータ処理部２０のＣＰＵ２１へ送出する。このように、ユーザが操作部３２又は入力部３３を操作することにより、各種操作信号がデータ処理部２０に送出されて、ＣＰＵ２１は、当該操作信号に応じた処理を実行する。
【００２２】
特に、本実施形態においては、入力部３３に適用されるタッチパネルとして、当該入力部３３に対するタッチペン等の接触状態（接触又は非接触の二値）および接触位置を検出することができる、既存の位置検出型のタッチパネルや感圧型のタッチパネルが適用される。これにより、ユーザが表示部３１に表示された画像を参照しながら、当該画像に対応する位置のタッチパネルにタッチペン等により接触することにより、その接触位置が検出される。この検出された接触位置に関する情報は、操作信号としてＣＰＵ２１に送出される。
【００２３】
また、本実施形態においては、特に画像変換処理に関連する各種の操作が可能なように、操作部３２や入力部３３が設定されている。例えば、ユーザにより操作部３２のメニュー設定キーが操作されて画像変換モードが指定されると、当該操作信号がデータ処理部２０に送られ、ＣＰＵ２１は、画像処理部２６において後述する画像変換処理を実行する画像変換モードを設定する。なお、画像変換モードの設定は、上記の操作方法のほかに、例えば、表示部３１に表示されたメニューアイコンに対応する位置の入力部３３をタッチペン等で接触して選択し、さらに画像変換モードのアイコンを選択する手法によるものであってもよい。
【００２４】
なお、本実施形態においては、データ処理部２０への原画像の取込み方法として、メモリＩ／Ｆ部３５により制御されるメモリカード等のリムーバブル記憶媒体４０を介して取り込むものであってもよいし、通信部３４により、図示を省略した通信ケーブルや無線通信、赤外線通信等を介して、例えば携帯電話機やデジタルカメラ、マルチメディア機器、ハードディスク装置等の外部機器、あるいは、インターネット上のサーバ等に保存された画像データを取り込むものであってもよい。
【００２５】
また、本実施形態においては、表示制御部２５により生成されたＲＧＢ信号は、表示部３１に出力させるだけでなく、ユーザＩ／Ｆ部３０の通信部３４により制御される通信回線や通信ケーブル等を介して、あるいは、メモリＩ／Ｆ部３５により制御されるリムーバブル記憶媒体４０を介して、図示を省略した外部機器に出力させることもできる。これにより、例えばテレビジョン受像機、パーソナルコンピュータ、デジタルフォトフレーム、プロジェクタ等の外部機器においても、原画像や絵画風画像を表示することができる。
【００２６】
（画像処理方法）
次に、本実施形態に係る画像表示装置における画像処理方法について説明する。
ここでは、図１に示したユーザＩ／Ｆ部３０に設けられる入力部３３が、上述したように、ユーザが表示部３１に表示された画像を参照して、直感的又は感覚的にタッチペン等を接触させることにより、当該接触状態および接触位置を検出することができる位置検出型のタッチパネルから構成されている。また、ＣＰＵ２１は、当該位置検出型のタッチパネルからなる入力部３３から送出される操作信号（接触情報および位置情報）に基づいて、当該タッチペン等の接触状況を判定するとともに、その接触移動速度に基づいて、画像処理部２６において原画像に施す画像変換処理に適用する画風を決定する。
【００２７】
図２は、本実施形態に係る画像処理方法に適用される画像変換処理を示すフローチャートである。また、図３は、本実施形態に係る画像変換処理に関連する操作方法および画像表示状態の一例を示す概略説明図である。なお、図３に示した画像表示状態の一例においては、図示の都合上、画像変換処理された画像（絵画風画像）部分を便宜的に太線を用いて強調して示した。
【００２８】
本実施形態に係る画像処理方法は、図２のフローチャートに示すように、まず、ユーザが画像表示装置１０の操作部３２を操作したり、液晶表示パネル等の表示部３１に表示されたアイコンを選択するように入力部３３に接触指示することにより、図３（ａ）に示すように、メニュー画面Ｐmenから画像変換モードが設定される（ステップＳ１１１）。このとき、表示部３１には当該画像変換処理の対象となる原画像が、予め表示されていてもよい。また、この画像変換モードにおいては、図３（ｂ）に示すように、画像変換処理により原画像全体（全領域）を特定の画風に変換する設定と、ユーザにより指定された原画像の特定の領域（指定領域）のみを、特定の画風に変換する設定とを、任意に選択できるものであってもよい。
【００２９】
次いで、図３（ｃ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、当該表示部３１の前面（ユーザ側）に配置されたタッチパネル等の入力部３３にタッチペンＰＥＮ等を接触させた状態で、直感的又は感覚的に複数回往復動作（図中、矢印ＡＲａ参照）させることにより、当該タッチペンＰＥＮ等の接触位置に関する情報が検出されて、操作信号としてＣＰＵ２１に送出される（ステップＳ１１２）。ＣＰＵ２１は、当該操作信号に含まれる位置情報と、各位置における時間情報とに基づいて、入力部３３に接触されたタッチペンＰＥＮ等の接触移動速度を算出する（ステップＳ１１３；変数値決定処理）。
【００３０】
ここで、上記接触移動速度を算出する具体的な手法は、例えば、まず、タッチペンＰＥＮ等による入力部３３への接触が開始（接触状態が検出）されると同時に、ＣＰＵ２１は時間測定を開始する。このときの入力部３３におけるタッチペンＰＥＮ等の接触位置に関する情報（位置情報）は、操作信号としてＣＰＵ２１に送出されて、ＣＰＵ２１において表示部３１上の対応する画素の座標に変換されて、上記測定された時間（時間情報）と関連付けて内部メモリ２４に保存される。これと同時に、表示制御部２５によって、タッチペンＰＥＮ等による入力部３３への接触位置が、表示部３１上の当該接触位置に対応する画素に表示される。ここで、タッチペンＰＥＮ等の接触位置の検出動作および時間測定は、上記接触が開始された後、当該接触が終了する（非接触状態が検出される）までの間、常時実行されるものであってもよいし、所定の時間間隔で定期的に実行されるものであってもよい。また、タッチペンＰＥＮ等を入力部３３に接触させた状態で、任意の方向にタッチペンＰＥＮ等を移動させることにより入力部３３からＣＰＵ２１への位置情報に変化が生じた場合には、ＣＰＵ２１は、当該位置情報に対応する表示部３１上の座標を算出して、当該タッチペンＰＥＮ等の移動長さを計算して内部メモリ２４に保存する。なお、タッチペンＰＥＮ等による入力部３３への接触位置を、表示部３１上の当該接触位置に対応する画素に表示を行うというような、表示制御部２５による上述の制御は、上記接触が開始された後、当該接触が終了するまでの間、入力部３３からＣＰＵ２１への位置情報に変化が生じる度に実行される。そして、タッチペンＰＥＮ等による入力部３３への接触が終了した（非接触状態が検出された）場合には、ＣＰＵ２１は、上記時間測定を終了し、内部メモリ２４に保存されたタッチペンＰＥＮ等の移動長さ（図３（ｃ）中の軌跡ＬＯＣに相当する）の合計と、当該測定された接触時間の合計からタッチペンＰＥＮ等の接触移動速度（＝（移動長さの合計）÷（接触時間の合計））を算出して内部メモリ２４に保存する。
【００３１】
次いで、ＣＰＵ２１において、上記算出された接触移動速度が、予め設定された複数の速度範囲のいずれに含まれるかを判定して、当該接触移動速度に応じて特定の画風を設定する。例えば、特定の基準値を境界にして、その基準値以上の第１の速度範囲と、上記基準値よりも小さい第２の速度範囲の２つの速度範囲が設定されている場合、上記算出された接触移動速度が、第１および第２の速度範囲のいずれに含まれるかを判定する（ステップＳ１１４）。そして、上記接触移動速度が、第１の速度範囲に含まれる場合には、画像変換処理に適用される第１の画風として、例えば野獣派系の油絵調が設定され（ステップＳ１１５）、一方、上記接触移動速度が、第２の速度範囲に含まれる場合には、第２の画風として、例えばパステル画調が設定される（ステップＳ１１６）。これにより、ＣＰＵ２１において、上記算出された接触移動速度（すなわち、ユーザの入力動作の程度；本実施形態においてはタッチペンＰＥＮ等の往復動作の速さ）に基づいて、複数の画風の中から画像変換処理に適用される１つの画風が選択され、当該画風に応じたパラメータが画像処理部２６に設定される（画風選択処理）。
【００３２】
次いで、画像処理部２６において、上記接触移動速度に応じて設定された画風に基づいて原画像ＰＨＴを画像変換処理し、図３（ｄ）、（ｅ）に示すように、上記画風が適用された絵画風画像ＰＩＣａ又はＰＩＣｂを生成する（ステップＳ１１７；画像変換処理）。生成された絵画風画像ＰＩＣａ又はＰＩＣｂの画像データは、例えば内部メモリ２４の所定の表示メモリ領域に一時保存される。ここで、この画像変換処理においては、例えば図３（ｂ）、（ｃ）に示したように、原画像ＰＨＴにおいて画像変換処理の対象となる特定の領域（指定領域）ＳＰＡを指定する設定においては、図３（ｄ）に示すように、ユーザが入力部３３にタッチペンＰＥＮ等を接触させた状態で往復動作させた際に指示した領域（すなわち、軌跡ＬＯＣに対応した領域や塗りつぶした領域）、又は、当該指示した領域を含む所定の範囲の領域（すなわち、軌跡ＬＯＣを基準にして所定の広がりを有する領域）に対応する原画像ＰＨＴの指定領域ＳＰＡのみが、上記画風が適用された絵画風画像ＰＩＣａに変換される。
【００３３】
一方、例えば図３（ｂ）に示したように、原画像ＰＨＴ全体を画像変換の対象とする設定においては、図３（ｅ）に示すように、ユーザがタッチペンＰＥＮ等により指示した領域に関わりなく、原画像ＰＨＴ全体（全領域）が、上記画風が適用された絵画風画像ＰＩＣｂに変換される。次いで、内部メモリ２４に一時保存された絵画風画像ＰＩＣａ又はＰＩＣｂの画像データは、表示制御部２５により読み出され、所定の表示信号に変換されて表示部３１に表示される（ステップＳ１１８）。
【００３４】
このように、本実施形態においては、表示された原画像ＰＨＴに対する、ユーザの直感的又は感覚的な入力動作の程度（接触移動速度）に応じて、複数の画風から１つの画風を選択して、原画像ＰＨＴを当該画風に変換した絵画風画像ＰＩＣａ又はＰＩＣｂを生成することができる。したがって、本実施形態によれば、ユーザの直感的又は感覚的な入力動作の程度に応じて、絵画風画像に適用される画風を設定するという、新たな画像変換の手法を提示することができるので、ユーザの画像変換に対する興味を高めることができる。
【００３５】
なお、上述した画像変換処理においては、画像変換の対象となる領域を指定する手法として、図３（ｃ）に示したように、ユーザがタッチペンＰＥＮ等を接触させた状態で往復動作（矢印ＡＲａ）させた際の軌跡ＬＯＣからなる領域（指定領域ＳＰＡ）や塗りつぶした領域、又は、当該軌跡や塗りつぶした領域を基準にして所定の広がりを有する領域を指定領域に設定して、原画像ＰＨＴをタッチペンＰＥＮ等の接触移動速度に応じた画風に変換する場合について説明した。本発明はこれに限定されるものではなく、次のような領域の指定方法を適用することもできる。
【００３６】
図４は、本実施形態に係る画像変換処理に関連する領域指定方法の他の例を示す概略説明図である。ここで、説明を明瞭化するため、便宜的に図中の指定領域にハッチングを施して示した。
【００３７】
本実施形態に係る画像変換処理に適用可能な領域指定方法は、上述した手法のほか、図４（ａ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３にタッチペンＰＥＮ等を接触させた状態で、任意の領域を閉じた線で円形状や多角形状等に枠囲み（図中、矢印ＡＲｂ参照）することにより、当該枠囲みした線の軌跡ＬＯＣの内側（内部）の領域を、指定領域ＳＰＢとして設定するものであってもよい。ここで、指定領域ＳＰＢは、タッチペンＰＥＮ等による線の軌跡ＬＯＣの内側の領域のみに限定されるものではなく、例えば図４（ｂ）に示すように、当該軌跡ＬＯＣ上の連続する各点ＬＰを中心とする所定半径ｒの円形領域に含まれる領域（すなわち、連続する幅２ｒの領域）も、指定領域ＳＰＢに設定されるものであってもよい。
【００３８】
また、さらに他の領域指定方法としては、図４（ｃ）、（ｄ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３にタッチペンＰＥＮ等を接触させた状態で、任意の領域に対応するように直線状や曲線状等に移動（図中、矢印ＡＲｃ、ＡＲｄ参照）させることにより、当該線の軌跡ＬＯＣ上の連続する各点ＬＰを中心とする所定半径ｒの円形領域に含まれる領域（すなわち、連続する幅２ｒの領域）が、指定領域ＳＰＣ、ＳＰＤに設定されるものであってもよい。なお、図４（ｂ）〜（ｄ）に示した領域指定方法におけるタッチペンＰＥＮ等による軌跡ＬＯＣ上の各点ＬＰを中心とする円形領域を規定する半径ｒは、予め一定の数値に設定されているものであってもよいし、例えば図３（ａ）、（ｂ）に示したようなメニュー画面において、ユーザが任意の数値に設定することができるものであってもよい。
【００３９】
これらの各領域指定方法においても、当該領域指定の際にユーザが直感的又は感覚的に接触移動させたタッチペンＰＥＮ等の移動速度に応じて、複数の画風から１つの画風が選択されて、原画像ＰＨＴが、当該画風が適用された絵画風画像ＰＩＣａ又はＰＩＣｂに変換される。
【００４０】
＜第２の実施形態＞
次に、本発明に係る画像処理装置を適用した画像表示装置、および、該画像表示装置における画像処理方法の第２の実施形態について説明する。ここでは、上述した第１の実施形態に示した画像表示装置の構成および画像処理方法を適宜参照しながら第２の実施形態について説明する。
【００４１】
上述した第１の実施形態においては、表示部３１に表示された原画像ＰＨＴを参照して、ユーザが直感的又は感覚的に接触移動させたタッチペンＰＥＮ等の移動速度に応じて、原画像ＰＨＴを特定の画風が適用された絵画風画像ＰＩＣａ又はＰＩＣｂ（以下、便宜的に絵画風画像ＰＩＣと総称する）に変換する場合について説明した。第２の実施形態においては、入力部３３に接触させたタッチペンＰＥＮ等の接触時間に応じて、複数の画風から１つの画風を選択して、原画像ＰＨＴを当該画風が適用された絵画風画像ＰＩＣに変換することを特徴とする。
【００４２】
本実施形態に係る画像表示装置においては、入力部（接触状態検出手段）３３に対するタッチペン等の接触状態および接触位置が検出され、また、ＣＰＵ２１により入力部３３にタッチペン等を接触させた際の、当該接触開始から終了までの接触時間が測定される。ＣＰＵ２１は、入力部３３から送出される操作信号（接触情報および位置情報）に基づいて、入力部３３へのタッチペン等の接触状況を判定するとともに、その接触時間に応じて、画像処理部２６において原画像に施す画像変換処理に適用する画風を決定する。
【００４３】
図５は、第２の実施形態に係る画像処理方法に適用される画像変換処理を示すフローチャートである。ここで、上述した第１の実施形態と同等の処理手順については、その説明を簡略化又は省略する。
【００４４】
上述したような画像表示装置において、本実施形態に係る画像処理方法は、図５のフローチャートに示すように、画像変換モードに設定した後（ステップＳ２１１）、上述した第１の実施形態のように、タッチペンＰＥＮ等を入力部３３に接触させた状態で線状や枠囲みのように移動させる場合とは異なり、タッチペンＰＥＮ等を入力部３３の任意の同一又は略同一の位置に任意の時間、接触させ続けて、特定の点を指示する。これにより、当該タッチペンＰＥＮ等の接触位置に関する情報が検出されて、操作信号としてＣＰＵ２１に送出される。このとき、ＣＰＵ２１は、当該操作信号に含まれる接触状態（接触又は非接触の二値）に関する情報（接触情報）に基づいて、タッチペンＰＥＮ等が入力部３３に接触開始されてから終了するまでの時間（接触時間）を測定する（ステップＳ２１２；変数値決定処理）。
【００４５】
次いで、ＣＰＵ２１において、上記測定された接触時間が、予め設定された複数の時間範囲のいずれに含まれるかを判定して、当該接触時間に応じて特定の画風を設定する。例えば特定の基準時間を境界にして、その基準時間以上の第１の時間範囲と、上記基準時間よりも短い第２の時間範囲の２つの時間範囲が設定されている場合、上記測定された接触時間が、第１および第２の時間範囲のいずれに含まれるかを判定する（ステップＳ２１３）。そして、上記接触時間が、第１の時間範囲に含まれる場合には、画像変換処理に適用される第１の画風として、例えば野獣派系の油絵調が設定され（ステップＳ２１４）、一方、上記接触時間が、第２の時間範囲に含まれる場合には、第２の画風として、例えばパステル画調が設定される（ステップＳ２１５）。これにより、ＣＰＵ２１において、上記測定された接触時間（すなわち、ユーザの入力動作の程度；本実施形態においてはタッチペンＰＥＮ等の接触動作の持続時間）に基づいて、複数の画風の中から画像変換処理に適用される１つの画風が選択され、当該画風に応じたパラメータが画像処理部２６に設定される（画風選択処理）。
【００４６】
次いで、画像処理部２６において、上記接触時間に応じて設定された画風に基づいて原画像ＰＨＴを画像変換処理することにより、上記画風が適用された絵画風画像ＰＩＣ（ＰＩＣａ又はＰＩＣｂ）が生成されて（ステップＳ２１６；画像変換処理）、内部メモリ２４の所定の表示メモリ領域に一時保存される。ここで、この画像変換処理において、画像変換処理の対象となる原画像ＰＨＴの領域は、後述する領域指定方法に基づいて、特定の領域（指定領域）に設定されるものであってもよいし、原画像ＰＨＴの全領域に設定されるものであってもよい。そして、内部メモリ２４に一時保存された絵画風画像ＰＩＣの画像データは、表示制御部２５により読み出され、所定の表示信号に変換されて表示部３１に表示される（ステップＳ２１７）。
【００４７】
次に、本実施形態に係る画像変換処理に関連する領域指定方法について説明する。
図６は、本実施形態に係る画像変換処理に関連する領域指定方法および画像表示状態の一例を示す概略説明図である。ここで、説明を明瞭化するため、便宜的に図中の指定領域にハッチングを施して示した。
【００４８】
上述した本実施形態に係る画像変換処理に適用可能な領域指定方法は、例えば図６（ａ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３の任意の点ＬＰにタッチペンＰＥＮ等を接触させることにより、当該点ＬＰを中心とする所定半径ｒの円形領域を、指定領域ＳＰＥに設定することができる。ここで、指定領域ＳＰＥを規定する半径ｒは、予め一定の数値に設定されているものであってもよいし、上述した第１の実施形態と同様に、例えば図３（ａ）、（ｂ）に示したようなメニュー画面において、ユーザが任意の数値に設定することができるものであってもよい。
【００４９】
また、他の領域指定方法としては、図６（ｂ）、（ｃ）に示すように、ユーザが入力部３３にタッチペンＰＥＮ等を接触させる時間に応じて、上記円形領域を規定する半径ｒを順次変化（増減）させて、任意の大きさの指定領域ＳＰＥを設定することができるものであってもよい。
【００５０】
このように、本実施形態においては、表示された原画像ＰＨＴに対する、ユーザの直感的又は感覚的な入力動作の程度を規定する変数（接触時間の長さ）に応じて、複数の画風から１つの画風を選択して、例えば図６（ｄ）、（ｅ）に示すように、原画像ＰＨＴを当該画風に変換した絵画風画像ＰＩＣａ又はＰＩＣｂを生成することができる。なお、図６（ｄ）は、第１の実施形態における図３（ｄ）に対応し、上述した領域指定方法により指定した、原画像ＰＨＴの特定の指定領域ＳＰＥのみを、任意の画風に変換した絵画風画像ＰＩＣａを示し、図６（ｅ）は、第１の実施形態における図３（ｅ）に対応し、原画像ＰＨＴ全体（全領域）を、任意の画風に変換した絵画風画像ＰＩＣｂを示す。
【００５１】
したがって、本実施形態においても、上述した第１の実施形態と同様に、ユーザの直感的又は感覚的な入力動作の程度に応じて、絵画風画像に適用される画風を設定するという、新たな画像変換の手法を提示することができるので、ユーザの画像変換に対する興味を高めることができる。
【００５２】
＜第３の実施形態＞
次に、本発明に係る画像処理装置を適用した画像表示装置、および、該画像表示装置における画像処理方法の第３の実施形態について説明する。ここでは、上述した第１および第２の実施形態に示した画像表示装置の構成および画像処理方法を適宜参照しながら第３の実施形態について説明する。
【００５３】
上述した第１および第２の実施形態においては、表示部３１に表示された原画像ＰＨＴを参照して、ユーザが直感的又は感覚的に接触移動させたタッチペンＰＥＮ等の移動速度や接触時間に応じて、複数の画風から１つの画風を選択して、原画像ＰＨＴを当該画風が適用された絵画風画像ＰＩＣに変換する場合について説明した。第３の実施形態においては、入力部３３に接触させたタッチペンＰＥＮ等の押圧力に応じて、複数の画風から１つの画風を選択して、原画像ＰＨＴを当該画風が適用された絵画風画像ＰＩＣに変換することを特徴とする。
【００５４】
本実施形態に係る画像表示装置においては、入力部（力検出手段）３３が、少なくとも、ユーザが表示部３１に表示された原画像を参照して、直感的又は感覚的にタッチペン等を接触させた際の、当該接触位置および押圧力を検出することができる、既存の感圧型のタッチパネルから構成されている。また、ＣＰＵ２１は、当該感圧型のタッチパネルからなる入力部３３から送出される操作信号（位置情報および圧力情報）に基づいて、入力部３３へのタッチペン等の接触状況を判定するとともに、その押圧力に応じて、画像処理部２６において原画像に施す画像変換処理に適用する画風を決定する。
【００５５】
図７は、第３の実施形態に係る画像処理方法に適用される画像変換処理を示すフローチャートである。また、図８は、本実施形態に係る画像変換処理に関連する操作方法および画像表示状態の一例を示す概略説明図である。ここで、上述した第１および第２の実施形態と同等の処理手順については、その説明を簡略化又は省略する。
【００５６】
本実施形態に係る画像処理方法は、図７のフローチャートに示すように、画像変換モードに設定した後（ステップＳ３１１）、例えば図８（ａ）に示すように、ユーザが表示部３１に表示された画像を参照して、入力部３３にタッチペンＰＥＮ等を、直感的又は感覚的に任意の力で押し付けた状態（図中、矢印ＡＲｚ参照）で、任意の領域を指定するように往復動作（図中、矢印ＡＲａ参照）させることにより、当該タッチペンＰＥＮ等の接触位置に関する情報（接触情報）、および、タッチペンＰＥＮ等の押圧力に関する情報（圧力情報）が検出されて、操作信号としてＣＰＵ２１に送出される（ステップＳ３１２）。ＣＰＵ２１は、当該操作信号に含まれる位置情報と、各位置における圧力情報とを関連付けて、位置情報ごとに内部メモリ２４の所定のメモリ領域に順次保存する。ここで、ＣＰＵ２１は、位置情報に変化がない状態で、タッチペンＰＥＮ等の押圧力が変化した場合には、当該変化後の押圧力の値が、すでに内部メモリ２４に保存されている値よりも大きい場合には、当該変化後の押圧力の値を内部メモリ２４の所定のメモリ領域に上書き保存する。そして、ＣＰＵ２１は、当該操作信号に含まれる位置情報と、各位置における圧力情報とに基づいて、タッチペンＰＥＮ等の非接触状態を検出し、内部メモリ２４に保存された各押圧力の代表値（本実施形態においては、最大値、又は、平均値）を算出する（ステップＳ３１３；変数値決定処理）。
【００５７】
ここで、上記押圧力の代表値を算出する具体的な手法は、例えば、まず、タッチペンＰＥＮ等による入力部３３への接触が開始（接触状態が検出）されると、入力部３３からタッチペンＰＥＮ等の接触位置に関する情報（位置情報）、および、押圧力に関する情報（圧力情報）が、操作信号としてＣＰＵ２１に送出される。ＣＰＵ２１は、当該操作信号に基づいて、表示部３１上の対応する画素の座標を算出して、算出された座標と、当該座標における押圧力を関連付けて内部メモリ２４に保存される。ここで、タッチペンＰＥＮ等の押圧力の検出動作は、上記接触が開始された後、当該接触が終了する（非接触状態が検出される）までの間、位置情報（換言すると、算出された座標）の変化を検出するたびに実行される。また、位置情報に変化がない状態で、タッチペンＰＥＮ等の押圧力が変化した場合には、当該変化後の押圧力の値と、当該位置情報に基づいて算出された座標に関連付けて内部メモリ２４にすでに保存されている値とを比較して、大きい方の押圧力の値を内部メモリ２４に上書き保存する。これにより、各座標における押圧力の最大値が常に更新されて保存される。そして、タッチペンＰＥＮ等による入力部３３への接触が終了した（非接触状態が検出された）場合には、ＣＰＵ２１は、内部メモリ２４に保存された座標ごとの押圧力に基づいて、後述する画像変換処理に適用される画風を決定するための、次のような押圧力の代表値を算出して内部メモリ２４に保存する。具体的には、第１の例として、入力部３３にタッチペンＰＥＮ等が接触していた期間（接触期間）中に検出され、内部メモリ２４に保存された全座標の押圧力のうち、最大となる押圧力の値を代表値とする。また、第２の例としては、接触期間中に検出され、保存された全座標の押圧力の平均値を代表値とする。ここで、上記全座標の押圧力の平均値は、次式で表される。
【００５８】
【数１】
0005800216.tif 000002
【００５９】
次いで、ＣＰＵ２１において、上記保存された押圧力の代表値（全座標の押圧力の最大値、又は、全座標の押圧力の平均値）が、予め設定された複数の圧力範囲のいずれに含まれるかを判定して、当該代表値に応じて特定の画風を設定する。例えば、特定の基準値を境界にして、その基準値以上の第１の圧力範囲と、上記基準値よりも小さい第２の圧力範囲の２つの圧力範囲が設定されている場合、上記算出された代表値が、第１および第２の圧力範囲のいずれに含まれるかを判定する（ステップＳ３１４）。そして、上記代表値が、第１の圧力範囲に含まれる場合には、画像変換処理に適用される第１の画風として、例えば野獣派系の油絵調が設定され（ステップＳ３１５）、一方、上記代表値が、第２の圧力範囲に含まれる場合には、第２の画風として、例えばパステル画調が設定される（ステップＳ３１６）。これにより、ＣＰＵ２１において、上記押圧力の大きさ（すなわち、ユーザの入力動作の程度；本実施形態においてはタッチペンＰＥＮ等を押し付ける強さ）に基づいて、複数の画風の中から画像変換処理に適用される１つの画風が選択され、当該画風に応じたパラメータが画像処理部２６に設定される（画風選択処理）。
【００６０】
次いで、画像処理部２６において、上記押圧力の代表値に応じて設定された画風に基づいて原画像ＰＨＴを画像変換処理することにより、上記画風が適用された絵画風画像ＰＩＣ（ＰＩＣａ又はＰＩＣｂ）が生成されて（ステップＳ３１７；画像変換処理）、内部メモリ２４の所定の表示メモリ領域に一時保存される。ここで、この画像変換処理において、画像変換処理の対象となる原画像ＰＨＴの領域は、後述する領域指定方法に基づいて、特定の領域（指定領域）に設定されるものであってもよいし、原画像ＰＨＴの全領域に設定されるものであってもよい（第１の実施形態に示した図３（ｄ）、（ｅ）参照）。そして、内部メモリ２４に一時保存された絵画風画像ＰＩＣの画像データは、表示制御部２５により読み出され、所定の表示信号に変換されて表示部３１に表示される（ステップＳ３１８）。
【００６１】
次に、本実施形態に係る画像変換処理に関連する領域指定方法について説明する。
図８は、本実施形態に係る画像変換処理に関連する領域指定方法の一例を示す概略説明図である。ここで、説明を明瞭化するため、便宜的に図中の指定領域にハッチングを施して示した。
【００６２】
上述した本実施形態に係る画像変換処理に適用可能な領域指定方法は、例えば図８（ａ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３にタッチペンＰＥＮ等を任意の力（図中、矢印ＦＣａ参照）で押し付けた状態で、直感的又は感覚的に複数回往復動作（図中、矢印ＡＲａ参照）させることにより、当該タッチペンＰＥＮ等の軌跡ＬＯＣに対応した領域が、画像変換処理の対象となる特定の領域（指定領域）に指定される。ここで、指定領域は、上述した第１の実施形態と同様に、タッチペンＰＥＮ等により指示した領域（軌跡ＬＯＣからなる領域や塗りつぶした領域）に限定されるものではなく、当該軌跡ＬＯＣを基準にして所定の広がりを有する領域を含むものであってもよい。
【００６３】
また、他の領域指定方法としては、図８（ｂ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３にタッチペンＰＥＮ等を任意の力（図中、矢印ＦＣｂ参照）で押し付けた状態で、任意の領域を閉じた線で円形状や多角形状等に枠囲み（図中、矢印ＡＲｂ参照）することにより、当該枠囲みした線の軌跡ＬＯＣの内側（内部）を、指定領域ＳＰＢとして設定するものであってもよい。また、上述した第１の実施形態と同様に、指定領域ＳＰＢは、例えば図８（ｃ）に示すように、タッチペンＰＥＮ等による線の軌跡ＬＯＣの内側の領域に加え、当該軌跡ＬＯＣ上の連続する各点ＬＰを中心とする所定半径ｒの円形領域に含まれる領域（すなわち、連続する幅２ｒの領域）に設定されるものであってもよい。
【００６４】
また、他の領域指定方法としては、図８（ｄ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３にタッチペンＰＥＮ等を任意の力（図中、矢印ＦＣｃ参照）で押し付けた状態で、任意の領域に対応するように直線状や曲線状等に移動（図中、矢印ＡＲｃ参照）させることにより、当該線の軌跡ＬＯＣ上の連続する各点ＬＰを中心とする所定半径ｒの円形領域に含まれる領域（すなわち、連続する幅２ｒの領域）が、指定領域ＳＰＣに設定されるものであってもよい。
【００６５】
また、さらに他の領域指定方法としては、図８（ｅ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３の任意の点ＬＰにタッチペンＰＥＮ等を任意の力（図中、矢印ＦＣｅ参照）で押し付けることにより、当該点ＬＰを中心とする所定半径ｒの円形領域が、指定領域ＳＰＥに設定されるものであってもよい。
【００６６】
なお、図８（ｂ）〜（ｅ）に示した領域指定方法におけるタッチペンＰＥＮ等による軌跡ＬＯＣ上の各点ＬＰを中心とする円形領域を規定する半径ｒは、予め一定の数値に設定されているものであってもよいし、ユーザが任意の数値に設定することができるものであってもよい。さらに、当該半径ｒは、タッチペンＰＥＮ等の押圧力に応じて変化（増減）させて、例えば押圧力が大きい場合には半径ｒが大きく設定され、押圧力が小さい場合には半径ｒが小さく設定されるものであってもよい。
【００６７】
このように、本実施形態においては、表示された原画像ＰＨＴに対する、ユーザの直感的又は感覚的な入力動作の程度を規定する変数（押圧力の大きさ）に応じて、複数の画風から１つの画風を選択して、原画像ＰＨＴを当該画風に変換した絵画風画像ＰＩＣを生成することができる。したがって、本実施形態においても、上述した第１および第２の実施形態と同様に、ユーザの直感的又は感覚的な入力動作の程度に応じて、絵画風画像に適用される画風を設定するという、新たな画像変換の手法を提示することができるので、ユーザの画像変換に対する興味を高めることができる。
【００６８】
なお、上述した各実施形態においては、画像変換処理に適用される画風として、説明の都合上、便宜的に２種類の画風（第１の画風；野獣派系油絵調、第２の画風；パステル画調）を示し、ユーザによる入力動作の程度（接触移動速度、接触時間、押圧力）に応じて、いずれかの画風を選択して原画像を画像変換処理する場合について説明したが、本発明は、これに限定されるものではないことはいうまでもない。すなわち、本発明は、ユーザによる入力動作の程度について、より多くの基準値を設けて、判定される範囲を細かく分類することにより、３種類以上の多様な画風から選択された特定の画風が適用された絵画風画像を生成するものであってもよい。
【００６９】
＜第４の実施形態＞
次に、本発明に係る画像処理装置を適用した画像表示装置、および、該画像表示装置における画像処理方法の第４の実施形態について説明する。ここでは、上述した第１乃至第３の実施形態に示した画像表示装置の構成および画像処理方法を適宜参照しながら第４の実施形態について説明する。
【００７０】
上述した第１乃至第３の実施形態においては、画像変換処理の対象となる指定領域として、原画像ＰＨＴ中の１カ所の領域のみを指定し、当該領域を特定の画風に画像変換する場合について説明した。第４の実施形態においては、画像変換処理の対象となる指定領域として、原画像ＰＨＴ中の複数の領域を順次指定し、各指定領域を特定の画風に画像変換することを特徴とする。ここで、各領域の指定方法は、上述した第１乃至第３の実施形態に示したいずれかの手法が適用される。
【００７１】
図９は、第４の実施形態に係る画像変換処理に関連する領域指定方法および画像表示状態の他の例を示す概略説明図である。ここでは、説明の都合上、上述した第１の実施形態と同等の領域指定方法および画像表示状態を用いて、複数の領域を指定した場合の絵画風画像の表示状態について説明するが、第２又は第３の実施形態に示した領域指定方法を適用するものであってもよいことはいうまでもない。
【００７２】
本実施形態に係る画像変換処理に適用可能な領域指定方法は、例えば図９（ａ）に示すように、上述した第１の実施形態と同様に、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、入力部３３にタッチペンＰＥＮ等を接触させた状態で複数回往復動作（図中、矢印ＡＲ１参照）させることにより、当該タッチペンＰＥＮ等の軌跡ＬＯＣ１に対応する領域が、画像変換処理を施す指定領域ＳＰ１として設定される。このとき、ＣＰＵ２１は、タッチペンＰＥＮ等の軌跡ＬＯＣ１に関連する位置情報と、各位置における時間情報とに基づいて、指定領域ＳＰ１におけるタッチペンＰＥＮ等の接触移動速度を算出して、内部メモリ２４に保存する。
【００７３】
次いで、原画像ＰＨＴ中に上記指定領域ＳＰ１以外にも画像変換処理を施す領域がある場合には、図９（ｂ）に示すように、ユーザが表示部３１に表示された原画像ＰＨＴを参照して、当該領域に対して、入力部３３にタッチペンＰＥＮ等を接触させた状態で複数回往復動作（図中、矢印ＡＲ２参照）させることにより、当該タッチペンＰＥＮ等の軌跡ＬＯＣ２に対応する領域が、画像変換処理を施す指定領域ＳＰ２として設定される。このとき、ＣＰＵ２１は、タッチペンＰＥＮ等の軌跡ＬＯＣ２に関連する位置情報と、各位置における時間情報とに基づいて、指定領域ＳＰ２におけるタッチペンＰＥＮ等の接触移動速度を算出して、内部メモリ２４に保存する。
【００７４】
以下、同様の領域指定処理を繰り返して、画像変換処理を施す領域を全て設定した後、例えば表示部３１に表示されたアイコンを選択することにより、領域指定動作の完了を通知する情報が操作信号としてＣＰＵ２１に送出される。
【００７５】
次いで、ＣＰＵ２１において、上記指定領域ＳＰ１、ＳＰ２ごとに、タッチペンＰＥＮ等の接触移動速度に基づいて、速度範囲を判定して画風を決定する。そして、画像処理部２６において、上記画風に応じたパラメータを用いて画像変換処理を実行することにより、例えば図９（ｃ）に示すように、原画像ＰＨＴの指定領域ＳＰ１が野獣派系の油絵調に変換され、また、原画像ＰＨＴの指定領域ＳＰ２がパステル画調に変換される。これにより、各指定領域ＳＰ１、ＳＰ２がユーザの直感的又は感覚的な入力動作の程度（接触移動速度）に応じた画風に変換された絵画風画像ＰＩＣｘが生成される。
【００７６】
このように、本実施形態においては、表示された原画像ＰＨＴ中の複数の指定領域に対する、ユーザの直感的又は感覚的な入力動作の程度（接触移動速度、接触時間、押圧力）に応じて、各指定領域の画風を決定して、原画像ＰＨＴを各画風に変換した絵画風画像ＰＩＣｘを生成することができる。したがって、本実施形態においても、ユーザの直感的又は感覚的な入力動作の程度に応じて、絵画風画像に適用される画風を設定するという、新たな画像変換の手法を提示することができるので、ユーザの画像変換に対する興味を高めることができる。
【００７７】
＜第５の実施形態＞
次に、本発明に係る画像処理装置を適用した画像表示装置、および、該画像表示装置における画像処理方法の第５の実施形態について説明する。ここでは、上述した第１の実施形態に示した画像表示装置の構成を適宜参照しながら第５の実施形態について説明する。
【００７８】
上述した第１の実施形態においては、図１に示したように、画像表示装置１０単体で、表示部３１に表示された原画像ＰＨＴを特定の画風が適用された絵画風画像ＰＩＣに変換するスタンドアロン型の構成について説明した。第５の実施形態においては、原画像ＰＨＴを特定の画風が適用された絵画風画像ＰＩＣに変換する画像変換処理機能が、上述した画像表示装置１０ではなく、当該画像表示装置１０にネットワークやケーブル等を介して接続されたホストコンピュータやサーバ等に設けられ、当該ホストコンピュータ等により画像変換処理が実行されることを特徴とする。
【００７９】
図１０は、本発明の第５の実施形態に係る画像表示装置のハードウェア構成を示す概略ブロック図である。ここで、上述した第１の実施形態（図１参照）と同等の構成については、その説明を簡略化又は省略する。
【００８０】
図１０に示すように、本実施形態に係る画像表示装置１０は、データ処理部２０と、ユーザＩ／Ｆ部３０と、を備え、ネットワーク（通信手段）５０を介して、ホストコンピュータ６０やファイルサーバ７０に接続された構成を有している。データ処理部２０は、上述した第１の実施形態と同様に、概略、ＣＰＵ２１と、ＲＯＭ２２と、ＲＡＭ２３と、内部メモリ２４と、表示制御部２５と、画像処理部２６と、を備えている。ここで、本実施形態においては、画像処理部２６は、上述した第１乃至第４の実施形態に示した画像変換機能を有していない。
【００８１】
また、ユーザＩ／Ｆ部３０は、上述した第１の実施形態と同様に、概略、表示部３１と、操作部３２と、入力部３３と、通信部３４と、メモリＩ／Ｆ部３５と、を備えている。ここで、本実施形態においては、通信部３４は、ネットワーク５０に接続されている。
【００８２】
ホストコンピュータ６０は、ネットワーク５０に接続され、上述した第１乃至第４の実施形態に示した画像処理部２６と同等の画像変換機能を有している。すなわち、画像表示装置１０において、入力部３３にユーザによる入力動作が実行されると、当該入力動作（接触移動速度、接触時間、押圧力）に関する操作信号が、表示部３１に表示された原画像の画像データとともに、通信部３４に接続されたネットワーク５０を介してホストコンピュータ６０に送信される。ホストコンピュータ６０は、受信した原画像の画像データと操作信号に基づいて、上述した第１乃至第４の実施形態に示した画像変換処理を実行して、ユーザの直感的又は感覚的な入力動作の程度に応じた画風からなる絵画風画像を生成する。そして、ホストコンピュータ６０は、ネットワーク５０を介して、生成された絵画風画像の画像データを画像表示装置１０に送信する。
【００８３】
このように、本実施形態においては、画像表示装置１０にネットワーク５０を介して接続されたホストコンピュータ６０に、画像変換機能を備えることにより、画像表示装置１０の画像処理部２６における処理負担を軽減することができる。したがって、例えば、ユーザによる入力動作や、原画像および絵画風画像の表示動作に係る処理速度を向上させたり、電力消費を削減することができ、画像表示装置１０の性能を向上させることができる。
【００８４】
なお、本実施形態において、ホストコンピュータ６０において実行される画像変換処理に用いられる原画像の画像データは、画像表示装置１０から操作信号とともに送信されるものに限定されない。すなわち、例えば画像表示装置１０の表示部３１に表示されている原画像が、ネットワーク５０に接続されたファイルサーバ７０に蓄積された画像データを、ブラウザ等により直接閲覧するものである場合には、ホストコンピュータ６０は、当該原画像の画像データをファイルサーバ７０から受信する。この場合、ホストコンピュータ６０における画像変換処理により生成された絵画風画像の画像データは、例えばファイルサーバ７０の所定のメモリ領域に保存されて、ネットワーク５０を介して、画像表示装置１０の表示部３１に当該絵画風画像が表示される。
【００８５】
また、本実施形態においては、画像表示装置１０がネットワーク５０を介してホストコンピュータ６０に接続された構成について説明したが、本発明はこれに限定されるものではなく、画像表示装置１０の通信部３４とホストコンピュータ６０が通信ケーブルを介して直接接続されているものであってもよい。
【００８６】
なお、上述した各実施形態においては、入力部３３により検出されるユーザの入力動作として、タッチペン等の接触移動速度、接触時間、押圧力のいずれか一つを用いて、画像変換処理に適用する画風を決定する場合について説明したが、これらのうち、任意の複数の入力動作を用いて、画風を決定するものであってもよい。例えば、入力部３３として位置検出型のタッチパネルを適用した場合には、ユーザの入力動作として、例えば接触移動速度と接触時間を用いることができる。また、入力部３３として感圧型のタッチパネルを適用した場合には、ユーザの入力動作として、例えば接触移動速度と押圧力を用いることができる。これらの複数の入力動作の組み合わせによれば、画風を決定する際の判定の範囲を細かく分類することができるので、多様な画風から選択された特定の画風が適用された絵画風画像を生成することができる。
【００８７】
＜電子機器への適用例＞
次に、上述した各実施形態に示した画像表示装置を適用した電子機器について、図面を参照して簡単に説明する。
【００８８】
上述したような画像表示装置１０は、例えばデジタルフォトフレームやデジタルカメラ、高機能携帯電話機（スマートフォン）、パーソナルコンピュータ等、種々の電子機器に良好に適用することができる。
【００８９】
図１１、図１２は、本発明に係る画像処理装置を適用した画像表示装置を搭載した電子機器の構成例を示す概略図である。図１１（ａ）は、デジタルフォトフレームの構成例を示す斜視図であり、図１１（ｂ）、（ｃ）は、デジタルカメラの構成例を示す斜視図である。また、図１２（ａ）は、高機能携帯電話機の構成例を示す斜視図であり、図１２（ｂ）は、パーソナルコンピュータの構成例を示す斜視図である。
【００９０】
図１１（ａ）において、デジタルフォトフレーム１１０は、概略、本体部１１１と、上述した各実施形態に示した、タッチパネルが一体的に構成された表示部１１２（上述した表示部３１および入力部３３に相当する）と、操作スイッチからなる操作部１１３（上述した操作部３２に相当する）と、メモリカードスロット１１４（上述したメモリＩ／Ｆ部３５に相当する）と、自立スタンド１１５とを備えている。これによれば、ユーザが表示部１１２に表示された原画像を参照して、当該表示部１１２に一体的に構成されたタッチパネルに対して直感的又は感覚的に入力動作を行うことにより、当該入力動作の程度に応じて原画像が特定の画風からなる絵画風画像に変換されて表示部１１２に表示される。
【００９１】
図１１（ｂ）、（ｃ）において、デジタルカメラ１２０は、概略、本体部１２１と、レンズ部１２２と、上述した各実施形態に示した、タッチパネルが一体的に構成された表示部１２３（上述した表示部３１および入力部３３に相当する）と、操作スイッチからなる操作部１２４（上述した操作部３２に相当する）と、シャッターボタン１２５とを備えている。この場合においても、ユーザが表示部１２３に表示された原画像を参照して、当該表示部１２３に一体的に構成されたタッチパネルに対して直感的又は感覚的に入力動作を行うことにより、当該入力動作の程度に応じて原画像が特定の画風からなる絵画風画像に変換されて表示部１２３に表示される。
【００９２】
また、図１２（ａ）において、高機能携帯電話機１３０は、概略、本体部１３１と、上述した各実施形態に示した、タッチパネルが一体的に構成された表示部１３２（上述した表示部３１および入力部３３に相当する）と、操作スイッチからなる操作部１３３（上述した操作部３２に相当する）とを備えている。この場合においても、ユーザが表示部１３２に表示された原画像を参照して、当該表示部１３２に一体的に構成されたタッチパネルに対して直感的又は感覚的に入力動作を行うことにより、当該入力動作の程度に応じて原画像が特定の画風からなる絵画風画像に変換されて表示部１３２に表示される。
【００９３】
また、図１２（ｂ）において、デスクトップ型のパーソナルコンピュータ１４０は、概略、本体部１４１と、表示部１４２（上述した表示部３１に相当する）と、キーボード１４３（上述した操作部３２に相当する）と、ペンタブレット１４４（上述した入力部３３に相当する）とを備えている。これによれば、ユーザが表示部１４２に表示された原画像を参照して、ペンタブレット１４４に対して直感的又は感覚的に入力動作を行うことにより、当該入力動作の程度に応じて原画像が特定の画風からなる絵画風画像に変換されて表示部１４２に表示される。なお、本適用例においては、上述した表示部３１に相当する表示部１４２と、入力部３３に相当するペンタブレット１４４が別個の構成をなす場合について示したが、上述した各実施形態と同様に、表示部１４２にタッチパネルが一体的に構成されたものであってもよい。また、パーソナルコンピュータ１４０は、デスクトップ型に限定されるものではなく、ノート型やタブレット型であってもよい。
【００９４】
したがって、上述したような種々の電子機器において、ユーザの直感的又は感覚的な入力動作の程度に応じて、絵画風画像に適用される画風が設定されるという、新たな画像変換の手法を提示することができるので、ユーザの画像変換に対する興味や、当該画像変換機能を備えた電子機器に対する興味を高めることができる。
【００９５】
以上、本発明のいくつかの実施形態について説明したが、本発明は、上述した実施形態に限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
【００９６】
（付記）
請求項１に記載の発明は、
原画像データを記憶する原画像記憶手段と、
ユーザの入力動作の程度に従って決定された変数値に応じて、複数の画風の中から１つの画風を選択する画風選択手段と、
選択された前記１つの画風となるように前記原画像を変換して、変換画像を生成する画像変換手段と、
を備えることを特徴とする画像処理装置である。
【００９７】
請求項２に記載の発明は、
前記複数の画風は、第１の画風と第２の画風とを含み、
前記画風選択手段は、
前記変数値が所定値以上であるときに、前記第１の画風を選択し、
前記変数値が所定値よりも小さいときに、前記第２の画風を選択することを特徴とする請求項１記載の画像処理装置である。
【００９８】
請求項３に記載の発明は、
前記変数は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする請求項１又は２記載の画像処理装置である。
【００９９】
請求項４に記載の発明は、
被接触面を有し、前記ユーザの入力動作による前記被接触面上における接触位置を検出する検出手段としての位置検出手段をさらに備え、
前記変数は、前記ユーザの入力動作の速さを規定するものであり、
前記位置検出手段により検出される、前記ユーザの入力動作による前記被接触面上における前記接触位置の変位に基づいて、前記ユーザの入力動作の前記速さが計算されることを特徴とする請求項３記載の画像処理装置である。
【０１００】
請求項５に記載の発明は、
被接触面を有し、前記ユーザの入力動作による前記被接触面への接触状態を検出する検出手段としての接触状態検出手段をさらに備え、
前記変数は、前記ユーザの入力動作の持続時間を規定するものであり、
前記接触状態検出手段により検出される、前記ユーザの入力動作による前記被接触面への前記接触状態の時間変位に基づいて、前記ユーザの入力動作の前記持続時間が計算されることを特徴とする請求項３記載の画像処理装置である。
【０１０１】
請求項６に記載の発明は、
被接触面を有し、前記ユーザの入力動作による前記被接触面への押圧力を検出する検出手段としての力検出手段をさらに備え、
前記変数は、前記ユーザの入力動作の強さを規定するものであり、
前記力検出手段により検出される、前記ユーザの入力動作による前記被接触面への前記押圧力に基づいて、前記ユーザの入力動作の前記強さが計算されることを特徴とする請求項３記載の画像処理装置である。
【０１０２】
請求項７に記載の発明は、
前記原画像および前記変換画像を表示する表示手段と、
前記検出手段の前記被接触面への前記ユーザの入力動作による接触位置を、前記表示手段に表示された前記原画像の対応する位置に表示する表示制御手段をさらに備えることを特徴とする請求項４乃至６のいずれか一項に記載の画像処理装置である。
【０１０３】
請求項８に記載の発明は、
少なくとも、前記検出手段および前記表示手段は、通信手段を介して、前記画風選択手段および前記画像変換手段に接続されていることを特徴とする請求項７記載の画像処理装置である。
【０１０４】
請求項９に記載の発明は、
ユーザの入力動作の程度に従って変数の値を決定する変数値決定手段をさらに備えることを特徴とする請求項１乃至８のいずれか一項に記載の画像処理装置である。
【０１０５】
請求項１０に記載の発明は、
原画像を所定の画風となるように変換して、変換画像を生成する画像処理方法において、
ユーザの入力動作の程度を規定する変数の値を決定する変数値決定処理と、
決定された前記変数値に応じて、複数の画風の中から１つの画風を選択する画風選択処理と、
選択された前記１つの画風となるように前記原画像を変換して、前記変換画像を生成する画像変換処理と、
を含むことを特徴とする画像処理方法である。
【０１０６】
請求項１１に記載の発明は、
前記変数は、前記ユーザの入力動作の速さ、前記ユーザの入力動作の持続時間、および、前記ユーザの入力動作の強さのうちの少なくとも一つを規定するものであることを特徴とする請求項１０記載の画像処理方法である。
【０１０７】
請求項１２に記載の発明は、
コンピュータに画像処理装置を制御させて、原画像を所定の画風となるように変換して、変換画像を生成する画像処理プログラムであって、
ユーザの入力動作の程度を規定する変数の値を決定する変数値決定処理と、
決定された前記変数値に応じて、複数の画風の中から１つの画風を選択する画風選択処理と、
選択された前記１つの画風となるように前記原画像を変換して、前記変換画像を生成する画像変換処理と、
を実行させることを特徴とする画像処理プログラムである。
【符号の説明】
【０１０８】
１０      画像表示装置
２０      データ処理部
２１      ＣＰＵ
２４      内部メモリ
２５      表示制御部
２６      画像処理部
３０      ユーザＩ／Ｆ部
３１      表示部
３２      操作部
３３      入力部
３４      通信部
５０      ネットワーク
６０      ホストコンピュータ
ＰＨＴ    原画像
ＰＥＮ    タッチペン
ＬＯＣ    軌跡
ＳＰＡ〜ＳＰＥ    指定領域
ＰＩＣ、ＰＩＣａ、ＰＩＣｂ    絵画風画像
【図１】
0005800216.tif 000003
【図２】
0005800216.tif 000004
【図４】
0005800216.tif 000005
【図５】
0005800216.tif 000006
【図６】
0005800216.tif 000007
【図７】
0005800216.tif 000008
【図１０】
0005800216.tif 000009
【図１１】
0005800216.tif 000010
【図１２】
0005800216.tif 000011
【図３】
0005800216.tif 000012
【図８】
0005800216.tif 000013
【図９】
0005800216.tif 000014