(57)【要約】【課題】利用者の顔画像を処理（認証、推定）することで、その処理結果により装置側の動作を変更可能とする画像形成装置を提供する。【解決手段】この画像形成装置は、利用者の画像を入力する入力手段と、データ操作表示手段とを有して画像形成する画像形成装置であって、入力した利用者の画像を用いて利用者認証を行い、認証された利用者に応じたデータ操作表示手段への表示方法を変更する。また、入力された利用者の画像を用いて、利用者の属性（年齢、性別、言語）を推定し、該推定結果に応じて当該装置の動作を変更する。さらに、推定した利用者の属性に対応する広告データをデータサーバから取得し、印刷作業中にこの広告データをデータ操作表示手段へ表示する。【選択図】図３
2005266421.tif 000002
【特許請求の範囲】
【請求項１】
利用者の画像を入力する入力手段と、データ操作表示手段とを有して画像形成する画像形成装置において、前記入力手段で入力した利用者の画像を用いて利用者認証を行う認証手段と、該認証結果に応じて当該装置の動作を変更する変更手段とを有することを特徴とする画像形成装置。
【請求項２】
請求項１に記載の画像形成装置において、前記動作の変更は、前記認証手段により認証された利用者に応じた前記データ操作表示手段への表示方法であることを特徴とする画像形成装置。
【請求項３】
請求項１に記載の画像形成装置において、前記動作の変更は、前記画像形成装置の一部機能の利用制限であることを特徴とする画像形成装置。
【請求項４】
請求項３に記載の画像形成装置において、前記一部機能は、前記画像形成装置の画像通信機能であることを特徴とする画像形成装置。
【請求項５】
請求項１に記載の画像形成装置において、前記動作の変更は、前記認証手段により認証された利用者に対応する前回利用時の利用情報の復元であることを特徴とする画像形成装置。
【請求項６】
請求項１に記載の画像形成装置において、利用者ごとに画像情報記憶領域を有し、前記動作の変更は、前記認証手段により認証された利用者に対応する前記画像情報記憶領域へのアクセスを許可することを特徴とする画像形成装置。
【請求項７】
請求項１に記載の画像形成装置において、前記認証手段で利用者を特定困難な場合には、利用者と対話的に情報を補完することで、利用者を特定することを特徴とする画像形成装置。
【請求項８】
請求項１に記載の画像形成装置において、前記認証手段で利用者を特定できない場合には、前記入力手段で入力した利用者の画像を記録することを特徴とする画像形成装置。
【請求項９】
請求項８に記載の画像形成装置において、利用者の画像を記録したことを利用者に報知することを特徴とする画像形成装置。
【請求項１０】
利用者の画像を入力する入力手段を有して画像形成する画像形成装置において、前記入力手段で入力された利用者の画像を用いて、利用者の属性を推定する属性推定手段と、該推定結果に応じて当該装置の動作を変更する変更手段とを有することを特徴とする画像形成装置。
【請求項１１】
請求項１０に記載の画像形成装置において、前記利用者の属性は、年齢、性別、言語の少なくとも１つ以上を含むことを特徴とする画像形成装置。
【請求項１２】
請求項１０に記載の画像形成装置において、データ操作表示手段を有し、前記動作の変更は、前記属性推定手段により推定された属性に応じた前記データ操作表示手段の表示方法であることを特徴とする画像形成装置。
【請求項１３】
請求項１０に記載の画像形成装置において、前記動作の変更は、前記属性推定手段により推定された利用者の属性に応じて利用制限される前記画像形成装置の一部機能であることを特徴とする画像形成装置。
【請求項１４】
利用者の画像を入力する入力手段とデータ操作表示手段を有して画像形成する画像形成装置と、データを配信するデータサーバをネットワークで接続した画像形成システムにおいて、前記画像形成装置は、前記入力手段で入力された利用者の画像を用いて、利用者の属性を推定する属性推定手段と、該推定結果を前記データサーバに送信して、該推定結果に対応するデータを取得する送受信手段とを有することを特徴とする画像形成システム。
【請求項１５】
請求項１４に記載の画像形成システムにおいて、前記データは、広告画像であることを特徴とする画像形成システム。
【請求項１６】
請求項１５に記載の画像形成システムにおいて、前記送受信手段で取得した広告画像を、前記データ操作表示手段で表示することを特徴とする画像形成システム。
【請求項１７】
請求項１５に記載の画像形成システムにおいて、前記送受信手段で取得した広告画像を、印刷出力することを特徴とする画像形成システム。
【請求項１８】
請求項１４に記載の画像形成システムにおいて、前記データは、クーポン券であり、前記送受信手段で取得したクーポン券を印刷出力することを特徴とする画像形成システム。
【請求項１９】
利用者の画像を入力する入力手段を有して画像形成する画像形成装置と、該画像形成装置から蓄積データを取得するデータサーバをネットワークで接続した画像形成システムにおいて、前記画像形成装置は、前記入力手段で入力された利用者の画像を用いて、利用者の属性を推定する属性推定手段と、該推定結果を当該装置に累積記憶する推定結果蓄積手段と、前記データサーバからの推定結果取得要求に対して、前記推定結果蓄積手段に蓄積した推定結果を送信する送信手段を有することを特徴とする画像形成システム。
【請求項２０】
コンピュータに、請求項１乃至１３のいずれかに記載の画像形成装置の機能、または、請求項１４乃至１９のいずれかに記載の画像形成システムの機能を実行させるためのプログラム。
【請求項２１】
請求項２０に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像形成装置、画像形成システム、プログラムおよび記録媒体に関し、特に、画像出力装置全般の操作系のカスタマイゼーションに関する。
【背景技術】
【０００２】
近年、画像出力装置の高機能化、複合化が進展し、操作系を利用者ごとにカスタマイズする要求が増大しつつある。そのためには、まず前提として、利用者の特定・推定が必要である。利用者の特定方法としてよく使われる方法は、利用者カード（ＩＤカード、カードキー）をセットすることで利用者認証を行う方法がある。
【０００３】
この方法は、実装が容易で手軽であるが、ＩＤカードの紛失、偽造、あるいは取り忘れへの対策が問題となる。
これらの問題に対しては、パスワード入力を併用する方法や、ＩＣチップをＩＤカード自体に埋め込んで偽造をしにくくする方法等がよく知られている。また、最近ではＩＤカードとパスワードの代わりに、指紋の読み取り装置を内蔵し、指紋によって個人認証をする手法も知られている。
これらの方法を併用することで、上記の問題点はある程度克服できるが、その代わりにシステムのコストアップや煩雑な操作となるなどの副作用が出てくる。
【０００４】
さらに、指紋のような生体情報を取られることには、心理的な抵抗感も根強い。この問題に対しては、最近、顔画像を使った利用者認証が応用され始めている。
顔画像による認証は、指紋とは異なり利用者に認証機構を意識させることなく動作させることが可能であるが、顔画像の情報処理には計算負荷が大きく、これまでは組み込み機器に応用するには全く現実的ではなかった。
しかし、最近の撮像デバイスの低価格化、メモリデバイスの高容量化、さらにＣＰＵの能力向上などによって、顔画像の取り扱いが手軽になってきている。
【０００５】
顔画像そのものを使った画像形成装置としては、特許文献１や特許文献２がある。
特許文献１の技術は、印刷物の取り忘れの防止のために、顔画像を取り込み、記録しておくことによって、最終利用者の特定を容易にするものである。
特許文献２の技術は、顔画像を使って利用者が変わったことを検知し、直前の利用者の残した設定条件のまま操作を実行しようとすると、警告を発するものである。
【０００６】
また、顔画像あるいは広範な生体情報（バイオメトリック情報）を画像形成装置に使うものには、特許文献３乃至特許文献５がある。
特許文献３および特許文献４の技術は、顔画像を認証キーとして用いて、特定の機能あるいは画像形成装置そのものの利用の許可、不許可を実施する。
特許文献５は、画像形成装置の機能の操作系列を利用者のバイオメトリック情報と関連付けて記憶しておき、記憶したバイオメトリック情報と一致する利用者に対しては、関連付けられた操作系列を実施する。
【特許文献１】特開２００１−０３４１２８号公報
【特許文献２】特開２００１−３０５９１３号公報
【特許文献３】特開２００２−１１１９２４号公報
【特許文献４】特開２００２−３４２２８９号公報
【特許文献５】特開２００２−０４４３１３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１および２の技術は、顔画像を用いて利用者を識別してはいるが、画像形成装置を利用できる利用者の認証、装置自身を利用制限するためのものではない。特許文献３乃至５の技術は、この点を解決してはいるが装置の操作系をカスタマイズするものではない。
【０００８】
本発明は、上述した実情を考慮してなされたものであって、画像形成装置の利用者の顔画像を処理（認証、推定）することで、その処理結果により装置側の動作を変更可能とする画像形成装置、画像形成システム、プログラムおよび記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記の課題を解決するために、請求項１に記載の発明は、利用者の画像を入力する入力手段と、データ操作表示手段とを有して画像形成する画像形成装置において、前記入力手段で入力した利用者の画像を用いて利用者認証を行う認証手段と、該認証結果に応じて当該装置の動作を変更する変更手段とを有することを特徴とする。
【００１０】
請求項２に記載の発明は、請求項１に記載の画像形成装置において、前記動作の変更は、前記認証手段により認証された利用者に応じた前記データ操作表示手段への表示方法であることを特徴とする。
【００１１】
請求項３に記載の発明は、請求項１に記載の画像形成装置において、前記動作の変更は、前記画像形成装置の一部機能の利用制限であることを特徴とする。
【００１２】
請求項４に記載の発明は、請求項３に記載の画像形成装置において、前記一部機能は、前記画像形成装置の画像通信機能であることを特徴とする。
【００１３】
請求項５に記載の発明は、請求項１に記載の画像形成装置において、前記動作の変更は、前記認証手段により認証された利用者に対応する前回利用時の利用情報の復元であることを特徴とする。
【００１４】
請求項６に記載の発明は、請求項１に記載の画像形成装置において、利用者ごとに画像情報記憶領域を有し、前記動作の変更は、前記認証手段により認証された利用者に対応する前記画像情報記憶領域へのアクセスを許可することを特徴とする。
【００１５】
請求項７に記載の発明は、請求項１に記載の画像形成装置において、前記認証手段で利用者を特定困難な場合には、利用者と対話的に情報を補完することで、利用者を特定することを特徴とする。
【００１６】
請求項８に記載の発明は、請求項１に記載の画像形成装置において、前記認証手段で利用者を特定できない場合には、前記入力手段で入力した利用者の画像を記録することを特徴とする。
【００１７】
請求項９に記載の発明は、請求項８に記載の画像形成装置において、利用者の画像を記録したことを利用者に報知することを特徴とする。
【００１８】
請求項１０に記載の発明は、利用者の画像を入力する入力手段を有して画像形成する画像形成装置において、前記入力手段で入力された利用者の画像を用いて、利用者の属性を推定する属性推定手段と、該推定結果に応じて当該装置の動作を変更する変更手段とを有することを特徴とする。
【００１９】
請求項１１に記載の発明は、請求項１０に記載の画像形成装置において、前記利用者の属性は、年齢、性別、言語の少なくとも１つ以上を含むことを特徴とする。
【００２０】
請求項１２に記載の発明は、請求項１０に記載の画像形成装置において、データ操作表示手段を有し、前記動作の変更は、前記属性推定手段により推定された属性に応じた前記データ操作表示手段の表示方法であることを特徴とする。
【００２１】
請求項１３に記載の発明は、請求項１０に記載の画像形成装置において、前記動作の変更は、前記属性推定手段により推定された利用者の属性に応じて利用制限される前記画像形成装置の一部機能であることを特徴とする。
【００２２】
請求項１４に記載の発明は、利用者の画像を入力する入力手段とデータ操作表示手段を有して画像形成する画像形成装置と、データを配信するデータサーバをネットワークで接続した画像形成システムにおいて、前記画像形成装置は、前記入力手段で入力された利用者の画像を用いて、利用者の属性を推定する属性推定手段と、該推定結果を前記データサーバに送信して、該推定結果に対応するデータを取得する送受信手段とを有することを特徴とする。
【００２３】
請求項１５に記載の発明は、請求項１４に記載の画像形成システムにおいて、前記データは、広告画像であることを特徴とする。
【００２４】
請求項１６に記載の発明は、請求項１５に記載の画像形成システムにおいて、前記送受信手段で取得した広告画像を、前記データ操作表示手段で表示することを特徴とする。
【００２５】
請求項１７に記載の発明は、請求項１５に記載の画像形成システムにおいて、前記送受信手段で取得した広告画像を、印刷出力することを特徴とする。
【００２６】
請求項１８に記載の発明は、請求項１４に記載の画像形成システムにおいて、前記データは、クーポン券であり、前記送受信手段で取得したクーポン券を印刷出力することを特徴とする。
【００２７】
請求項１９に記載の発明は、利用者の画像を入力する入力手段を有して画像形成する画像形成装置と、該画像形成装置から蓄積データを取得するデータサーバをネットワークで接続した画像形成システムにおいて、前記画像形成装置は、前記入力手段で入力された利用者の画像を用いて、利用者の属性を推定する属性推定手段と、該推定結果を当該装置に累積記憶する推定結果蓄積手段と、前記データサーバからの推定結果取得要求に対して、前記推定結果蓄積手段に蓄積した推定結果を送信する送信手段を有することを特徴とする。
【００２８】
請求項２０に記載の発明は、コンピュータに、請求項１乃至１３のいずれかに記載の画像形成装置の機能、または、請求項１４乃至１９のいずれかに記載の画像形成システムの機能を実行させるためのプログラムである。
請求項２１に記載の発明は、請求項２０に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体である。
【発明の効果】
【００２９】
本発明によれば、利用者の顔画像によって認証を行い、認証結果によって画像形成装置の動作を変更させることができるので、利用者個々人にとって使いやすい操作系を持つことができる。
また、利用者の顔画像によって認証を行い、認証ができなかった場合には、利用者の顔画像を記録するとともに、表示するようにしたので、悪意を持った利用者の迷惑行為を抑止する効果を期待することができる。
また、利用者の顔画像によって利用者の属性を推定し、その推定結果によって画像形成装置の動作を変更させることができるので、多種多様な利用者に対しても、使いやすい操作系を提供することができる。
【００３０】
また、予め使用する利用者の属性を推定した上で広告を配信するので、利用者の注目をひく効果的な広告配信が可能になる。
また、顔画像を利用して利用者の属性を推定するため、事前の利用者登録作業が不要となり、不特定多数の利用者を対象にしたシステムが実現可能となる。
また、ネットワーク上で、直接個人情報（ＩＤ情報やバイオメトリック情報など）を送受信する必要が無くなり、データ自体や通信路の暗号化など、セキュリティ対策にかける設備・費用等を削減できるという副次的な効果も生じる。
【発明を実施するための最良の形態】
【００３１】
以下、図面を参照して本発明の好適な実施形態について説明する。
【００３２】
＜実施形態１＞
図１は、本発明の実施形態に係る画像形成装置の内部構成図である。同図において、画像形成装置１００は、情報処理部１１０、情報記憶部１２０、原稿読み取り部１３０、回線制御部１４０、Ｉ／Ｏコントローラ１５０、エンジンコントローラ１６０からなり、それらの各部はデータバス１７０で接続している。
【００３３】
情報処理部１１０は、ＣＰＵを含んでおり、情報処理や装置１００全体の動作を制御する。
情報記憶部１２０は、ＯＳ（Operating System）、コピー、ファクシミリ、プリンタプロセスに必要な各種制御プログラム、プリンタのＰＤＬ（Page Description Language）処理系、システムの初期設定値などを納めたＲＯＭ（Read Only Memory）や、ワークメモリ用のＲＡＭ（Random Access Memory）、ＨＤＤ（Hard Disk Drive）等からなる。特に、ＨＤＤは、各種設定情報やドキュメント蓄積用のドキュメントボックス（利用者ごとの画像情報記憶領域）、利用者ごとの設定情報（前回利用時の設定情報、利用者のニックネーム、パスワード、マッチングの際に使用する顔画像の学習データ等）、利用者の利用統計情報（利用枚数カウンタ情報等）、ガイダンス文の蓄積用に使われる。
ＨＤＤに蓄積する情報は、コスト的、容量的に可能であれば、バッテリーバックアップ付きのメモリ、或いは、フラッシュメモリに記憶するようにしてもよい。
【００３４】
原稿読み取り部１３０は、コンタクトグラス上やＡＤＦ（自動原稿送り装置）に置かれた原稿をスキャナで光学的に走査し、スキャナからの反射像を色フィルタ、レンズを介してＣＣＤ上に結像して電気信号に変換し、この変換された電気信号をＡ／Ｄ変換して、種々の画像処理を施した画像情報を一時的に情報記憶部１２０へ記憶しておく。
回線制御部１４０は、当該装置１００をＧ３ファクシミリ伝送制御手順でＰＳＴＮ（電話回線網）に接続する。
【００３５】
さらに、Ｉ／Ｏコントローラ１５０は、ＮＩＣ（Network Interface Card）１５１を介してネットワークとの入出力、データ操作表示部１５２との入出力、およびカメラモジュール１５３との入出力を制御する。また、パラレル通信やＵＳＢ（Universal Serial Bus）によって外部機器間との入出力を制御する。
ＮＩＣ１５１は、装置１００をネットワークに接続し、ＴＣＰ／ＩＰ（Transmission Control Protocol／Internet Protocol）、ＳＭＴＰ（Simple Mail Transfer Protocol）、ＨＴＴＰ（Hyper Text Transfer Protocol）などのプロトコル処理をして、ネットワークを介して他の外部機器との通信処理を行うネットワークＩ／Ｆである。
データ操作表示部１５２は、利用者の指示を入力させるタッチパネル、ボタン、スイッチ類等、また、情報処理部１１０からの処理結果や選択事項を表示する液晶表示パネル等からなっている。
カメラモジュール１５３は、装置１００本体の前に居る利用者の画像、特に顔の画像を連続的に取り込む。
【００３６】
エンジンコントローラ１６０は、情報記憶部１２０に記憶されている原稿の画像情報に対して、情報処理部１１０で画像処理された印刷データを、プリントエンジン１６２および給・排紙部１６１を制御して印刷結果を得る。
プリントエンジン１６２は、印刷データに対して感光体ドラム上に静電潜像を形成し、その静電潜像を顕像化し、給・排紙部１６１から給紙された用紙にトナー像を定着させて、排紙する。
上述した構成は従来の画像形成装置においては公知の構成であるので、詳細な説明は省略する。
【００３７】
図２は、画像形成装置の標準状態におけるデータ操作表示部１５２の標準パネルレイアウトである。図２において、データ操作表示部１５２は、左に機能キー（コピー、プリンタ、ＦＡＸ）、右側に数字等を入力するテンキー、リセットキー、クリアキー、スタートボタンが配置されており、中央にタッチパネルとその上方にカメラモジュール１５３が配置されている。
タッチパネルは、操作状態やメッセージを表示する画面と、その画面上に仮想的なボタンとして実装されている機能が表示され、現在選択中の項目は、画面上で反転表示されている。
【００３８】
このデータ操作表示部１５２のタッチパネルのレイアウトパターンは、予め複数のパターンが情報記憶部１２０に内蔵されており、必要に応じて情報処理部１１０によって呼び出される。このレイアウトパターンは、目的や利用者の好み、利用者の使用履歴、利用者の属性に応じて適宜使い分けることになる。また、各個人の前回利用時に設定した操作情報なども、情報記憶部１２０上に記憶してあり、利用者が次回使用するときには、この操作情報がパネル上に表示されることになる。
【００３９】
カメラモジュール（以下、カメラと略記する）１５３は、利用者がデータ操作表示部１５２を操作するときに、利用者の正面顔画像を撮影できる位置（図２のようにタッチパネル上部）に取り付けてあり、顔画像データを単純に連続的に取り込むだけで、各種フィルタリング処理などの画像処理自体は情報処理部１１０で行う。
【００４０】
以上のように、画像形成装置を構成するハードウェアそのものとしては、カメラモジュールを除き、一般的な画像形成装置と大差ないものである。
【００４１】
次に、本実施形態１の画像形成装置を利用者が使うときの処理手順を図３のフローチャートを用いて説明する。
まず、画像形成装置の前に利用者が居るかどうかをチェックする（利用者検知）（ステップＳ１０）。利用者が当該装置の前に居るか否かという判定には、カメラ画像で、一定面積以上の肌色領域を検出した場合に利用者が居ると見なす。画像形成装置の設置場所は、殆どの場合、蛍光灯光源など、照明条件が比較的限られるので、このような肌色領域による判定でも、比較的良好に動作する。または、既存の赤外線を使った人感センサーを併用してもよい。
【００４２】
画像形成装置の前に利用者が居ると見なした場合（ステップＳ１０のＹＥＳ）、利用者認証を試みる（ステップＳ１１乃至Ｓ１４）。
カメラで利用者の正面顔画像を連続的に取り込み、取り込まれたデータは情報記憶部１２０に一旦格納し、所定の一定時間内に取り込まれた顔画像の中で、顔画像がある程度以上の大きさで、かつ顔の傾き角が小さいものを１枚選択する（ステップＳ１１）。
殆どの利用者は、画像形成装置の操作時には、タッチパネルを真上方向からのぞき込むようにして操作を行おうとするので、利用者の正面顔画像を取得することは、自然に、かつ極めて容易に実現可能である。また、取り込んだデータは情報記憶部１２０から消去してよい。
【００４３】
次に、選択した１枚の顔画像データから、肌色領域の判定と、目、鼻、口の特徴点のマッチングを用いて、これらを内包する矩形を顔領域として切り出す（ステップＳ１２）。
この切り出した顔領域と、予め用意しておいた学習データとの間でマッチングする（ステップＳ１３）。この学習データとのマッチングに関しては、既知の方法、例えば、固有顔（Eigen Face）を使う方法や、隠れマルコフモデル（Hidden Markov Model、以下ＨＭＭ）を使う方法を用いてマッチングする。このマッチングの計算量は大きく、複雑な認証・推測アルゴリズムを採用する場合には、画像処理専用プロセッサを情報処理部１１０に別途実装することで実現しても良い。
尚、顔画像の学習に関しては、マッチング処理よりも計算負荷が高いことが多いので、別途、顔画像の学習（トレーニング）を行い、得られた学習データのみを画像形成装置側に転送して、情報記憶部１２０へセットしておく。
【００４４】
学習データとのマッチングにおいて、認証の確信度が所定の閾値を下回った場合のように認証に失敗した場合（ステップＳ１４のＮＯ）、顔画像の取り込みには成功したが、確信度が低く、利用者を特定できないので、確信度の高い順に利用者のニックネームを、例えば、図４に示すように表示して、利用者のニックネームを自分で選択するように促す（ステップＳ１５）。
【００４５】
利用者はこの表示された中から自分のニックネームをタッチして選択すると（ステップＳ１６のＹＥＳ）、例えば、図５に示すように引き続きパスワードの入力を促し、利用者がパスワードをテンキーによって入力し、スタートボタンを押す（ステップＳ１７）。
入力されたパスワードがニックネームの持つパスワードと同じになるまで、パスワードの入力を行わせる（ステップＳ１８のＮＯ）。
入力したパスワードがニックネームに対応させて登録してあるパスワードと一致した場合（ステップＳ１８のＹＥＳ）、ステップＳ２２へ進む。
このように、利用者認証が自動的にできない場合にでも利用者が対話的に情報を補完して、認証を完了させることができる。
【００４６】
一方、ゲスト利用者などで、認証用のニックネームそのものが登録されていない場合には、図４で「未登録ユーザ」を選択すれば（ステップＳ１６のＮＯ、Ｓ１９のＹＥＳ）、取り込んだ利用者の顔画像を内部に一時的に保存し、未登録利用者の顔画像を記録完了したことをタッチパネル上で報知し（ステップＳ２０）、元の標準パネルレイアウトに戻って作業ができるようになる（ステップＳ２１）。
ゲスト利用者（認証ができなかった利用者）に対して、取り込んだ顔画像は、顔認識用の学習データではなく、画像形成装置の管理者が必要なときに参照するための単なる管理目的のためのものであるので、一定時間経過後に自動消去、あるいは一定ファイル数以上が蓄積された場合には古い順から消去するようにしておく。
【００４７】
このように、利用者を特定できない場合でも、認証作業を完了することができる。また、未登録利用者の顔画像をタッチパネル上で報知するようにしたので、悪意を持った利用者が意図的に故障させる行為を抑止する効果を期待できる。
さらに、画像形成装置が故障した場合にでも、保存した利用者画像を管理者が参照することによって、故障発生前後で操作をした利用者が誰であるかを推定することが可能となる。
【００４８】
一方、利用者認証に成功すると（ステップＳ１４のＹＥＳ）、利用者の利用情報（例えば、通算利用枚数、頻繁に使う機能、前回利用時の設定情報など）を情報記憶部１２０から読み出すとともに、利用者専用のドキュメントボックスへのアクセス権を付与し、例えば、図６に示すようにタッチパネルの表示方法を変更し（ステップＳ２２）、作業ができることになる（ステップＳ２３）。
【００４９】
図６では、認証の結果が、利用者名"ＹＫ−４８１１"というニックネームで表示されており、同時に、その利用者の通算利用枚数（白黒：４５枚、カラー：０枚）、利用者専用のドキュメントボックスに２通の文章が蓄積されていることをタッチパネルのメッセージ窓の中に表示している。ここで、メッセージ窓の下線部を利用者がタッチすることで、ドキュメントボックスへアクセスし、出力、転送、削除などの処理が可能である。
また、前回利用時に行った設定「Ａ４ヨコ、７０％縮小、カラーコピー」といった情報が再設定され、画面上で反転表示される。
【００５０】
上述の「認証後の標準タッチパネルの表示を利用者個人ごとの権限に合わせて変更する」という実装は、異なった実装も可能である。例えば、
（１）認証後のタッチパネルには「カラー」ボタンを配置するが、標準パネルレイアウトには「カラー」ボタンを配置しないようにして、カラーコピーの利用を制限することも容易に実現可能である。
（２）認証後の特定利用者に対しては、ドキュメントボックスへのアクセスは許可するが、ボックス内のドキュメントのＦＡＸ出力は禁止する（ボタンを押しても機能しない）という機能の実現も容易に実装可能である。
（３）ソート、スタックなどのボタンを利用者があまり使わない場合には、それらの機能を拡張メニューの中に移すという機能の実現も容易に実装可能である。
【００５１】
次に、利用者が画像形成装置の使用を終了したときに、パネル上の「ログアウト」ボタンを押すと（ステップＳ２４のＹＥＳ）、情報記憶部１２０を利用者の利用情報（例えば、通算利用枚数、頻繁に使う機能、今回利用時の設定情報など）で更新し、ドキュメントボックスのアクセス権をリセットし、タッチパネルのレイアウトを標準状態に戻す（ステップＳ２６）。これにより、利用者は、画像形成装置を離れることを明示的に画像形成装置側に指示することができる。
【００５２】
または、「ログアウト」ボタンを押さない場合でも、画像形成装置が利用者の顔画像を検知できなくなってから一定時間経過後には（ステップＳ２５のＹＥＳ）、「ログアウト」ボタンが押されたのと同様に、情報記憶部１２０を利用者の利用情報（例えば、通算利用枚数、頻繁に使う機能、今回利用時の設定情報など）で更新し、ドキュメントボックスのアクセス権をリセットし、タッチパネルのレイアウトを標準状態に戻す（ステップＳ２６）。これにより、明示的に「ログアウト」ボタンを押さない場合でも、「ログアウト」ボタンを押したと同じ効果をもたらし、セキュリティ上の問題点も解決できる。
【００５３】
＜実施形態２＞
上記実施形態１では、利用者個人を認証することを前提としたが、本実施形態２では個人認証の代わりに利用者の属性を推定し、タッチパネルの表示方法、画像形成装置が提供する機能を変化させる、例えば、顔画像から高齢者や子供（以下、特定利用者）を推定し、より使いやすいインターフェイスを提供するものである。
【００５４】
この場合は、実施形態１の顔画像の学習データが個人の顔画像を基にして学習したものであるのに対して、本実施形態２では、利用者の属性に合わせた顔画像を用いるところが相違する。例えば、年齢層に応じた複数の顔モデルを使って学習データを構築しておくことによって、間接的に利用者の年齢層の推定を可能にするものである。
但し、高齢者と子供のみを推定する手法に限れば、特徴量を用いる方法や特徴点の数を計数する方法、例えば、１）肌色、髪の色の検出結果、２）シワ、ほくろの数をカウントした結果を組み合わせることでも、ある程度の推定は可能である。
【００５５】
このようにして、特定利用者を検出した場合には、操作部のタッチパネルのレイアウトを標準パネルレイアウト（図２参照）から、簡単レイアウト（図７参照）に変更する。
図７に示した簡単レイアウトでは、提供する機能を倍率設定、濃度設定、用紙選択の３つのみに絞り、これらを標準パネルレイアウトよりも大きめのフォントで表示し、且つ、パネルの右側にガイダンス文の表示領域を設けている。また、ガイダンス文の「１部」とテンキーの「１」、ガイダンス文の「スタート」と「スタートボタン」をそれぞれ、着色や点滅などで強調することにより、さらに効果的な表示が可能である。
【００５６】
以上の説明において、利用者の属性を「高齢者と子供」としたが、同様に、男女の推定や、外国人の推定なども、高い判定精度を要求しなければ実現可能である。
例えば、利用者が外国人であることを検出した場合には、最初に表示言語の選択画面をパネル表示し、利用者に予めタッチパネルの表示言語の設定（"日本語"、"English"など）を促すように構成することも可能である。
【００５７】
＜実施形態３＞
図８は、本発明の実施形態３に係る画像形成システムの構成図である。同図において、画像形成システムは、画像形成装置１００およびデータサーバ２００をネットワーク３００で接続する。
画像形成装置１００は、ネットワーク３００に対して、１台以上設置可能であり、上記実施形態１または実施形態２の機能を持つ画像形成装置である。
データサーバ２００は、ネットワーク３００を介して接続された画像形成装置１００に対して広告やクーポン券の画像等のデータを配信するサーバである。
ネットワーク３００は、データサーバ２００および画像形成装置１００を結合するための伝送路であって、一般には、ケーブルで実現され、通信プロトコルにはＴＣＰ／ＩＰが使われる。但し、伝送路としてはケーブルだけではなく、それらの間の通信プロトコルが一致するものであれば無線および有線のいずれであってもよく、例えば、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）やインターネットなどを用いることができる。
【００５８】
データサーバ２００は、広告配信用のｗｅｂサーバと同様な機能を持つ一般的なコンピュータで構成される。このデータサーバ２００には、広告依頼主の要求に従って、テキストおよび画像のいずれかまたは両方によって構成された広告やクーポン券の画像等のデータを保持するデータベースを備えている。
このデータベースは、１つの広告やクーポン券の画像に対して、利用者の属性別、画像形成装置の製造会社と機種別に用意された、複数の広告データやクーポン券の画像等を格納している。これは、画像形成装置の操作部のタッチパネルの画素数、発色数が製造会社や機種等によって若干異なるためである。
また、データサーバ２００は、広告データを格納する記憶装置の容量が許す限り、またトラフィック量が許す限り、１台のデータサーバで、複数台数の画像形成装置をサポートできる。しかし、データサーバ２００の負荷率低減などの目的で、複数台のデータサーバを使用するようにしても良い。
【００５９】
このように構成したデータサーバ２００は、画像形成装置１００から送信されてきた利用者の属性情報、当該装置の製造会社と機種とからデータベースを検索して、該当する広告等のデータを取り出して、この取り出した広告等のデータを送信元の画像形成装置１００へ返信する。
【００６０】
一方、画像形成装置１００では、広告等のデータを取得するデータサーバ２００のネットワークアドレス（例えば、ＩＰアドレスやＵＲＬ）を予め設定しておき、利用者の属性を推定した後、この設定してあったネットワークアドレスのデータサーバ２００へ、推定した利用者の属性情報および当該装置の製造会社と機種（予め設定済み）とを送信する。
【００６１】
データサーバ２００から返信されてきた広告等のデータを、利用者が印刷出力操作を実行している間に、タッチパネル上に表示する。即ち、利用者がスタートボタンを押して出力が開始されてから、実際に印刷物を受けるまでの時間は、利用者にとっての待ち時間であるから、データ操作表示部のタッチパネル上に広告等のデータを表示していても、あまり苦にはならない。
また、最近のネットワーク帯域は十分に広いので、広告等のデータは、テキストデータでも、画像データであっても、データ転送にかかる遅延時間はごく僅かであり、データ表示にあたって画像形成装置側の負荷も無視できるほどに小さい。
【００６２】
或いは、利用者が印刷を行ったときにこの広告等のデータを印刷物に付加して印刷するようにしてもよい。この場合、例えば、利用者印字領域を本来の９０％程度の縮小領域とし、残りの領域に広告等のデータを印字するようにしてもよいし、広告用のページを付加して印刷するようにしてもよい。また、単なる広告ではなく、クーポン券の画像を付加印刷するようにしてもよい。
【００６３】
以上のように本実施形態３を構成することによって、予め使用する利用者の属性を推定した上で広告を配信するので、利用者の注目をひく効果的な広告配信が可能になる。
また、顔画像を利用して利用者の属性を推定するため、事前の利用者登録作業が不要となり、不特定多数の利用者を対象にしたシステムが実現可能となる。
また、ネットワーク上で、直接個人情報（ＩＤ情報やバイオメトリック情報など）を送受信する必要が無くなり、データ自体や通信路の暗号化など、セキュリティ対策にかける設備・費用等を削減できるという副次的な効果も生じる。
【００６４】
次に、本実施形態３の処理手順を図９のフローチャートを用いて説明する。
まず、画像形成装置の前に利用者が居るかどうかをチェックする（利用者検知）（ステップＳ３０）。この判定は、カメラ画像で一定面積以上の肌色領域を検出した場合、または、人感センサーを併用して行う。
次に、カメラで利用者の正面顔画像を連続的に取り込み、取り込まれたデータは情報記憶部１２０に一旦格納し、所定の一定時間内に取り込まれた顔画像の中で、顔画像がある程度以上の大きさで、かつ顔の傾き角が小さいものを１枚選択する（ステップＳ３１）。
【００６５】
次に、選択した１枚から、肌色領域の判定と、目、鼻、口の特徴点のマッチングを用いて、これらを内包する矩形を顔領域として切り出す（ステップＳ３２）。
この切り出した顔領域と、予め用意しておいた学習データとの間でマッチングする（ステップＳ３３）。この学習データは、ＨＭＭのアルゴリズムの採用を前提とすれば、年齢層に応じた複数の顔モデルで、学習データを構築しておくことで、間接的に利用者の年齢層の推定を行う。ただし高齢者と子供のみを推定する手法に限っては、特徴量や、特徴点の数を計数する方法も、効果的である。例えば、１）肌色、髪の色の検出結果、２）シワ、シミの数をカウントした結果を組み合わせることでも、ある程度の推定が可能である。
顔画像の利用は、セキュリティ確保を目的とした個人認証ではなく、利用者の属性を推定するだけなので、高い推定精度は必ずしも必要ではない。
【００６６】
次に、推定した利用者の属性、当該装置の製造会社および機種を予め登録してあるデータサーバ２００へ送信し（ステップＳ３４）、データサーバ２００から広告等のデータを受け取り、一時的に記憶しておく（ステップＳ３５）。
利用者が印刷のための設定作業を終了し、スタートボタンを押すと（ステップＳ３６，Ｓ３７のＹＥＳ）、一時的に記憶した広告等のデータをデータ操作表示部上に印刷が完了するまで表示する（ステップＳ３８）。
また、利用者が広告の印刷も指示したときには、例えば、利用者印字領域を本来の９０％程度の領域とし、残りの領域に広告等のデータを印刷する（ステップＳ３９）。
【００６７】
本実施形態３の変形例として、利用者属性の推定結果を毎回画像形成装置側の情報記憶部１２０（属性推定結果蓄積部）に蓄積しておき、所定の周期や必要に応じてデータサーバ２００側からこの蓄積した利用者属性の推定結果をまとめて取り出すようにしてもよい。このような利用者属性の推定結果は、個別の画像形成装置の利用形態を探る上で重要な手がかりとなる。また、この推定結果は、個人情報ではなく単なる利用統計情報であるので、ネットワーク経由でデータの送受信をする場合、セキュリティ対策にかける設備・費用等を削減できる。
【００６８】
＜実施形態４＞
さらに、本発明は上述した実施形態のみに限定されたものではない。上述した実施形態の画像形成装置、画像形成システムを構成する各機能をそれぞれプログラム化し、予めＣＤ−ＲＯＭ等の記録媒体に書き込んでおき、このＣＤ−ＲＯＭをＣＤ−ＲＯＭドライブのような媒体駆動装置を搭載したコンピュータに装着して、これらのプログラムをそれぞれのコンピュータのメモリあるいは記憶装置に格納して、実行することによって、本発明の目的を達成することができる。
【００６９】
なお、記録媒体としては半導体媒体（例えば、ＲＯＭ、不揮発性メモリカード等）、光媒体（例えば、ＤＶＤ、ＭＯ、ＭＤ、ＣＤ−Ｒ等）、磁気媒体（例えば、磁気テープ、フレキシブルディスク等）のいずれであってもよい。
【００７０】
また、ロードしたプログラムの指示に基づき、オペレーティングシステム等が実際の処理の一部または全部を行い、その処理によって上述した実施形態の機能が実現される場合も含まれる。
【００７１】
また、上述したプログラムをサーバコンピュータのＨＤＤ等の記憶装置に格納しておき、ネットワークで接続された利用者のコンピュータからダウンロードして頒布する場合、また、サーバコンピュータから配信して頒布する場合、このサーバコンピュータの記憶装置も本発明の記録媒体に含まれる。
このように、本発明の機能をプログラムして、記録媒体に記録し頒布することによって、コスト、可搬性、汎用性を向上させることができる。
【図面の簡単な説明】
【００７２】
【図１】本発明に係る画像形成装置の内部構成図である。
【図２】画像出力装置の標準状態における操作部の標準パネルレイアウト例である。
【図３】本発明に係る画像形成装置の使用開始から終了までの処理の流れを示すフローチャートである。
【図４】顔画像の認識確信度が低いときに表示される、利用者選択画面例である。
【図５】図４の利用者選択後のパスワードの入力画面例である。
【図６】利用者認証が済んだ後に表示される個人別の操作部のパネルレイアウト例である。
【図７】利用者の属性に合わせた操作部のパネルレイアウト例（簡単レイアウト）である。
【図８】本発明の実施形態３に係る画像形成システムの構成図である。
【図９】本発明に係る画像形成装置を用いた広告データの配信処理の流れを示すフローチャートである。
【符号の説明】
【００７３】
１００…画像形成装置、１１０…情報処理部、１２０…情報記憶部、１３０…原稿読み取り部、１４０…回線制御部、１５０…Ｉ／Ｏコントローラ、１５１…ＮＩＣ、１５２…入力装置部、１５２…データ操作表示部、１５３…カメラモジュール、１６０…エンジンコントローラ、１６１…給・排紙部、１６２…プリントエンジン、１７０…データバス、２００…データサーバ、３００…ネットワーク。
【図１】
2005266421.tif 000003
【図２】
2005266421.tif 000004
【図３】
2005266421.tif 000005
【図４】
2005266421.tif 000006
【図５】
2005266421.tif 000007
【図６】
2005266421.tif 000008
【図７】
2005266421.tif 000009
【図８】
2005266421.tif 000010
【図９】
2005266421.tif 000011