(57)【要約】【課題】撮像した人物をディスプレイに表示するデジタルサイネージに対する人の関心度を高めるための技術を提供する。【解決手段】撮像装置１０と、撮像装置１０が撮像した画像から人物を抽出する人物抽出部１１と、人物抽出部１１により抽出された人物の属性を、画像を利用して推定する人物属性推定部１２と、人物属性推定部１２により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定部１３と、画像内の人物に、台詞決定部１３が決定した台詞を付与する加工画像を生成する画像加工部１４と、加工画像をディスプレイに表示する表示部１５と、を有する表示装置１。【選択図】図１
2014175704.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置と、
前記撮像装置が撮像した画像から人物を抽出する人物抽出手段と、
前記人物抽出手段により抽出された人物の属性を、前記画像を利用して推定する人物属性推定手段と、
前記人物属性推定手段により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定手段と、
前記画像内の前記人物に、前記台詞決定手段が決定した前記台詞を付与する加工画像を生成する画像加工手段と、
前記加工画像をディスプレイに表示する表示手段と、
を有する表示装置。
【請求項２】
請求項１に記載の表示装置において、
前記台詞決定手段は、互いに属性が異なる人物に対して、互いに異なる台詞を決定する表示装置。
【請求項３】
請求項１または２に記載の表示装置において、
前記撮像装置は、終点に向かって一方向に人物を移動させる輸送手段により移動中の人物を撮像可能な位置に設置され、
前記ディスプレイは前記輸送手段の終点付近、又は、前記一方向における前記撮像装置により撮像される位置よりも下流側に設置される表示装置。
【請求項４】
請求項１から３のいずれか１項に記載の表示装置において、
前記画像から複数の人物が抽出された場合、前記画像を利用して２人以上の人物を含むグループを生成するグループ化手段をさらに有し、
前記台詞決定手段は、同じグループに属する２人以上の人物に付与する前記台詞として、会話形式の台詞を決定する表示装置。
【請求項５】
請求項４に記載の表示装置において、
前記グループ化手段は、人物の顔の向き、顔の大きさ及び互いの顔の距離の中の少なくとも１つに基づいて、前記グループを生成する表示装置。
【請求項６】
請求項１から５のいずれか１項に記載の表示装置において、
人物の属性と、台詞とを対応付けた台詞情報を記憶する台詞記憶手段をさらに有し、
前記台詞決定手段は、前記人物属性推定手段に推定された属性に対応付けられている台詞を前記台詞記憶手段から取得し、取得した台詞を、その属性の人物に付与する台詞として決定する表示装置。
【請求項７】
請求項１から５のいずれか１項に記載の表示装置において、
前記台詞決定手段は、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、登録されている属性が前記人物属性推定手段により推定された属性と一致する前記ユーザの前記コメントを取得し、取得した前記コメントを、その属性の人物に付与する台詞として決定する表示装置。
【請求項８】
請求項７に記載の表示装置において、
前記台詞決定手段は、前記登録サーバから、登録されている属性が前記人物属性推定手段により推定された属性と一致する前記ユーザの前記コメントの中の、所定のキーワードを含む前記コメントを取得し、取得した前記コメントを、その属性の人物に付与する台詞として決定する表示装置。
【請求項９】
請求項８に記載の表示装置において、
前記所定のキーワードは、前記人物属性推定手段により推定された属性、及び、前記登録サーバから前記コメントを取得する時の時刻の少なくとも一方に基づいて前記台詞決定手段が決定する表示装置。
【請求項１０】
請求項１から５のいずれか１項に記載の表示装置において、
前記台詞決定手段は、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、前記人物属性推定手段により推定された属性に基づいて決定された所定のキーワードを含むコメントを取得し、取得したコメントを、その属性の人物に付与する台詞として決定する表示装置。
【請求項１１】
請求項１から１０のいずれか１項に記載の表示装置において、
前記画像加工手段は、前記画像内の前記人物に前記台詞を付与するとともに、前記画像内の前記人物の顔を加工する前記加工画像を生成する表示装置。
【請求項１２】
請求項１１に記載の表示装置において、
前記画像加工手段は、前記人物属性推定手段により推定された属性を用いて、各人物の顔に行う加工内容を決定し、決定した加工を行う表示装置。
【請求項１３】
請求項１２に記載の表示装置において、
人物の属性と、前記加工画像内で人物の顔の位置に表示される置換画像とを対応付けた加工情報を記憶する加工情報記憶手段をさらに有し、
前記画像加工手段は、前記人物属性推定手段により推定された属性に対応付けられた前記置換画像を前記加工情報記憶手段から取得し、取得した前記置換画像を、その属性の人物の顔が表示されている位置に表示する前記加工画像を生成する表示装置。
【請求項１４】
コンピュータを、
撮像手段、
前記撮像手段が撮像した画像から人物を抽出する人物抽出手段、
前記人物抽出手段により抽出された人物の属性を、前記画像を利用して推定する人物属性推定手段、
前記人物属性推定手段により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定手段、
前記画像内の前記人物に、前記台詞決定手段が決定した前記台詞を付与する加工画像を生成する画像加工手段、
前記加工画像をディスプレイに表示する表示手段、
として機能させるためのプログラム。
【請求項１５】
コンピュータが、
撮像装置が撮像した画像から人物を抽出する人物抽出ステップと、
前記人物抽出ステップで抽出された人物の属性を、前記画像を利用して推定する人物属性推定ステップと、
前記人物属性推定ステップで推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定ステップと、
前記画像内の前記人物に、前記台詞決定ステップで決定した前記台詞を付与する加工画像を生成する画像加工ステップと、
前記加工画像をディスプレイに表示する表示ステップと、
を実行する表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置、表示方法、及び、プログラムに関する。
【背景技術】
【０００２】
特許文献１には、デジタルサイネージシステムが開示されている。
【０００３】
特許文献２には、ユーザが任意に決定するコメントを表示するためのコメント画像（吹き出し画像）を、人物の顔を被写体とする対象画像に配置するコメントレイアウト装置が開示されている。当該コメントレイアウト装置は、対象画像の画像データを取得する画像データ取得部と、画像データを解析して、対象画像における人物の顔の画像領域を認識する画像領域認識部と、人物の顔の画像領域に対応する画像データを解析して、人物の顔の特徴を推定する特徴推定部と、特徴の推定結果を用いて、コメント画像（吹き出し画像）の形態を決定する形態決定部と、決定された形態を有するコメント画像（吹き出し画像）を、対象画像に対応付けて配置するコメントは一部と、を備える。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−２２６０１７号公報
【特許文献２】特開２００７−１２２５３３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本願発明者は、撮像した人物（通行人等）をデジタルサイネージのディスプレイに表示する技術を検討した。自分やその時に自分がいる場所の景色がデジタルサイネージに表示されていると、人はそれに強い関心を持つと考えられる。しかし、単に撮像画像をディスプレイに表示するだけでは、すぐにあきられてしまう。また、人の興味を引く度合も比較的低くなる。
【０００６】
特許文献１はこのような利用形態、課題及びその解決手段を開示していない。特許文献２はデジタルサイネージに関する技術ではない。
【０００７】
本願発明は、撮像した人物をディスプレイに表示するデジタルサイネージに対する人の関心度を高めるための技術を提供することを課題とする。
【課題を解決するための手段】
【０００８】
本発明によれば、
撮像装置と、
前記撮像装置が撮像した画像から人物を抽出する人物抽出手段と、
前記人物抽出手段により抽出された人物の属性を、前記画像を利用して推定する人物属性推定手段と、
前記人物属性推定手段により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定手段と、
前記画像内の前記人物に、前記台詞決定手段が決定した前記台詞を付与する加工画像を生成する画像加工手段と、
前記加工画像をディスプレイに表示する表示手段と、
を有する表示装置が実現される。
【０００９】
また、本発明によれば、
コンピュータを、
撮像手段、
前記撮像手段が撮像した画像から人物を抽出する人物抽出手段、
前記人物抽出手段により抽出された人物の属性を、前記画像を利用して推定する人物属性推定手段、
前記人物属性推定手段により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定手段、
前記画像内の前記人物に、前記台詞決定手段が決定した前記台詞を付与する加工画像を生成する画像加工手段、
前記加工画像をディスプレイに表示する表示手段、
として機能させるためのプログラムが提供される。
【００１０】
また、本発明によれば、
コンピュータが、
撮像装置が撮像した画像から人物を抽出する人物抽出ステップと、
前記人物抽出ステップで抽出された人物の属性を、前記画像を利用して推定する人物属性推定ステップと、
前記人物属性推定ステップで推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定ステップと、
前記画像内の前記人物に、前記台詞決定ステップで決定した前記台詞を付与する加工画像を生成する画像加工ステップと、
前記加工画像をディスプレイに表示する表示ステップと、
を実行する表示方法が提供される。
【発明の効果】
【００１１】
本発明によれば、撮像した人物をディスプレイに表示するデジタルサイネージに対する人の関心度を高めることが可能となる。
【図面の簡単な説明】
【００１２】
【図１】本実施形態の表示装置の機能ブロック図の一例を示す図である。
【図２】本実施形態の表示方法の処理の流れの一例を示すフローチャートである。
【図３】本実施形態の撮像装置が撮像した画像の一例を示す図である。
【図４】本実施形態の表示部が加工画像を表示した一例を示す図である。
【図５】本実施形態の表示装置の利用場面の一例を示す図である。
【図６】本実施形態の表示装置の利用場面の一例を示す図である。
【図７】本実施形態の表示装置の利用場面の一例を示す図である。
【図８】本実施形態の表示装置の機能ブロック図の一例を示す図である。
【図９】本実施形態の台詞情報記憶部が記憶する情報の一例を示す図である。
【図１０】本実施形態の台詞情報記憶部が記憶する情報の一例を示す図である。
【図１１】本実施形態の台詞決定部が記憶することができる情報の一例を示す図である。
【図１２】本実施形態の台詞決定部が記憶することができる情報の一例を示す図である。
【図１３】本実施形態の台詞決定部が記憶することができる情報の一例を示す図である。
【図１４】本実施形態の表示装置の機能ブロック図の一例を示す図である。
【図１５】本実施形態の台詞情報記憶部が記憶する情報の一例を示す図である。
【図１６】本実施形態の台詞情報記憶部が記憶する情報の一例を示す図である。
【図１７】本実施形態の表示方法の処理の流れの一例を示すフローチャートである。
【図１８】本実施形態の撮像装置が撮像した画像の一例を示す図である。
【図１９】本実施形態の表示部が加工画像を表示した一例を示す図である。
【図２０】本実施形態の表示装置の機能ブロック図の一例を示す図である。
【図２１】本実施形態の加工情報記憶部が記憶する情報の一例を示す図である。
【図２２】本実施形態の表示部が加工画像を表示した一例を示す図である。
【発明を実施するための形態】
【００１３】
以下、本発明の実施の形態について図面を用いて説明する。
【００１４】
なお、本実施形態の装置は、任意のコンピュータのＣＰＵ、メモリ、メモリにロードされたプログラム（あらかじめ装置を出荷する段階からメモリ内に格納されているプログラムのほか、ＣＤ等の記憶媒体やインターネット上のサーバ等からダウンロードされたプログラムも含む）、そのプログラムを格納するハードディスク等の記憶ユニット、ネットワーク接続用インタフェイスを中心にハードウェアとソフトウェアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。
【００１５】
また、本実施形態の説明において利用する機能ブロック図は、ハードウェア単位の構成ではなく、機能単位のブロックを示している。これらの図においては、各装置は１つの機器により実現されるよう記載されているが、その実現手段はこれに限定されない。すなわち、物理的に分かれた構成であっても、論理的に分かれた構成であっても構わない。
【００１６】
＜第１の実施形態＞
まず、本実施形態の概要について説明する。
本実施形態の表示装置は、撮像した人物（通行人等）をディスプレイに表示するデジタルサイネージとして利用することができる。本実施形態の表示装置は、撮像した人物をディスプレイに表示する際、撮像した画像をそのまま表示するのでなく、所定の台詞を画像中の人物に付与した加工画像（当該人物が発言しているような加工）を表示する。これにより、表示画像に対する人の関心度を高めることができるほか、コメント内容を工夫すれば広告媒体としても利用できる。しかし、人物に付与される台詞がいつも同じであれば、表示画像に対する人の関心度は十分なものとなり得ない。
【００１７】
そこで、本実施形態の表示装置は、撮像した人物（画像の中に存在する人物）の属性（性別、年齢層、人種、表情等）を推定し、推定した属性に応じた台詞をその人物に付与する。このような本実施形態の表示装置によれば、ディスプレイに表示される人物の属性に応じて、各人物に付与される台詞が変化する。結果、表示画像に対する人の関心度が向上することが期待される。
【００１８】
以下、本実施形態の表示装置の構成について詳細に説明する。
図１に、本実施形態の表示装置１の機能ブロック図の一例を示す。図示するように、表示装置１は、撮像装置１０と、人物抽出部１１と、人物属性推定部１２と、台詞決定部１３と、画像加工部１４と、表示部１５とを有する。
【００１９】
撮像装置１０は、動画像及び／又は静止画像を撮像する。撮像装置１０は、所定の場所に設置され、連続的に又は所定のタイミング（例：所定の時間おき、撮像エリア内に人を感知したタイミング等）で、所定のエリア内の画像を撮像する。設置場所は特段制限されず、駅、空港等の公共エリアであってもよいし、スーパー、ショッピングモール、娯楽施設等であってもよい。
【００２０】
人物抽出部１１は、撮像装置１０が撮像した画像から人物を抽出する。人物属性推定部１２は、人物抽出部１１により抽出された人物の属性（例：性別、年齢層、人種、表情の中の少なくとも１つ等）を、画像を利用して推定する。人物抽出部１１及び人物属性推定部１２によるこれらの処理を実現する手段は特段制限されないが、例えば、周知の顔認識技術を利用して実現してもよい。このような技術は、例えば、特開２００７−８８００５７号公報に開示されている。なお、人物抽出部１１及び人物属性推定部１２の構成は、当該文献に記載されているものに限定されない。
【００２１】
台詞決定部１３は、人物属性推定部１２により推定された属性（例：性別、年齢層、人種、表情の中の少なくとも１つ等）を用いて、その属性の人物に付与する台詞を決定する。台詞決定部１３は、互いに属性が異なる人物に対して、互いに異なる台詞を決定することができる。すなわち、台詞決定部１３は、属性に応じた様々な内容の台詞を決定することができる。
【００２２】
例えば、台詞決定部１３は、ある属性の人物に付与する台詞を、その属性の人物の発言として違和感のない内容にすることができる。一例として、人物の属性にあった口調の台詞とすることができる。ある商品「オランジーザス」のプロモーションを目的とした台詞とする場合、男性には男口調の台詞「オランジーザス飲みてぇ―！」等を決定し、女性には女口調の台詞「オランジーザス飲みたいな〜！」等を決定してもよい。その他、性別、年齢層、人種、その時のその人物の表情にあった口調及び／又は内容の台詞を決定することができる。
【００２３】
その他の例として、台詞決定部１３は、ある属性の人物に付与する台詞を、その属性の人物が興味を抱く内容とすることができる。人は、自分自身が表示されている表示画像に興味を持つと考えられる。このため、ある人物に台詞を付与した加工画像は、高い確率でその人物自身に閲覧される事が期待される。そして、その人物に付与している台詞がその人物に興味を抱かせるものであれば、表示画像に対するその人物の関心度はさらに高まると考えられる。台詞決定部１３は、その人物の推定された属性（例：性別、年齢層、人種、表情の少なくとも１つなど）に基づいてその人物に付与する台詞を決定することができるので、高い確率で、その属性の人物が興味を抱く内容とすることができる。例えば、中年男性には「ゴルフショップＡがセール中！」等を決定してもよい。
【００２４】
画像加工部１４は、画像内の人物に、台詞決定部１３が決定した台詞を付与する加工画像を生成する。画像加工部１４は、例えば、吹き出し画像等のような台詞の付与に使用される画像（以下、「台詞付与画像」）のデータ（以下、「台詞付与画像データ」）を予め保持しておき、当該台詞付与画像データを利用して、撮像装置１０が撮像した画像中に所定の台詞を付与する加工画像を生成することができる。加工画像のデータは、撮像装置１０が撮像した画像のデータとは別の画像データであって、撮像装置１０が撮像した画像と重ねて台詞付与画像及び台詞をディスプレイに表示するためのデータであってもよい。または、加工画像のデータは、撮像装置１０が撮像した画像のデータを一部修正し、画像内の所定の位置に台詞付与画像及び台詞が表示されるように改変された画像データであってもよい。
【００２５】
撮像装置１０が撮像した画像内において画像内台詞付与画像を配置する位置は、周知の顔認識技術で特定された画像中の人物の顔の位置に基づいて決定することができる。
【００２６】
表示部１５は、画像加工部１４が生成した加工画像をディスプレイに表示する。加工画像のデータと撮像装置１０が撮像した画像のデータとが別の画像データである場合、表示部１５は、これら両方のデータを利用し、撮像装置１０が撮像した画像上の所定の位置に、加工画像に含まれる台詞付与画像及び台詞を重畳した画像をディスプレイに表示する。なお、加工画像のデータが、撮像装置１０が撮像した画像のデータを一部修正し、画像内の所定の位置に台詞付与画像及び台詞が表示されるように改変された画像データである場合、表示部１５はその画像データを利用して画像をディスプレイに表示する。表示部１５は、加工画像として、静止画像をディスプレイに表示してもよいし、動画像をディスプレイに表示してもよい。
【００２７】
図２は、本実施形態の表示方法の処理の流れの一例を示すフローチャートである。
例えば、撮像装置１０が図３に示す画像を撮像（取得）すると（Ｓ１）、人物抽出部１１は、撮像装置が撮像した画像から人物を抽出する（Ｓ２）。その後、人物属性推定部１２は、人物抽出部１１により抽出された人物の属性を、画像を利用して推定する（Ｓ３）。次いで、台詞決定部１３は、人物属性推定部１２により推定された属性を用いて、その属性の人物に付与する台詞を決定する（Ｓ４）。その後、画像加工部１４は、画像内の人物に、台詞決定部１３が決定した台詞を付与する加工画像を生成する（Ｓ５）。そして、表示部１５は、画像加工部１４が生成した加工画像をディスプレイに表示する（Ｓ６）。図４に、表示部１５がディスプレイ３００に表示した画像の一例を示す。なお、当該構成を動画像で実現する場合は、Ｓ２で抽出した人物の画像内の位置を追跡し、人物の位置の移動に合わせて、台詞の位置を変更させる。
【００２８】
以上説明した本実施形態の表示装置によれば、画像内に表示されている人物の属性に応じて、その人物に付与する台詞を決定することができる。すなわち、人物の属性に応じた様々な内容の台詞を表示させることができる。このため、人物に付与される台詞が毎回同じとなることがない。このような本実施形態の表示装置によれば、表示される画像に対する人の関心度を高めることが可能となる。
【００２９】
また、本実施形態の表示装置によれば、ある属性の人物に付与する台詞を、その属性の人物の発言内容として違和感のないものとすることができる。例えば、男性には男言葉の台詞を決定し、女性には女言葉の台詞を決定することができる。その他、年齢層、人種、その時のその人物の表情にあった口調及び／又は内容の台詞を決定することができる。
【００３０】
その他、本実施形態の表示装置によれば、ある属性の人物に付与する台詞を、その属性の人物が興味を抱く内容とすることができる。人は、自分自身が表示されている表示画像に興味を持つと考えられる。このため、ある人物に台詞を付与した加工画像は、高い確率でその人物自身に閲覧される事が期待される。画像内でその人物に付与されている台詞がその人物に興味を抱かせるものであれば、その人物の関心度はさらに高まることが期待される。
【００３１】
＜第２の実施形態＞
本実施形態では、第１の実施形態の表示装置１の適用場面の一例を示す。
【００３２】
＜適用例１＞
本適用例では、一方向に人物を輸送する輸送手段の近辺に撮像装置１０及び表示部１５のディスプレイを設置して、第１の実施形態の表示装置を利用する。
【００３３】
図５に一例を示す。当該例では、終点に向かって一方向に人物を移動させるエスカレータ４００の近辺に、撮像装置１００（撮像装置１０）及びディスプレイ３００（表示部１５）が設置されている。撮像装置１００は、エスカレータ４００により移動中の人物を撮像可能な位置に設置されている。そして、ディスプレイ３００は、エスカレータ４００の終点付近に設置されている。なお、ディスプレイ３００の設置位置は必ずしもエスカレータ４００の終点付近である必要はなく、エスカレータ４００の移動方向における、撮像装置１００により撮像される位置よりも下流側の任意の位置に設置することができる。撮像装置１００及びディスプレイ３００の具体的な設置位置及び設置方法は設計的事項である。
【００３４】
撮像装置１００、制御装置２００、ディスプレイ３００は互いに有線及び／又は無線で接続されており、撮像装置１００が撮像した画像や画像加工部１４が生成した加工画像がディスプレイ３００に表示可能になっている。制御装置２００には、人物抽出部１１、人物属性推定部１２、台詞決定部１３及び画像加工部１４が含まれる。なお、制御装置２００及びディスプレイ３００は、同一の筺体内に設けられてもよい。
【００３５】
本適用例の場合、撮像装置１００が撮像した画像をリアルタイムにディスプレイ３００に表示すると、撮像した人物がその画像を閲覧できなくなる。そこで、本適用例では、撮像装置１００が撮像した画像をリアルタイムにディスプレイ３００に表示するのでなく、撮像時から所定時間（例：３秒、５秒、１０秒等）経過後に、ディスプレイ３００に表示することができる。所定時間は、撮像装置１００で撮像された人物がディスプレイ３００の辺りまで移動するのに要する予測時間とすることができる。この予測時間は、エスカレータ４００の移動速度、撮像装置１００とディスプレイ３００間の距離等に基づいて決定することができる。
【００３６】
本適用例によれば、第１の実施形態と同様の作用効果を実現することができる。また、撮像した人物に加工画像を閲覧される確率を高めることができる。
【００３７】
＜適用例２＞
本適用例も、一方向に人物を輸送する輸送手段の近辺に撮像装置１０及び表示部１５のディスプレイを設置して、第１の実施形態の表示装置を利用する。
【００３８】
図６に一例を示す。当該例では、終点に向かって一方向に人物を移動させる動く歩道５００の近辺に、撮像装置１００（撮像装置１０）及びディスプレイ３００（表示部１５）が設置されている。撮像装置１００は、動く歩道５００により移動中の人物を撮像可能な位置に設置されている。そして、ディスプレイ３００は、動く歩道５００の終点付近に設置されている。なお、ディスプレイ３００の設置位置は必ずしも動く歩道５００の終点付近である必要はなく、動く歩道５００の移動方向における、撮像装置１００により撮像される位置よりも下流側の任意の位置に設置することができる。撮像装置１００及びディスプレイ３００の具体的な設置位置及び設置方法は設計的事項である。
【００３９】
撮像装置１００、制御装置２００、ディスプレイ３００は互いに有線及び／又は無線で接続されており、撮像装置１００が撮像した画像や画像加工部１４が生成した加工画像がディスプレイ３００に表示可能になっている。制御装置２００には、人物抽出部１１、人物属性推定部１２、台詞決定部１３及び画像加工部１４が含まれる。なお、制御装置２００及びディスプレイ３００は、同一の筺体内に設けられてもよい。
【００４０】
本適用例の場合、撮像装置１００が撮像した画像をリアルタイムにディスプレイ３００に表示すると、撮像した人物がその画像を閲覧できなくなる。そこで、本適用例では、撮像装置１００が撮像した画像をリアルタイムにディスプレイ３００に表示するのでなく、撮像時から所定時間（例：３秒、５秒、１０秒等）経過後に、ディスプレイ３００に表示することができる。所定時間は、撮像装置１００で撮像された人物がディスプレイ３００の辺りまで移動するのに要する予測時間とすることができる。この予測時間は、動く歩道５００の移動速度、撮像装置１００とディスプレイ間の距離等に基づいて決定することができる。
【００４１】
本適用例によれば、第１の実施形態と同様の作用効果を実現することができる。また、撮像した人物に加工画像を閲覧される確率を高めることができる。
【００４２】
＜適用例３＞
本適用例では、レストラン、喫茶店等、顧客が一定時間滞在する場所を提供する店舗や施設に撮像装置１０及び表示部１５のディスプレイを設置して、第１の実施形態の表示装置を利用する。
【００４３】
図７に一例を示す。当該例では、レストランのボックス席のテーブル上に、ディスプレイ３００（表示部１５）が設置されている。撮像装置１００（撮像装置１０）は、レストランの外部空間であって、当該ボックス席から窓越しに視認できる空間を撮像可能な位置に設置されている。本実施形態の例では、加工画像を閲覧してもらうターゲットは撮像した人物でなく、店舗や施設等の顧客である。撮像装置１００及びディスプレイ３００の具体的な設置位置及び設置方法は設計的事項である。
【００４４】
撮像装置１００、制御装置２００、ディスプレイ３００は互いに有線及び／又は無線で接続されており、撮像装置１００が撮像した画像や画像加工部１４が生成した加工画像がディスプレイ３００に表示可能になっている。制御装置２００には、人物抽出部１１、人物属性推定部１２、台詞決定部１３及び画像加工部１４が含まれる。なお、制御装置２００及びディスプレイ３００は、同一の筺体内に設けられてもよい。
【００４５】
撮像装置１００が撮像した画像はリアルタイムにディスプレイ３００に表示されてもよいし、撮像時から所定時間（例：３秒、５秒、１０秒等）経過後にディスプレイ３００に表示してもよい。
【００４６】
本適用例によれば、第１の実施形態と同様の作用効果を実現することができる。また、ディスプレイ３００を閲覧している人物に対して従来ない新たな娯楽を提供することができる。図７の例の場合、レストランのボックス席でリラックスしている顧客は、窓越しに見えるリアルな光景と、その光景に存在する人物に所定の台詞が付与された娯楽的な画像（ディスプレイ３００に表示されている画像）とを見比べながら、楽しい時間を過ごすことが可能となる。すなわち、本適用例によれば、ディスプレイ３００に表示されている画像に対する顧客の関心度を高めることができる。
【００４７】
なお、ここでの例示はあくまで一例であり、表示装置１の適用場面はこれらに限定されない。例えば、ディスプレイ３００の前にいる人物を撮像するように撮像装置１００を設置してもよい。そして、撮像画像（動画像又は静止画像）を利用して作成した加工画像をリアルタイムにディスプレイ３００に表示してもよい。このように構成した場合、加工画像に含まれる人物に自分が表示されている画像を閲覧させることができる。
【００４８】
＜第３の実施形態＞
本実施形態の表示装置１は、人物の属性に対応付けて台詞を記憶した台詞記憶部１７を有し、台詞決定部１３は台詞記憶部１７に記憶されている情報を利用して台詞を決定する点で、第１及び第２の実施形態と異なる。その他の構成は、第１及び第２の実施形態と同様とすることができる。
【００４９】
図８に本実施形態の表示装置１の機能ブロック図の一例を示す。図示するように、表示装置１は、撮像装置１０と、人物抽出部１１と、人物属性推定部１２と、台詞決定部１３と、画像加工部１４と、表示部１５、台詞記憶部１７とを有する。撮像装置１０、人物抽出部１１、人物属性推定部１２、画像加工部１４及び表示部１５の構成は第１及び第２の実施形態と同様である。以下、台詞記憶部１７及び台詞決定部１３の構成について説明する。
【００５０】
台詞記憶部１７は、人物の属性と、台詞とを対応付けた台詞情報を記憶する。図９に台詞記憶部１７が記憶している台詞情報の一例を示す。図示する台詞情報は、性別及び年齢層の組み合わせ毎に、台詞を対応付けている。台詞は、ある商品「オランジーザス」のプロモーションを目的とした台詞となっている。このため、何れの台詞にも「オランジーザス」の単語が含まれている。なお、台詞の内容は設計的事項である。また、図９に示す例の台詞情報は、性別及び年齢層の組み合わせ毎に台詞を対応付けているが、その他の例として、１つの属性毎に台詞を対応付けてもよいし、その他の複数の属性の組み合わせ毎に台詞を対応付けてもよい。
【００５１】
台詞決定部１３は、人物属性推定部１２に推定された属性に対応付けられている台詞を台詞記憶部１７から取得し、取得した台詞を、その属性の人物に付与する台詞として決定する。
【００５２】
本実施形態の変形例として、台詞記憶部１７は、人物の属性と、時間帯と、台詞とを対応付けた台詞情報を記憶しておいてもよい。図１０に台詞記憶部１７が記憶している台詞情報の一例を示す。図示する台詞情報は、性別及び年齢層の組み合わせ毎に、時間帯と、台詞とを対応付けている。台詞は、ある商品「オランジーザス」のプロモーションを目的とした台詞であって、対応付けられている時間帯に適した内容となっている。なお、台詞の内容は設計的事項である。また、図１０に示す例の台詞情報は、性別及び年齢層の組み合わせ毎に台詞を対応付けているが、その他の例として、１つの属性毎に台詞を対応付けてもよいし、その他の複数の属性の組み合わせ毎に台詞を対応付けてもよい。
【００５３】
当該変形例の台詞決定部１３は、人物属性推定部１２に推定された属性を示す情報を取得するとともに、時刻情報を取得する。時刻情報で特定される時刻は、台詞を決定する処理を行う辺りの時刻であればよく、どのタイミングの時刻とするかは設計的事項である。台詞決定部１３は、例えば表示装置１内に存在する時計部から所定のタイミング（設計的事項）における現在時刻を示す情報を取得する。そして、台詞決定部１３は、人物属性推定部１２に推定された属性、及び、取得した時刻情報を含む時間帯に対応付けられている台詞を台詞記憶部１７から取得し、取得した台詞を、その属性の人物に付与する台詞として決定する。
【００５４】
本実施形態によれば、第１及び第２の実施形態と同様の作用効果を実現することができる。また、台詞記憶部１７が記憶している台詞情報の内容を工夫することで、本実施形態の表示装置１を特定の商品やサービスの公告媒体として利用できる。また、顧客に娯楽を提供する娯楽機器としても利用できる。かかる場合、表示装置１により、そのエリアへの集客効果が期待される。
【００５５】
＜第４の実施形態＞
本実施形態の表示装置１は、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから所定のコメントを取得し、取得したコメントを台詞として決定する点で、第１乃至第３の実施形態と異なる。その他の構成は、第１乃至第３の実施形態同様とすることができる。
【００５６】
本実施形態の表示装置１の機能ブロック図の一例は、図１で示される。撮像装置１０、人物抽出部１１、人物属性推定部１２、画像加工部１４及び表示部１５の構成は第１乃至第３の実施形態と同様である。以下、台詞決定部１３の構成について説明する。
【００５７】
台詞決定部１３は、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、登録されている属性が人物属性推定部１２により推定された属性と一致するユーザのコメントを取得し、取得したコメントを、その属性の人物に付与する台詞として決定する。
【００５８】
登録サーバは、いわゆるソーシャルメディアシステムが有するサーバである。当該システムでは、複数のユーザが情報発信のために、自己の属性情報とともにコメントをサーバに登録している。これらのコメントは、インターネット等を通じて一般に公開される。
【００５９】
台詞決定部１３の上記構成を実現する手段は特段制限されず、あらゆる従来技術を利用して実現できる。以下、一例を説明するがこれに限定されない。
【００６０】
例えば、１つ又は複数の登録サーバ内を検索可能な１つ又は複数の検索サーバをインターネット等のネットワーク上に設けておく。そして、台詞決定部１３は、１つ又は複数の検索サーバのアドレス情報を予め保持しておく。
【００６１】
台詞決定部１３は、人物属性推定部１２により推定された属性を取得すると、インターネット等のネットワークを介して、当該属性と一致するユーザのコメント要求を検索サーバに送信する。検索サーバはコメント要求を取得すると、その中に含まれる属性をキーとして登録サーバを検索し、そのキーと一致するユーザを特定する。次いで、特定したユーザが登録したコメントの中の任意のコメントを取得する。そして、検索サーバは、取得したコメントを、台詞決定部１３に返信する。なお、検索結果としてヒットするコメントが複数ある場合、いずれを選択するかは設計的事項であるが、例えば、登録サーバへの登録時刻が最新のものを選択してもよい。
【００６２】
本実施形態の変形例として、台詞決定部１３は、登録サーバから、登録されている属性が人物属性推定部１２により推定された属性と一致するユーザのコメントの中の、所定のキーワードを含むコメント（一文）を取得し、取得したコメントを、その属性の人物に付与する台詞として決定してもよい。
【００６３】
台詞決定部１３は、予め所定のキーワードを保持しておいてもよい。所定のキーワードは、例えばある商品「オランジーザス」のプロモーションを目的とする場合、その商品名としてもよい。
【００６４】
なお、所定のキーワードは、人物属性推定部１２により推定された属性、及び、登録サーバからコメントを取得する時の任意の時刻（設計的事項）の少なくとも一方に基づいて台詞決定部１３が決定してもよい。このようにすれば、画像中の人物の属性や時刻に応じて、キーワードを変えることができる。結果、画面表示される台詞のバリエーションが増える。
【００６５】
台詞決定部１３は、例えば図１１に示すような情報を保持しておき、当該情報を利用して所定のキーワードを決定してもよい。図１１に示す情報は、性別及び年齢層の組み合わせ毎に、キーワードを対応付けている。キーワードは、各属性の人物が一般的に興味を持つと考えられる内容となっている。なお、キーワードの内容は設計的事項である。また、図１１に示す例の情報は、性別及び年齢層の組み合わせ毎にキーワードを対応付けているが、その他の例として、１つの属性毎にキーワードを対応付けてもよいし、その他の複数の属性の組み合わせ毎にキーワードを対応付けてもよい。
【００６６】
台詞決定部１３は、人物属性推定部１２により推定された属性を取得すると、その属性をキーとして例えば図１１に示すような情報を検索し、その属性に対応付けられているキーワードを取得する。なお、図１１に示す例の場合、性別及び年齢層の組み合わせ毎に複数のキーワードが対応付けられているが、その中のいずれを選択するかは設計的事項であり、例えばランダムに１つを選択してもよい。
【００６７】
その他の例として、台詞決定部１３は、例えば図１２に示すような情報を保持しておき、当該情報を利用して所定のキーワードを決定してもよい。図１２に示す情報は、所定の時間帯毎に、キーワードを対応付けている。キーワードは、各時間帯に適した内容となっている。なお、キーワードの内容は設計的事項である。
【００６８】
当該変形例の場合、台詞決定部１３は、所定のキーワードを決定する際、時刻情報を取得する。時刻情報で特定される時刻は、所定のキーワードを決定する処理を行う辺りの時刻であればよく、どのタイミングの時刻とするかは設計的事項である。台詞決定部１３は、時刻情報を取得すると、その時刻をキーとして例えば図１２に示すような情報を検索し、時刻情報で特定される時刻を包含する時間帯に対応付けられているキーワードを取得する。なお、図１２に示す例の場合、所定の時間帯毎に複数のキーワードが対応付けられているが、その中のいずれを選択するかは設計的事項であり、例えばランダムに１つを選択してもよい。
【００６９】
その他の例として、台詞決定部１３は、例えば図１３に示すような情報を保持しておき、当該情報を利用して所定のキーワードを決定してもよい。図１３に示す情報は、性別及び年齢層の組み合わせ毎に、所定の時間帯と、キーワードを対応付けている。キーワードは、各属性の人物がその時間帯に興味を持つと考えられる内容となっている。なお、キーワードの内容は設計的事項である。また、図１３に示す例の情報は、性別及び年齢層の組み合わせ毎にキーワードを対応付けているが、その他の例として、１つの属性毎にキーワードを対応付けてもよいし、その他の複数の属性の組み合わせ毎にキーワードを対応付けてもよい。
【００７０】
台詞決定部１３は、所定のキーワードを決定する際、時刻情報を取得する。時刻情報で特定される時刻は、所定のキーワードを決定する処理を行う辺りの時刻であればよく、どのタイミングの時刻とするかは設計的事項である。台詞決定部１３は、時刻情報を取得すると、その時刻と、人物属性推定部１２により推定された属性とをキーとして例えば図１３に示すような情報を検索し、その属性と、時刻情報で特定される時刻を包含する時間帯とに対応付けられているキーワードを取得する。
【００７１】
その他の変形例として、ここまでは、台詞決定部１３は人物属性推定部１２により推定された人物の属性と一致するユーザのコメントを登録サーバから取得することを前提にしていたが、その他の構成とすることもできる。
【００７２】
例えば、台詞決定部１３は、登録サーバから、人物属性推定部１２により推定された人物の属性に基づいて決定された所定のキーワードを含むコメントを取得し、取得したコメントを、その属性の人物に付与する台詞として決定してもよい。当該例の場合、台詞決定部１３は、人物属性推定部１２により推定された属性と一致しないユーザのコメントを登録サーバから取得することができる。
【００７３】
なお、台詞決定部１３は、登録サーバから取得したコメントをそのまま台詞として決定するのでなく、内容が完全には一致しないように一部を改変し、改変後のコメントを台詞として決定してもよい。
【００７４】
本実施形態によれば、第１乃至第３の実施形態と同様の作用効果を実現することができる。また、本実施形態の場合、撮像した画像に含まれる人物の属性のみならず、登録サーバからコメントを取得するタイミング等に応じて、その人物に付与する台詞が変化する。このため、全く同じ台詞が表示される確率をより小さくすることができる。結果、本実施形態の表示装置１に対する人の関心度をより高めることができる。また、本実施形態の場合、登録サーバに登録されているコメントを利用して台詞を決定することができるので、表示装置１の管理者等は予め台詞を用意し、登録しておく必要が無い。結果、管理者等の手間を省くことができる。
【００７５】
＜第５の実施形態＞
本実施形態の表示装置１は、撮像装置１０が撮像した画像の中に複数の人物がいる場合であって、複数の人物が所定の関係を満たす場合、それらの人物をグループ化する。そして、同一のグループに属する複数の人物に対して、会話形式の台詞を付与する点で、第１乃至第４の実施形態と異なる。その他の構成は第１乃至第４の実施形態と同様とすることができる。
【００７６】
図１４に本実施形態の表示装置１の機能ブロック図の一例を示す。図示するように、表示装置１は、撮像装置１０と、人物抽出部１１と、人物属性推定部１２と、台詞決定部１３と、画像加工部１４と、表示部１５、グループ化部１６とを有する。なお、図示しないが台詞記憶部１７を有してもよい。以下、各部について説明する。
【００７７】
撮像装置１０及び表示部１５の構成は、第１乃至第４の実施形態と同様である。
【００７８】
人物抽出部１１は、撮像装置が撮像した画像から人物を抽出する。なお、１つの画像の中に複数の人物が存在する場合、人物抽出部１１は、複数の人物を抽出する。抽出された複数の人物各々には、所定の識別情報（以下、画像内人物識別情報）が付与される。この画像内人物識別情報には、画像上における各々の顔の位置を示す情報が対応付けられる。
【００７９】
人物属性推定部１２は、撮像装置１０が撮像した画像を利用して、人物抽出部１１が抽出した複数の人物各々の属性を推定する。推定された複数の人物各々の属性は、上記画像内人物識別情報に対応付けられる。
【００８０】
グループ化部１６は、撮像装置１０が撮像した画像から複数の人物が抽出された場合、当該画像を利用して２人以上の人物を含むグループを生成する。
【００８１】
例えば、グループ化部１６は、抽出された複数の人物の中に所定の関係を満たす組み合わせがあるか否かを確認し、ある場合はその組み合わせを１つのグループとする。グループ化部１６は、上記所定の関係を示す情報を予め保持しておくことができる。
【００８２】
以下、上記所定の関係の一例を説明する。なお、ここでのグループ化の目的は、画像内に存在する仲間同士をグループ化することである。このため、上記所定の関係は、仲間同士と推定されるものとすることができる。
【００８３】
例えば、画像上の人物の顔の大きさ及び互いの距離で所定の関係を規定してもよい。具体的には、所定の関係は、画像上における互いの顔の大きさの差が所定の閾値（設計的事項）以下で、かつ、画像上における互いの顔の距離が所定の閾値（設計的事項）以下であってもよい。このような人物同士の実空間内での互いの距離は、仲間同士と推定できるほどに近いと考えられる。
【００８４】
その他の例として、人物の顔の向きで所定の関係を規定してもよい。具体的には、所定の関係は、顔の向きがほぼ一致（向きの違いが所定の角度以内）であってもよいし、又は、互いに向き合っているとしてもよい。前者の場合、このような人物同士は同じ方向を向き、同じ対象を見ながら、その対象についての会話を行っていると考えられる。後者の場合、このような人物同士は互いの顔を見ながら会話していると考えられる。すなわち、このような人物同士は仲間同士と推定することができる。
【００８５】
なお、人物の顔の向きを特定する手段は特段制限されず、あらゆる従来技術を採用することができる。このような技術は、例えば、特開２００８−１４８９８８号公報に開示されている。なお、本実施形態で採用する人物の顔の向きを特定する手段は、当該文献に記載されているものに限定されない。また、互いに向き合っている関係を特定する手段は特段されず、例えば、互いの顔の向き（所定角度の広がりを有してもよい）の先に互いの顔がある２人組は、互いに向き合っていると特定してもよい。
【００８６】
その他の例として、画像上の人物の顔の大きさ、互いの距離、及び、顔の向きで所定の関係を特定してもよい。例えば、所定の関係は、画像上における互いの顔の大きさの差が所定の閾値（設計的事項）以下で、かつ、画像上における互いの顔の距離が所定の閾値（設計的事項）以下で、かつ、顔の向きがほぼ一致（又は互いに向き合っている）であってもよい。
【００８７】
グループ化部１６は、１つの画像の中から、１つまたは複数のグループを生成することができる。グループ化部１６は、グループを生成すると、上記画像内人物識別情報を用いて、各グループに含まれる人物を管理することができる。例えば、同じグループに属する人物の画像内人物識別情報すべてに、同じグループに属することを示す情報を対応付けることができる。
【００８８】
台詞決定部１３は、同じグループに属する２人以上の人物に付与する台詞として、会話形式の台詞を決定する。以下、会話形式の台詞を決定する処理の一例を説明する。
【００８９】
例えば、台詞記憶部１７は、グループの人数ごとに各々の人物の属性及び台詞を対応付けた台詞情報を記憶しておいてもよい。
【００９０】
図１５に一例を示す。図１５に示す台詞情報は、グループに属する人物が２人である場合用の台詞情報である。当該台詞情報では、第１の人物の属性（属性１）と、第２の人物の属性（属性２）と、第１の人物の台詞と、第２の人物の台詞とが対応付けられている。第１の人物の台詞と第２の人物の台詞とは会話形式の台詞となっている。
【００９１】
図１６に他の例を示す。図１６に示す台詞情報は、グループに属する人物が３人である場合用の台詞情報である。当該台詞情報では、第１の人物の属性（属性１）と、第２の人物の属性（属性２）と、第３の人物の属性（属性２）と、第１の人物の台詞と、第２の人物の台詞と、第３の人物の台詞とが対応付けられている。第１乃至第３の人物の台詞は会話形式の台詞となっている。
【００９２】
図１５及び１６いずれの台詞情報も、ある商品「オランジーザス」のプロモーションを目的とした内容となっている。このため、何れの会話の中にも「オランジーザス」の単語が含まれている。なお、台詞の内容は設計的事項である。また、図１５及び１６に示す例の台詞情報は、性別及び年齢層の組み合わせ毎に台詞を対応付けているが、その他の例として、１つの属性毎に台詞を対応付けてもよいし、その他の複数の属性の組み合わせ毎に台詞を対応付けてもよい。
【００９３】
表示装置１がこのような台詞記憶部１７を有する場合、台詞決定部１３は、グループ化部１６が生成したグループに属する人物の人数、及び、そのグループに属する人物の属性をキーとして台詞記憶部１７を検索し、キーに対応付けられた会話形式の台詞を取得することができる。なお、台詞決定部１３は会話形式の複数の台詞を取得すると、各台詞を、その台詞を付与される人物の画像内識別情報に対応付ける。
【００９４】
画像加工部１４は、画像内識別情報各々に対応付けられている台詞と、画像上における各々の顔の位置を示す情報とを利用して、加工画像を生成する。
【００９５】
図１７は、本実施形態の表示方法の処理の流れの一例を示すフローチャートである。
例えば、撮像装置１０が図１８に示す画像を撮像（取得）すると（Ｓ１０）、人物抽出部１１は、撮像装置が撮像した画像から複数の人物を抽出する（Ｓ１１）。その後、人物属性推定部１２は、人物抽出部１１により抽出された複数の人物各々の属性を、画像を利用して推定する（Ｓ１２）。次いで、グループ化部１６は、画像を利用して２人以上の人物を含むグループを生成する（Ｓ１３）。ここでは、画像内の３人すべてを含むグループを生成する。すると、台詞決定部１３は、同じグループに属する２人以上の人物（ここでは３人）に付与する台詞として、会話形式の台詞を決定する（Ｓ１４）。その後、画像加工部１４は、画像内の人物に、台詞決定部１３が決定した会話形式の台詞を付与する加工画像を生成する（Ｓ１５）。そして、表示部１５は、画像加工部１４が生成した加工画像をディスプレイに表示する（Ｓ１６）。図１９に、表示部１５がディスプレイ３００に表示した画像の一例を示す。
【００９６】
本実施形態によれば、第１乃至第４の実施形態と同様の作用効果を実現することができる。また、画像内に存在する仲間同士をグループ化し、会話形式の台詞を付与することで、本実施形態の表示装置１に対する人の関心度をより高めることができる。
【００９７】
＜第６の実施形態＞
本実施形態の表示装置１は、撮像装置１０が撮像した画像中の人物の顔を加工し、加工後の画像に台詞を付与して表示する点で、第１乃至第５の実施形態と異なる。その他の構成は第１乃至第５の実施形態と同様とすることができる。このような本実施形態によれば、加工画像のおもしろみを増すことができ、人の関心度をより高めることができる。また、人物を特定できない状態まで加工することで、その人物のプライバシーを守ることができる。
【００９８】
図２０に本実施形態の表示装置１の機能ブロック図の一例を示す。図示するように、表示装置１は、撮像装置１０と、人物抽出部１１と、人物属性推定部１２と、台詞決定部１３と、画像加工部１４と、表示部１５、加工情報記憶部１８とを有する。なお、図示しないが、グループ化部１６及び台詞記憶部１７の少なくとも一方をさらに有してもよい。撮像装置１０、人物抽出部１１、人物属性推定部１２、台詞決定部１３、表示部１５、グループ化部１６及び台詞記憶部１７の構成は第１乃至第５の実施形態と同様である、以下、画像加工部１４と加工情報記憶部１８の構成について説明する。
【００９９】
画像加工部１４は、撮像装置１０が撮像した画像内の人物に台詞を付与するとともに、画像内の人物の顔を加工する加工画像を生成する。例えば、画像加工部１４は、人物の顔の位置に動物やキャラクターの顔を表示するための加工画像を生成してもよい。画像加工部１４は、人物属性推定部１２により推定された属性を用いて、各人物の顔に行う加工内容を決定し、決定した加工を実行することができる。
【０１００】
例えば、加工情報記憶部１８は、人物の属性と、加工画像内で人物の顔の位置に表示される置換画像（例：動物やキャラクターの顔）とを対応付けた加工情報を記憶しておく（図２１参照）。また、加工情報記憶部１８は、置換画像のデータを記憶しておく。なお、置換画像の内容は設計的事項である。また、図２１に示す例の加工情報は、性別及び年齢層の組み合わせ毎に置換画像を対応付けているが、その他の例として、１つの属性毎に置換画像を対応付けてもよいし、その他の複数の属性の組み合わせ毎に置換画像を対応付けてもよい。
【０１０１】
表示装置１がこのような加工情報記憶部１８を有する場合、画像加工部１４は、加工情報記憶部１８に記憶されている加工情報及び置換画像のデータを利用して、加工画像を生成することができる。具体的には画像加工部１４は、人物属性推定部１２により推定された属性に対応付けられた置換画像を加工情報記憶部１８から取得し、取得した置換画像を、その属性の人物の顔が表示されている位置に表示する加工画像を生成してもよい。
【０１０２】
加工画像のデータは、撮像装置１０が撮像した画像のデータとは別のデータであって、撮像装置１０が撮像した画像と重ねて置換画像をディスプレイに表示するためのデータであってもよい。または、加工画像のデータは、撮像装置１０が撮像した画像のデータを一部修正し、画像内の所定の位置に置換画像が表示されるように改変された画像データであってもよい。
【０１０３】
一例を示す。図３は撮像装置１０が撮像した画像である。図２２は、当該画像に基づいて画像加工部１４が生成した加工画像をディスプレイ３００に表示したものである。図２２の場合、台詞が付与されるとともに、人物の顔が加工されていることが分かる。
【０１０４】
なお、画像加工部１４は、その他、撮像装置１０が撮像した画像に対して、白黒加工や、セピア加工や、写生画のように見せる加工等、その他の加工を施してもよい。
【０１０５】
本実施形態によれば、第１乃至第５の実施形態と同様の作用効果を実現することができる。また、画像中の人物の顔を加工し、加工後の画像に台詞を付与して表示することで、加工画像のおもしろみを増すことができ、人の関心度をより高めることができる。また、人物を特定できない状態まで加工することで、その人物のプライバシーを守ることができる。
【０１０６】
＜付記＞
以下、参考形態の例を付記する。
１．  撮像装置と、
前記撮像装置が撮像した画像から人物を抽出する人物抽出手段と、
前記人物抽出手段により抽出された人物の属性を、前記画像を利用して推定する人物属性推定手段と、
前記人物属性推定手段により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定手段と、
前記画像内の前記人物に、前記台詞決定手段が決定した前記台詞を付与する加工画像を生成する画像加工手段と、
前記加工画像をディスプレイに表示する表示手段と、
を有する表示装置。
２．  １に記載の表示装置において、
前記台詞決定手段は、互いに属性が異なる人物に対して、互いに異なる台詞を決定する表示装置。
３．  １または２に記載の表示装置において、
前記撮像装置は、終点に向かって一方向に人物を移動させる輸送手段により移動中の人物を撮像可能な位置に設置され、
前記ディスプレイは前記輸送手段の終点付近、又は、前記一方向における前記撮像装置により撮像される位置よりも下流側に設置される表示装置。
４．  １から３のいずれかに記載の表示装置において、
前記画像から複数の人物が抽出された場合、前記画像を利用して２人以上の人物を含むグループを生成するグループ化手段をさらに有し、
前記台詞決定手段は、同じグループに属する２人以上の人物に付与する前記台詞として、会話形式の台詞を決定する表示装置。
５．  ４に記載の表示装置において、
前記グループ化手段は、人物の顔の向き、顔の大きさ及び互いの顔の距離の中の少なくとも１つに基づいて、前記グループを生成する表示装置。
６．  １から５のいずれかに記載の表示装置において、
人物の属性と、台詞とを対応付けた台詞情報を記憶する台詞記憶手段をさらに有し、
前記台詞決定手段は、前記人物属性推定手段に推定された属性に対応付けられている台詞を前記台詞記憶手段から取得し、取得した台詞を、その属性の人物に付与する台詞として決定する表示装置。
７．  １から５のいずれかに記載の表示装置において、
前記台詞決定手段は、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、登録されている属性が前記人物属性推定手段により推定された属性と一致する前記ユーザの前記コメントを取得し、取得した前記コメントを、その属性の人物に付与する台詞として決定する表示装置。
８．  ７に記載の表示装置において、
前記台詞決定手段は、前記登録サーバから、登録されている属性が前記人物属性推定手段により推定された属性と一致する前記ユーザの前記コメントの中の、所定のキーワードを含む前記コメントを取得し、取得した前記コメントを、その属性の人物に付与する台詞として決定する表示装置。
９．  ８に記載の表示装置において、
前記所定のキーワードは、前記人物属性推定手段により推定された属性、及び、前記登録サーバから前記コメントを取得する時の時刻の少なくとも一方に基づいて前記台詞決定手段が決定する表示装置。
１０．  １から５のいずれかに記載の表示装置において、
前記台詞決定手段は、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、前記人物属性推定手段により推定された属性に基づいて決定された所定のキーワードを含むコメントを取得し、取得したコメントを、その属性の人物に付与する台詞として決定する表示装置。
１１．  １から１０のいずれかに記載の表示装置において、
前記画像加工手段は、前記画像内の前記人物に前記台詞を付与するとともに、前記画像内の前記人物の顔を加工する前記加工画像を生成する表示装置。
１２．  １１に記載の表示装置において、
前記画像加工手段は、前記人物属性推定手段により推定された属性を用いて、各人物の顔に行う加工内容を決定し、決定した加工を行う表示装置。
１３．  １２に記載の表示装置において、
人物の属性と、前記加工画像内で人物の顔の位置に表示される置換画像とを対応付けた加工情報を記憶する加工情報記憶手段をさらに有し、
前記画像加工手段は、前記人物属性推定手段により推定された属性に対応付けられた前記置換画像を前記加工情報記憶手段から取得し、取得した前記置換画像を、その属性の人物の顔が表示されている位置に表示する前記加工画像を生成する表示装置。
１４．  コンピュータを、
撮像手段、
前記撮像手段が撮像した画像から人物を抽出する人物抽出手段、
前記人物抽出手段により抽出された人物の属性を、前記画像を利用して推定する人物属性推定手段、
前記人物属性推定手段により推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定手段、
前記画像内の前記人物に、前記台詞決定手段が決定した前記台詞を付与する加工画像を生成する画像加工手段、
前記加工画像をディスプレイに表示する表示手段、
として機能させるためのプログラム。
１４−２．  １４に記載のプログラムにおいて、
前記台詞決定手段に、互いに属性が異なる人物に対して、互いに異なる台詞を決定させるプログラム。
１４−３．  １４または１４−２に記載のプログラムにおいて、
前記撮像手段は、終点に向かって一方向に人物を移動させる輸送手段により移動中の人物を撮像可能な位置に設置され、
前記ディスプレイは前記輸送手段の終点付近、又は、前記一方向における前記撮像装置により撮像される位置よりも下流側に設置されるプログラム。
１４−４．  １４から１４−３のいずれかに記載のプログラムにおいて、
前記コンピュータを、前記画像から複数の人物が抽出された場合、前記画像を利用して２人以上の人物を含むグループを生成するグループ化手段としてさらに機能させ、
前記台詞決定手段に、同じグループに属する２人以上の人物に付与する前記台詞として、会話形式の台詞を決定させるプログラム。
１４−５．  １４−４に記載のプログラムにおいて、
前記グループ化手段に、人物の顔の向き、顔の大きさ及び互いの顔の距離の中の少なくとも１つに基づいて、前記グループを生成させるプログラム。
１４−６．  １４から１４−５のいずれかに記載のプログラムにおいて、
前記コンピュータを、人物の属性と、台詞とを対応付けた台詞情報を記憶する台詞記憶手段としてさらに機能させ、
前記台詞決定手段に、前記人物属性推定手段に推定された属性に対応付けられている台詞を前記台詞記憶手段から取得させ、取得した台詞を、その属性の人物に付与する台詞として決定させるプログラム。
１４−７．  １４から１４−５のいずれかに記載のプログラムにおいて、
前記台詞決定手段に、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、登録されている属性が前記人物属性推定手段により推定された属性と一致する前記ユーザの前記コメントを取得させ、取得した前記コメントを、その属性の人物に付与する台詞として決定させるプログラム。
１４−８．  １４−７に記載のプログラムにおいて、
前記台詞決定手段に、前記登録サーバから、登録されている属性が前記人物属性推定手段により推定された属性と一致する前記ユーザの前記コメントの中の、所定のキーワードを含む前記コメントを取得させ、取得した前記コメントを、その属性の人物に付与する台詞として決定させるプログラム。
１４−９．  １４−８に記載のプログラムにおいて、
前記台詞決定手段に、前記人物属性推定手段により推定された属性、及び、前記登録サーバから前記コメントを取得する時の時刻の少なくとも一方に基づいて、前記所定のキーワードを決定させるプログラム。
１４−１０．  １４から１４−５のいずれかに記載のプログラムにおいて、
前記台詞決定手段に、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、前記人物属性推定手段により推定された属性に基づいて決定された所定のキーワードを含むコメントを取得させ、取得したコメントを、その属性の人物に付与する台詞として決定させるプログラム。
１４−１１．  １４から１４−１０のいずれかに記載のプログラムにおいて、
前記画像加工手段に、前記画像内の前記人物に前記台詞を付与するとともに、前記画像内の前記人物の顔を加工した前記加工画像を生成させるプログラム。
１４−１２．  １４−１１に記載のプログラムにおいて、
前記画像加工手段に、前記人物属性推定手段により推定された属性を用いて、各人物の顔に行う加工内容を決定させ、決定した加工を行わせるプログラム。
１４−１３．  １４−１２に記載のプログラムにおいて、
前記コンピュータを、
人物の属性と、前記加工画像内で人物の顔の位置に表示される置換画像とを対応付けた加工情報を記憶する加工情報記憶手段としてさらに機能させ、
前記画像加工手段に、前記人物属性推定手段により推定された属性に対応付けられた前記置換画像を前記加工情報記憶手段から取得させ、取得した前記置換画像を、その属性の人物の顔が表示されている位置に表示する前記加工画像を生成させるプログラム。
１５．  コンピュータが、
撮像装置が撮像した画像から人物を抽出する人物抽出ステップと、
前記人物抽出ステップで抽出された人物の属性を、前記画像を利用して推定する人物属性推定ステップと、
前記人物属性推定ステップで推定された属性を用いて、その属性の人物に付与する台詞を決定する台詞決定ステップと、
前記画像内の前記人物に、前記台詞決定ステップで決定した前記台詞を付与する加工画像を生成する画像加工ステップと、
前記加工画像をディスプレイに表示する表示ステップと、
を実行する表示方法。
１５−２．  １５に記載の表示方法において、
前記台詞決定ステップでは、互いに属性が異なる人物に対して、互いに異なる台詞を決定する表示方法。
１５−３．  １５または１５−２に記載の表示方法において、
前記撮像装置は、終点に向かって一方向に人物を移動させる輸送手段により移動中の人物を撮像可能な位置に設置され、
前記ディスプレイは前記輸送手段の終点付近、又は、前記一方向における前記撮像装置により撮像される位置よりも下流側に設置される表示方法。
１５−４．  １５から１５−３のいずれかに記載の表示方法において、
前記コンピュータは、前記画像から複数の人物が抽出された場合、前記画像を利用して２人以上の人物を含むグループを生成するグループ化ステップをさらに実行し、
前記台詞決定ステップでは、同じグループに属する２人以上の人物に付与する前記台詞として、会話形式の台詞を決定する表示方法。
１５−５．  １５−４に記載の表示方法において、
前記グループ化ステップでは、人物の顔の向き、顔の大きさ及び互いの顔の距離の中の少なくとも１つに基づいて、前記グループを生成する表示方法。
１５−６．  １５から１５−５のいずれかに記載の表示方法において、
前記コンピュータは、人物の属性と、台詞とを対応付けた台詞情報を記憶しておき、
前記台詞決定ステップでは、前記人物属性推定ステップで推定された属性に対応付けられている台詞を前記台詞情報から取得し、取得した台詞を、その属性の人物に付与する台詞として決定する表示方法。
１５−７．  １５から１５−５のいずれかに記載の表示方法において、
前記台詞決定ステップでは、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、登録されている属性が前記人物属性推定ステップで推定された属性と一致する前記ユーザの前記コメントを取得し、取得した前記コメントを、その属性の人物に付与する台詞として決定する表示方法。
１５−８．  １５−７に記載の表示方法において、
前記台詞決定ステップでは、前記登録サーバから、登録されている属性が前記人物属性推定ステップで推定された属性と一致する前記ユーザの前記コメントの中の、所定のキーワードを含む前記コメントを取得し、取得した前記コメントを、その属性の人物に付与する台詞として決定する表示方法。
１５−９．  １５−８に記載の表示方法において、
前記所定のキーワードは、前記人物属性推定手段により推定された属性、及び、前記登録サーバから前記コメントを取得する時の時刻の少なくとも一方に基づいて前記台詞決定ステップで決定する表示方法。
１５−１０．  １５から１５−５のいずれかに記載の表示方法において、
前記台詞決定ステップでは、複数のユーザが情報発信のために自己の属性情報と共にコメントを登録した登録サーバから、前記人物属性推定ステップで推定された属性に基づいて決定された所定のキーワードを含むコメントを取得し、取得したコメントを、その属性の人物に付与する台詞として決定する表示方法。
１５−１１．  １５から１５−１０のいずれかに記載の表示方法において、
前記画像加工ステップでは、前記画像内の前記人物に前記台詞を付与するとともに、前記画像内の前記人物の顔を加工する前記加工画像を生成する表示方法。
１５−１２．  １５−１１に記載の表示方法において、
前記画像加工ステップでは、前記人物属性推定ステップで推定された属性を用いて、各人物の顔に行う加工内容を決定し、決定した加工を行う表示方法。
１５−１３．  １５−１２に記載の表示方法において、
前記コンピュータは、人物の属性と、前記加工画像内で人物の顔の位置に表示される置換画像とを対応付けた加工情報を記憶しておき、
前記画像加工ステップでは、前記人物属性推定ステップで推定された属性に対応付けられた前記置換画像を前記加工情報から取得し、取得した前記置換画像を、その属性の人物の顔が表示されている位置に表示する前記加工画像を生成する表示方法。
【符号の説明】
【０１０７】
１      表示装置
１０    撮像装置
１１    人物抽出部
１２    人物属性推定部
１３    台詞決定部
１４    画像加工部
１５    表示部
１６    グループ化部
１７    台詞記憶部
１８    加工情報記憶部
１００  撮像装置
２００  制御装置
３００  ディスプレイ
４００  エスカレータ
５００  動く歩道
【図１】
2014175704.tif 000003
【図２】
2014175704.tif 000004
【図３】
2014175704.tif 000005
【図４】
2014175704.tif 000006
【図５】
2014175704.tif 000007
【図６】
2014175704.tif 000008
【図７】
2014175704.tif 000009
【図８】
2014175704.tif 000010
【図９】
2014175704.tif 000011
【図１０】
2014175704.tif 000012
【図１１】
2014175704.tif 000013
【図１２】
2014175704.tif 000014
【図１３】
2014175704.tif 000015
【図１４】
2014175704.tif 000016
【図１５】
2014175704.tif 000017
【図１６】
2014175704.tif 000018
【図１７】
2014175704.tif 000019
【図１８】
2014175704.tif 000020
【図１９】
2014175704.tif 000021
【図２０】
2014175704.tif 000022
【図２１】
2014175704.tif 000023
【図２２】
2014175704.tif 000024