(57)【要約】【課題】大量のデジタル写真を、直感的な操作で閲覧する有効な方法が開示されてない。【解決手段】携帯機器８において、デジタル写真は原則として、指定された画像グループから順次一枚ずつ表示される。ここで次の画像への遷移は、ユーザが携帯機器８をたたくことで実現される。例えば、左側からコツコツとたたくと、表示画像９は右側に動いて消えていき（スライドアウト）、新しい画像が表れる。また、前からコツコツとたたくと、表示画像９は小さくなって消えていき（ズームアウト）、新しい画像が表れる。たたき方により動く速度を変化させる。さらに、ユーザは携帯機器８を上下、左右に振ることでスライドショーの内容を指示する。例えば速く振れば激しい視覚効果を伴った再生を行う。また振る時間が長いと新旧の画像が混ざる。以上により触感による直感的な操作による大量のデジタル写真の閲覧、視聴が実現される。【選択図】図１
2006091294.tif 000002
【特許請求の範囲】
【請求項１】
ユーザの物理的な動作を感知するセンサ部と、
画像を蓄積する画像蓄積部と、
前記画像蓄積部の画像を読み出し、前記センサ部で感知した動作に応じて、
前記画像に対して処理を施した画像を表示する画像生成部を備える
ことを特徴とする画像の表示装置。
【請求項２】
前記センサ部はユーザの叩く操作を感知し、
それを受けて、前記画像生成部は表示する画像を切り替える
ことを特徴とする請求項１記載の画像の表示装置。
【請求項３】
前記画像生成部は
上下左右方向に叩かれた場合は、画像を上下左右いずれかあるいは混ざった方向にスライドさせて表示する画像を切り替え、
前後方向に叩かれた場合は画像を拡大または縮小させて表示する画像を切り替える
ことを特徴とする請求項２記載の画像の表示装置。
【請求項４】
前記センサ部はユーザの叩く操作を感知し、
それを受けて、前記画像生成部は画像の切り替え方法をシナリオファイルに書き込み、
前記２つの動作を繰り返すことでシナリオファイルを生成したのちに、
シナリオファイルに従って前記画像生成部は画像を切り替えながら表示する
ことを特徴とする請求項１記載の画像の表示装置。
【請求項５】
前記画像生成部は前記画像蓄積部から複数の画像を読み出して合成した画像を生成し、
前記センサ部はユーザの叩く操作を感知し、
それを受けて、前記画像生成部は前記複数の画像を動かす表示を行う
ことを特徴とする請求項１記載の画像の表示装置。
【請求項６】
前記画像生成部は複数の画像を任意の方向にランダムに動かす表示を行い、
前記センサ部はユーザの叩く操作を感知し、
それを受けて、前記画像生成部は叩かれた部分に前記複数の画像が近づいていく表示を行う
ことを特徴とする請求項５記載の画像の表示装置。
【請求項７】
前記画像生成部は複数の画像を重ねて表示し、
前記センサ部はユーザの叩く操作を感知し、
それを受けて、前記画像生成部は叩かれたのとは逆の方向に前記複数の画像が崩れていく表示を行う
ことを特徴とする請求項５記載の画像の表示装置。
【請求項８】
ユーザの物理的な動作を感知するセンサ部と、
センサ部で感知した結果を蓄積する履歴記録部と、
画像データを蓄積する画像蓄積部と、
前記履歴記録部の記録に従って、前記画像蓄積部から画像を読み出して処理して表示する画像生成部を備える
ことを特徴とする画像の表示装置。
【請求項９】
前記センサ部はユーザの振る操作を感知し、
前記画像生成部は
振るストロークの大きさ、振る速さに応じて画像の動かし方を変え、
振る時間の長さに応じて画像の選択方法を変える
ことを特徴とする請求項８記載の画像の表示装置。
【請求項１０】
前記センサ部はユーザの動きまたは生体情報を感知し、
前記画像生成部は動きまたは生体情報の履歴に応じて画像の動かし方、画像の選択方法を変える
ことを特徴とする請求項８記載の画像の表示装置。
【請求項１１】
前記センサ部はジャイロセンサを用いる
ことを特徴とする請求項１から９のいずれか一項に記載の画像の表示装置。
【請求項１２】
前記センサ部はユーザの動きを感知するものとしてジャイロセンサ、歩数計を用い、
生体情報を感知するものとして脈拍センサ、血圧センサ、体温センサを用いる
ことを特徴とする請求項１０に記載の画像の表示装置。
【請求項１３】
ユーザの物理的な動作を感知するセンサステップと、
画像を蓄積する画像蓄積ステップと、
前記画像蓄積ステップの画像を読み出し、前記センサステップで感知した動作に応じて、
前記画像に対して処理を施した画像を表示する
ことを特徴とする画像の表示方法。
【請求項１４】
ユーザの物理的な動作を感知するセンサステップと、
センサステップで感知した結果を蓄積する履歴記録ステップと、
画像データを蓄積する画像蓄積ステップと、
前記履歴記録ステップの記録に従って、前記画像蓄積ステップから画像を読み出して処理して表示する
ことを特徴とする画像の表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像、特にデジタル写真の見せ方に関するものであり、触感による物理的な指示により動作を行う主に携帯型のＡＶ情報機器であって、デジタル写真の閲覧機能、スライドショー機能を実現するものに係わる。
【背景技術】
【０００２】
従来の物理的な指示により動作を行う携帯情報機器としては、タッチパネル式のインターフェースを有し、地図表示を行うものがあった（例えば、特許文献１参照）。図９は、前記特許文献１に記載された従来の携帯情報機器の表示の様子を示す図である。
【０００３】
図９において、地図が携帯情報機器１００の表示部１０１に表示されている。地図のスクロールは次の様に行う。つまり、指１０２を表示部１０１上に押し当てたまま希望の方向に動かすと、動かしたい方向に動かした距離だけその地図が移動して表示される。例えば指１０２を下から上へ動かせば、地図が上に動く。
【０００４】
また、拡大に関しては、親指と人差し指を表示部１０１上に閉じて押し当て、その後二つの指を開く動作をすることで、最初に押し当てた点を中心にし、開く具合に応じた拡大率の地図を表示する。
【０００５】
以上により触感による物理的な方法で、地図をスクロール、拡大することができる。
【特許文献１】特開２０００−１６３４４４号公報（第５−６頁、図６，８）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、前記従来の方法をデジタル写真の閲覧に適用した場合、一枚をじっくり見るには有効であるが、一般的なデジタル写真の見方ではない。従来の方法では、複数枚を閲覧する有効な方法は開示されてない。
【０００７】
そこで、大量の画像、特にデジタル写真を閲覧する場合に有効で、触感による直感的な指示により操作が可能な画像の表示方法及び装置を提供する。これらは画像の閲覧及びスライドショー的な見せ方を提供するものである。
【課題を解決するための手段】
【０００８】
前記従来の課題を解決するために、本発明はユーザの物理的な操作を感知するセンサ部と、画像を蓄積する画像蓄積部と、前記画像蓄積部の画像を読み出し、前記センサ部で感知した操作に応じて、前記画像に対して処理を施した画像を表示する画像生成部を備えた画像の表示装置である。
【０００９】
さらに従来の課題を解決するために、本発明はユーザの物理的な動作を感知するセンサ部と、センサ部で感知した結果を蓄積する履歴記録部と、画像データを蓄積する画像蓄積部と、前記履歴記録部の記録に従って、画像の処理方法をシナリオファイルに書き込み、前記シナリオファイルに従って、前記画像蓄積部から画像を読み出して処理して表示する画像生成部を備えた画像の表示装置である。
【発明の効果】
【００１０】
本発明の画像の表示方法及び装置は、叩く、振るといったユーザの物理的な操作で、画像の切り替えあるいは複数画像の動きのある表示を行う。またユーザの動き、生体情報の履歴により表示画像の選択、画像の動きを付与する。以上により、触感による直感的な操作による大量の画像の閲覧が実現できる。
【発明を実施するための最良の形態】
【００１１】
以下本発明の実施の形態について、図面を参照しながら説明する。
【００１２】
（実施の形態１）
画像の表示装置の一形態として携帯機器について説明する。図１は、本発明の実施の形態１における携帯機器の構成図である。図２、図３は同実施の形態における携帯機器の操作及び表示の様子を示す図である。これらの図１において、１は画像入力部、２は画像蓄積部、３は表示画像生成部、４はメニュー部、５はセンサ部、６は解析部、７は表示部である。これらにより携帯機器８が構成される。９は表示部７に表示された表示画像である。ここでは画像として静止画のデジタル写真について説明する。
【００１３】
図１において、デジタル写真は画像入力部１から入力され、画像蓄積部２に蓄積、保管される。画像入力部１への入力はカメラからでも外部（ネットワーク等）からでもよい。画像蓄積部２の実体はＨＤＤ、ＣＤ、ＤＶＤ、ＳＤなどであり、ＣＤ、ＤＶＤ、ＳＤ等の記録媒体の場合は、物理的に挿入される。
【００１４】
次に表示（再生）は次の様に行われる。ユーザはメニュー部４より表示する基本的な方法を指示する。また表示すべき画像グループを指示する（図示せず）。ここでの画像グループは同一フォルダ、最近の画像、特定イベントなどにより指定する。解析部６はメニュー部４及びセンサ部５からの入力に応じて、表示画像生成部３に指示を送り、表示画像生成部３は画像蓄積部２から画像を読み出して表示する形に処理した後、表示部７に送り、画像表示を行う。
【００１５】
ユーザは触感による物理的な刺激を与えることで携帯機器８を操作する。ここでは「たたく」ことで指示を与える。このためセンサ部５は外部からたたかれる強さ、方向、間隔等を検出する。
【００１６】
具体的な動作例として、「一枚表示」を選んだ場合を図２に示す。「一枚表示」の場合、デジタル写真は原則として、指定された画像グループから順次一枚ずつ表示される。ここで次の画像への遷移（編集用語ではトランジション）は、ユーザが携帯機器８をたたくことで実現される。この一例を図２に示す。図２（ａ）に示す様に、左側からコツコツとたたくと、表示画像９は右側に動いて消えていき（スライドアウト）、新しい画像が表れる。また、図２（ｂ）に示す様に、前からコツコツとたたくと、表示画像９は小さくなって消えていき（ズームアウト）、新しい画像が表れる。たたき方により動く速度を変化させる。強くまたは早くたたくと、早い動きをする。たたき方と動き方のバリエーションは例えば以下のようなものが考えられる。これらにより触感による物理的なアクションで、直感的な操作が実現する。
【００１７】
左側からたたく  右へスライド
右側からたたく  左へスライド
上からたたく    下へスライド
下からたたく    上へスライド
前からたたく    ズームアウトまたはフェードアウト
後からたたく    ズームインして消える
ここでは、表示方法について説明したが、編集用途にも使用できる。すなわち画像表示、アクション（携帯機器８をたたく動作）を繰り返し、画像の遷移を記録してシナリオファイルを作る。その後シナリオファイルに沿って再生することで、編集した通りに画像を閲覧できる。
【００１８】
次に「画像群表示」を選んだ場合を図３に示す。
【００１９】
図３（ａ）に「池」を選んだ場合を示す。本例は池で鯉を呼び寄せるメタファーである。複数の表示画像９が表示部７の中を漂っている。ここで左側からコツコツとたたくと、たたいた場所に表示画像９が集まってくる。この過程で画像が重なったり、離れたりし、結果としてユーザは多くの画像を見ることができる。ここで、たたき方により動きを変化させる。例えば小刻みにたたくほど、すばやく画像が集まってくる。叩くのをやめて時間が経過すると、そのままの表示でもいいが、再び複数の表示画像９が表示部７の中を漂い始めてもよい。
【００２０】
次いで図３（ｂ）に「山」を選んだ場合を示す。本例は山を崩すメタファーである。複数の表示画像９が表示部７の中で重なって表示されている。ここで右側から強くたたくと、左側に山が崩れることで、重なった画像が離れて表示され、ユーザは多くの画像を見ることができる。ここで、たたき方により動きを変化させる。例えば強くたたくほど、大きく崩れ、重なり部分が小さくなる。叩くのをやめて時間が経過すると、そのままの表示でもいいが、再び複数の表示画像９が表示部７の中で重なって表示されるようになってもよい。
【００２１】
図３（ａ）（ｂ）いずれの場合でも、物理的なアクションでの直感的な操作、つまり触感ＵＩによる大量のデジタル写真の閲覧、視聴が実現される。
【００２２】
以上において、センサは専用に設けてもいいが、位置情報を知るためのジャイロセンサを利用することも可能である。また表示画像は写真に限らず、ＣＧで合成した画像でもよい。
【００２３】
（実施の形態２）
図４は本発明の実施の形態２における携帯機器の構成図である。図４において、１０は履歴記録部、１１は音楽入力部、１２は画像特徴抽出部、１３は音楽特徴抽出部、１４は音楽蓄積部、１５はスライドショー生成部、２０は画像パケット、３０は音楽パケットである。なお、他のブロックは図１と同様である。図５は画像パケット２０の構成図であり、画像ＩＤ２１、画像感性情報２２、画像データ２３で構成される。図６は音楽パケット３０の構成図であり、音楽ＩＤ３１、音楽感性情報３２、音楽データ３３で構成される。図７は感性マップ図、図８は表示の様子を示す図である。ここでは画像として静止画のデジタル写真について説明する。
【００２４】
図４において、デジタル写真は画像入力部１から入力され、画像特徴抽出部１２で画像感性情報２２を抽出される。その後、画像パケット２０にパケット化されて、画像蓄積部２に蓄積、保管される。画像入力部１への入力はカメラからでも外部（ネットワーク等）からでもよい。音楽は音楽入力部１１から入力され、音楽特徴抽出部１３で音楽感性情報３２を抽出される。その後、音楽パケット３０にパケット化されて、音楽蓄積部１４に蓄積、保管される。音楽入力部１１への入力は音楽プレーヤ出力からでも外部（ネットワーク等）からでもよい。
【００２５】
図５に画像パケット２０の形式を示す。画像ＩＤ２１は画像の固有番号である。画像感性情報２２は画像の感性的な情報を数値で示すものである。画像データ２３は画像そのものである。図６に音楽パケット３０の形式を示す。画像の場合と同様であり、音楽ＩＤ３１は音楽の固有番号、音楽感性情報３２は音楽の感性的な情報を数値で示すものであり、音楽データ３３は音楽そのものである。
【００２６】
ここで感性情報（画像感性情報２２、音楽感性情報３２）について説明する。図７は感性マップであり、軸の定義を図７（ａ）に示す。ｘ軸が激しさの軸であり、右側が動的、左側が静的である。またｙ軸が暖かさであり、上側が暖かい、下側が冷たいを表す。それぞれの軸は定量化され、数値の絶対値の大きさが程度を示す。ここではスコアの最大値を５０とする。
【００２７】
画像感性のマッピング例を図７（ｂ）に示す。図５に示す画像感性情報２２の「激しさ＝４０、暖かさ＝２０」は「かなり動的で、やや暖かい」ことを示している。
【００２８】
動的、暖かい  ＝  “炎”
静的、暖かい  ＝  “笑顔”
静的、冷たい  ＝  “雪景色”
動的、冷たい  ＝  “滝”
音楽感性のマッピング例を図７（ｃ）に示す。図６に示す音楽感性情報３２の「激しさ＝−４０、暖かさ＝−４０」は「かなり静的かつ冷たい」ことを示している。
【００２９】
動的、暖かい  ＝  “ポップス”
静的、暖かい  ＝  “唱歌”
静的、冷たい  ＝  “演歌”
動的、冷たい  ＝  “ロック”
次に表示（再生）について説明する。ここでの表示は複数の静止画を順次表示する紙芝居的なもの、いわゆるスライドショーを基本とする。単純に静止画を順次切り替えて表示するだけではなく、切り替え時に視覚効果を入れる。編集用語でトランジションといわれるもので、スライドアウト、フェードアウト、フェードインなどを行う。さらに静止画に動きを付与する。静止画に対して、カメラワーク的な動き、例えばズーム、パン、チルト等を施す。特定のオブジェクト、例えば人物に対してズームインすることで、視聴ユーザに強い印象を与えることができる。さらに画像再生に合わせて音楽も付与する。これらにより動画コンテンツを視聴するような感覚での静止画閲覧が実現される。
【００３０】
次に、ユーザの操作について説明する。ユーザはメニュー部４でメニューを選ぶ。まずは、図４でシャッフルを選んだ場合を説明する。図８に示すようにユーザは携帯機器８を上下、左右に振ることでスライドショーの内容を指示する。ここでの内容の指示とはパソコンでの編集ソフトのような詳細、正確な編集作業ではなく、スライドショーの動き方の雰囲気、画像の選択の指示を意味する。ここで動き方の雰囲気をスタイルと呼ぶことにする。スタイルは図７の感性マップに対応するもので、例えば以下の対応関係である。激しいスタイルでは激しい視覚効果、画像、音楽が選択される。
【００３１】
動的、暖かい  ＝  “うきうき”
静的、暖かい  ＝  “ほのぼの”
静的、冷たい  ＝  “さむざむ”
動的、冷たい  ＝  “喝”
携帯機器８は、センサ部５で振る動きを感知し、解析部６で解析して、スライドショー生成部１５が最終的な動画風のコンテンツを生成する。
【００３２】
振り方、つまりシャッフルする動きと内容の指示について説明する。振り方をストロークの大きさ、振る速さ、時間に分解する。それぞれに以下の意味合いを持たせる。
【００３３】
（１）ストロークの大きさ  −  スタイル（暖かさ）
大きいほど暖かいスタイル、画像、音楽が選択される。逆に小さく振った場合は冷たいものが選択される。
【００３４】
（２）振る速さ  −  スタイル（激しさ）
速いほど激しいスタイル、画像、音楽が選択される。逆におとなしく振った場合は静かなものが選択される。
【００３５】
（３）時間
振る時間が短いと最近の画像、長いと新旧の画像が混ざる。長く振るほど古い画像が掘り起こされるイメージである。
【００３６】
この他、振る方向、まわす操作、あるいは動きの融合で指示内容にバリエーションを加えてもよい。
【００３７】
次に、図４で、行動記録を選んだ場合を説明する。この場合、ユーザの行動が上記での振る操作に対応する。つまりユーザは携帯機器８を持ち運び、センサ部５で各種の情報を感知して、履歴記録部１０に記録する。再生時に解析部６は履歴記録部１０の情報を解析して、スライドショー生成部１５が最終的な動画風のコンテンツを生成する。
【００３８】
ここで、各種情報とは行動履歴を意味する一日の歩数、移動距離、あるいは生体情報である脈拍、血圧、体温等の履歴である。これらをもとに、一日の行動を評価する。これらの数値が高ければ、忙しい一日だったと判定し、激しいスタイル、画像、音楽の動画コンテンツを生成、表示する。逆に数値が低ければ静かな一日と判定し、静かなスタイル、画像、音楽の動画コンテンツを生成、表示する。
【００３９】
行動記録とコンテンツの関係はこれに限らず、忙しい一日と判定した場合、いやすために、静かなコンテンツを生成してもいい。またここでは、一日の終わりにその日の行動を振りかえる使用シーンを想定して一日の行動記録としたが、一日に限る必要はなく、最近の一時間でも、一週間でもいい。以上により触感による物理的なアクションでの直感的な操作による大量のデジタル写真の閲覧、視聴が実現される。
【００４０】
なお、本実施の形態では携帯端末について述べたが、携帯端末に限る必要はなく、据え置き機器において、本体部とセンサ部にわかれた形でもよい。例えば本体部はデジタルＴＶ、ＤＶＤレコーダのような据え置き機器、センサ部は持ち運べる大きさの端末機器という形が考えられる。また扱う画像も静止画に限る必要はなく動画でもいい、また個人で撮影したものでなく、放送あるいはｗｅｂからダウンロードしたものでもよい。
【産業上の利用可能性】
【００４１】
本発明にかかる携帯機器は、触感による直感的な操作での静止画の編集、閲覧を実現する。このため、デジタルカメラ、ＰＤＡ、カメラ付き携帯、カーナビ装置の画像閲覧機能として有効である。またデジタルＴＶ、ＤＶＤレコーダのような据え置き機器でも利用可能である。
【図面の簡単な説明】
【００４２】
【図１】本発明の実施の形態１における端末機器の構成図
【図２】同実施の形態における携帯機器の操作及び表示の様子を示す図
【図３】同実施の形態における携帯機器の操作及び表示の様子を示す図
【図４】本発明の実施の形態２における携帯機器の構成図
【図５】画像パケットの構成図
【図６】音楽パケットの構成図
【図７】感性マップ図
【図８】表示の様子を示す図
【図９】従来の携帯情報機器の表示の様子を示す図
【符号の説明】
【００４３】
１    画像入力部
２    画像蓄積部
３    表示画像生成部
４    メニュー部
５    センサ部
６    解析部
７    表示部
８    携帯機器
９    表示画像
１０    履歴記録部
１１    音楽入力部
１２    画像特徴抽出部
１３    音楽特徴抽出部
１４    音楽蓄積部
１５    スライドショー生成部
２０    画像パケット
２１    画像ＩＤ
２２    画像感性情報
２３    画像データ
３０    音楽パケット
３１    音楽ＩＤ
３２    音楽感性情報
３３    音楽データ
１００    携帯情報機器
１０１    表示部
１０２    指
【図１】
2006091294.tif 000003
【図２】
2006091294.tif 000004
【図３】
2006091294.tif 000005
【図４】
2006091294.tif 000006
【図５】
2006091294.tif 000007
【図６】
2006091294.tif 000008
【図７】
2006091294.tif 000009
【図８】
2006091294.tif 000010
【図９】
2006091294.tif 000011