(57)【要約】【課題】表示手段に表示される合成画像上におけるユーザインタフェース用の画像の配置を適切に制御する電子機器を提供する。【解決手段】ＣＰＵ１８は、被写体像を縦長および横長のいずれの方向で撮像するのかの設定を切替スイッチ２１１により受け付け、その設定に基づき、ＣＣＤカメラ１１により撮像されてＶＲＡＭ１４に格納された被写体像のどの位置にアイコン等を重ね合わせるかを決定する。そして、ＣＰＵ１８は、その決定した位置にアイコンを重ね合わせた合成画像を生成し、タッチパネル付きＬＣＤ１７に表示させる。また、このタッチパネルが押下された場合、ＣＰＵ１８は、その押下位置が先に決定したアイコン位置かどうかを判断し、もし、アイコン位置であれば、そのアイコンに対応する処理を実行する。【選択図】    図１
2005025268.tif 000002
【特許請求の範囲】
【請求項１】
表示画像とユーザインタフェース用の画像とを表示する表示手段と、
前記表示手段の使用状態を第１の位置および前記第１の位置から回転させた第２の位置のいずれかに設定する設定手段と、
前記設定手段の設定結果に基づき、前記表示手段に表示されるユーザインタフェース用の画像の配置を制御する配置制御手段と
を具備することを特徴とする電子機器。
【請求項２】
被写体像を撮像する撮像手段と、
前記撮像手段により撮像された被写体像とユーザインタフェース用の画像とが合成された合成画像を表示する表示手段と、
前記表示手段を第１の位置およびその法線を軸としてほぼ垂直に回転させた第２の位置のいずれに設置して目視するのかを設定する設定手段と、
前記設定手段の設定結果に基づき、前記表示手段に表示される合成画像上における前記ユーザインタフェース用の画像の配置を制御する配置制御手段と
を具備することを特徴とする電子機器。
【請求項３】
前記表示手段の表示面に重畳させてその入力面が敷設される接触型の入力手段と、
前記配置制御手段の配置結果に基づき、前記入力手段からの入力を制御する入力制御手段と
をさらに具備することを特徴とする請求項２記載の電子機器。
【請求項４】
被写体像を撮像する撮像手段と、
前記撮像手段により撮像された被写体像とユーザインタフェース用の画像とを合成した合成画像を表示する表示手段と、
前記表示手段を第１の位置およびその法線を軸としてほぼ垂直に回転させた第２の位置のいずれに設置して目視するのかを検出する検出手段と、
前記検出手段の検出結果に基づき、前記表示手段に表示する合成画像上における前記ユーザインタフェース用の画像の配置を制御する配置制御手段と
を具備することを特徴とする電子機器。
【請求項５】
前記表示手段の表示面に重畳させてその入力面が敷設される接触型の入力手段と、
前記配置制御手段の配置結果に基づき、前記入力手段からの入力を制御する入力制御手段と
をさらに具備することを特徴とする請求項４記載の電子機器。
【請求項６】
前記検出手段は、重力の方向を検出するセンサを用いることを特徴とする請求項４または５記載の電子機器。
【請求項７】
前記検出手段は、熱の伝導方向を検出するセンサを用いることを特徴とする請求項４または５記載の電子機器。
【請求項８】
被写体像を撮像するステップと、
前記撮像した被写体像とユーザインタフェース用の画像とが合成された合成画像を表示するステップと、
前記合成画像を第１の方向およびその画像面の法線を軸としてほぼ垂直に回転させた第２の方向のいずれに向けて目視するのかを判定するステップと、
前記判定結果に基づき、前記表示される合成画面上における前記ユーザインタフェース用の画像の配置を制御するステップと
を具備することを特徴とする表示制御方法。
【請求項９】
前記判定は、スイッチの状態またはその操作状況に基づいて行うことを特徴とする請求項８記載の表示制御方法。
【請求項１０】
前記判定は、センサの出力信号に基づいて行うことを特徴とする請求項８記載の表示制御方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、例えばデジタルカメラやカメラ付きのＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）端末などの電子機器および同機器の表示制御方法に関する。
【０００２】
【従来の技術】
近年、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）などといった撮像素子の製造技術が飛躍的に向上しており、高精細な画像を撮像可能なカメラが、手の平に収まる大きさのＰＤＡ端末に搭載できる程度にその小型化が図られている。そして、この種のＰＤＡ端末では、タッチパネル付きのＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）が設けられるのが一般的であるため、カメラで撮像された被写体像をこのＬＣＤにリアルタイムに表示することが可能である。したがって、ユーザは、このＬＣＤに表示された被写体像を見ながら、シャッター操作を行うタイミングを測ることができる。
【０００３】
このＣＣＤなどの撮像素子は、通常、矩形の撮像領域を有しており、また、ＬＣＤの方も、通常は、撮像素子の撮像領域とほぼ同形状の矩形の表示領域を有している。したがって、ユーザは、縦長の被写体像を撮像したい場合と、横長の被写体像を撮像したい場合とで、カメラ付きのＰＤＡ端末の向きを９０度回転させることになる。この際、カメラで撮像される被写体像と重ね合わせてテキスト情報を表示するような場合には、そのテキスト情報をユーザが読み易いように、その向きも９０度回転させることが好ましい。例えば特許文献１に記載の画像表示装置では、画像表示装置の姿勢を検知し、その検知結果に基づき、重ね合わせるテキストの向きを制御するといったことを行っている（図１１参照）。
【０００４】
【特許文献１】
特願平１０−２６６５２５号公報。
【０００５】
【発明が解決しようとする課題】
ところで、タッチパネル付きのＬＣＤを設けたＰＤＡ端末では、ユーザインタフェースとして実物のボタンを筺体に設置するほか、このＬＣＤにいわゆるアイコンを表示し、そのアイコンの表示位置がペンなどで押下された場合、その押下をタッチパネルで検知して、そのアイコンに対応する処理を実行するといったソフトウェア的なボタンも使用する。
【０００６】
そして、このユーザインタフェースの使い勝手を考えると、カメラ付きのＰＤＡ端末を縦長方向および横長方向のいずれの方向で使用する場合も、例えばあるアイコンは、常に、ユーザから見てＬＣＤ上の例えば右下部分に表示されるように制御することが好ましい。
【０００７】
しかしながら、前述の特許文献１に記載の画像表示装置では、テキストの向きは最適化されるものの、その表示位置は同じであり、仮にこれをアイコンの表示に適用したとしても、ユーザの使用感を一定に保つことはできない。また、その表示位置を可変とした場合に、その選択を検知するために監視すべき領域も連動して可変となることはそもそも考慮されていない。
【０００８】
この発明は、このような事情を考慮してなされたものであり、表示手段に表示される合成画像上におけるユーザインタフェース用の画像の配置を適切に制御する電子機器および同機器の表示制御方法を提供することを目的とする。
【０００９】
【課題を解決するための手段】
前述した目的を達成するために、この発明の電子機器は、表示画像とユーザインタフェース用の画像とを表示する表示手段と、前記表示手段の使用状態を第１の位置および前記第１の位置から回転させた第２の位置のいずれかに設定する設定手段と、前記設定手段の設定結果に基づき、前記表示手段に表示されるユーザインタフェース用の画像の配置を制御する配置制御手段とを具備することを特徴とする。
【００１０】
また、この発明は、被写体像を撮像する撮像手段と、前記撮像手段により撮像された被写体像とユーザインタフェース用の画像とが合成された合成画像を表示する表示手段と、前記表示手段を第１の位置およびその法線を軸としてほぼ垂直に回転させた第２の位置のいずれに設置して目視するのかを設定する設定手段と、前記設定手段の設定結果に基づき、前記表示手段に表示される合成画像上における前記ユーザインタフェース用の画像の配置を制御する配置制御手段とを具備することを特徴とする。
【００１１】
この発明の電子機器においては、例えばＬＣＤを縦長方向および横長方向にいずれの方向で使用するのかを設定すれば、その方向に沿った例えばアイコンの表示などが実施されることになり、ユーザに与える使用感を常に一定に保つことが可能となる。
【００１２】
【発明の実施の形態】
以下、図面を参照してこの発明の実施形態を説明する。
【００１３】
（第１実施形態）
まず、この発明の第１実施形態について説明する。
【００１４】
図１は、この発明の第１実施形態に係る電子機器の表示制御に関わる構成を示す図である。
【００１５】
この電子機器は、バッテリ駆動可能ないわゆるＰＤＡ端末であり、図１に示すように、ＣＣＤカメラ１１、ＬＣＤコントローラ１０、ＶＲＡＭ１４、タッチパネル付きＬＣＤ１７、ＣＰＵ１８、タッチパネルインタフェース２０および操作ボタン２１を有しており、また、ＬＣＤコントローラ１０は、制御部１５、カメラインタフェース１２、ＶＲＡＭインタフェース１３、ＬＣＤインタフェース１６およびＣＰＵインタフェース１９を具備している。なお、ＶＲＡＭ１４は、ＬＣＤコントローラ１０に内蔵される場合もある。また、ＬＣＤコントローラ１０内の各部は、すべて制御部１５によって制御される。
【００１６】
ＣＣＤカメラ１１が撮像した被写体像の画像データは、カメラインタフェース１２により読み取られ、カメラインタフェース１２からＶＲＡＭインタフェース１３へとに転送される。そして、ＶＲＡＭインタフェース１３は、この被写体像の画像データをＶＲＡＭ１４に格納する。このＶＲＡＭ１４に格納された画像データは、制御部１５からの指示に基づき、ＶＲＡＭインタフェース１３により読み取られ、ＶＲＡＭインタフェース１３からＬＣＤインタフェース１６へと転送される。そして、ＬＣＤインタフェース１６は、この画像データをタッチパネル付きＬＣＤ１７に表示制御する。これにより、ＣＣＤカメラ１１により撮像された被写体像がタッチパネル付きＬＣＤ１７に表示されるので、ユーザは、このタッチパネル付きＬＣＤ１７をいわゆるファインダとして利用することが可能となる。
【００１７】
一方、ＣＰＵ１８は、この被写体像に重ね合わせて、アイコンなどのユーザインタフェース用の画像をタッチパネル付きＬＣＤ１７の適切な位置に表示するための表示制御を実行する。そのために、ＣＰＵ１８は、メモリ１８１に保持したユーザインタフェース用の画像データをＶＲＡＭ１４上の被写体像のどこに重ね合わせるかの指示とともに、その画像データをＣＰＵインタフェース１９を介してＶＲＡＭインタフェース１３に転送する。これにより、ＶＲＡＭ１４上で被写体像とアイコン画像等の合成が行われ、ユーザは、この合成画像をタッチパネル付きＬＣＤ１７を介して観賞することになる。
【００１８】
このタッチパネル付きＬＣＤ１７がペンなどで押下されると、その都度、その押下位置がタッチパネルインタフェース２０からＣＰＵ１８へと通知される。そして、この通知を受けたＣＰＵ１８は、その押下位置がアイコン画像の表示位置かどうかを判定し、アイコン画像の表示位置であれば、そのアイコン画像に対応する処理を実行する。これにより、被写体像上に表示したユーザインタフェース用画像を使ったユーザインタフェースが機能することになる。
【００１９】
また、このＣＰＵ１８には、操作ボタン２１が接続されており、この操作ボタン２１から何らかの操作が通知されると、ＣＰＵ１８は、その通知された操作に対応する処理を実行する。例えば操作ボタン２１の１つであるシャッタ２１１の押下が通知されると、ＣＰＵ１８は、タッチパネル付きＬＣＤ１７に表示中の被写体像、つまりＶＲＡＭ１４に格納中の画像データを図示しない例えば着脱自在のカード型記録媒体などに記録する。この操作ボタン２１の中には、被写体像を縦長の方向で撮像するか、あるいは横長の方向で撮像するのかを設定するための切替スイッチ２１２も存在しており、ＣＰＵ１８は、この切替スイッチ２１２の操作が通知されると、アイコン画像等の配置を切り換える。そして、このアイコン画像等の配置の切り換え制御が、この第１実施形態の電子機器の特徴とする点であり、以下、この点について詳述する。
【００２０】
図２は、被写体像を横長の画像として撮像する場合の電子機器の利用形態を示す外観図である。この場合、ユーザは、ファインダとして利用するタッチパネル付きＬＣＤ１７が横長の方向となるように電子機器を把持する。そして、この場合には、ユーザインタフェース用の画像として、被写体像の左上部に電池残量や撮像可能枚数、画質を示すインジケータが、被写体像の右下部にズーム倍率を１〜４の間で調整するためのアイコンがそれぞれ表示される。
【００２１】
ここで、ユーザが、今度は、被写体像を縦長の画像として撮像しようと考えたと想定する。この場合、ユーザは、切替スイッチ２１２を押下して、タッチパネル付きＬＣＤ１７が縦長の方向となるように電子機器を持ち替える。図３は、この場合の電子機器の利用形態を示す外観図である。
【００２２】
図３に示すように、電子機器をタッチパネル付きＬＣＤ１７が縦長の方向となるように持ち替えた後も、ユーザインタフェース用の画像として、被写体像の左上部に電池残量や撮像可能枚数、画質を示すインジケータが、被写体像の右下部にズーム倍率を１〜４の間で調整するためのアイコンがそれぞれ表示される。つまり、タッチパネル付きＬＣＤ１７を縦長および横長のいずれに向けて電子機器を把持したとしても、切替スイッチ２１２を押下することにより、その使用感を一定に保つことが可能である。
【００２３】
図４は、ＣＰＵ１８のメモリ１８１に保持されるユーザインタフェース用の画像データの一例を示す図である。
【００２４】
図４に示すように、ユーザインタフェース用の画像データは、メモリ１８１内にテーブルとしてに保持されており、画像番号、属性、表示領域（縦）および表示領域（横）の各データも併せて保持される。
【００２５】
画像番号において、２桁の番号が割り振られているのは、後ろのアルファベットが枝番号となる排他選択的に利用される同グループの画像群であり、例えば電池残量を表すインジケータの場合（１Ａ〜１Ｃ）、満充電状態の場合は１Ａ、中間の状態の場合は１Ｂ、ローバッテリ状態の場合は１Ｃがそれぞれ選択されて使用されるようになっている。
【００２６】
また、属性は、その画像がインジケータおよびアイコンのいずれとして表示されているのかを示すものであり、タッチパネルインタフェース２０から後述する表示領域内での押下が通知された場合、ＣＰＵ１８は、何らかの処理を実行する必要があるかどうかをこの属性によって判断する。より具体的には、アイコンが表示された領域内での押下が通知された場合、ＣＰＵ１８は、そのアイコンに対応する処理を実行する。
【００２７】
表示領域（縦）および表示領域（横）は、被写体像を縦長および横長のいずれの方向で撮像するのかが、切替スイッチ２１２の押下により設定されることに対応して、その双方の場合の画像データの基点座標（例えば左上の位置）およびその基点座標から画像を展開する向きを示すデータをそれぞれ保持する。
【００２８】
そして、画像データは、表示領域（縦）または表示領域（横）で示された位置に表示する画像データのメモリ１８１上での格納位置を示す。なお、この画像データ中で空欄となっているものは、画像に代えてテキスト情報が表示されるものであり、例えば画質（画像番号３）を表すインジケータの場合には、例えば「ＦＩＮＥ」、「ＮＯＲＭＡＬ」、「ＢＡＳＩＣ」等のテキスト情報が表示されることになる。
【００２９】
次に、図５を参照して、この第１実施形態の電子機器が実行する表示制御の動作手順について説明する。
【００３０】
ＣＰＵ１８は、まず、切替スイッチ２１２の押下状況からカメラの向きを判定し（ステップＡ１）、その判定結果に基づき、ユーザインタフェースの配置を決定する（ステップＡ２）。次に、ＣＰＵ１８は、この決定した配置に基づき、カメラ画像とインタフェース画像との合成を実行制御し（ステップＡ３）、その合成画像の表示を行わせる（ステップＡ４）。
【００３１】
この合成画像の表示後、タッチパネルの操作が行われると（ステップＡ５のＹＥＳ）、ＣＰＵ１８は、座標検出を行い（ステップＡ６）、その座標がアイコンの表示位置かどうかを判断する（ステップＡ７）。そして、その座標がアイコンの表示位置であれば（ステップＡ７のＹＥＳ）、ＣＰＵ１８は、そのアイコンに対応する処理を実行する（ステップＡ８）。
【００３２】
一方、タッチパネルの操作ではなく（ステップＡ５のＮＯ）、切替スイッチの押下が行われると（ステップＡ９のＹＥＳ）、ＣＰＵ１８は、カメラ向きが切り替えられた旨の認識を行い（ステップＡ１０）、ステップＡ１からの処理に復帰する。
【００３３】
このように、この第１実施形態の電子機器では、被写体像を縦長の方向で撮像する場合、および横長の方向で撮像する場合のいずれにおいても、ユーザインタフェース用の画像がユーザから見て相対的に一定の位置に表示され、かつ、その操作有無を判断するための監視領域も連動して切り替わることになる。
【００３４】
（第２実施形態）
次に、この発明の第２実施形態について説明する。
【００３５】
図６は、この発明の第２実施形態に係る電子機器の表示制御に関わる構成を示す図である。
【００３６】
この第２実施形態の電子機器における前述した第１実施形態の電子機器との違いは、まず、センサ２２を新設し、その一方で、切替スイッチ２１２を無くした点にある。このセンサ２２は、例えば重力の方向を検出することにより電子機器の設置状態を検知することが可能な加速度センサなどであり、すなわち、この第２実施形態の電子機器では、ユーザからの明示的な指示に基づくのではなく、このセンサ２２の検出結果に基づいてアイコン画像等の配置の切り換え制御を自動的に実行するものである。なお、重力の方向の検出例としては、例えば熱の伝導方向を検出する方法がある。
【００３７】
図７は、この第２実施形態の電子機器が実行する表示制御の動作手順について説明するためのフローチャートである。
【００３８】
ＣＰＵ１８は、まず、センサ２２の検出結果からカメラの向きを判定し（ステップＢ１）、その判定結果に基づき、ユーザインタフェースの配置を決定する（ステップＢ２）。次に、ＣＰＵ１８は、この決定した配置に基づき、カメラ画像とインタフェース画像との合成を実行制御し（ステップＢ３）、その合成画像の表示を行わせる（ステップＢ４）。
【００３９】
この合成画像の表示後、タッチパネルの操作が行われると（ステップＢ５のＹＥＳ）、ＣＰＵ１８は、座標検出を行い（ステップＢ６）、その座標がアイコンの表示位置かどうかを判断する（ステップＢ７）。そして、その座標がアイコンの表示位置であれば（ステップＢ７のＹＥＳ）、ＣＰＵ１８は、そのアイコンに対応する処理を実行する（ステップＢ８）。
【００４０】
このように、この第２実施形態の電子機器においても、前述した第１実施形態の電子機器と同様に、被写体像を縦長の方向で撮像する場合、および横長の方向で撮像する場合のいずれにおいても、ユーザインタフェース用の画像がユーザから見て相対的に一定の位置に表示され、かつ、その操作有無を判断するための監視領域も連動して切り替わることになる。
【００４１】
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【００４２】
【発明の効果】
以上詳述したように、この発明によれば、表示手段に表示される合成画像上におけるユーザインタフェース用の画像の配置を適切に制御する電子機器および同機器の表示制御方法を提供できる。
【図面の簡単な説明】
【図１】この発明の第１実施形態に係る電子機器の表示制御に関わる構成を示す図
【図２】同第１実施形態において被写体像を横長の画像として撮像する場合の電子機器の利用形態を示す外観図
【図３】同第１実施形態において被写体像を縦長の画像として撮像する場合の電子機器の利用形態を示す外観図
【図４】同第１実施形態のＣＰＵのメモリに保持されるユーザインタフェース用の画像データの一例を示す図
【図５】同第１実施形態の電子機器が実行する表示制御の動作手順について説明するためのフローチャート
【図６】同第２実施形態に係る電子機器の表示制御に関わる構成を示す図
【図７】同第２実施形態の電子機器が実行する表示制御の動作手順について説明するためのフローチャート
【符号の説明】
１０…ＬＣＤコントローラ、１１…ＣＣＤカメラ、１２…カメラインタフェース、１３…ＶＲＡＭインタフェース、１４…ＶＲＡＭ、１５…制御部、１６…ＬＣＤインタフェース、１７…ＬＣＤ、１８…ＣＰＵ、１９…ＣＰＵインタフェース、２０…タッチパネルインタフェース、２１…操作ボタン、２２…センサ、１８１…メモリ、２１１…シャッタ、２１２…切替スイッチ。
【図１】
2005025268.tif 000003
【図２】
2005025268.tif 000004
【図３】
2005025268.tif 000005
【図４】
2005025268.tif 000006
【図５】
2005025268.tif 000007
【図６】
2005025268.tif 000008
【図７】
2005025268.tif 000009