(57)【特許請求の範囲】
【請求項１】
携帯端末装置において、
表示部と、
原画像から、ユーザにより指示されたオブジェクト画像を抽出する抽出部と、
前記表示部を制御する表示制御部と、を備え、
前記表示部は、背後から前方に光を透過させるシースルー状態に設定可能な第１表示領域と、前記シースルー状態に設定されない第２表示領域とを備え、
前記携帯端末装置は、前記第１表示領域がシースルー状態に設定されると、前記第１表示領域を介して装置本体の背後にある風景が見通し可能となっており、
前記表示制御部は、前記第２表示領域に表示された前記オブジェクト画像を前記第１表示領域に移動させる指示が入力されたことに応じて、前記オブジェクト画像を前記第１表示領域に表示するとともに、前記第１表示領域の前記オブジェクト画像以外の表示領域を前記シースルー状態に設定する、
ことを特徴とする携帯端末装置。
【請求項２】
請求項１に記載の携帯端末装置において、
前記表示部において指示された位置を検出する位置検出部をさらに備え、
前記表示制御部は、前記位置検出部により検出された位置に前記オブジェクト画像を表示する、
ことを特徴とする携帯端末装置。
【請求項３】
請求項１または２に記載の携帯端末装置において、
前記原画像において指示された範囲を検出する範囲検出部をさらに備え、
前記抽出部は、前記範囲検出部により検出された範囲の画像を前記オブジェクト画像として抽出する、
ことを特徴とする携帯端末装置。
【請求項４】
請求項１ないし３の何れか一項に記載の携帯端末装置において、
第１ユニットと、
前記第１ユニットに重なる第１位置と前記第１ユニットの横に並ぶ第２位置に移動可能な第２ユニットと、を備え、
前記第１表示領域は、前記第１ユニットに設定され、
前記第２表示領域は、前記第２ユニットに設定される、
ことを特徴とする携帯端末装置。
【請求項５】
請求項４に記載の携帯端末装置において、
前記表示制御部は、前記第２ユニットが前記第２位置に位置づけられた状態で、前記第２表示領域に前記オブジェクト画像の選択候補を表示させ、表示された前記選択候補から所定の前記オブジェクト画像を選択して前記第１表示領域に移動させる指示が入力されたことに応じて、前記オブジェクト画像を前記第１表示領域に表示するとともに、前記第１表示領域の前記オブジェクト画像以外の表示領域を前記シースルー状態に設定する、
ことを特徴とする携帯端末装置。
【請求項６】
請求項４に記載の携帯端末装置において、
前記表示制御部は、前記第２ユニットが前記第１位置に位置づけられた状態で、前記第２表示領域に前記オブジェクト画像の選択候補を表示させるとともに前記第１表示領域を前記シースルー状態に設定し、表示された前記選択候補から所定の前記オブジェクト画像を選択する指示が入力された後、前記第２ユニットが前記第２位置に位置づけられたことに応じて、前記オブジェクト画像を前記第１表示領域に表示するとともに、前記第１表示領域の前記オブジェクト画像以外の表示領域を前記シースルー状態に設定する、
ことを特徴とする携帯端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯電話機やＰＤＡ（PersonalDigital Assistant）等の携帯端末装置に関
するものである。
【背景技術】
【０００２】
従来、携帯端末装置では、インターネットなどを介してウェブページなどを表示部に表示することができる。ユーザは、この種の携帯端末装置を用いて、各種の商品が掲載されたウェブページを眺め、気に入った商品があれば、それを購入したいと思うこともある。
【０００３】
ところで、商品が家具やインテリア雑貨の場合には、その商品を自分の部屋に置いたときに、他のインテリアと調和することも、商品を購入する上で重要な要素となり得る。よって、ウェブページ等に掲載された家具等が自分の部屋に合うか否を予め確かめることができれば、ユーザにとって便利である。
【０００４】
これに対し、携帯端末装置において、ウェブページ等から絵画やテーブルなど画像を取得し、取得した画像を、待ち受け画面において、部屋の背景画像に重ねて表示できるような構成が採られ得る。背景画像には、カメラで撮影した部屋の写真を用いることもでき得る（たとえば、特許文献１）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００６−１７８７５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記の構成では、写真に映る部屋の向きを家具の向きに合わせたり、家具を置きたい部屋の場所を変えたりするためには、その度、向きや場所を変えた写真を撮り、その写真に家具の画像を重ね合わせる操作を行わねばならず、手間がかかってしまう。
【０００７】
本発明は、かかる課題に鑑みて為されたものであり、実際に見える風景に対して画像を簡単に重ね合わせることができる携帯端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の携帯端末装置は、表示部と、原画像から、ユーザにより指示されたオブジェクト画像を抽出する抽出部と、前記表示部を制御する表示制御部と、を備える。前記表示部は、背後から前方に光を透過させるシースルー状態に設定可能な第１表示領域と、前記シースルー状態に設定されない第２表示領域とを備え、前記携帯端末装置は、前記第１表示領域がシースルー状態に設定されると、前記第１表示領域を介して装置本体の背後にある風景が見通し可能となっている。前記表示制御部は、前記第２表示領域に表示された前記オブジェクト画像を前記第１表示領域に移動させる指示が入力されたことに応じて、前記オブジェクト画像を前記第１表示領域に表示するとともに、前記第１表示領域の前記オブジェクト画像以外の表示領域を前記シースルー状態に設定する。
【０００９】
本態様に係る携帯端末装置によれば、原画像から抽出したオブジェクト画像を第１表示領域に表示することにより、第１表示領域を通して見える風景をオブジェクト画像の背景とすることができる。このため、第１表示領域の向きや位置を変えるだけで、オブジェクト画像が重ね合わされる背景をリアルタイムに変更できる。
【００１０】
本発明の携帯端末装置において、前記表示部において指示された位置を検出するための
位置検出部をさらに備え得る。ここで、前記表示制御部は、前記位置検出部により検出された位置に前記オブジェクト画像を表示する。
【００１１】
このような構成とすれば、表示部に対して位置をユーザが指示することにより、指示位置にオブジェクト画像が表示される。このため、透明な表示部に映る風景に合わせてオブジェクト画像を直感的かつ簡単に配置できる。
【００１２】
本発明の携帯端末装置において、前記原画像において指示された範囲を検出するための範囲検出部をさらに備え得る。ここで、前記抽出部は、前記範囲検出部により検出された範囲の画像を前記オブジェクト画像として抽出する。
【００１３】
このような構成とすれば、原画像に対して位置を指示するだけで、指示位置に表示される画像をオブジェクト画像として直感的かつ簡単に指定し抽出できる。
【００１５】
携帯端末装置が、第１ユニットと、前記第１ユニットに重なる第１位置と前記第１ユニットの横に並ぶ第２位置に移動可能な第２ユニットとを備える場合、前記第１表示領域は前記第１ユニットに設定され、前記第２表示領域は前記第２ユニットに設定され得る。
【００１６】
このような構成とすれば、広い第１表示領域に、簡便な操作にて、オブジェクト画像を表示することができる。よって、オブジェクト画像を風景に円滑に重ねることができる。
【００１７】
この場合、前記表示制御部は、前記第２ユニットが前記第２位置に位置づけられた状態で、前記第２表示領域に前記オブジェクト画像の選択候補を表示させ、表示された前記選択候補から所定の前記オブジェクト画像を選択して前記第１表示領域に移動させる指示が入力されたことに応じて、前記オブジェクト画像を前記第１表示領域に表示するとともに、前記第１表示領域の前記オブジェクト画像以外の表示領域を前記シースルー状態に設定するよう構成され得る。
【００１８】
このような構成とすれば、ユーザは、第１表示領域にて所定のアングルで風景を見ながら、所望のオブジェクト画像を選択して風景に重ねることができる。
【００１９】
あるいは、前記表示制御部は、前記第２ユニットが前記第１位置に位置づけられた状態で、前記第２表示領域に前記オブジェクト画像の選択候補を表示させるとともに前記第１表示領域を前記シースルー状態に設定し、表示された前記選択候補から所定の前記オブジェクト画像を選択する指示が入力された後、前記第２ユニットが前記第２位置に位置づけられたことに応じて、前記オブジェクト画像を前記第１表示領域に表示するとともに、前記第１表示領域の前記オブジェクト画像以外の表示領域を前記シースルー状態に設定するよう構成され得る。
【００２０】
このような構成とすれば、第２ユニットを第２位置に位置づけることをトリガとして第１表示領域にオブジェクト画像が表示されるため、操作を簡便なものにすることができる。
【発明の効果】
【００２１】
以上のとおり、本発明によれば、実際に見える風景に対して画像を簡単に重ね合わせることができる携帯端末装置置を提供することができる。
【００２２】
本発明の効果ないし意義は、以下に示す実施の形態の説明により更に明らかとなろう。ただし、以下に示す実施の形態は、あくまでも、本発明を実施化する際の一つの例示であって、本発明は、以下の実施の形態に記載されたものに何ら制限されるものではない。
【図面の簡単な説明】
【００２３】
【図１】実施の形態に係る携帯端末装置の全体を示す斜視図である。
【図２】実施の形態に係る携帯端末装置を示す断面図である。
【図３】実施の形態に係る携帯端末装置の動作を説明するための斜視図である。
【図４】実施の形態に係る携帯端末装置の回路を示すブロック図である。
【図５】実施の形態に係るオブジェクト画像を表示する処理手順を示すフローチャートである。
【図６】実施の形態に係る第２表示面においてオブジェクト画像を指定する状態を示す図である。
【図７】実施の形態に係る第１表示面においてオブジェクト画像を指示位置に表示する状態を示す図である。
【図８】実施の形態に係る携帯端末装置の回路を示すブロック図である。
【図９】実施の形態に係るオブジェクト画像を表示する処理手順を示すフローチャートである。
【図１０】実施の形態に係る第２表示面に対して指定したオブジェクト画像を第１表示面に表示する状態を示す図である。
【図１１】実施の形態に係る第２表示面に対して指定したオブジェクト画像を第１表示面に表示する状態を示す図である。
【発明を実施するための形態】
【００２４】
以下、図を参照して、本実施の形態に係る携帯端末装置１について説明する。
【００２５】
＜携帯端末装置の構成＞
図１（ａ）は、携帯端末装置１の第１ユニット１０を第２ユニット２０に重ねた状態を示す斜視図である。図１（ｂ）は、携帯端末装置１の第１ユニット１０と第２ユニット２０を並べた状態を示す斜視図である。図２（ａ）は、図１（ａ）のＡ−Ａ’線における断面図である。図２（ｂ）は、図１（ａ）のＢ−Ｂ’線における断面図である。なお、本実施形態では、第１ユニット１０の位置が第２ユニット２０に対して上側になり、携帯端末装置１が水平に置かれた状態で、第１ユニット１０および第２ユニット２０が重なる方向を縦方向と称し、縦方向に垂直な方向を横方向と称す。
【００２６】
携帯端末装置１は、第１ユニット１０および第２ユニット２０を備え、第１ユニット１０は第２ユニット２０に対してスライド可能に重ねられる。
【００２７】
第１ユニット１０は、第１底部１１と、第１底部１１に設けられるスライド部１２と、第１底部１１に収容される第１表示部１３および第１入力部１４と、第１表示部１３に接続される配線１５と、第１表示部１３と覆う第１蓋部１６と、第１蓋部１６に装着される被覆部１７とを備える。
【００２８】
第１底部１１は、長方形状であり、ポリカーボネートやアクリルなどの透明樹脂により射出成型で形成される。第１底部１１には、２つの底貫通孔１１ａが互いに間隔を隔てて設けられる。底貫通孔１１ａは、第１ユニット１０がスライドする方向（スライド方向）
に延びる細長い孔である。底貫通孔１１ａには、スライド部１２が嵌められている。
【００２９】
スライド部１２は、後述する第２蓋部２７の上に配置される。スライド部１２は、第１ユニット１０のスライド方向に細長い部材であり、中間部に挿入孔１２ａを有し、端部に係止部１２ｂを有する。係止部１２ｂは第２蓋部２７の中に配され、第２蓋部２７より上方に突き出た本体部分が、底貫通孔１１ａに嵌められる。係止部１２ｂには、貫通孔１２ｃが形成されている。２つのスライド部１２の間で第１底部１１の上に第１表示部１３が配置されている。
【００３０】
第１表示部１３は、長方形の平板形状であって、たとえば、透明な液晶表示器により構成される。液晶表示器は、表示モードがノーマリーホワイトである液晶パネルのみを備え、液晶パネルの背後に照明部（バックライト）が配されていない。液晶パネルは、２枚の透明板（図示せず）の間に透明液晶（図示せず）および透明電極（図示せず）が挟まれて構成される。第１表示部１３は上方に向く第１表示面１３ｂを有する。第１表示部１３の端に電極１３ａが設けられ、第１表示部１３の上に第１入力部１４が重ねられている。
【００３１】
電極１３ａは、透明な液晶表示器および配線１５が接続される。
【００３２】
配線１５には、フレキシブル配線（フレキシブル基板）が用いられる。配線１５は、係止部１２ｂの貫通孔１２ｃを通り、係止部１２ｂの側面から横方向へ出て、第２蓋部２７の中へ抜ける。
【００３３】
第１入力部１４は、位置センサ１４ａを含む。位置センサ１４ａには、タッチパネルなどが用いられる。タッチパネルは、透明な長方形状のシートであり、マトリクス状に２つの透明電極（図示せず）が組み込まれている。タッチパネルは、これら透明電極間の静電容量の変化を検出することによって、ユーザの指などが第１表示面１３ｂにおいて触れた位置を検出し、その位置に応じた信号を出力する。第１入力部１４の配線は、第１表示部１３の配線１５と同様に、係止部１２ｂの貫通孔１２ｃを通り、第２蓋部２７の中に導かれる。
【００３４】
第１蓋部１６は、第１入力部１４を覆うように、第１底部１１の上に載せられる。第１蓋部１６は、ポリカーボネートやアクリルなどの透明樹脂により射出成型で形成される。第１蓋部１６には、２つの蓋貫通孔１６ａが設けられる。蓋貫通孔１６ａは、被覆部１７が嵌められ、スライド部１２を覆う。
【００３５】
被覆部１７は、不透明な樹脂により射出成型で形成される。被覆部１７にはネジ孔１７ａが設けられている。ネジ孔１７ａとスライド部１２の挿入孔１２ａとにビス１８が嵌られることにより、スライド部１２および被覆部１７が縦方向に接続される。
【００３６】
スライド部１２および被覆部１７が接続されることにより、第１蓋部１６と第１底部１１とが固定され、第１ユニット１０が組み立てられる。
【００３７】
第２ユニット２０は、第２底部２１と、第２底部２１に収容される電池２２、基板２３、第２入力部２４、第２表示部２５および受部２６と、第２表示部２５を覆う第２蓋部２７とを備える。
【００３８】
第２底部２１は長方形状であり、上側に開口する。第２底部２１の中には支持部２１ａが設けられ、支持部２１ａの上に受部２６が配置されている。
【００３９】
受部２６は、ガイド孔２７ａの下に配置され、係止部１２ｂに添えられる。
【００４０】
電池２２は、第２底部２１の中に配置される。電池２２の上に基板２３が重ねられ、電池２２の横にコネクタ２２ａが設けられている。基板２３の表面にはコネクタ２３ａおよび、ＣＰＵ２３ｂやメモリ２３ｃなどの電子部品（図示せず）やなどが配され、電子部品などの間が配線（図示せず）で接続される。コネクタ２２ａには、基板２３および電池２２が接続される。コネクタ２３ａには、第１表示部１３の配線１５および第１入力部１４の配線が接続される。基板２３の上に第２表示部２５および第２入力部２４がこの順序で積み重ねられる。
【００４１】
第２表示部２５は、たとえば、透明でない液晶表示器で構成され、液晶パネル２５ａと、液晶パネル２５ａを照明するための導光板２５ｂおよび発光部２５ｃとを含む。液晶パネル２５ａは、２枚の透明板（図示せず）の間に透明液晶（図示せず）および透明電極（図示せず）が挟まれて構成される。導光板２５ｂは、発光部２５ｃからの光を第２表示部２５に導くように、発光部２５ｃの横で、かつ液晶パネル２５ａの下に配置される。
【００４２】
第２入力部２４は、位置センサ２４ａを含む。位置センサ２４ａには、たとえば、タッチパネルが用いられる。タッチパネルは、透明な長方形状のシートである。タッチパネルには、マトリクス状に２つの透明電極（図示せず）が組み込まれ、透明電極に配線（図示せず）が接続される。
【００４３】
発光部２５ｃ、液晶パネル２５ａおよび第２入力部２４にはそれぞれ配線（図示せず）が配され、これらの配線は基板２３に接続される。
【００４４】
第２蓋部２７は、第２底部２１に連結されて、第２ユニット２０を形成する。第２蓋部２７の中央には、表示窓２７ｂが形成されており、表示窓２７ｂを通じて、第２表示部２５の第２表示面２５ｄが外部に臨む。第２蓋部２７には、２つのガイド孔２７ａが互いに間隔を隔てて設けられる。ガイド孔２７ａを通る係止部１２ｂが、ガイド孔２７ａを囲む第２蓋部２７の縁に係止されることにより、第１ユニット１０と第２ユニット２０が連結される。
【００４５】
＜携帯端末装置の動作＞
図３（ａ）は、第１ユニット１０および第２ユニット２０が重ねられた時の配線１５を示す斜視図である。図３（ｂ）は、第１ユニット１０および第２ユニット２０が並べられた時の配線１５を示す斜視図である。なお、図１４（ａ）および図１４（ｂ）において、配線１５の様子がわかりやすいように、第１蓋部１６などの一部の部品が破線で表わされている。
【００４６】
図１（ａ）のように、第１ユニット１０が第２ユニット２０に重なった状態では、第１表示面１３ｂが外部に臨む。以下、この表示形態を第１形態という。第１形態では、図３（ａ）に示すように、スライド部１２の係止部１２ｂが、ガイド孔２７ａの一方端、即ち、基板２３のコネクタ２３ａの近傍に位置する。配線１５は、係止部１２ｂの貫通孔１２ｄから受部２６の底面に沿って延び、途中で曲がり、重なって受部２６の底面に沿いながら貫通孔１２ｄの方に戻り、コネクタ２３ａに接続される。
【００４７】
一方、図１（ｂ）に示すように、第１ユニット１０が第２ユニット２０の側方に引き出されると、第１表示面１３ｂおよび第２表示面２５ｄの両方が外部に臨む。このとき、第１ユニット１０の端部が第２表示面２５ｄの端部にわずかに重なり、第１表示面１３ｂと第２表示面２５ｄが隙間のない状態で横に並ぶ。以下。この表示形態を第２形態という。なお、第１形態と第２形態とに切り替わることで、第１形態における第１ユニットに重なる第１位置と、第２形態における第１ユニットの横に並ぶ第２位置とを、第２ユニットは
移動する。
【００４８】
第２形態では、図３（ｂ）に示すように、スライド部１２の係止部１２ｂがガイド孔２７ａの一方端から他方端へ移動し、ガイド孔２７ａが開口する。係止部１２ｂが基板２３のコネクタ２３ａの位置から遠ざかり、配線１５は、係止部１２ｂの貫通孔１２ｄから基板２３のコネクタ２３ａへ直線状に延びる。
【００４９】
＜携帯端末装置の回路＞
図４は、携帯端末装置１の回路のブロック図を示す。
【００５０】
メモリ２３ｃは、ＲＯＭおよびＲＡＭを含む記憶部である。メモリ２３ｃには、ＣＰＵ２３ｂに制御機能を付与するための制御プログラムが記憶されている。また、メモリ２３ｃには、カメラモジュール（図示せず）で撮影した画像情報や通信モジュール（図示せず）を介して外部から取り込んだ画像情報およびテキスト情報などが所定のファイル形式で保存される。さらに、メモリ２３ｃには、各表示部１３、２５に表示されている内容に関する情報（表示内容情報）や位置定義情報などが記憶されている。各表示部１３、２５における表示内容情報は、各表示面１３ｂ、２５ｄに表示される画像を構成する画素の色情報および色情報が配置され画素の位置を含む。位置定義情報には、各表示部１３、２５に表示されているアイコンやボタンなどの位置と、アイコンなどに対応するファイルやプログラムなどとが対応付けられている。なお、色情報には、色調や階調を含む。
【００５１】
電池２２は、ＣＰＵ２３ｂからの制御信号を受けて、制御信号に応じて電力をＣＰＵ２３ｂや各表示部１３、２５および各入力部１４、２４などに供給する。
【００５２】
第１表示部１３および第２表示部２５は、ＣＰＵ２３ｂから画像信号を受ける。これら画像信号に基づいて各表示部１３、２５の透明電極に電圧が加えられることで、液晶の配向が変化し、液晶を通過する光が変調される。これにより、各表示部１３、２５では、アイコンやキーボードなどの図、写真、文字、絵およびウインドウなどの画像が各表示面１３ｂ、２５ｄに表示される。第１表示部１３では、電圧が加えられていない範囲において、透過率が最大となり、光が透過する。よって、第１表示部１３を挟む第１蓋部１６、第１入力部１４および第１底部１１が透明であるため、第１表示部１３において光が透過する範囲は、透明または半透明になっており、第１表示部１３の背後にある風景を見通し可能なシースルー状態に設定可能となっている。
【００５３】
第２表示部２５の発光部２５ｃには、ＣＰＵ２３ｂからの制御信号により、電池２２からの電力が供給され、これにより、発光部２５ｃが発光する。発光した光は、導光板２５ｂの側面から導光板２５ｂに入射し、導光板２５ｂの内部で反射しながら、光の一部が導光板２５ｂの表面から液晶パネル２５ａ側に出る。これにより導光板２５ｂの全体から光が均一に発せられ、液晶パネル２５ａへ光が照射される。
【００５４】
第１入力部１４および第２入力部２４は、位置センサ１４ａ、２４ａによって、各表示面１３ｂ、２５ｄにおいてユーザが触れて指示した位置を検出する位置検出部である。これにより、第１入力部１４は第１表示部１３への入力を検出し、第２入力部２４は第２表示部２５への入力を検出する。そして、各入力部１４、２４は指示位置に応じた位置信号をＣＰＵ２３ｂに出力する。
【００５５】
ＣＰＵ２３ｂは、各表示面１３ｂ、２５ｄに画像を表示させたり、第１表示部１３の透過率を変化させたりする表示制御部である。つまり、ユーザ操作による位置信号やソフトウェアの要求信号などを受ける。ＣＰＵ２３ｂは、位置信号などに応じた処理を実行して、メモリ２３ｃから読み出したり、通信回線やインターネットを経由して受信したりして
、写真や絵などの画像データを取得する。ＣＰＵ２３ｂは、画像データを画像信号として第１表示部１３および第２表示部２５のそれぞれに出力し、各表示面１３ｂ、２５ｄに画像を表示させる。また、ＣＰＵ２３ｂは、電池２２から供給される電力を調整することにより、透明電極に加えられる電圧を制御し、第１表示部１３の透過率を変化させる。これにより、ＣＰＵ２３ｂは、オブジェクト画像を第１表示部１３に表示し、第１表示部１３におけるオブジェクト画像以外の表示領域をシースルー状態に設定する。
【００５６】
ＣＰＵ２３ｂは、画像が第２表示部２５に表示される際、電池２２から発光部２５ｃに電力を供給させ、発光部２５ｃを発光させる。
【００５７】
ＣＰＵ２３ｂは、各入力部１４、２４の位置センサ１４ａ、２４ａから位置信号を受け、指示位置を特定する。ＣＰＵ２３ｂは、位置定義情報を参照して、指示位置に対応するアイコンのプログラムなどの処理を実行する。また、ＣＰＵ２３ｂは、指示位置に画像を表示させる。
【００５８】
ＣＰＵ２３ｂは、各入力部１４、２４からの位置信号に応じた位置に基づき、各表示面１３ｂ、２５ｄに表示される画像において指示された範囲を検出する範囲検出部である。
【００５９】
ＣＰＵ２３ｂは、各表示面１３ｂ、２５ｄに表示される画像から指示範囲に含まれるオブジェクト画像を抽出する抽出部である。つまり、ＣＰＵ２３ｂは、第２入力部２４の位置センサ２４ａからの位置信号から、第２表示面２５ｄに対してユーザが指示している範囲を求める。ＣＰＵ２３ｂは、メモリ２３ｃの第２表示面２５ｄの表示内容情報を参照しながら、指示範囲に対応するオブジェクトの画像をメモリ２３ｃの画像から抽出する。
【００６０】
＜携帯端末装置の機能＞
本実施の形態の携帯端末装置は、以下に説明する画像キャプチャー機能を有している。ユーザは、たとえば、メニュー画面において画像キャプチャー機能に対応するアイコンを選択することにより、この機能を起動することができる。
【００６１】
図５は、第２表示部２５に表示された画像から抽出したオブジェクトを第１表示部１３に表示する処理手順を示すフローチャートである。図６は、第２表示面２５ｄにウェブページを表示し、第１表示面１３ｂを透明にした第２形態の携帯端末装置１を示す。図７は、第２表示面２５ｄに表示されたウェブページから抽出した椅子の画像を第１表示面１３ｂに表示した第２形態の携帯端末装置１を示す。
【００６２】
図６に示すように、ユーザは、第１表示面１３ｂおよび第２表示面２５ｄが横に並べられ、第２表示面２５ｄが外部に露出された状態で、第２入力部２４に対しインターネットに接続する操作を行う。これにより、ＣＰＵ２３ｂは、インターネットを介してウェブページの画像情報を取得し、第２表示部２５にウェブページを表示させる（Ｓ１０１）。ここでは、ウェブページに２つの椅子の画像が含まれている。また、第２表示面２５ｄに表示される画像の各画素の色情報と、画素が配置される位置とが、対応付けられて表示内容情報としてメモリ２３ｃに記憶されている。
【００６３】
ユーザが、指で第２表示面２５ｄに触れて位置を指示しながら、椅子の画像の輪郭をなぞると、第２入力部２４は、接触する位置を検出し、位置を信号にしてＣＰＵ２３ｂへ送信する。ＣＰＵ２３ｂは、位置信号を受けて、第２表示面２５ｄにおける指示位置からユーザにより指示された範囲を特定する（Ｓ１０２）。
【００６４】
ＣＰＵ２３ｂは、メモリ２３ｃの表示内容情報の位置と、指示範囲の位置とを比較して、指示範囲に含まれる画素の色情報および画素が配置される位置を求める。これにより、
ＣＰＵ２３ｂは、第２表示面２５ｄに表示される画像の中から指示範囲に表示される画像を特定して、この画像をオブジェクト画像として抽出しメモリ２３ｃに格納する（Ｓ１０３）。この場合、第２表示面２５ｄに表示される椅子の画像がオブジェクト画像として抽出される。
【００６５】
また、ＣＰＵ２３ｂは、第１表示部１３に対する電池２２からの電力供給をオフの状態に制御する。これにより、第１表示部１３が光透過可能になるため、ユーザには、透明な第１表示部１３を含む第１ユニット１０を介して、第１ユニット１０の向こう側の景色が透けて見える。ユーザは、椅子を置きたい場所に第１表示面１３ｂを向ける。そして、図７に示すように、ユーザは、第１表示面１３ｂに指を触れて、第１表示面１３ｂに見える景色において、椅子を配置したい位置に触れる。このように、第１表示面１３ｂにおけるオブジェクト画像の配置位置が指示されると、第１入力部１４は、指の接触した位置を検出し、位置に応じた信号をＣＰＵ２３ｂへ出力する。ＣＰＵ２３ｂは、位置信号を受けて、ユーザの指示位置を求める（Ｓ１０４）。
【００６６】
ＣＰＵ２３ｂは、メモリ２３ｃからオブジェクト画像を読み出して、オブジェクト画像に含まれる画素の色情報の配置を抽出する。ＣＰＵ２３ｂは、オブジェクト画像の色情報の配置をユーザの指示位置を基準にして第１表示面１３ｂにおいて配置される色情報の位置に変換する。ＣＰＵ２３ｂは、オブジェクト画像の色情報および第１表示面１３ｂにおける色情報の位置を画像信号にして、第１表示部１３へ出力する。第１表示部１３は、第１表示面１３ｂにおける各位置に、色情報に応じた色を表わす。これにより、椅子のオブジェクト画像が、第１表示面１３ｂにおいてユーザが指示した位置に表示される（Ｓ１０５）。また、第１表示面１３ｂにおいて、オブジェクト画像を除く背景領域は透明であるため、第１表示面１３ｂの向こう側の景色が椅子の背景として見える。さらに、周囲の光が、第１表示部１３にも照射され、第１表示部１３の照明としても利用される。
【００６７】
以上、本実施形態によれば、第２表示面２５ｄに表示される画像に対して範囲を指定することにより、第２表示面２５ｄの画像の中から範囲に含まれる所望のオブジェクト画像を簡単に抽出できる。
【００６８】
また、本実施形態によれば、第１表示面１３ｂを通して向こう側が視認可能であることから、向こう側に見えた風景を背景としてオブジェクト画像を第１表示面１３ｂに表示できる。そして、ユーザが、第１ユニット１０の透明な部分を透過して第１表示面１３ｂに向こう側の風景を見ながら、風景に合わせてオブジェクト画像を所望の位置を感覚的に指示できる。また、第１表示部１３の向きや位置を変えるだけで、椅子の画像に合わせて背景に映る部屋の場所をリアルタイムに変更できるため、椅子と部屋との比較検討が容易に行える。
【００６９】
＜第２実施形態＞
第２実施形態の携帯端末装置１は、開閉センサ２８をさらに備える点が、第１実施形態の携帯端末装置１と異なる。なお、第２実施形態の構成のうち第１実施形態の構成と同様なものについては、同じ番号を付して、その説明を省略する。
【００７０】
図１に示す第１ユニット１０には磁石（図示せず）が配置され、第２ユニット２０には開閉センサ２８が配置される。磁石は係止部１２ｂの近傍に配置され、開閉センサ２８は第１形態において磁石に近接する位置に配置される。開閉センサ２８は配線（図示せず）により基板２３のＣＰＵ２３ｂに接続される。
【００７１】
開閉センサ２８は、配線により基板２３に接続され、基板２３のＣＰＵ２３ｂとの間で信号を送受信する。第１形態において磁石が開閉センサ２８の近傍に存在する場合、開閉
センサ２８は、磁石の磁界を検出し、検出信号をＣＰＵ２３ｂに出力する。反対に、第２形態において磁石が開閉センサ２８から離れている場合、開閉センサ２８は、磁石の磁界を検出せず、検出信号をＣＰＵ２３ｂに出力しない。
【００７２】
図８は、携帯端末装置１の回路のブロック図を示す。
【００７３】
ＣＰＵ２３ｂは、開閉センサ２８から検出信号が入力されると、携帯端末装置１が第１形態であると判定する。第１形態では、第１入力部１４が第２表示面２５ｄの上に配置されるため、ＣＰＵ２３ｂは、第１入力部１４を第２表示面２５ｄに対する入力部として切り替える。これにより、第２入力部２４に代わって、第１入力部１４が第２表示部２５に対する入力を検出する。そして、ＣＰＵ２３ｂは、第１入力部１４から位置信号を受信すると、位置信号の指示位置と第２表示面２５ｄの画像とを関連付けて、所定の処理を実行する。処理の実行により画像信号が生成されると、ＣＰＵ２３ｂは、画像信号を第２表示部２５へ出力し、第２表示面２５ｄに画像を表示させる。
【００７４】
一方、ＣＰＵ２３ｂは、開閉センサ２８から検出信号が入力されなければ、携帯端末装置１が第２形態であると判定する。第２形態では、ＣＰＵ２３ｂは、第１入力部１４を第１表示部１３に対する入力部とし、第２入力部２４を第２表示部２５の入力部として利用する。
【００７５】
＜携帯端末装置の機能＞
図９は、第２表示部２５に表示された画像から抽出したオブジェクトを第１表示部１３に表示する処理手順を示すフローチャートである。図１０（ａ）は、第２表示面２５ｄにウェブページを表示し、第１表示面１３ｂを透明にした第１形態の携帯端末装置１を示す。図１０（ｂ）は、第２表示面２５ｄのウェブページから抽出した椅子の画像を第１表示面１３ｂに表示した第２形態の携帯端末装置１を示す。
【００７６】
本実施形態では、ＣＰＵ２３ｂは、開閉センサ２８からの信号により、携帯端末装置が第１形態であると判定した場合に、所望の画像を取得するための入力画面を第１表示面１３ｂに表示し、第１入力部１４からの位置信号を待つ。
【００７７】
ユーザは、第１形態にした状態で、外部に露出する第１入力部１４に対しウェブページなどの画像を取得する操作をする。ＣＰＵ２３ｂは、第１入力部１４からの位置信号により、画像を取得する操作がなされたと判定すると（Ｓ２０１：ＹＥＳ）、第１入力部１４からの位置信号に応じた処理を第２表示面２５ｄに対して実行し、たとえば、図１０（ａ）に示すように、第２表示面２５ｄに椅子の画像を含むウェブページを表示する（Ｓ２０２）。ここで、第２表示面２５ｄに表示される画像の画素の色情報と画素が配置される位置とが対応付けられて、表示内容情報としてメモリ２３ｃに記憶される。なお、ＣＰＵ２３ｂは、電池２２からの電力供給をオフの状態に制御し、第１表示部１３を透明にしている。
【００７８】
ユーザは、透明な第１表示面１３ｂを通して第２表示面２５ｄを見ながら、第１入力部１４を操作するため、第１入力部１４からの位置信号は、第１表示面１３ｂに対する入力信号から、第２表示面２５ｄに対する入力信号に切り替えられる。よって、ユーザが、第１表示面１３ｂに触れて椅子の画像の輪郭をなぞると、第１入力部１４は、接触する位置を検出し、接触位置に応じた位置号をＣＰＵ２３ｂへ出力する。ＣＰＵ２３ｂは、第１入力部１４から位置信号を受け、位置信号から第２表示面２５ｄに対する指示する位置を求め、さらに、その指示位置に基づいてユーザにより指示される範囲を特定する（Ｓ２０３）。
【００７９】
ＣＰＵ２３ｂは、メモリ２３ｃの表示内容情報の位置を参照しながら、指示範囲の位置に対応する色情報を抽出する。これにより、指示範囲に含まれる画素の色情報および画素が配置される位置が、椅子のオブジェクト画像情報として抽出されて、メモリ２３ｃに格納される（Ｓ２０４）。
【００８０】
次に、ユーザが、第１ユニット１０を第２ユニット２０に対してスライドさせて、携帯端末装置１を第２形態にすると、開閉センサ２８は検出信号をＣＰＵ２３ｂへ出力しなくなる。このため、ＣＰＵ２３ｂは、開閉センサ２８からの検出信号を受けなくなることにより、携帯電話機が第２形態に切り替えられたと判断する（Ｓ２０５：ＹＥＳ）。
【００８１】
ＣＰＵ２３ｂは、メモリ２３ｃからオブジェクト画像を読み出して、オブジェクト画像の色情報の位置を抽出し、この位置を第１表示面１３ｂにおいて配置される色情報の位置に変換する。ＣＰＵ２３ｂは、オブジェクト画像の色情報および第１表示面１３ｂにおける色情報の位置を画像信号にして、第１表示部１３へ出力する。第１表示部１３は、第１表示面１３ｂにおける各位置に、色情報に応じた色を表わして、椅子のオブジェクト画像を第１表示面１３ｂに表示する（Ｓ２０６）。
【００８２】
このとき、第１ユニット１０が引き出されたことにより、第１入力部１４からの位置信号は、第２表示面２５ｄに対する入力信号から、第１表示面１３ｂに対する入力信号に戻される。また、ユーザは、オブジェクト画像以外の背景領域おいて、透明な第１ユニット１０を介して第１表示面１３ｂに向こうの景色が見える。この景色に合わせてオブジェクト画像の配置が変更される可能性があるため、ＣＰＵ２３ｂはユーザによる位置の指示があるか否かを判断する（Ｓ２０７）。
【００８３】
ユーザが第１表示面１３ｂに触れて、オブジェクト画像の変更位置を指示すると、第１入力部１４は接触位置に応じた信号をＣＰＵ２３ｂへ出力する。ＣＰＵ２３ｂは、第１入力部１４からの位置信号を受けて、オブジェクト画像の位置が指示されたと判断する（Ｓ２０７：ＹＥＳ）。
【００８４】
ＣＰＵ２３ｂは、表示されているオブジェクト画像の位置を、位置信号に応じた指示位置を基準にした位置に変換し、図７に示すように、オブジェクト画像をユーザの指示位置に表示する（Ｓ２１０）。
【００８５】
以上、本実施形態によれば、第１形態の携帯端末装置１において、第１入力部１４が第２表示面２５ｄに対する入力を検知することにより、第１表示面１３ｂにおける指示位置に対応する、第２表示部２５の位置に表示される画像が、オブジェクト画像として抽出される。このため、第１表示面１３ｂを介して第２表示面２５ｄの画像の中からオブジェクト画像を指定できる。
【００８６】
＜その他の実施形態＞
以上、本発明の実施の形態について説明したが、本発明は、上記実施の形態によって何ら制限されるものではなく、また、本発明の実施の形態も、上記以外に種々の変更が可能である。
【００８７】
たとえば、上記実施形態では、ユーザが第２表示面２５ｄに対して範囲を指示することにより、指示された範囲に表示される画像をオブジェクト画像として特定した。これに対し、位置変化に対する色の連続性や分布などの特徴を利用して背景画像とオブジェクト画像とを識別し、オブジェクト画像を特定する画像認識プログラムを用いることもできる。
【００８８】
また、上記実施形態では、ユーザは、第２表示面２５ｄに表示されている画像の中から
複数のオブジェクト画像を予め抽出しメモリに保存しておくこともできる。この場合、全てのオブジェクト画像が抽出され終わると、図１１に示すように、第２表示面２５ｄにこれらのオブジェクト画像がサムネイルで表示される。そして、第１表示面１３ｂにおいてオブジェクト画像を配置する位置をユーザが指示する。その後に、サムネイルで表示される複数のオブジェクトの中から、１つ目のオブジェクト画像に指で触れてユーザが指定すると、第１表示面１３ｂの配置位置に１つ目のオブジェクト画像が表示される。次に、複数のオブジェクト画像の中から２つ目のオブジェクト画像を指定すれば、配置位置の１つ目のオブジェクト画像に代わって２つ目のオブジェクト画像が表示される。このような構成とすれば、次々とオブジェクト画像を手間無く変えることができる。
【００８９】
さらに、上記実施形態において、所定の操作に基づいて、ＣＰＵ２３ｂが第１表示面１３ｂに表示されたオブジェクト画像のサイズを変化させるようにしてもよい。これにより、第１表示面１３ｂを介して見える部屋の風景に合わせてオブジェクト画像のサイズを調整できる。
【００９０】
また、上記実施の形態では、第１ユニット１０が第２ユニット２０に対して直線的に移動可能なように配置されたが、第１ユニット１０が、表示面に垂直な所定の軸の周りに回転するように第２ユニット２０に対して配置されても良い。また、携帯端末装置１が折り畳み式であっても良い。すなわち、第１ユニット１０が表示面に平行な所定の軸の周りに回転するように第２ユニット２０に対して配置されても良い。
【００９１】
また、上記実施の形態において、画像キャプチャー機能が利用されている状態で、電話などの着信があると、ＣＰＵ２３ｂは、着信を報知するメッセージ、着信に対する応答および拒否のボタンを表示部１３、２５に表示することもできる。この際、画像キャプチャー機能に関する情報が保存されてから保留状態に設定される。ユーザが応答ボタンの表示位置をタッチすると、通話回線が接続されて通話が可能となる。一方、ユーザが拒否ボタンの表示位置をタッチすると、通話回線が切断される。そして、通話の終了や応答拒否により通話回線が切断されると、画像キャプチャー機能の保留が解除されて、この機能に関する情報が読み出されて保留される前の状態に戻る。なお、メッセージとしては、着信の旨、電話などの発信者の電話番号や氏名などである。発信者の氏名は、電話番号と氏名とが対応付けて記憶された連絡先情報に基づいて求められる。
【００９２】
さらに、上記実施の形態において、測位部を設けることもできる。測位部は、ＧＰＳ衛星からの信号、通信圏内にある基地局からの信号などを受け取り、この信号から位置を求め、位置に応じた信号をＣＰＵ２３ｂへ出力する。たとえば、画像キャプチャー機能を保留する際に、ＣＰＵ２３ｂは、携帯端末装置１の位置を測位部から取得し、メモリ２３ｃに保存しておく。この保留状態を解除する際、ＣＰＵ２３ｂは、携帯端末装置１の位置を再び取得して、保留時の位置と比較する。これらの位置が所定閾値より大きければ、ユーザが画像キャプチャー機能を利用している部屋などの場所から別の場所に移動し、本機能の利用が終わったと考えられるため、本機能の保留を解除してから本機能を終了させる。これにより、本機能を終了させる手間が省ける。
【００９３】
なお、上記実施形態では、各表示面１３ｂ、２５ｄをタッチし、各入力部１４、２４が入力を検知することにより携帯端末装置１を操作したが、各ユニット１０、２０の側面などに操作キーを設けることもできる。たとえば、ユーザが操作キーを押すことにより、着信に対して応答したり、通話を終了したりすることができる。
この他、本発明の実施の形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。
【符号の説明】
【００９４】
１    …  携帯端末装置
１０  …  第１ユニット
１３  …  第１表示部
１４  …  第１入力部
２０  …  第２ユニット
２４  …  第２入力部
２５  …  第２表示部
２３ｂ  …  ＣＰＵ
【図１】
0005647464.tif 000002
【図２】
0005647464.tif 000003
【図３】
0005647464.tif 000004
【図４】
0005647464.tif 000005
【図５】
0005647464.tif 000006
【図６】
0005647464.tif 000007
【図７】
0005647464.tif 000008
【図８】
0005647464.tif 000009
【図９】
0005647464.tif 000010
【図１０】
0005647464.tif 000011
【図１１】
0005647464.tif 000012