(57)【要約】【課題】ユーザの利便性を向上させた電子機器及びシステムを提供する。【解決手段】電子機器１は、撮像部１１と、表示部１２と、制御部１３と、を備える。撮像部１１は、被写体の画像を取得する。表示部１２は、透過型の表示部１２である。表示部１２は、一方の面側から透過して他方の面側を視認可能である。制御部１３は、撮像部１１で取得された被写体の画像に基づいて、当該被写体の少なくとも一部に対するオブジェクトを表示部１２に表示させる。【選択図】図１
2014216962.tif 000002
【特許請求の範囲】
【請求項１】
被写体の画像を取得する撮像部と、
一方の面側から透過して他方の面側を視認可能な透過型の表示部と、
前記撮像部で取得された被写体の画像に基づいて、当該被写体の少なくとも一部に対するオブジェクトを前記表示部に表示させる制御部と、
を備える電子機器。
【請求項２】
前記制御部は、前記表示部を介して視認される被写体の一部に対応させて前記オブジェクトを表示させる
請求項１に記載の電子機器。
【請求項３】
前記オブジェクトは、色の濃度が所定の閾値より高い
請求項１又は２に記載の電子機器。
【請求項４】
前記オブジェクトは、当該被写体の一部と同色若しくはそれに近い色である
請求項１又は２に記載の電子機器。
【請求項５】
前記表示部に重ね合わせた検出部をさらに備え、
前記制御部は、前記検出部によって前記オブジェクトに対応する位置への接触を検出した場合には、前記オブジェクトの表示を解除するよう前記表示部を制御する
請求項１から４のいずれか一項に記載の電子機器。
【請求項６】
被写体の画像を取得する撮像部と、
一方の面側から透過して他方の面側を視認可能な透過型の表示部と、
前記撮像部で取得された被写体の画像に基づいて、当該被写体の少なくとも一部に対応する位置における前記表示部の透過率を下げる制御部と、
を備える電子機器。
【請求項７】
筐体と、
一方の面側から透過して他方の面側を視認可能な透過型の表示部と、
加速度及び地磁気を検知する検知部と、
画像表示装置に表示される第１画像と、前記表示部に表示される第２画像とが重なるように前記筐体が配置された場合の前記筐体の向きを基準方向又は前記筐体の位置を基準位置として設定し、前記検知部で検知された加速度及び地磁気に基づいて、前記基準方向に対する前記筐体の向き若しくは前記基準位置に対する位置を取得する制御部と、
を備える電子機器。
【請求項８】
外部に配される画像表示装置と通信可能に接続されるインターフェイス部と、
画像を取得する撮像部と、
表示部と、
前記画像表示装置に表示される第３画像に基づく画像が前記撮像部によって取得された場合、前記撮像部で取得された画像に基づいて、被写体の少なくとも一部に対しての第４画像を前記表示部に表示させて、前記第４画像に対して所定の動作が行われると、前記所定の動作に基づく第５画像を画像表示装置に表示させるよう前記第５画像に対応する画像データを、前記インターフェイス部を介して送信させる制御部と、
を備える電子機器。
【請求項９】
前記表示部は、一方の面側から透過して他方の面側及び他方の面側から透過して一方の面側を視認可能な透過型の表示部である
請求項８に記載の電子機器。
【請求項１０】
画像表示装置と、電子機器とを備えるシステムであって、
電子機器は、
筐体と、
一方の面側から透過して他方の面側を視認可能な透過型の表示部と、
加速度及び地磁気を検知する検知部と、
前記画像表示装置に表示される第１画像と、前記表示部に表示される第２画像とが重なるように前記筐体が配置された場合の前記筐体の向きを基準方向として設定し、前記検知部で検知された加速度及び地磁気に基づいて、前記基準方向に対する前記筐体の向きを取得する制御部と、を備える
システム。
【請求項１１】
画像表示装置と、電子機器とを備えるシステムであって、
前記電子機器は、
前記画像表示装置と通信可能に接続されるインターフェイス部と、
画像を取得する撮像部と、
表示部と、
前記画像表示装置に表示される第３画像に基づく画像が前記撮像部によって取得された場合、前記撮像部で取得された画像を認識し、認識した画像に基づいて、被写体の少なくとも一部に対しての第４画像を前記表示部に表示させて、前記第４画像に対して所定の動作が行われると、前記所定の動作に基づく第５画像を画像表示装置に表示させるよう前記第５画像に対応する画像データを、前記インターフェイス部を介して送信させる制御部と、を備える
システム。
【請求項１２】
画像表示装置と、当該画像表示装置に表示を指示する制御装置と、電子機器とを備えるシステムであって、
前記電子機器は、
前記画像表示装置と通信可能に接続されるインターフェイス部と、
画像を取得する撮像部と、
表示部と、
前記画像表示装置に表示される第３画像に基づく画像が前記撮像部によって取得された場合、前記撮像部で取得された画像を認識し、認識した画像に基づいて、被写体の少なくとも一部に対しての第４画像を前記表示部に表示させて、前記第４画像に対して所定の動作が行われると、前記所定の動作に基づく第５画像を画像表示装置に表示させるよう前記第５画像に対応する画像データを、前記インターフェイス部を介して前記制御装置に送信させる制御部と、を備え、
前記制御装置は、前記電子機器から送信された画像データに基づいて前記画像表示装置に表示させるよう指示する
システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、透過型の表示部を備える電子機器、及び、その電子機器を備えるシステムに関する。
【背景技術】
【０００２】
電子機器の一例には、携帯電話機が挙げられる。携帯電話機には、２つの筐体をヒンジ部で接続して、折り畳み可能としたタイプがある。折り畳み型の携帯電話機には、２つの筐体が閉状態になる場合でも容易に操作できるようにするために、透明ディスプレイを備えるタイプがある（特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−１２９７６４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述したように、電子機器には、透明ディスプレイを備えるタイプがある。近年は、透明ディスプレイが光透過性を有するという利点を生かして、さらにユーザにとって利便性の高い電子機器の登場が望まれている。
【０００５】
本発明は、ユーザの利便性を向上させた電子機器及びシステムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の電子機器は、撮像部と、表示部と、制御部と、を備える。前記撮像部は、被写体の画像を取得する。前記表示部は、透過型である。前記表示部は、一方の面側から透過して他方の面側を視認可能である。前記制御部は、前記撮像部で取得された被写体の画像に基づいて、当該被写体の少なくとも一部に対するオブジェクトを前記表示部に表示させる。
【０００７】
前記制御部は、前記表示部を介して視認される被写体の一部に対応させて前記オブジェクトを表示させることが好ましい。
【０００８】
前記オブジェクトは、色の濃度が所定の閾値より高いことが好ましい。
【０００９】
前記オブジェクトは、当該被写体の一部と同色若しくはそれに近い色であることが好ましい。
【００１０】
電子機器は、検出部をさらに備える。前記検出部は、前記表示部に重ね合わせてある。この場合、前記制御部は、前記検出部によって前記オブジェクトに対応する位置への接触を検出した場合には、前記オブジェクトの表示を解除するよう前記表示部を制御する。
【００１１】
本発明の電子機器は、撮像部と、表示部と、制御部と、を備える。前記撮像部は、被写体の画像を取得する。前記表示部は、透過型である。前記表示部は、一方の面側から透過して他方の面側を視認可能である。前記制御部は、前記撮像部で取得された被写体の画像に基づいて、当該被写体の少なくとも一部に対応する位置における前記表示部の透過率を下げる。
【００１２】
本発明の電子機器は、筐体と、表示部と、検知部と、制御部と、を備える。前記表示部は、透過型である。前記表示部は、一方の面側から透過して他方の面側を視認可能である。前記検知部は、加速度及び地磁気を検知する。前記制御部は、画像表示装置に表示される第１画像と、前記表示部に表示される第２画像とが重なるように前記筐体が配置された場合の前記筐体の向きを基準方向又は前記筐体の位置を基準位置として設定する。前記制御部は、前記検知部で検知された加速度及び地磁気に基づいて、前記基準方向に対する前記筐体の向き若しくは前記基準位置に対する位置を取得する。
【００１３】
本発明の電子機器は、インターフェイス部と、撮像部と、表示部と、制御部と、を備える。前記インターフェイス部は、外部に配される画像表示装置と通信可能に接続される。前記撮像部は、画像を取得する。前記制御部は、前記画像表示装置に表示される第３画像に基づく画像が前記撮像部によって取得された場合、前記撮像部で取得された画像に基づいて、被写体の少なくとも一部に対しての第４画像を前記表示部に表示させる。前記制御部は、前記第４画像に対して所定の動作が行われると、前記所定の動作に基づく第５画像を画像表示装置に表示させるよう前記第５画像に対応する画像データを、前記インターフェイス部を介して送信させる。
【００１４】
前記表示部は、一方の面側から透過して他方の面側及び他方の面側から透過して一方の面側を視認可能な透過型の表示部であることが好ましい。
【００１５】
本発明のシステムは、画像表示装置と、電子機器とを備える。前記電子機器は、筐体と、表示部と、検知部と、制御部と、を備える。前記表示部は、透過型である。前記表示部は、一方の面側から透過して他方の面側を視認可能である。前記検知部は、加速度及び地磁気を検知する。前記制御部は、前記画像表示装置に表示される第１画像と、前記表示部に表示される第２画像とが重なるように前記筐体が配置された場合の前記筐体の向きを基準方向として設定する。前記制御部は、前記検知部で検知された加速度及び地磁気に基づいて、前記基準方向に対する前記筐体の向きを取得する。
【００１６】
本発明のシステムは、画像表示装置と、電子機器とを備える。前記電子機器は、インターフェイス部と、撮像部と、表示部と、制御部と、を備える。前記インターフェイス部は、前記画像表示装置と通信可能に接続される。前記撮像部は、画像を取得する。前記制御部は、前記画像表示装置に表示される第３画像に基づく画像が前記撮像部によって取得された場合、前記撮像部で取得された画像を認識する。前記制御部は、認識した画像に基づいて、被写体の少なくとも一部に対しての第４画像を前記表示部に表示させる。前記制御部は、前記第４画像に対して所定の動作が行われると、前記所定の動作に基づく第５画像を画像表示装置に表示させるよう前記第５画像に対応する画像データを、前記インターフェイス部を介して送信させる。
【００１７】
本発明のシステムは、画像表示装置と、当該画像表示装置に表示を指示する制御装置と、電子機器と、を備える。前記電子機器は、インターフェイス部と、撮像部と、表示部を、制御部と、を備える。前記インターフェイス部は、前記画像表示装置と通信可能に接続される。前記撮像部は、画像を取得する。前記制御部は、前記画像表示装置に表示される第３画像に基づく画像が前記撮像部によって取得された場合、前記撮像部で取得された画像を認識する。前記制御部は、認識した画像に基づいて、被写体の少なくとも一部に対しての第４画像を前記表示部に表示させる。前記制御部は、前記第４画像に対して所定の動作が行われると、前記所定の動作に基づく第５画像を画像表示装置に表示させるよう前記第５画像に対応する画像データを、前記インターフェイス部を介して前記制御装置に送信させる。前記制御装置は、前記電子機器から送信された画像データに基づいて前記画像表示装置に表示させるよう指示する。
【発明の効果】
【００１８】
本発明によれば、ユーザの利便性を向上させた電子機器及びシステムを提供することができる。
【図面の簡単な説明】
【００１９】
【図１】第１実施形態の電子機器について説明するためのブロック図である。
【図２】第１の具体例について説明するための図である。
【図３】第３の具体例について説明するための図である。
【図４】第４の具体例について説明するための図である。
【図５】オブジェクトの位置を調整する場合について説明するための図である。
【図６】本実施形態のシステムについて説明するためのブロック図である。
【図７】キャリブレーションが行われるときに、画像表示装置に表示される画像と、電子機器に表示される画像と、を説明するための図である。
【図８】キャリブレーションの他の例について説明するための図である。
【図９】シューティングゲームが行われる場合について説明するための図である。
【図１０】電子機器の他の形態について説明するための図である。
【発明を実施するための形態】
【００２０】
［第１実施形態］
以下、本発明の第１実施形態について説明する。図１は、第１実施形態の電子機器１について説明するためのブロック図である。
【００２１】
電子機器１は、例えば、携帯電話機、又はタブレット型のコンピュータ等である。電子機器１は、撮像部１１と、表示部１２と、検出部１４と、記憶部１５と、制御部１３と、を備える。
【００２２】
撮像部１１は、被写体の画像を取得する。すなわち、撮像部１１は、カメラ部である。撮像部１１は、アウトカメラ（図示せず）を備える。撮像部１１は、インカメラ１１ａ（図５参照）を備えていてもよい。電子機器１がユーザによって操作可能な状態でそのユーザに保持された場合、撮像部１１としてのアウトカメラは、ユーザとは反対側に配置される被写体を撮像する。電子機器１がユーザによって操作可能な状態でそのユーザに保持された場合、撮像部１１としてのインカメラ１１ａは、ユーザ側に配置される被写体を撮像する。インカメラ１１ａは、ユーザを撮像することが可能である。撮像部１１（アウトカメラ及びインカメラ１１ａ）は、表示部１２に近接した位置に配置される。
【００２３】
表示部１２は、透過型である。表示部１２は、一方の面側から透過して他方の面側を視認可能である。表示部１２は、他方の面側から透過して一方の面側を視認可能である。表示部１２は、例えば、液晶パネル、又は有機ＥＬ（ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）パネル等を備える。
【００２４】
検出部１４は、表示部１２に重ね合わされている。検出部１４は、例えば、透明タッチパネルである。
【００２５】
制御部１３は、撮像部１１で取得された被写体の画像に基づいて、その被写体の少なくとも一部に対するオブジェクトを表示部１２に表示させる。撮像部１１が起動された場合、制御部１３は、撮像部１１によってリアルタイムで取得される画像に基づいて、画像認識又は文字認識を行う。認識される画像は、例えば、オブジェクトを表示させるためのトリガとなる所定の画像である。認識される文字は、例えば、オブジェクトを表示させるためのトリガとなる所定の文字である。所定の文字とは、例えば、キーワードである。
【００２６】
オブジェクトは、例えば、文字、線、図形又は画像である。オブジェクトは、例えば、画像を認識した結果又は文字を認識した結果に対応付けられている。オブジェクトは、例えば、記憶部１５に記憶される。制御部１３は、画像認識を行った結果又は文字認識を行った結果に基づいて、オブジェクトを表示部１２に表示させる。詳細な一例としては、制御部１３は、画像認識を行った結果又は文字認識を行った結果に基づいて記憶部１５からオブジェクトを読み出し、そのオブジェクトを表示部１２に表示させる。なお、撮像部１１によって取得された画像は、表示部１２に表示されない。
【００２７】
制御部１３は、表示部１２を介して視認される被写体の一部に対応させてオブジェクトを表示させる。表示部１２を介して視認される被写体の一部とは、表示部１２を透過して見ることのできる物体のことである。物体は、撮像部１１によって取得される画像に含まれる被写体の一部に対応するものである。
撮像部１１は、表示部１２に近接して配置される。このため、撮像部１１によって取得される画像の範囲と、表示部１２を透過して見ることができる範囲とは、対応する。制御部１３は、撮像部１１によって取得された画像に基づいてオブジェクトの位置を決定して、そのオブジェクトを表示部１２に表示させる。これにより、オブジェクトは、表示部１２を透過して視認される被写体の近くに配置（表示）されることになる。オブジェクトが被写体の一部に対するものである場合には、オブジェクトは、被写体の一部に対応して配置（表示）されることになる。すなわち、オブジェクトは、被写体の一部の近くに配置（表示）される。
【００２８】
これにより、電子機器１は、オブジェクトを表示させるので、ユーザの利便性を向上させることができる。
【００２９】
ここで、具体的な例について説明する。
まず、第１の具体例について説明する。図２は、第１の具体例について説明するための図である。図２（Ａ）は、英単語を暗記するための単語帳２１を示す。第１の具体例では、英単語を覚える場合に電子機器１が利用される。単語帳２１には、日本語の単語及び英単語の他に、英単語が記載されていることを示す所定の図形（図示せず）が記載されている。制御部１３は、撮像部１１（図２には図示せず）によって取得された単語帳２１の画像に基づいて画像認識を行い、画像認識の結果、所定の画像としての所定の図形が含まれていると判断する。この場合、制御部１３は、撮像部１１によって取得された画像、及び所定の図形に基づいて、英単語を隠す画像をオブジェクト２２として表示部１２に表示する（図２（Ｂ）参照）。図２（Ｂ）のオブジェクト２２は、英単語の位置よりも広い位置を覆うような画像を表示しているが、オブジェクト２２はこれに限られず、英単語の位置に限定してオブジェクトを表示してもよい。また、この図では、オブジェクト２２は、透過率０にし、単語が全く見えない状態になっているが、この実施形態に限られず、透過率が０の近傍値であってもよく、それならば、単語が見えにくいので、透過率０の場合と同様に学習の効率が向上する。
【００３０】
また、オブジェクト２２は、色の濃度が所定の閾値よりも高いものであってもよい。オブジェクト２２の色の濃度を所定の閾値（所定の濃度）よりも高くすることにより、単語帳２１の英単語は、ユーザにとって表示部１２を介して視認し難くなる。これにより、電子機器１は、ユーザの学習効率を向上させることができる。
なお、制御部１３は、時間の経過に応じて、オブジェクト２２の色の濃度を低下させてもよい。すなわち、制御部１３は、時間の経過に応じて、英単語を見易くするように表示部１２を制御してもよい。
【００３１】
なお、制御部１３は、上述した制御の代わりに、次のような制御を行ってもよい。すなわち、制御部１３は、撮像部１１で取得された被写体の画像に基づいて、その被写体の少なくとも一部に対応する位置における表示部１２の透過率を下げる。例えば、制御部１３は、撮像部１１（図２には図示せず）によって取得された単語帳２１の画像に基づいて画像認識を行い、画像認識の結果、所定の画像としての所定の図形が含まれていると判断する。この場合、制御部１３は、撮像部１１によって取得された画像、及び所定の図形に基づいて、英単語に対応する部分における表示部１２の透過率を下げる。透過率を下げるとは、透過率を０％にするか、又は、透過率を０％の近傍の値にすることである。透過率を下げることは、例えば、表示部１２が液晶パネルを備える場合、液晶に対する電圧の印加を調整すること等により行われる。これにより、日本語の単語の部分が表示部１２を透過して視認することが可能になるが、英単語の部分が表示部１２を透過して視認でき難くなる。これにより、電子機器１は、ユーザの学習効率を向上させることができる。
なお、この場合の制御部１３は、時間の経過に応じて、表示部１２において透過率を下げた部分のその透過率を向上させることもできる。すなわち、制御部１３は、時間の経過に応じて英単語を見易くするように表示部１２を制御してもよい。
【００３２】
次に、第２の具体例について説明する。第２の具体例では、英単語を覚える場合に電子機器１が利用される。単語帳では、例えば、日本語の単語が黒色で記載され、英単語が赤色で記載されている。まず、撮像部１１によって単語帳の画像が取得される。制御部１３は、撮像部１１によって取得された単語帳の画像に基づいて文字認識を行い、文字認識の結果、上述した所定の文字としての英単語が含まれていると判断する。この場合、制御部１３は、オブジェクトして、表示部１２全体について赤色の表示を行う。これにより、表示部１２を介して単語帳を視認した場合、日本語の単語が視認され、英単語は視認されない。
【００３３】
ここで、オブジェクト２２は、被写体の一部と同色若しくはそれに近い色であってもよい。この場合、制御部１３は、撮像部１１によって取得された画像から被写体の文字の色を認識して、その文字の色と同様の色のオブジェクト２２を表示部１２に表示させる。例えば、制御部１３は、撮像部１１によって単語帳の画像が取得された場合、英単語の文字の色（赤色）を認識して、その文字の色と同様の色（赤色）のオブジェクト２２を表示部１２に表示させる。これにより、電子機器１は、英単語を視認し難くすることができ、学習効率を向上させることができる。
【００３４】
次に、第３の具体例について説明する。図３は、第３の具体例について説明するための図である。第３の具体例では、新聞又は書籍等に対してコメント等を残す場合に電子機器１が利用される。まず、ユーザによって表示部１２を介して新聞２３が視認される場合に、記事に対応するようにユーザの指等によって表示部１２がなぞられたりコメントが記入されたりする。この場合、制御部１３は、検出部１４による接触の検出に基づいて、その接触された部分に対応させて線２４又は文字等を表示部１２に表示させる。そして、撮像部１１によって新聞２３が撮像されると、その新聞２３の画像と共に、表示部１２に表示される線２４又は文字等のデータが記憶部１５に記憶される。その後、新聞２３を再度閲覧するときに表示部１２が新聞２３にかざされたことを撮像部１１等によって検出した場合、制御部１３は、撮像部１１によって取得された新聞２３の画像について画像認識を行う。この場合の画像認識としては、撮像部１１によって取得された新聞２３の画像と、記憶部１５に記憶された新聞２３の画像とが対応するか否かの判断が行われる。画像認識の結果、撮像部１１によって取得された新聞２３の画像と、記憶部１５に記憶された新聞２３の画像とが対応する場合には、制御部１３は、記憶部１５に記憶されるデータを読み出し、そのデータに基づく線又は文字等をオブジェクトとして表示部１２に表示させる。この場合、制御部１３は、撮像部１１によって取得される画像に基づいて、表示部１２を介して視認される被写体とオブジェクトとが対応するように、そのオブジェクトを表示部１２に表示する。
【００３５】
次に、第４の具体例について説明する。図４は、第４の具体例について説明するための図である。第４の具体例では、スケジュール帳として電子機器１が利用される。まず、ユーザによって表示部１２を介してカレンダ２５が視認される場合に、日にちに対応するようにユーザの指等によって表示部１２上でなぞられることを検出部１４によって検出することにより予定が記入される。制御部１３は、検出部１４による接触の検出に基づいて、その接触された部分に対応させて予定２６を表示部１２に表示させる。そして、撮像部１１によってカレンダ２５が撮像されると、そのカレンダ２５の画像と共に、表示部１２に表示される予定２６のデータが記憶部１５に記憶される。その後、スケジュールを確認するために表示部１２がカレンダ２５にかざされたことを撮像部１１等によって検出した場合、制御部１３は、撮像部１１によって取得されたカレンダ２５の画像について画像認識を行う。この場合の画像認識としては、例えば、撮像部１１によって取得されたカレンダ２５の画像と、記憶部１５に記憶されたカレンダ２５の画像とが対応するか否かの判断が行われる。画像認識の結果、撮像部１１によって取得されたカレンダ２５の画像と、記憶部１５に記憶されたカレンダ２５の画像とが対応する場合には、制御部１３は、記憶部１５に記憶されるデータを読み出し、そのデータに基づく予定２６をオブジェクトとして表示部１２に表示させる。この場合、制御部１３は、撮像部１１によって取得される画像に基づいて、表示部１２を介して視認される被写体とオブジェクトとが対応するように、そのオブジェクトを表示部１２に表示する。なお、スケジュールは、会社用（図４（Ａ）参照）と、プライベート用（図４（Ｂ）参照）とを別々に管理されることが可能である。
【００３６】
なお、電子機器１が右方向に移動する場合には、制御部１３は、表示部１２を介して視認することができる被写体の一部（物体）が電子機器１に対して相対的に左方向へ移動するため、当該左方向への移動に対応させてオブジェクトを左方向へ移動させる。同様に、電子機器１が左方向に移動する場合には、制御部１３は、表示部１２を介して視認することができる被写体の一部（物体）が電子機器１に対して相対的に右方向へ移動するため、当該右方向への移動に対応させてオブジェクトを右方向へ移動させる。同様に、電子機器１が右方向又は左方向以外の他の方向に移動する場合でも、制御部１３は、表示部１２を介して視認することができる被写体の一部（物体）が電子機器１に対して相対的に移動するため、その移動の方向に対応させてオブジェクトをその方向に移動させる。同様に、電子機器１が前後方向に移動する場合には、制御部１３は、表示部１２を介して視認することができる被写体の一部（物体）の大きさが変化するため、その大きさの変化に対応させてオブジェクトの大きさを変更する。
【００３７】
上記の具体例の他にも、以下の例の場合に電子機器１を利用することができる。
例えば、オブジェクトが文字又は図形を隠すタイプの場合には、電子機器１は、写真合成等に利用される。写真合成は、写真撮影を行う場合に、被写体の邪魔をするような物体を消去したり、メガネを消去して、メガネを消去した部分の色を周囲の肌の色から推定したりするものである。
【００３８】
また、例えば、オブジェクトとしての文字又は図形を表示部１２に表示させるタイプの場合には、電子機器１は、回路図の履歴チェック、服の着せ替えアプリ、変身アプリ、又は、動物若しくはキャラクタを表示するアプリ等に利用される。回路図の履歴チェックは、回路図にペン等で直接記入することなく、時系列ごとに電子機器１をかざすことで変更履歴が見えるようになるものである。服の着せ替えアプリは、服の画像データを合成するものである。変身アプリは、髪の毛、ヒゲ、シワ、メガネ等を合成するものである。動物若しくはキャラクタを表示するアプリは、撮像部１１で周囲環境の画像を取得して、状況に合わせて動物又はキャラクタを表示させるものである。
【００３９】
制御部１３は、検出部１４によってオブジェクトに対応する位置への接触を検出した場合には、オブジェクトの表示を解除するよう表示部１２を制御する。すなわち、表示部１２に表示されるオブジェクトがユーザによってタッチされたことを検出部１４で検出した場合には、制御部１３は、オブジェクトを表示部１２から消去させる。
電子機器１は、ユーザにとってオブジェクトが不要になった場合には、オブジェクトの表示を解除するので、ユーザの利便性を向上させることができる。
【００４０】
図５は、オブジェクトの位置を調整する場合について説明するための図である。
オブジェクトの位置を調整する場合には、まず、撮像部１１としてのインカメラ１１ａによって、ユーザの顔（目）の画像をリアルタイムで取得する。制御部１３は、例えば、取得した画像に基づいて瞳孔及び角膜反射を検知し、その検知の結果に基づいてユーザの視線Ａを求める。制御部１３は、求められたユーザの視線Ａと、撮像部１１としてのアウトカメラ（図示せず）によってリアルタイムで取得された被写体の画像とに基づいて、ユーザが表示部１２を介して視認していると推測される被写体を特定する。制御部１３は、被写体を特定すると、アウトカメラによって取得される画像に基づいて、推測された被写体に対応するようにオブジェクトの位置を移動させる。
このようにして、電子機器１は、オブジェクトの位置を調整することができる。
【００４１】
なお、電子機器１は、パスワードの入力、指紋認証又は画像認証が行われた後に、オブジェクトを表示部１２に表示させてもよい。
また、電子機器１は、予め設定した時間内のみ、オブジェクトを表示部１２に表示させてもよい。
【００４２】
［第２実施形態］
以下、本発明の第２実施形態について説明する。図６は、本実施形態のシステム１００について説明するためのブロック図である。
【００４３】
システム１００は、画像表示装置１１０と、電子機器１２０と、を備える。
画像表示装置１１０と電子機器１２０とは、相互に通信が可能となっている。画像表示装置１１０は、例えば、テレビである。
【００４４】
第２実施形態の電子機器１２０は、例えば、携帯電話機、又はタブレット型のコンピュータ等である。電子機器１２０は、筐体１２１と、表示部１２２と、検出部１２３と、検知部１２４と、制御部１２５と、を備える。
【００４５】
表示部１２２は、透過型である。表示部１２２は、一方の面側から透過して他方の面側を視認可能である。表示部１２２は、他方の面側から透過して一方の面側を視認可能である。表示部１２２は、例えば、液晶パネル、又は有機ＥＬ（ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）パネル等を備える。
検出部１２３は、表示部１２２に重なるように配置される。検出部１２３は、透過型のタッチパネルである。
【００４６】
筐体１２１は、検知部１２４と、制御部１２５と、を収容する。
検知部１２４は、加速度及び地磁気を検知する。検知部１２４は、加速度センサ及び地磁気センサを備える。
【００４７】
図７は、キャリブレーションが行われるときに、画像表示装置１１０に表示される画像と、電子機器１２０に表示される画像と、を説明するための図である。図７（Ａ）は、画像表示装置１１０を示す。図７（Ｂ）は、電子機器１２０を示す。
【００４８】
制御部１２５は、キャリブレーションを行う。すなわち、制御部１２５は、画像表示装置１１０に表示される第１画像１３１と、表示部１２２に表示される第２画像１３２とが重なるように筐体１２１が配置された場合の筐体１２１の向きを基準方向又は筐体１２１の位置を基準位置として設定する。制御部１２５は、検知部１２４で検知された加速度及び地磁気に基づいて、基準方向に対する筐体１２１の向き若しくは基準位置に対する位置を取得する。
【００４９】
具体的には、キャリブレーションが行われる場合、図７（Ａ）に示すように、画像表示装置１１０の中央部に第１画像１３１が表示される。第１画像１３１は、例えば、「＋」の図形である。また、画像表示装置１１０の各角部にも、図７（Ａ）に一例を示す「＋」の図形が表示される。キャリブレーションが行われる場合、図７（Ｂ）に示すように、表示部１２２の中央部に第２画像１３２が表示される。第２画像１３２は、例えば、「＋」の図形である。
【００５０】
そして、ユーザによって表示部１２２を透過して画像表示装置１１０を視認できるようにした場合に、画像表示装置１１０の中央部に表示される「＋」の図形（第１画像１３１）と、表示部１２２に表示される「＋」の図形（第２画像１３２）とが重なるように電子機器１２０（筐体１２１）を移動させると、制御部１２５は、その時の筐体１２１の向きを、電子機器１２０（筐体１２１）の基準方向として設定する。さらに、画像表示装置１１０の各角部に表示される「＋」の図形と、表示部１２２に表示される「＋」の図形とが重なるように電子機器１２０（筐体１２１）の向きを変えた場合、制御部１２５は、検知部１２４の検知結果を取得し、その検知結果に基づいて可動範囲を設定する。
【００５１】
又は、画像表示装置１１０の中央部に表示される「＋」の図形（第１画像１３１）と、表示部に表示される「＋」の図形（第２画像１３２）とが重なり、且つ、第１画像１３１の大きさと第２画像１３２の大きさとが等しくなるように電子機器１２０（筐体１２１）を移動させると、制御部１２５は、そのときの筐体１２１の位置を基準位置として設定する。第１画像１３１のサイズが第２画像１３２よりも大きい場合、電子機器１２０は、画像表示装置１１０に近づいていることになる。第１画像１３１のサイズが第２画像１３２よりも小さい場合、電子機器１２０は、画像表示装置１１０から離れていることになる。第１画像１３１と第２画像１３２とのサイズが等しくなるように電子機器１２０を移動させれば、画像表示装置１１０と電子機器１２０との距離が適切になる。
これにより、キャリブレーションは、終了する。
【００５２】
キャリブレーションが終了した場合、制御部１２５は、検知部１２４で検知された加速度及び地磁気に基づいて、基準方向に対する筐体１２１の向きを取得することが可能になる。すなわち、制御部１２５は、電子機器１２０が向いている方向を取得することができる。また、キャリブレーションが終了した場合、制御部１２５は、検知部１２４で検知された加速度及び地磁気に基づいて、基準位置に対する位置を取得することが可能になる。すなわち、制御部１２５は、画像表示装置１１０と電子機器１２０との距離を取得することが可能になる。
【００５３】
また、キャリブレーションは、上記の例のように実行されるばかりでなく、以下のように実行されてもよい。図８は、キャリブレーションの他の例について説明するための図である。キャリブレーションが行われる場合、制御部１２５は、所定の図形１３３を表示部１２２に表示させる。所定の図形１３３は、電子機器１２０に対する画像表示装置１１０の位置を決定するための図形である。そして、ユーザによって表示部１２２を透過して画像表示装置１１０を視認できるようにした場合に、所定の図形１３３と画像表示装置１１０とが対応するように電子機器１２０（筐体１２１）を移動させると、電子機器１２０（筐体１２１）の基準方向と、電子機器１２０の可動範囲を設定することができる。図８に示す場合では、所定の図形１３３と画像表示装置１１０の角部を対応させて、所定の図形１３３の内側に画像表示装置１１０を配置させれば、キャリブレーションは、終了する。この場合、電子機器１２０の可動範囲は、予め決められている。
【００５４】
システム１００は、キャリブレーションを実行することにより、キャリブレーションが利用されるアプリケーションをユーザに提供することができる。よって、システム１００は、ユーザの利便性を向上させることができる。
【００５５】
システム１００及び電子機器１２０は、上記のようなキャリブレーションを必要とするアプリケーションを実行することができる。そのアプリケーションの一例は、シューティングゲームである。図９は、シューティングゲームが行われる場合について説明するための図である。
【００５６】
この場合、電子機器１２０は、インターフェイス部１２６をさらに備える。
インターフェイス部１２６は、外部に配される画像表示装置１１０と通信可能に接続される。例えば、インターフェイス部１２６と画像表示装置１１０とに接続されたケーブル１２８によって、電子機器１２０と画像表示装置１１０とは、通信可能に接続される。又は、電子機器１２０と画像表示装置１１０とは、無線によって通信可能に接続されてもよい。
【００５７】
そして、制御部１２５は、次のような制御を行う。制御部１２５は、照準１４１の画像を表示部１２２に表示させる。照準１４１の画像は、例えば、表示部１２２の中央部に表示される。画像表示装置１１０には標的１４２の画像が表示されているため、ユーザから見て画像表示装置１１０と表示部１２２とを重ねると、表示部１２２を透過して標的１４２が見えることになる。制御部１２５は、画像表示装置１１０に表示される標的１４２の位置と検知部１２４の検知結果とに基づいて、照準１４１が標的１４２に合っているか否かを判断する。制御部１２５は、照準１４１が標的１４２に合っていると判断した場合に、照準１４１に対しての動作が行われると、標的１４２が破壊される画像に対応する画像データを、インターフェイス部１２６を介して画像表示装置１１０に送信させる。画像表示装置１１０は、画像データを受信すると、標的１４２が破壊される画像を表示させる。照準１４１に対しての動作は、例えば、表示部１２２をタッチする動作である。
【００５８】
また、制御部１２５は、次のような制御を行ってもよい。次のような制御を行う場合、電子機器１２０は、撮像部１２７をさらに備える。撮像部１２７は、画像を取得する。撮像部１２７は、画像表示装置１１０に表示される画像をリアルタイムで取得することが可能である。
【００５９】
そして、制御部１２５は、画像表示装置１１０に表示される第３画像に基づく画像が撮像部１２７（アウトカメラ）によって取得された場合、撮像部１２７で取得された画像に基づいて、被写体の少なくとも一部に対しての第４画像を表示部１２２に表示させる。制御部１２５は、第４画像に対して所定の動作が行われると、所定の動作に基づく第５画像を画像表示装置１１０に表示させるよう第５画像に対応する画像データを、インターフェイス部１２６を介して送信させる。
【００６０】
第３画像は、シューティングゲームの標的１４２である。第４画像は、シューティングゲームの照準１４１である。制御部１２５は、撮像部１２７がリアルタイムに取得した画像について画像認識を行い、画像認識を行った結果に基づいて第４画像（照準１４１）を移動させる。一例としては、制御部１２５は、画像認識として色の認識を行い、認識した色のうち特定の色を有するものを標的１４２として認識する。制御部１２５は、認識した標的１４２に第４画像が重なるように、第４画像を移動させる。所定の動作は、例えば、第３画像と第４画像とが重なる場合に、第４画像をタッチする動作である。第５画像は、第３画像に関連する画像である。例えば、第５画像は、標的１４２が破壊される画像である。
【００６１】
制御部１２５は、第３画像（標的１４２）と第４画像（照準１４１）とが重なる場合に、第４画像がタッチされたことを検出部１２３で検出すると、標的１４２が破壊される画像に対応する画像データを、インターフェイス部１２６を介して画像表示装置１１０に送信させる。画像表示装置１１０は、画像データを受信すると、標的１４２が破壊される画像を表示させる。
【００６２】
システム１００は、キャリブレーションが利用されるアプリケーションをユーザに提供することができる。よって、システム１００は、ユーザの利便性を向上させることができる。
【００６３】
図１０は、電子機器の他の形態について説明するための図である。
上述した実施形態では、電子機器１，１２０は、携帯電話機又はタブレット型のコンピュータの例について説明した。しかしながら、電子機器の筐体は、図１０に示すように、めがね型であってもよい。この場合、電子機器は、通常のメガネにおいてはレンズが装着される部分に、表示部２０１が配される。表示部２０１は、上述した実施形態では表示部１２，１２２に対応する。また、撮像部１１、制御部１３、検出部１４、記憶部１５、検出部１２３、検知部１２４、制御部１２５、インターフェイス部１２６又は撮像部１２７（図１０には図示せず）等は、筐体（フレーム２０２）に配される。
【００６４】
なお、システムは、以下のような構成であってもよい。すなわち、システムは、画像表示装置と、その画像表示装置に表示を指示する制御装置と、電子機器と、を備える。電子機器は、インターフェイス部と、撮像部と、表示部と、制御部と、を備える。インターフェイス部は、画像表示装置（制御装置）と通信可能に接続される。そのインターフェイス部は、上述したインターフェイス部１２６と同様の構成である。撮像部は、画像を取得する。その撮像部は、上述した撮像部１２７と同様の構成である。制御部は、画像表示装置に表示される第３画像に基づく画像が撮像部によって取得された場合、撮像部で取得された画像を認識し、認識した画像に基づいて、被写体の少なくとも一部に対しての第４画像を表示部に表示させる。制御部は、第４画像に対して所定の動作が行われると、所定の動作に基づく第５画像を画像表示装置に表示させるよう第５画像に対応する画像データを、インターフェイス部を介して制御装置に送信させる。その制御部は、上述した制御部１２５と同様の構成である。制御装置は、電子機器から送信された画像データに基づいて画像表示装置に表示させるよう指示する。制御装置は、例えば、セットトップボックスである。このようなシステムによれば、キャリブレーションが利用されるアプリケーションをユーザに提供することができる。よって、システムは、ユーザの利便性を向上させることができる。
【符号の説明】
【００６５】
１  電子機器
１１  撮像部
１２  表示部
１３  制御部
１４  検出部
１００  システム
１１０  画像表示装置
１２１  筐体
１２２  表示部
１２３  検知部
１２５  制御部
１２６  インターフェイス部
１２７  撮像部
【図１】
2014216962.tif 000003
【図２】
2014216962.tif 000004
【図３】
2014216962.tif 000005
【図４】
2014216962.tif 000006
【図５】
2014216962.tif 000007
【図６】
2014216962.tif 000008
【図７】
2014216962.tif 000009
【図８】
2014216962.tif 000010
【図９】
2014216962.tif 000011
【図１０】
2014216962.tif 000012