(57)【特許請求の範囲】
【請求項１】
撮影された撮影画像データと、その撮影された場所の撮影位置情報とを対応付けて記録する画像処理装置であって、
現在位置を検出する検出手段と、
この検出された現在位置にしたがって、その位置の地図画像データを出力する第1の画像出力制御手段と、
前記記録されている撮影位置情報と前記検出された現在位置情報とを比較する比較手段と、
この比較手段の比較結果に基づいて前記撮影位置情報に対応する撮影画像データを呼び出し、当該呼び出した撮影画像データを前記地図画像データ上の撮影位置に出力する第２の画像出力制御手段とを具備したことを特徴とする画像処理装置。
【請求項２】
前記第２の画像出力制御手段は、前記地図画像データと前記撮影画像データとを合成して１画面内に表示することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記撮影画像データを撮影するための撮影装置を更に備え、この撮影装置で画像を撮影した位置を示す撮影位置情報と撮影した撮影画像データとを対応付けて記録することを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記撮影画像データと前記撮影位置情報とを記録した記録媒体を装着して、この記録媒体から撮影画像データと前記撮影位置情報とを取り込むことを特徴とする請求項１に記載の画像処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、デジタルカメラと呼ばれる電子カメラによって撮影されたデジタル画像を処理する画像処理装置に関する。
【０００２】
【従来の技術】
従来、デジタルカメラは、固体撮像系であるＣＣＤイメージセンサで受光した被写体像をデジタル画像として取り込んでＲＡＭに格納保存するものであり、被写体像がデジタル画像に変換されるため、パーソナルコンピュータやワードプロセッサ等のデジタル情報処理装置に画像データを転送することができ、手軽さと応用性を兼ね備えた画像入力装置である。
【０００３】
【発明が解決しようとする課題】
しかしながら、この種の画像入力装置は、撮影画像を保存するだけであり、その画像がどこで撮影されたかを知るためには、撮影時にメモ帳に手書きで撮影場所を記入しておき、ワードプロセッサ等にその撮影画像を転送する際に、メモ帳を参照してその撮影場所をキー入力する必要があった。一方、衛星通信によって現在位置を逐次検出すると共に、この検出結果にしたがってその位置の地図画像データをリアルタイムで表示出力するカーナビゲーションシステムが知られている。この種のものは現在の場所と地図画像とを対応付けるものがあるが、単に地図表示や音声応答を行うだけであり、提供する情報としては十分とは言えず、ナビゲーション機能を効果的に発揮することはできなかった。
この発明の課題は、現在位置に対応する地図画像データを出力する他に、予め撮影しておいたその位置の撮影画像データを当該位置に差し掛かったときに出力することによりナビゲーション機能を効果的に発揮できるようにすることである。
【０００４】
【課題を解決するための手段】
この発明の手段は次の通りである。
撮影された撮影画像データと、その撮影された場所の撮影位置情報とを対応付けて記録する画像処理装置であって、
現在位置を検出する検出手段と、
この検出された現在位置にしたがって、その位置の地図画像データを出力する第1の画像出力制御手段と、
前記記録されている撮影位置情報と前記検出された現在位置情報とを比較する比較手段と、
この比較手段の比較結果に基づいて前記撮影位置情報に対応する撮影画像データを呼び出し、当該呼び出した撮影画像データを前記地図画像データ上の撮影位置に出力する第２の画像出力制御手段とを備えるものである。
従って、この発明では、現在位置に対応する地図画像データを出力する他に、予め撮影されていたその位置の撮影画像データを当該位置に差し掛かったときに、地図画像データ上の撮影位置に出力することができる。
【０００５】
【発明の実施の形態】
（第１実施形態）
以下、図１〜図１１を参照してこの発明の第１実施形態について説明する。
図１は画像処理装置を構成するデジタルカメラ１を示したブロック構成図であり、この画像処理装置はデジタルカメラ１と、このデジタルカメラ１にコード接続されている外部装置としてのワードプロセッサ２１とによって構成されている。
デジタルカメラ１は電池を電源として駆動する携帯用電子スチールカメラであり、ＣＰＵ２はＲＯＭ３内の各種プログラムにしたがってこのデジタルカメラ１の全体動作を制御する中央演算処理装置であり、またＲＯＭ３は各種プログラムの他に表示用の文字フォントデータを記憶するリードオンリーメモリである。
【０００６】
ＣＣＤ画像入力部４は固体撮像素子としてのＣＣＤイメージセンサであり、撮影レンズ５を介して受光した被写体像はＣＣＤ画像入力部４によって光電変換されてイメージセンサＩ／Ｆ回路６に与えられる。イメージセンサＩ／Ｆ回路６はアナログ信号をデジタル信号に変換するもので、このデジタル量の撮影画像データはＣＰＵ２に取り込まれる。ここで、ＣＰＵ２はこの撮影画像データを１画面分のデータとして表示制御部７に与え、表示装置８から表示出力させる。表示装置８は液晶表示装置等によって構成されたもので、画像再生画面およびファインダ画面として機能する。ここで、キー操作部９上のシャッタスイッチが操作されると、デジタルカメラ１はそのときの撮影画像データを１画面分のデータとしてＲＡＭ１０に格納する。
【０００７】
ＲＡＭ１０は撮影画像データや各種の入力情報を記憶する画像メモリであり、キー操作部９から画像再生指令が入力されると、ＣＰＵ２は再生指定された画像データとそれに対応する入力情報をＲＡＭ１０から読み出して表示制御部７に与え、表示装置８に再生出力させる。また、キー操作部９から画像転送指令が入力されるとＣＰＵ２は転送指定されたＲＡＭ１０内の撮影画像データを外部データ入出力装置１１を介してワードプロセッサ２１に転送する。なお、外部データ入出力装置１１は例えばＲＳ２３２Ｃシリアルインターフェイスである。なお、外部装置をワードプロセッサ２１としたが、外部装置がフロッピーディスクであれば、外部データ入出力装置１１はディスクドライバとなる。
【０００８】
図２はデジタルカメラ１の外観図を示した図で、その正面側には撮影レンズ５とそれに対向するＣＣＤ画像入力部４が内蔵されている。また、その上面にはキー操作部９を構成する各種のキー（後述する）が設けられ、また、側面には外部データ入出力装置１１とワードプロセッサ２１とをコード接続する接続端子（ジャック）１２が設けられている。そして、デジタルカメラ１の裏面には表示装置８が設けられており、被写体像に撮影レンズ５を向けた状態で表示装置８はファインダ画面として機能する。
【０００９】
図３はキー操作部９の詳細図であり、キー操作部９にはパワースイッチＰＯＷＥＲと、シャッタースイッチＳＨＯＴと、撮影モード（ＰＬＡＹ）／再生モード（ＲＥＣ）とに切り替えるスライド式のモード切替スイッチＭＯＤの他、各種のキーＫ１、Ｋ２、Ｋ３、Ｋ４、Ｋ５が設けられている。ここで、キーＫ１〜Ｋ４は例えば、撮影画像に対応付けてＲＡＭ１０に入力情報をセットする場合において、ＯＫキーＫ１は実行キーや桁上げキーとして機能し、ＮＧキーＫ２は解除キーや桁下げキーとして機能する。また、プラスキーＫ３はそれが操作される毎に数値データを「１」ずつインクリメントさせる数値入力キーであり、マイナスキーＫ４はそれが操作される毎に数値データを「１」ずつデクリメントさせる数値入力キーである。また、再生モードにおいて、プラス／マイナスキーＫ３、Ｋ４は画像選択キーとしても機能する。機能キーＫ５は再生モードにおいて、再生すべき画像に対応してＲＡＭ１０内にセットされている入力情報を撮影画像と共に表示させるか否かを指示する際に使用されるキーである。
【００１０】
次に、図４を参照してＲＡＭ１０の内容を説明する。
ＲＡＭ１０はその先頭アドレスから、各種の状態を記憶するシステムワークエリア１０−１、撮影画像とそれに対応する入力情報を記憶する画像データエリア１０−２、データを一時記憶するスタックエリア１０−３を有する構成となっている。ここで、画像データエリア１０−２の内容を説明するために、例えば、その１枚目の画像を例に挙げてそのデータフォーマットを示すと図示の如くとなる。すなわち、データはデータバイト数＋データの種類識別子（位置情報、付加情報、画像情報、制御情報かを識別するための識別子）＋実データとから構成されている。ここで、最初のレコード、つまり識別子として位置情報を含むレコードは、東西南北を示すフラグ１バイトと、緯度データ５バイト、経度データ５バイト、それに識別子１バイトを加えた合計１２バイト構成となっており、この位置情報実データは、カーナビゲーションシステムの表示画面に表示出力されている現在位置情報をキー操作部９から入力されて設定されたものである。そして、データ長１２バイト、識別子（位置情報）、位置情報実データ（緯経度データ等）の並び順にしたがってＲＡＭ１０にセットされる。
【００１１】
次のレコード、つまり識別子として付加情報を含むレコードは、データ長２２バイト、識別子（付加情報）、付加情報実データ（２１バイト）の並び順に格納されており、付加情報実データは例えば画像のタイトル等である。更に識別子として画像情報を含むレコードが格納されるが、画像情報実データは大容量であるため、２５６バイトを１ブロックとしてブロック数でデータ長を表わしている。また、図４には画像情報実データをバイト単位でその内容を具体的に例示してあるが、画像の左上の１ドットから右下まで１ドット毎に赤、緑、青の３原色に分解されて格納されている。この場合、画像は図示の如く、２４０ドット×３２０ドット構成となっている。なお、最後のレコードは１枚目のデータの終りを示すエンドコードをその実データとするものである。なお、ＣＰＵ２はこのようなファイル用フォーマットで撮影画像をＲＡＭ１０に格納するようにしている。
【００１２】
次に、ワードプロセッサ２１の構成を図５に示すそのブロック構成図にしたがって説明する。
ＣＰＵ２２はＲＯＭ２３に格納されている各種プログラムにしたがってこのワードプロセッサ２１の全体動作を制御するもので、キー操作部２４から文書データが入力されると、表示データに変換して表示制御部２５に与え、表示装置２６から表示出力させると共に、かな漢字変換等によって確定された文書データをＲＡＭ２７に格納する。また、ＣＰＵ２２には各種のインターフェイス回路、つまり、ディスクＩ／Ｆ回路２８、プリンタＩ／Ｆ回路２９、プレーヤＩ／Ｆ回路３０、カメラＩ／Ｆ回路３１が接続されており、これらのＩ／Ｆ回路２８〜３１を介して対応するフロッピーディスクドライブ３２、印刷装置３３、ＣＤ−ＲＯＭプレーヤ３４、デジタルカメラ１の入出力動作を制御する。
【００１３】
ＣＤ−ＲＯＭプレーヤ３４はカーナビゲーションシステムに用いられるＣＤ−ＲＯＭ３５をドライブするもので、このＣＤ−ＲＯＭ３５は各種の地図画像データに対応してその地図の位置情報を記憶する構成となっている。カメラＩ／Ｆ回路３１はＲＳ−２３２シリアルインターフェイス回路で、ＣＰＵ２２はデジタルカメラ１から転送されて来た撮影画像データとその撮影場所を示す位置情報等をカメラＩ／Ｆ回路３１を介して取り込む。ここで、ＣＰＵ２２はデジタルカメラ１から取り込んだ位置情報に基づいてＣＤ−ＲＯＭ３５内の地図画像データを検索し、この地図画像データを取り込むと共に、この地図画像データと撮影画像データとを合成して表示出力させる。また、この合成画像データはＲＡＭ２７内に格納される。この場合、文書データの中にこの合成画像データを差し込んだ形で格納される。なお、ＲＡＭ２７の内容はディスクＩ／Ｆ回路２８、フロッピーディスクドライブ３２を介してディスクに登録される。ここで、フロッピーディスクの代わりに大容量の光ディスクや高速なメモリカードに登録保存するようにしてもよい。
【００１４】
次に、この画像処理装置の動作を図６〜図１１を参照して説明する。
図６はデジタルカメラ１における撮影モード時の動作を示したフローチャートである。すなわち、モード切替スイッチＭＯＤをＲＥＣ位置に切替えると、ＣＰＵ２は図６に示すフローチャートにしたがった動作を実行する。図７は撮影モード時のキー操作とその画面例を示している。
先ず、ＣＰＵ２はＣＣＤ画像入力部４、イメージセンサＩ／Ｆ回路６を駆動させたのち、ＣＣＤ画像入力部４に受光された被写体像が光電変換され、イメージセンサＩ／Ｆ回路６によってデジタル画像に変換されると、この撮影画像データを取り込み（ステップＡ１）、表示装置８から表示出力させる（ステップＡ２）。そして、シャッタースイッチＳＨＯＴが操作されるまでステップＡ１、Ａ２を繰り返すため、撮影者はファインダとして機能する表示画面を確認しながら所望する風景に合せ込む。ここで、シャッタースイッチＳＨＯＴが押下されると、ＣＰＵ２はそのときの撮影画像データをＲＡＭ１０に格納すると共に、画像の取り込みを停止する（ステップＡ４）。ここで、図７（Ａ）はシャッタースイッチＳＨＯＴが押下されたときの撮影画像を示している。そして、撮影画像が表示出力されている状態において、撮影場所を画像に対応付けて記録するかを問い合せるメッセージデータを表示出力させる（ステップＡ５）。図７（Ｂ）はこの場合の表示状態を示し、このメッセージ表示を確認し、記録する場合にはＯＫキーＫ１を操作する（ステップＡ６）。
【００１５】
ここで、撮影場所の位置情報を入力する場合にはカーナビゲーションシステムの表示画面に出力されている現在位置を確認しながらＯＫキーＫ１、ＮＧキーＫ２、プラスキーＫ３、マイナスキーＫ４を必要に応じて操作することにより緯度、経度データを１桁ずつ数値入力する（ステップＡ７）。すなわち、プラスキーＫ３の操作で数値が増え、マイナスキーＫ４の操作で数値が減り、またＯＫキーＫ１の操作で次の桁に進み、ＮＧキーＫ２の操作で前の桁に戻るため、これらのキーを必要に応じて操作して位置情報をキー入力する（図７（Ｃ）参照）。これによって全ての桁の入力が完了すると、図７（Ｄ）に示すように入力された位置情報を確定するかを最終確認するためにその旨のメッセージ表示が行われ（ステップＡ８）、確定する場合にはＯＫキーＫ１を操作する（ステップＡ９）。これによってＣＰＵ２は入力された位置情報データのバイト数分ＲＡＭ１０の内容を後ろにずらし、位置情報をＲＡＭ１０に格納すると共に（ステップＡ１０）、撮影場所の位置情報が正常に記録された旨のメッセージ表示を行い、かつＲＡＭ１０の書き込みアドレスを指定するポインタ（図示せず）をインクリメントする（ステップＡ１１）。図７（Ｅ）はこの場合の表示状態を示している。そして、ステップＡ１に戻り、以下同様の動作が繰り返される。
【００１６】
次に、モード切替スイッチＳＨＯＴをＰＬＡＹ位置に切り替えた再生モード時の動作を図８に示すフローチャートを参照して説明する。図９は再生モード時のキー操作と画面例を示している。
再生モードに切り替えられると、ＣＰＵ２はＣＣＤ画像入力部４、イメージセンサＩ／Ｆ回路６の駆動を停止させたのち、先ず、ＣＰＵ２はＲＡＭ１０の先頭画像を呼び出して表示出力させる（ステップＢ１）。ここで、当該画像データに撮影場所を示す位置情報が有るかをチェックし（ステップＢ２）、有れば、位置表示フラグがオンされているかをチェックする（ステップＢ３）。この位置表示フラグは後述するが、予め位置情報を表示すべきことが指示された場合にオンされるものであるが、最初はオフされているので、ステップＢ５に進み、キー入力待ちとなる。
【００１７】
このキー入力待ち状態においては、プラス／マイナスキーＫ３、Ｋ４（ステップＢ６）、機能キー（ステップＢ８）、ＯＫキーＫ１（ステップＢ１０）の入力を可能とするもので、いま、図９（Ａ）に示すように先頭画像が再生出力されている状態において機能キーＫ５が操作されたものとする（ステップＢ８）。すると、次のステップＢ９に進み、図９（Ｂ）に示すように撮影場所を表示するかを問い合せるガイダンス表示が行われる。ここで、場所表示を指示するためにＯＫキーＫ１を操作すると（ステップＢ１０）、上述の位置表示フラグがオンされるが（ステップＢ１１）、ＯＫキーＫ１が操作されなければ、位置表示フラグをオフしたままとする（ステップＢ１２）。そして、画像表示処理（ステップＢ１）に戻るため、現在再生出力されている画像に位置情報が付加されており（ステップＢ２）、しかも位置表示フラグがオンされていることを条件に（ステップＢ３）、当該画像の表示画面内に位置情報表示用のウインドウがオープンされ、図９（Ｃ）に示すように位置情報の表示が行われる。このように位置情報の表示は機能キーＫ５とＯＫキーＫ１の操作を前提として行われる。これは位置情報を常に表示するようにすると、画像表示域が狭くなるためである。
【００１８】
ここで、所望する画像を選択表示させるためにプラスキーＫ３あるいはマイナスキーＫ４が操作されると（ステップＢ６）、プラスキーＫ３の操作で次の画像、マイナスキーＫ４の操作で前の画像位置にＲＡＭポインタを移動させる（ステップＢ７）。そして、画像表示処理（ステップＢ１）に戻るため、プラスキー／マイナスキーＫ３、Ｋ４が操作される毎に画像切り替えが行われる。これによって所望する画像が選択されると、当該画像に位置情報が有れば、位置表示フラグがオンされていることを条件に（ステップＢ３）、図９（Ｄ）に示す如く、位置情報と共に選択画像が表示出力される。
【００１９】
図１０はワードプロセッサ２１における画像合成処理を示したフローチャートである。図１１はこの場合の表示画面例である。
先ず、ＣＰＵ２２は画像合成モードが指定されると、デジタルカメラ１を接続すべき旨のガイダンス表示を行わせ（図１１（Ａ）参照）、これによってカメラＩ／Ｆ回路３１にデジタルカメラ１が接続されると（ステップＣ１）、デジタルカメラ１から画像データが順次転送されて来るので（ステップＣ２）、所望する画像をキー操作によって選択する（ステップＣ３）。この場合の画像選択は図１１（Ｂ）に示すように実行キーで選択決定され前候補キーで前の画像に戻り、次候補キーで次の画像に進める。このようにして選択決定された画像データをイメージファイル化し、後でデジタルカメラ１が接続されていなくても撮影画像データを任意に呼び出して表示／印刷できるようにしておく（ステップＣ４）。次に、当該画像に任意情報が付加されているかをチェックし（ステップＣ５）、無ければ、画像を単純配置する処理に移るが（ステップＣ６）、有れば、ステップＣ７〜Ｃ１６に移る。
【００２０】
先ず、ＣＰＵ２２は撮影画像に対応付けられている位置情報を抽出する（ステップＣ７）。そして、選択画像には位置情報が付加されているので、ＣＤ−ＲＯＭ３５をセットし、実行キーを操作すべき旨のガイダンス表示が行われる（ステップＣ８）。図１１（Ｃ）はこの場合の表示例を示している。ここで、カーナビゲーションシステムで使用されているＣＤ−ＲＯＭ３５をセットすると、ＣＰＵ２２は撮影画像の位置情報に基づいてＣＤ−ＲＯＭ３５を検索し（ステップＣ９）、該当する地図画像データをＣＤ−ＲＯＭ３５から読み出し（ステップＣ１０）、これをイメージファイル化しておく（ステップＣ１１）。次に、文書内配置指定が行われる（ステップＣ１２）。この配置指定は位置と大きさと画像ファイル名を指定することによって行われると、この指定通りに地図画像データが文書内に配置される（ステップＣ１３）。
【００２１】
次に、撮影画像を地図上のどの位置に表示するかのオフセット位置を求める計算処理が行われる（ステップＣ１４）。ここで、図１０に示すように地図画像の左上座標点を撮影画像の位置情報から求め、この左上座標点を基準としてこの点からどの位置に撮影場所が相当するかによって求める。そして、吹き出しパターンを作成し、この吹き出しの先端が地図内の撮影場所に来るようにパターン配置されると共に（ステップＣ１５）、この吹き出しパターン内に撮影画像が収まるように画像配置が行われる（ステップＣ１６）。図１１（Ｄ）は文書内に地図画像と撮影画像とを合成した表示例を示している。ここで、文書編集時にこの文書内に撮影場所や思い出等の文字例をキー入力することができる。
【００２２】
以上のように構成された画像処理装置においては、デジタルカメラ１によって撮影された画像にその撮影場所を示す位置情報をキー入力して対応付けておくことにより、ワードプロセッサ２１において、文書内に撮影画像を差し込む場合、この撮影場所に応じた地図画像がカーナビゲーションシステムに使用されるＣＤ−ＲＯＭ３５から読み出され、この地図画像に撮影画像を合成した合成画像が文書内に差し込まれたので、撮影場所を視覚的に分かり易く、かつ効果的に明示することができる。
なお、地図画像と撮影画像とを合成した合成画像を文書中に差し込むようにしたが、合成画像のみを出力するようにしてもよいことは勿論である。また、地図画像と撮影画像とを合成せずに別個に呼び出して出力するようにしてもよい。
【００２３】
（第２実施形態）
以下、図１２および図１３を参照してこの発明の第２実施形態について説明する。なお、上記第１実施形態においては、カーナビゲーションシステムとデジタルカメラとを別体としたが、この第２実施形態においては、カーナビゲーションシステムの車載端末装置にデジタル式の電子スチールカメラを一体的に組み込んだ構成で、撮影場所の位置情報をキー入力せずに、自動的に入力するようにしたものである。
図１２はデジタルカメラ一体型のＧＰＳ車載端末装置４１を示したブロック構成図である。なお、図１２において、上述した図１のデジタルカメラ１と図５のワードプロセッサ２１と基本的に構成、機能が同一のものは同一符号をもって示し、その説明は省略するものとする。
【００２４】
このデジタルカメラ付きＧＰＳ車載端末装置４１は車内のサンバイザーに着脱可能に取り付けられるもので、ＣＰＵ４２はＲＯＭ４３内の各種プログラムにしたがってこのＧＰＳ車載端末装置４１の全体動作を制御する。
位置情報信号変換回路４４は通常のカーナビゲーションシステムと同様に、衛生通信によって搬送されて来た電波信号をアンテナ４５を介して受信すると、位置情報信号に変換するもので、この位置情報はＧＰＳ用Ｉ／Ｆ回路４６を介してＣＰＵ４２に取り込まれる。すると、ＣＰＵ４２はプレーヤＩ／Ｆ回路３０、ＣＤ−ＲＯＭプレーヤ３４を介してＣＤ−ＲＯＭ３５の内容をアクセスし、その位置に対応する地図画像データを表示装置８に表示出力させる。一方、ＣＰＵ４２は撮影レンズ５を介してＣＣＤ画像入力部４に受光された被写体像をイメージセンサＩ／Ｆ回路６を介してデジタル画像として取り込むと、表示制御部７を介して表示装置８に表示出力させると共に、キー操作部９のシャッタスイッチの操作に応答してＲＡＭ１０に格納する。また、この撮影時の位置情報をＧＰＳ用Ｉ／Ｆ回路４６を介して取り込み、撮影画像に対応付けてＲＡＭ１０に格納する。また、ＣＰＵ４２はＲＡＭ１０の内容を外部データ入出力装置１１を介してワードプロセッサ２１に転送する。
【００２５】
図１３はＧＰＳ車載端末装置４１の外観図であり、その上面左右両側にはサンバイザーに取り付けられる取付けフック４７が設けられている。なお、図中、４８はアンテナ収納部、４９は文字キー等を有したキーボードであり、ＧＰＳ車載端末装置４１の裏面にキーボード４９は表示装置８と並列配置されている。
【００２６】
このように構成されたＧＰＳ車載端末装置４１においては、撮影と同時にその撮影場所を示す位置情報が自動的に入力されて撮影画像に対応付けてＲＡＭ１０に格納することができる。この場合、ＧＰＳ車載端末装置４１はサンバイザーに取り付けられているので、運転しながらその前方の風景を撮影することができる。なお、ＲＡＭ１０の内容をワードプロセッサ２１に転送し、地図に撮影画像を合成した合成画像を文書内に差し込むことができることは上述の第１実施形態と同様である。
なお、ＧＰＳ車載端末装置４１をサンバイザーに取り付けるようにしたが、その取付位置は任意であり、走行方向に向かって風景を撮影できる位置であればよい。
【００２７】
（第３実施形態）
以下、図１４〜図１７を参照してこの発明の第３実施形態について説明する。なお、上記第２実施形態においては、カーナビゲーションシステムの車載端末装置にデジタルカメラを一体的に組み込んだ構成であるが、この第３実施形態においては、カーナビゲーションシステムの車載端末装置に動画を撮影するビデオカメラを接続可能とし、このビデオ画像から静止画像を取り込んでその撮影場所を示す位置情報と共に記録しておき、この位置情報で示される地点に再び差し掛かったときにこの地点に対応する静止画像を表示出力してカーナビゲーション機能の向上を図るようにしたものである。
図１４はＧＰＳ車載端末装置５１のブロック構成図である。なお、図１４において、上述した図１２のＧＰＳ車載端末装置４１と基本的に構成、機能が同一のものは同一符号をもって示し、その説明は省略するものとする。
【００２８】
このＧＰＳ車載端末装置５１はビデオカメラ６１を着脱自在にコード接続可能なもので、ビデオ信号Ｉ／Ｆ回路５２と、フロッピーディスクドライバ５３と、そのディスクＩ／Ｆ回路５４の他は通常の車載端末装置と略同様の構成となっている。すなわち、ＣＰＵ５５はＲＯＭ５６内の各種プログラムにしたがってこのＧＰＳ車載端末装置５１の全体動作を制御するもので、ＧＰＳ用Ｉ／Ｆ回路４６からの現在位置情報に基づいてＣＤ−ＲＯＭ３５からその地点の地図画像データをプレーヤＩ／Ｆ回路３０を介して取り込んで表示装置８に表示出力させる。キー操作部５７は通常備えられている各種のキーの他に、画像登録キー等を有するもので、ＣＰＵ５５はキー操作部５７から画像登録が指示されると、ビデオ信号Ｉ／Ｆ回路５２を介してビデオカメラ６１から撮影画像を取り込み、現在の位置情報と共に、この撮影画像をＲＡＭ５８に一時記憶させると共に表示出力させる。また、キー操作部５７から画像保存指令が入力されると、ＣＰＵ５５はＲＡＭ１０の内容をディスクＩ／Ｆ回路５４を介してフロッピーディスクドライバ５３に与え、現在位置情報と共にディスクに登録保存させる。
なお、ビデオ信号Ｉ／Ｆ回路５２はビデオ信号をデジタル画像に変換するビデオキャプチャーで、このビデオ信号Ｉ／Ｆ回路５２からのデジタル画像がＣＰＵ５５に取り込まれる。ここで、ビデオ信号Ｉ／Ｆ回路５２はＲＳ−２３２Ｃなどのシリアルインターフェイスとしてデジタルカメラからの画像を取り込むようにしてもよいことは勿論である。
【００２９】
次に、このＧＰＳ車載端末装置５１の動作を図１５〜図１７を参照して説明する。
図１５は画像登録時の動作を示したフローチャート、また図１６は通常のナビゲーションモード時の動作を示したフローチャート、図１７は画像登録、通常モード時の表示画面例である。
いま、図１７（Ａ）に示すようにカーナビゲーションとして現在地点の地図画像が表示出力されている状態において、画像登録キーが操作されると、図１７（Ｂ）に示すように現地点の画像を登録するのかを問い合せるガイダンス表示が行われる。ここで、カーソルを「ＹＥＳ」の位置に合わせると共に、ビデオカメラ６１を接続する。
【００３０】
すると、ＣＰＵ５５は図１５のフローチャートを実行開始する。先ず、ビデオカメラ６１からのビデオ信号はビデオ信号Ｉ／Ｆ回路５２によってデジタル画像に変換されてＣＰＵ５５に取り込まれる（ステップＤ１）。ここで、ＣＰＵ５５はこの画像データをＲＡＭ５８に一時記憶させると共に（ステップＤ２）、このＲＡＭ５８内の画像データを表示出力させる（ステップＤ３）。このとき、図１７（Ｃ）に示すように登録したい場面でボタン操作すべき旨のガイダンス表示が行われる。そして、取り込みボタンが押下されるまで（ステップＤ４）、上述の動作（ステップＤ１〜Ｄ３）が繰り返されるので、表示装置８には動画が表示されることになる。ここで、取り込みボタンが押下されると（ステップＤ４）、カーナビゲーションの現在位置情報に基づいてその撮影場所を示すファイル用の位置情報を作成し、ディスクＩ／Ｆ回路５４を介してディスクＩ／Ｆ回路５４に与え、ディスクに登録保存させる（ステップＤ５）、そして、ＲＡＭ５８に格納されている画像データをファイル用フォーマットに変換してディスクに位置情報に対応付けて登録保存させる（ステップＤ６）。ここで、ファイル用フォーマットの変換とは、上述した図４のフォーマットに変換されることを示し、撮影画像データは２４０ドット×３２０ドット構成となる。
【００３１】
次に、通常のカーナビゲーションモード時の動作を図１６に示すフローチャートにしたがって説明する。
先ず、位置情報信号変換回路４４からの位置情報はＧＰＳ用Ｉ／Ｆ回路４６によってデジタル信号に変換されてＣＰＵ５５に取り込まれる（ステップＥ１、Ｅ２）。すると、ＣＰＵ５５はこの位置情報に基づいてＣＤ−ＲＯＭ３５から該当する地図画像を取り込んで表示出力させると共に（ステップＥ３）、この地図上に現在位置を表示出力させる（ステップＥ４）。次に、ＣＰＵ５５はフロッピーディスクドライバ５３にセットされているディスクをアクセスし、現在位置に近い位置情報に対応付けて撮影画像がディスクに登録されているかをチェックする（ステップＥ５）。この結果、撮影画像が有れば、画像を表示するかを問い合せるガイダンス表示を行い、キー入力待ちとなる（ステップＥ７）。図１７（Ｅ）はこの場合の表示状態を示している。ここで、「ＹＥＳ」の位置にカーソルがセットされると（ステップＥ８）、当該画像を表示出力させる（ステップＥ９）。この場合、地図に代わって撮影画像が表示されるが、勿論、上述した如く、地図と撮影画像とを合成して表示出力するようにしてもよい。
【００３２】
以上のように構成されたＧＰＳ車載端末装置５１においては、ビデオカメラ６１から任意の画像データを取り込んでその撮影場所を示す位置情報に対応付けて登録保存することができると共に、再びその地点に差し掛かった際に、予め登録保存しておいたその地点の撮影画像を表示出力することができるので、カーナビゲーション機能を向上させることが可能となる。すなわち、自動車走行中など、位置情報が変化する度にディスクに登録保存されている位置情報を検索し、その位置情報に対応する撮影画像が有れば、その画像表示が行われるので、例えば、予め第３者が撮影した風景を道案内として走行することが可能となる。また、単なる道案内だけではなく、観光地の解説や店舗の宣伝にも効果を発揮する。
【００３３】
なお、上述した各実施形態においては、撮影画像に位置情報を対応付けて記憶するようにしたが、更に地図画像データを対応付けて記憶するようにしてもよい。また、ビデオカメラによって入力された音声データを対応付けて記憶するようにしてもよい。
また、地図画像と撮影画像とを合成表示する場合に限らず、１画面内に並列的に表示するようにしてもよく、更に、ハードコピーによって印刷出力するようにしてもよい。
また、カーナビゲーションシステムを例に挙げたが、その他のナビゲーションシステムにも適用可能であり、また衛星電波を利用する以外に地磁気を利用したナビゲーションシステムも同様に適用可能である。
【００３４】
【発明の効果】
以上説明したように、この発明によれば、現在位置に対応する地図画像データを出力する他に、予め撮影されていたその位置の撮影画像データを当該位置に差し掛かったときに、地図画像データ上の撮影位置に出力することにより見やすいナビゲーション機能を効果的に発揮することができ、例えば、自動車走行中において、予め撮影された風景等を地図上の適切な位置に道案内として表示することができるので、カーナビゲーション機能として極めて効果的なものとなる。
【図面の簡単な説明】
【図１】第１実施形態においてデジタルカメラ１の構成を示したブロック図。
【図２】デジタルカメラ１の外観を説明するための図。
【図３】キー操作部９の構成を示した図。
【図４】ＲＡＭ１０の構成およびそのデータ構造を説明するための図。
【図５】デジタルカメラ１を任意に接続可能なワードプロセッサ２１のブロック構成図。
【図６】デジタルカメラ１における撮影モード時の動作を示したフローチャート。
【図７】撮影モード時のキー操作と画面例を示した図。
【図８】デジタルカメラ１における再生モード時の動作を示したフローチャート。
【図９】再生モード時のキー操作と画面例を示した図。
【図１０】ワードプロセッサ２１における画像合成処理時の動作を示したフローチャート。
【図１１】画像合成処理時の画面例を示した図。
【図１２】第２実施形態において、ＧＰＳ車載端末装置４１の構成を示したブロック図。
【図１３】ＧＰＳ車載端末装置４１の外観を説明するための図。
【図１４】第３実施形態において、ＧＰＳ車載端末装置５１の構成を示したブロック図。
【図１５】ＧＰＳ車載端末装置５１における画像登録時の動作を示したフローチャート。
【図１６】ＧＰＳ車載端末装置５１における通常モード時の動作を示したフローチャート。
【図１７】画像登録時および通常モード時の表示画面例を示した図。
【符号の説明】
１、６１  デジタルカメラ
２、２２、４２、５５  ＣＰＵ
３、２３、４３、５６  ＲＯＭ
４  ＣＣＤ画像入力部
６  イメージセンサＩ／Ｆ回路
９、２４、５７  キー操作部
１０、５８  ＲＡＭ
１０−２  画像データエリア
２１  ワードプロセッサ
２５  表示制御部
２６  表示装置
３４  ＣＤ−ＲＯＭプレーヤ
３５  ＣＤ−ＲＯＭ
４１、５１  ＧＰＳ車載端末装置
４４  位置情報信号変換回路
４５  アンテナ
４６  ＧＰＳ用Ｉ／Ｆ回路
５２  ビデオ信号Ｉ／Ｆ回路
【図１】
0003658659.tif 000002
【図２】
0003658659.tif 000003
【図３】
0003658659.tif 000004
【図４】
0003658659.tif 000005
【図５】
0003658659.tif 000006
【図６】
0003658659.tif 000007
【図７】
0003658659.tif 000008
【図８】
0003658659.tif 000009
【図９】
0003658659.tif 000010
【図１０】
0003658659.tif 000011
【図１１】
0003658659.tif 000012
【図１２】
0003658659.tif 000013
【図１３】
0003658659.tif 000014
【図１４】
0003658659.tif 000015
【図１５】
0003658659.tif 000016
【図１６】
0003658659.tif 000017
【図１７】
0003658659.tif 000018