(57)【特許請求の範囲】
【請求項１】
一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像を取得するための実況映像取得手段と、
前記実況映像取得手段により取得された実況映像を外部に送信するための実況映像送信手段と、
「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、映画（記録映画を除く）、テレビドラマ、アニメーション、ビデオゲーム、漫画、小説、カラオケ、音楽のプロモーションビデオなどのフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、
前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、前記実況映像取得手段により取得された実況映像であって前記場面又はブロックと関連する実況映像を、略リアルタイムに前記実況映像送信手段からオンラインで受信するための実況映像受信手段と、
前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、
前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、
を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項２】
「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、映画（記録映画を除く）、テレビドラマ、アニメーション、ビデオゲーム、漫画、小説、カラオケ、音楽のプロモーションビデオなどのフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、
前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像であって前記場面又はブロックと関連する実況映像を、略リアルタイムに外部からオンラインで受信するための実況映像受信手段と、
前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、
前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、
を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項３】
「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、ストーリー・シナリオ・脚本・楽曲・演出・振り付けなどにより構成されるフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、
一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像を特定するための識別データと、前記各場面又は各ブロックに関するデータとを互いに関連付けて記録するための識別データ記録手段と、
前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、前記識別データ記録手段に記録されたデータに基づいて、その場面又はブロックと関連する識別データにより特定される地点の実況映像を、略リアルタイムに外部からオンラインで受信するための実況映像受信手段と、
前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、
前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、
を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項４】
「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、ストーリー・シナリオ・脚本・楽曲・演出・振り付けなどにより構成されるフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、
一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像を特定するための識別データと、キーワードなどの検索用データとを互いに関連付けて記録するためのデータベース手段と、
前記各場面又は各ブロックのデータから、前記各場面又は各ブロックと関連する地点の実況映像を検索するためのキーワードなどの検索用データを抽出するための検索用データ抽出手段と、
前記検索用データ抽出手段により抽出されたキーワードなどの検索用データに基づいて、前記データベース手段から、これと対応する一つ又は複数の地点の実況映像の識別データを求めるための識別データ導出手段と、
前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、前記識別データ導出手段により導出された識別データに基づいて、該当する識別データにより特定される地点の実況映像を、略リアルタイムに外部からオンラインで受信するための実況映像受信手段と、
前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、
前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、
を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項５】
請求項１から４までのいずれかにおいて、
前記実況映像は、汽車、電車、バス、飛行機、船舶などの所定の移動領域内を移動する乗り物に備えられた実況映像所得手段により取得されるものであって、移動中の乗り物から見える前記移動中の乗り物が移動している地点の実況映像である、ことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項６】
請求項１から４までのいずれかにおいて、
前記制御手段は、前記表示装置の画面上に前記場面又はブロックが表示されているとき、その場面又はブロックの画面の中の一部に前記実況映像が表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するものである、ことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項７】
請求項１から４までのいずれかにおいて、
前記制御手段は、前記表示装置の画面上に前記場面又はブロックが表示されているとき、その場面又はブロックの画面の背景として前記実況映像が表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するものである、ことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【請求項８】
請求項１から４までのいずれかにおいて、
前記映像取得手段が設けられた地点又はその近傍に備えられ、前記映像取得手段が設けられた地点又はその周辺の匂いの情報を取得するための匂い情報取得手段と、
前記映像表示手段の近傍に備えられ、前記映像表示手段により或る実況映像が表示されているとき、前記映像表示手段により表示されている前記実況映像に対応する地点又はその周辺の匂いと同一又は近似した匂いを、前記匂い情報取得手段により取得された匂い情報に基づいて発生させるための匂い発生手段と、
を備えたことを特徴とする、記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映画、アニメーション、ビデオゲーム（ＴＶゲーム）、表示画面上で展開される漫画、表示画面又はスピーカにより展開される小説などの物語、カラオケ、音楽ＣＤ、音楽ビデオ、テレビ放送用のフィクション性の番組（フィクション性の要素のない報道番組を除く）などのフィクション性のコンテンツの各場面を順次展開していく、フィクション性コンテンツの場面展開システムに関する。また、本発明は、記録映画コンテンツの場面展開システムに関する。
【０００２】
【従来の技術】
従来より、各地点の実写映像をＣＤ−ＲＯＭ又はハードディスクなどの記録媒体に記録しておき、それを所定のキーに基づいて検索して表示するシステムが存在している。例えば、各観光地の実写映像を記録した旅行ガイドをＣＤ−ＲＯＭに記録して、ユーザーが所定のキー操作を行うことにより、前記実写映像を表示させるものなどが市販されている。
【０００３】
【発明が解決しようとする課題】
しかしながら、これらの記録媒体に記録された映像は、「過去のもの」である（「生のもの」ではない）ため、季節の移り変わり、その日の天候、道路や建物の工事状況などにより、日々刻々変遷していくものであるので、ユーザーは「古い（新鮮でない）」情報しか得られないという問題がある。また、仮にその記録媒体に記録された映像が更新直後のものだとしても、「今現在のこの瞬間のリアルタイムの状況を見たい」というユーザーの希望に応えることはできない。さらに、記録媒体への映像データの更新を頻繁に行うことは非常にコストがかかってしまうという問題もある。
また、「今のこの瞬間の実写映像」を送信するシステムがあっても、それを単に見るのでなく、(1)ビデオゲームにおいて各ブロックや各場面が展開していくとき、その展開にしたがって、その展開された各ブロックや場面毎にそれに関連した地点の実写映像を表示したい場合、(2)小説や映画などの物語や記録映画などにおいて、各ブロック（各段落）や各場面が展開していくとき、その展開された各ブロックや各場面に関連した地点の実写映像を表示したい場合、(3)一つの楽曲の中の各小節（広い意味での各場面）が流れていく中で、その各小節（場面）に関連する地点の実写映像を表示したい場合（例えば、カラオケを歌っている場合に、表示画面に表れる画像を、過去のものでなく現在のものにしたい場合）、などがある。しかし、このようなことを実現する方法は、従来は提案されたことがない。
【０００４】
つまり、従来でも、テレビ放送においては、報道番組、スポーツ中継番組、コンサートの中継番組、演劇の中継番組、バラエティ番組の中継番組、などでは、事件、スポーツの試合、コンサートの様子、タレントによるバラエティ形式のやり取りの様子などが、リアルタイムに視聴者に受信されることがある。しかし、これらは、その番組を構成する「各場面そのもの」が、実況映像により構成されているものである。これに対して、本発明は、前記の各番組を構成する各場面そのものは、文字、画像、音楽などのフィクション性のコンテンツで構成されながらも、ユーザーの希望に基づいて、前記の場面と関連させて、各地の実況映像をリアルタイムに又はほぼリアルタイムに表示させることを目的とするものである。つまり、本発明は、ビデオゲームや小説や映画や音楽などのコンテンツの展開の中での各場面毎にその場面と関連する実況映像を提供できるフィクション性のコンテンツの場面展開システムを提供することを目的とする。また、本発明は、記録映画コンテンツの展開の中での各場面毎にその場面と関連する実況映像を提供できる記録映画コンテンツの場面展開システムを提供することを目的とする。
【０００５】
【課題を解決するための手段】
１．一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像を取得するための実況映像取得手段と、前記実況映像取得手段により取得された実況映像を外部に送信するための実況映像送信手段と、「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、映画（記録映画を除く）、テレビドラマ、アニメーション、ビデオゲーム、漫画、小説、カラオケ、音楽のプロモーションビデオなどのフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、前記実況映像取得手段により取得された実況映像であって前記場面又はブロックと関連する実況映像を、略リアルタイムに前記実況映像送信手段からオンラインで受信するための実況映像受信手段と、前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
２．「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、映画（記録映画を除く）、テレビドラマ、アニメーション、ビデオゲーム、漫画、小説、カラオケ、音楽のプロモーションビデオなどのフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像であって前記場面又はブロックと関連する実況映像を、略リアルタイムに外部からオンラインで受信するための実況映像受信手段と、前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
３．「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、ストーリー・シナリオ・脚本・楽曲・演出・振り付けなどにより構成されるフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像を互いに識別するための識別データを、前記各場面又は各ブロックのデータと関連付けて記録するための識別データ記録手段と、前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、前記識別データ記録手段に記録されたデータに基づいて、その場面又はブロックと関連する識別データにより識別される地点の実況映像を、略リアルタイムに外部からオンラインで受信するための実況映像受信手段と、前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
４．「複数の場面又はブロックが所定の流れに従って展開されていく、記録映画コンテンツ、又は、ストーリー・シナリオ・脚本・楽曲・演出・振り付けなどにより構成されるフィクション性コンテンツ」を構成する各場面又は各ブロックであって少なくとも画像又は文字を含む各場面又は各ブロックを、表示装置の画面上で、前記コンテンツの流れに従って、展開して行くための場面展開手段と、一つ又は複数の地点の実況映像又は一つ又は複数の移動中の乗り物が移動している地点の実況映像を互いに識別するための識別データを、キーワードなどの検索用データと関連付けて記録するためのデータベース手段と、前記各場面又は各ブロックのデータから、前記各場面又は各ブロックと関連する地点の実況映像を検索するためのキーワードなどの検索用データを抽出するための検索用データ抽出手段と、前記検索用データ抽出手段により抽出されたキーワードなどの検索用データに基づいて、前記データベース手段から、これと対応する一つ又は複数の地点の実況映像の識別データを求める識別データ導出手段と、前記場面展開手段により前記コンテンツの或る場面又はブロックが前記表示装置の画面上で展開されているとき、前記識別データ導出手段により導出された識別データに基づいて、該当する識別データにより識別される地点の実況映像を、略リアルタイムに外部からオンラインで受信するための実況映像受信手段と、前記実況映像受信手段により受信された実況映像を、前記表示装置の画面上に略リアルタイムに表示するための実況映像表示手段と、前記実況映像表示手段により表示される実況映像が、前記表示装置の画面上で前記場面又はブロックと関連付けて表示されるように、前記場面展開手段及び／又は前記実況映像表示手段を制御するための制御手段と、を含むことを特徴とする記録映画コンテンツ又はフィクション性コンテンツの場面展開システム。
【０００６】
【発明の実施の形態】
実施形態１．
図１に基づいて実施形態１を説明する。図１において、１はユーザーが使用するパーソナルコンピュータ（パソコン）である。このパソコン１は、ＣＰＵ及び通信モデム等より成る制御装置２と、コンピュータプログラム及びデータが記録されたハードディスク装置３と、ビデオゲーム、映画、カラオケなどのフィクション性のコンテンツの各場面を展開するためのコンピュータプログラム及びデータが記録されたＣＤ−ＲＯＭ４を駆動するためのＣＤ−ＲＯＭドライブ５と、データを入力するためのキーボード６と、画像を出力するためのディスプレイ７と、音声を出力するためのスピーカ８とより、構成されている。
【０００７】
前記制御装置２は、公衆回線１０を介して、中継サービス用管理コンピュータ（サーバー）１１に接続されている。この中継サービス用管理コンピュータ１１には、多数の地点（場所）にそれぞれ設置されたビデオカメラ（撮像手段）１２及び集音マイク１３が、接続されている。
これらの多数のビデオカメラ１２及び集音マイク１３は、識別データ（アドレスデータ）により互いに識別できるようになっている。したがって、また、各ビデオカメラ１２及び集音マイク１３からの実写映像及び音声は、互いに識別できるようになっている。
これらの多数のビデオカメラ１２及びマイク１３等により入力された映像データ及び音声データは、ユーザーからの要求（パソコン１からの指令）により、中継サービス用管理コンピュータ１１を介して、ユーザーに対して閲覧又は受信させられるようになっている（例えば、インターネット用のブラウザー・ソフトウェアを使用して、ユーザーが閲覧できるようになっている）。
【０００８】
また、前記中継サービス用用管理コンピュータ１１は、他の多数の中継サービス用管理コンピュータ１１ａなどとも接続されており、例えば、中継サービス用管理コンピュータ１１に接続されたユーザーは、パソコン１を操作して、前記の中継サービス用コンピュータ１１を介して、他の中継サービス用コンピュータ１１ａなどから、それに接続されたビデオカメラ及びマイク（これらも互いに識別できるようになっている）から入力された映像データや音データを、リアルタイムに又はほぼリアルタイムに、取り込めるようになっている。
【０００９】
この実施形態１では、前記ＣＤ−ＲＯＭ４には、ビデオゲーム（ＴＶゲーム）の各場面の映像、文字、音声・音響などを出力するためのコンピュータ・プログラム及びデータが、記録されている。また、このＣＤ−ＲＯＭには、前記の各場面と関連する一つ又は複数の実況映像を特定するためのアドレスデータ（前記カメラ１２、マイク１３などを互いに識別するための識別データ）、及び、このアドレスデータを有するカメラ又はマイクにアクセスするためのコンピュータ・プログラムが、記録されている。そして、このコンピュータ・プログラムとしては、ユーザーがある場面に関連する実況映像を要求した場合にのみその実況映像を取り込んで表示させるためのプログラムと、ユーザーが要求するか否かに拘わらずある場面が展開されたときは自動的にそれと関連のある実況映像を取り込んで表示するためのプログラムとの、両者ともが、記録されている。
【００１０】
次に、図２（ａ）（ｂ）は、本実施形態によりビデオゲームを展開しているときのディスプレイ７の表示画面の一例を示すものである。図２（ａ）において、１０１はビデオゲームのある場面の画面（この画面１０１中のＡとＢはコンピュータ・グラフィックス（ＣＧ）により表現されたキャラクター）、１０２及び１０４はこの画面１０１の一部（右下）に表示されたアイコン（絵文字）である。また、１０３は前記画面１０１の例えば右下に「窓（ウインドウ）」状に開かれた画面で、取り込まれた実況映像を表示するための画面である。
【００１１】
今、ユーザーが前記ＣＤ−ＲＯＭドライブ５を駆動させてビデオゲームを利用している場合、ビデオゲームの各場面が展開していく中で、図２（ａ）の１０１に示す画面の場面になったとする。その場合、この画面１０１の右下には、アイコン１０２が表示されている。ユーザーがこのアイコン１０２の上にカーソルをマウス等で移動させてクリックすると、前記の実況映像の取り込み・表示用のプログラムが起動する。このプログラムは、ＣＤ−ＲＯＭ４内の所定の領域に記録されているこの場面に対応する実況映像を特定するためのアドレスデータ（識別データ）を取り出して、そのアドレスデータにアクセスして、前記カメラやマイクからの実況映像や実況の音を取り込み、前記の小さい画面１０３に表示させる。また、本実施形態では、予め、前記アイコン１０２をクリックすることなく、ある場面が展開されれば自動的にその場面と関連する実況映像を取り込んで表示するようにプログラムをユーザーなどが設定できるようにしておいてもよい。
【００１２】
なお、本実施形態において、前記の「各場面に関連する実況映像」とは、例えば、その場面が例えば神奈川県の湘南海岸に関連する場面なら「湘南海岸から海を見た情景を示す実況映像」などである。また、その場面が例えば東海道の旅行に関連する場面なら「ＪＲ東海道線の列車から外を見た景色を示す実況映像」などである。また、その場面が東京都の銀座通りに関連する場面なら「銀座通りの風景を示す実況映像」などである。
【００１３】
また、本実施形態において、前記アイコン１０４は、前記画面１０３に表示される実況映像を、前記のビデオゲームの展開画面１０１の「背景画面」とすることを選択するためのプログラム（ＣＤ−ＲＯＭ４に記録されている）を起動させるためのものである。すなわち、今、図２（ａ）の画面が表示されているときに、ユーザーが、マウス等を操作して、前記アイコン１０４をクリックすると、前記画面１０３に表示されている実況映像が、前記画面１０１の背景画面に置き換わり、図２（ａ）の画面１０１は、図２（ｂ）に示すような画面に変更される。この図２（ｂ）に示す画面では、前記のＣＧで表現されたキャラクターＡ及びＢの画像は図２（ａ）の状態と同じままだが、その背景画面が、前記の実況映像に置き換わっている。この場合は、前記のＣＧによるキャラクターＡ，Ｂの画像と実況映像とが従来の公知技術により、瞬時に「合成」されて表示されている。
【００１４】
なお、ここで使用される「実写（背景実像）とＣＧ（画像キャラクター）の合成画面の作成技術については、例えば、特開平７−１７８２４０号公報、特開平５−２４２２０４号公報などに詳細な説明がある。すなわち、例えば、特開平７−１７８２４０号公報には、「背景実像を撮像し、撮像信号をデジタル信号に変換する画像入力回路と、該画像入力回路からのデジタル信号を入力し、コンピュータグラフィック（ＣＧ）により生成されるデジタルデータとスプライトのデジタルデータの画像を該画像入力回路からのデジタル信号の画像に重畳してモニターに表示するビデオゲーム装置本体を有して構成される、実写とＣＧの合成画面を有するビデオゲーム装置」が開示されている。
【００１５】
以上のように、本実施形態によれば、ビデオゲームを再生（展開）しているときに、ユーザーは、随時、各場面に関連する場所の実況映像（移動中の乗り物から見たときの移動する場所の実況映像も含む）を、リアルタイムに又はほぼリアルタイムに、見ることができる。したがって、ビデオゲームなどのフィクション性のコンテンツの再生に大きな付加価値を与えることができる。すなわち、ユーザーは、ある場面に関連する場所に設置されたビデオカメラ及びマイクからの映像データ及び音声（音響）データをほぼリアルタイムに取り込んで、ディスプレイ７及びスピーカ８から出力することができるので、ユーザーはあたかもその場所に実際にいるような感動を得ることができる。
【００１６】
すなわち、従来からも、例えば「湘南海岸から海を見た情景」の映像などを記録し、それらをユーザーの要求により出力できるようにしたＣＤ−ＲＯＭは存在している。そして、これらのＣＤ−ＲＯＭに記録された映像は、プロのカメラマンが絶好の日和・時刻（例えば夕陽のきれいな時刻）の絶好の角度から美しく撮影したものである。これに対して、この実施形態１で提供される「実況映像」は、雨天のときも曇りのときもあるし、時刻も絶好の景色が見られる時刻ではないかもしれない。しかし、ユーザーにとっては、「今この時点・この瞬間の映像（二度とない映像）である」ということが、「一つの感動」を生むものなのである。つまり、過去の記録に過ぎない「湘南海岸から見た素晴らしい夕陽」の映像ではなく、「今この瞬間の湘南海岸から海を見た様子（夕方の時刻なら夕陽が見えるかも知れないが、曇天や雨天なら見えないが、それでもよい）」の映像を見た方が、より大きな印象や感動を得るユーザーは多いと思われる。この実施形態１はこのようなユーザーに、大きな印象や感動を与えることができるものである。
【００１７】
なお、本実施形態１では、前記アイコン１０４をクリックしないでも、自動的に、ビデオゲームの展開画面の背景が前記の実況映像に置き換わるように、予めプログラムをユーザーなどが設定できるようにしてもよい。
以上の実施形態１においては、前記ＣＤ−ＲＯＭ４にビデオゲームのデータ及びプログラムが記録されている例について説明したが、本発明はこれに限られるものではなく、例えば、カラオケ、その他の音楽のコンテンツ、ドラマ、小説などの物語り、などの他の様々なフィクション性のコンテンツの各場面を展開するためのデータ及びプログラムを記録した記録媒体を使用する場合でも、同様に適用できる。
【００１８】
また、本実施形態では、ユーザーが手元のパソコン１にＣＤ−ＲＯＭ４からのデータ及びプログラムを入力することにより、コンテンツの各場面を展開し、その各場面に応じて実況映像も取り込み・表示させるようにしているが、本発明はこれに限られるものではなく、例えば、前記のコンテンツ再生用のデータ及びプログラムと前記実況映像の取り込み・表示用のデータ及びプログラムとを、遠隔の中継サービス用管理コンピュータ１１に記録しておき、ユーザーは、ビデオゲームをやりたいときに、前記中継サービス用管理コンピュータ１１にアクセスしてそこから前記の各データ及びプログラムを取り込んで使用するようにしてもよい。
また、図１においては、前記パソコン１の制御装置２と中継サービス用コンピュータ１１との接続を公衆回線（有線）で行っているが、本発明はこれに限られるものではなく無線送信によってもよい。また、図１において、前記中継サービス用管理コンピュータ１１とビデオカメラ１２及びマイク１３との間も有線で接続しても無線で接続してもどちらでもよい。
【００１９】
実施形態２．
次に、本発明の実施形態２を説明する。この実施形態２においても、実施形態１で述べた図１のハードウェア構成がそのまま利用できる。すなわち、図１の多数のビデオカメラ１２及び集音マイク１３は、識別データにより互いに識別できるようになっている。したがって、また、各ビデオカメラ１２及び集音マイク１３からの実写映像及び音声は、互いに識別できるようになっている。また、これらの多数のビデオカメラ１２及びマイク１３等により入力された映像データ及び音声データは、ユーザーからの要求により、中継サービス用コンピュータ１１を介して、ユーザーがリアルタイムに閲覧・取り込み・表示できるようになっている。
【００２０】
この実施形態２では、前記ＣＤ−ＲＯＭ４に記録されるソフトウェア（データ及びプログラム）が実施形態１と異なっている。この実施形態２では、ＣＤ−ＲＯＭ４には、カラオケ用の楽曲データ、歌詞データ（文字データ）及びコンピュータプログラムが記録されている。
また、本実施形態２では、前記ＣＤ−ＲＯＭ４の中には、キーワードや文章などの文字列から成る検索データと、前記カメラ１２及びマイク１３のアドレスデータとを、互いに関連付けながら記録したデータベースが記録されている。
【００２１】
次に本実施形態２の動作を説明する。今、ユーザーがあるカラオケの曲を選択して再生させているとする。この場合、その曲と予め記録された画像が出力される。また、予め、ユーザーは、前記の実況映像取り込み・表示用のプログラムを起動させておく。すると、前記プログラムが実行されると、パソコン１の制御装置２は、カラオケの曲が、各楽節（カラオケの場合は、各楽節が各場面に当たる）が進行していくとき、各楽節に対応する歌詞データ（文字データ）を検索用データとして、前記データベースから、対応するカメラ１２のアドレスデータを検索する。そして、この検索されたアドレスデータにアクセスして、対応する実況映像を取り込み・表示をする。
したがって、このカラオケ用プログラム及びデータのユーザーは、スピーカ８及びディスプレイ７から楽曲と所定の画像を出力しながら、さらに、前記のディスプレイ７の画面に、再生している楽曲のある場面（楽節）に関連する場所の実況映像を出力させることができる。
【００２２】
ここで、本実施形態２の構成を図３を参照して、さらに詳細に説明する。この図３は、本実施形態２の構成を機能的・概念的に示したものである。図３において、符号３２は、コンピュータネットワーク３０に接続され、各地の実写映像と音声をリアルタイムに入力するためのビデオカメラ（撮像手段）及びマイクから成る実写映像入力部である。また、符号２４は、ビデオゲームのデータ及びプログラムなどのコンテンツ２６が記録されたＣＤ−ＲＯＭである。また、このＣＤ−ＲＯＭ２４には、前記コンテンツ２６と共に、文字列や図形・画像・楽曲などの検索用データと前記各カメラ及びマイクの識別データとを関連付けて記録したデータベース２５も記録されている。
【００２３】
また図３において、２１は前記コンテンツ２６を再生するためのコンテンツ再生部、２２はこのコンテンツ再生部２１からの信号を受けて表示部２７及びスピーカ２８を制御して所定の画像及び音声を出力する制御部である。また４０は、前記制御部２２からの信号を受けて、前記コンテンツ再生部２１により展開されるコンテンツのデータ（文字、図形、画像、楽曲などのデータ）から、所定の検索用データ（文字、図形、画像、楽曲などのデータ）を抽出する検索用データ抽出部である。また２３は、前記制御部２２からの信号を受けて、前記検索用データ抽出部４０が抽出した検索用データに基づいて、前記データベース２５から、対応するカメラ又はマイクのアドレスデータを検索するアドレスデータ検索部である。
【００２４】
制御部２２は、このアドレスデータ検索部２３からのアドレスデータに基づいて、映像取り込み部（例えばインターネット用のブラウザー・ソフトを実行する部分）２６を制御して、コンピュータ・ネットワーク３０を介して、前記の検索されたアドレスデータに該当する映像入力部３２にアクセスし、そこから、リアルタイムに実況映像を取り込む。制御部２２は、この取り込まれた実況映像を、前記コンテンツ２６から展開・出力される場面と関連させながら、前記表示部２７により出力させる。
【００２５】
この場合の表示画面は、図２（ａ）又は図２（ｂ）と同様である。すなわち、この場合の実況映像の画面表示は、画面の全体に背景として表示させてもよいし、画面の片隅の一部に窓（ウインドウ）を開いてそこに表示させてもよい。また、従来から公知の画面合成技術を使用して、前記の取り込んだ実写映像（実況映像）を背景として、その背景と歌手の映像（カラオケを歌っているユーザーの実写映像をリアルタイムに取り込んだ映像をも含む）とを合成してもよい。また、同様に、前記の取り込んだ実写映像を背景として、その前に歌詞を文字として表示させてもよい。また、前記の実況映像は、動画でもよいし、静止画でもよい。
【００２６】
また、本実施形態２において、音楽ソフトのコンテンツ展開プログラム（前記制御装置２のハードディスク又は前記ＣＤ−ＲＯＭ４に記録されている）により、その音楽の流れを聴いていると、前記プログラムが、自動的に、各場面（楽節）の中にある歌詞データなどから、対応する地点の実況映像の識別データ（カメラのアドレスデータ）を検索し、この検索した識別データに基づいて、前記制御装置２は、前記中継サービス用コンピュータ１１にアクセスして対応する実写映像を取り込み、直ちにその実写映像をユーザーの画面に表示させる。なお、前記の取り込まれる実況映像は、前記の音楽用のビデオの画面の背景の全体を構成させてもよいし、その画面の一部を構成させてもよい。
【００２７】
このように、この実施形態４によれば、カラオケなどの音楽を聴いているユーザーは、その音楽の各ブロック又は各場面毎に、実際の場所のしかも今この瞬間の映像を使用して展開することができるので、ユーザーにとっては、同じ音楽（カラオケ楽曲）の展開のためのデータ及びプログラムでも、取り込む実写映像は日々刻々異なっているので、展開される音楽に対応する画面は、日々刻々微妙に異なるものとなり、飽きることがない。
【００２８】
なお、前記制御装置２と中継サービス用コンピュータ１１の接続は無線でもよいこと、前記中継サービス用コンピュータと各ビデオカメラ１２及びマイク１３との接続も無線でもよいこと、及び、前記制御装置２は、前記音楽展開用プログラムを、前記ＣＤ−ＲＯＭ４から取り込むのではなく、前記中継サービス用コンピュータ１１などのネットワーク上のサーバーから取り込んでもよいことは、実施形態１と同様である。
【００２９】
実施形態３．
次に、本発明の実施形態３を説明する。この実施形態３においても、実施形態２で述べたハードウェア構成がそのまま利用できる。この実施形態３では、前記ＣＤ−ＲＯＭ４に記録されるコンテンツ（データ及びプログラム）として、コンピュータにより推理小説その他の小説などの物語りを各場面の展開により進行するためのフィクション性コンテンツのデータ及びプログラムが記録されている。また、図３で説明したデータベース２５も記録されている。
【００３０】
例えば、この物語りのコンテンツ展開プログラムのユーザーが、物語り等のコンテンツの展開を見ながらマウスで実況映像を希望することを示すアイコンをクリックした場合を考える。この場合は、前記制御装置２は、前記の物語りの中の文字データから検索用データを抽出し、この検索用データに基づいて、前記データベース２５から対応するカメラ及びマイクのアドレスデータを求める。そして、この求めたアドレスデータのカメラ及びマイクに、前記中継サービス用管理コンピュータ１１を介して、アクセスして、そこから、実況の映像と音声・音響を取り込み、ディスプレイ７及びスピーカ８から、出力させる。この場合の表示画面は、図２（ａ）又は図２（ｂ）と同様である。なお、この実施形態３では、物語り等のコンテンツ展開プログラムを、ある場面になれば、ユーザーのクリックによらず自動的に、そのブロック又はその場面と対応する実写映像を表示するように、予め構成しておいてもよい。
【００３１】
このように、この実施形態３によれば、例えば、推理小説の推理を働かせるブロック又は場面などを実際の場所のしかも今この瞬間の映像を使用して展開することができるので、ユーザーにとっては、同じ推理小説の展開のためのデータ及びプログラムでも、取り込む実写映像は日々刻々異なっているので、展開される推理小説の醍醐味は日々刻々微妙に異なるものとなり、推理小説の興趣を増大させられるようになる。
【００３２】
なお、以上の実施形態１〜４では、ビデオゲーム、物語、記録映画、音楽などのコンテンツを記録するデータベースと、そのコンテンツの各ブロック又は各場面を識別するための展開識別データと各地点の実写映像を識別するための実写識別データとを互いに関連付けて記録するデータベースとを、ＣＤ−ＲＯＭ４に記録するようにしているが、本発明はこれに限定されるものではなく、例えば、コンピュータ・ネットワーク上の中継用コンピュータ（サーバー）１１の記録装置に記録させて、各ユーザーは、このサーバー１１の記録装置からデータを引き出してコンテンツを鑑賞又は利用するようにしてもよい。
【００３３】
また、前記のコンテンツを再生するプログラムや、コンテンツの各ブロック又は各場面を識別する展開識別データから各実写識別データを検索するためのプログラムや、この検索された実写識別データから該当する実写映像を取り込むためのプログラムなども、前記コンピュータ・ネットワーク上のサーバー１１の記録装置に格納して、各ユーザーは、このサーバー１１の記録装置からデータを引き出して前記コンテンツと実写映像とを鑑賞又は利用するようにしてもよい。
【００３４】
実施形態４．
次に、本発明の実施形態４を説明する。この実施形態４では、前記の実施形態１の構成に加えて、次のようなものが備えられている。
まず、前記ビデオカメラ１２やマイク１３の近傍に備えられた匂い入力装置が備えられている。この匂い入力装置には、匂いセンサと、この匂いセンサからの信号を匂いのデジタルデータにコード化するコード化部が備えられている。前記匂いセンサは、既存の複数の匂いセンサから構成され、各センサからの匂い量検出値はすべて前記コード化部（エンコーダ）に供給される。コード化部（エンコーダ）では、この供給された匂い量検出値を符号化する。この符号化された匂いデータ（デジタルデータ）は、記録装置に記録されると共に、遠隔のユーザーが、コンピュータ・ネットワークを介してリアルタイムに閲覧し取り込めるようになっている。なお、前記の匂いセンサは、感知できる匂いの種類毎に複数用意しておき、できるだけ現場の元の匂いを忠実に再現できるだけの情報を得られるようにすることが望ましい。
【００３５】
次に、ユーザー側には、前記閲覧し取り込んだ匂いデータ（デジタルデータ）を、現場の匂いに近似した匂いを発生させるための芳香剤調合データに変換する変換装置と、前記ディスプレイ７（図１）の近傍に備えられ、前記芳香剤調合データから芳香剤を調合して所望の匂いを発生させる匂い発生装置と、が備えられている。
【００３６】
まず、前記の「前記閲覧し取り込んだ匂いデータ（デジタルデータ）を、現場の匂いに近似した匂いを発生させるための芳香剤調合データに変換する変換装置」を説明する。前記変換装置は、各匂いセンサの検出値のパターンを各芳香剤の出力値のパターンに変換する。より具体的には、様々な種類の匂いのそれぞれについて、その匂いを匂いセンサに検出させると検出値がどのような値をとるかを予め調査・記録しておく。そして、この匂いと匂いセンサの検出値パターンとの関係を記録したデータと、各匂いと芳香剤（の成分）との関係を記録したデータとから、各匂いセンサの検出値のパターンと複数種類の芳香剤の出力値のパターンとを対応付けて記録しておくようにする。前記変換装置は、この対応付けられた情報に基づいて、匂いセンサの検出値のパターンを芳香剤（の成分）の出力値のパターン（これが「芳香剤調合データ」となる）に変換するものである。このことをより詳細に述べると、次のとおりである。前記変換装置には、各匂いを匂いセンサで検出したときの匂いセンサの検出値と、その匂いを後述の匂い発生装置で発生させるときの各芳香剤の出力値との対応関係が記録されたセンサ芳香剤量変換テーブルが、予め記録されている。そして、変換装置は、前記匂いセンサの検出値データに基づいて、このセンサ芳香剤量変換テーブルを参照して、各匂いセンサ毎の検出値を各芳香剤毎の出力値に変換する。
【００３７】
次に、前記の「前記芳香剤調合データから芳香剤を調合して所望の匂いを発生させる匂い発生装置」を説明する。匂い発生装置は、予め複数種類の芳香剤を用意しておき、前記の「芳香剤調合データ」（前記の芳香剤出力パターンデータ。各芳香剤からの匂い成分をどれだけ発生させるかを示すデータ）に基づいて、必要な種類の匂いの成分（芳香剤からの成分）を必要な分量だけ発生させる。匂い発生装置の形態としては、ある空間中においてその空間全体に匂いを行き渡らせる据置型のものと、ユーザーの鼻の付近又は鼻の中に装着して装着した人にのみ匂いを感得させる個人携帯型のものと、が考えられる。
【００３８】
例えば、前記の据置型のものとしては、次のようなものが考えられる。すなわち、箱の底に芳香剤の入った容器を並べて、芳香剤と空気とが接する面積を任意に調整できる蓋を各容器に付けておき、箱の後ろ側には、必要に応じて送風機を設ける。そして、前記の「芳香剤出力パターン」のデータに応じて、各芳香剤の成分を所定量ずつ放出できるように、対応する各芳香剤の容器の蓋の開閉具合を調節する。また、前記携帯型のものについては、基本的構成は据置型のものと同様でよいが、これを小型化し、これをヘルメット型、ヘッドセット型、メガネ型、マスク型などの頭部支持具によりユーザーの鼻の付近に装着できるようにする。
【００３９】
なお、この実施形態４では、前記の「前記閲覧し取り込んだ符号化された匂いデータを、現場の匂いに近似した匂いを発生させるための芳香剤調合データに変換する変換装置」をユーザー側のパソコン１側に備えるようにしているが、本発明ではこれに限られるものではなく、例えば、現場のビデオカメラ１２やマイク１３が設置された地点に備えるようにしてもよいし、コンピュータ・ネットワーク上の中継サービス用コンピュータ（サーバー）１１に備えるようにしてもよい。また、以上の実施形態３で説明した「匂い又は香りのデータ化、記録、通信、及び再生」の技術は、例えば特開平７−５５７４２号公報などに開示されている。
【００４０】
【発明の効果】
(1)以上のように、本発明によるコンテンツ展開システムによれば、ユーザーは、各場面により構成されるフィクション性のコンテンツ（コンピュータ利用の、ビデオゲーム、小説、物語り、映画、音楽、カラオケ、ドラマ等のフィクション番組等）を展開させていくとき、各場面に応じて、その各場面に関連した場所（地点）のリアルタイム又はほぼリアルタイムの実況映像を、画面で見ることができるので、そのコンテンツをより興味深く且つ印象深いものにするとができる。特に、リアルタイムの実況映像は、日々刻々と変化して行くので、その実況映像を表示しながらコンテンツを鑑賞又利用すると、そのコンテンツ全体の内容も日々刻々と微妙に変わることになるので、そのコンテンツを何度繰り返しても飽きることがなくなるというメリットがある。
(2)また、本発明によるコンテンツ展開システムによれば、コンピュータ利用ゲームなどのフィクション性コンテンツの展開の中で、各場面毎にそれに関連する地点の実際の実況映像を表示できるので、フィクション性コンテンツをより興趣深く且つ印象深いものにすることができる。特に、実際の景色などの状況は、「記録された景色などの状況」とは異なり、季節・天候・太陽の位置などにより日々刻々と変化しているので、そのコンテンツの展開の中で提供される（受信されて表示される）実況映像は同じ地点のものでもそれぞれ微妙に異なっているはずであるから、ユーザーは、そのコンテンツを何回繰り返しても「飽きない」ようになる。
(3)また、本発明において、前記映像入力手段に、その地点において発生している音声をリアルタイムに入力する手段をも含ませることにより、ユーザーは、実写映像（現場の生の映像）だけでなく、現場の生の音声をも併せて知ることが可能になる。
(4)また本発明では、さらに、前記映像入力手段の近傍に備えられ、匂いセンサと、この匂いセンサからの信号を匂いデジタルデータに変換する手段とから構成され、前映像入力手段の設置された地点又はその周辺の匂いを入力するための匂い入力手段と、この匂い入力手段からの匂いデータを、その匂いに近似した匂いを発生させるための芳香剤調合データに変換する手段と、前記表示手段の近傍に備えられ、前記芳香剤調合データから芳香剤を調合して所望の匂いを発生させる匂い発生手段と、を含むようにすることにより、ユーザーは、前記の実写映像と実際の音声だけでなく、現場の実際の匂いをも、リアルタイムに遠隔地においてユーザーが感得することができるようになる。
【図面の簡単な説明】
【図１】  本発明の実施形態１〜４のハードウェア構成を示す図である。
【図２】  本発明の実施形態１〜４による実況映像の表示画面を説明するための図である。
【図３】  本発明の実施形態２〜４を機能的・概念的に示すブロック図である。
【符号の説明】
１  パーソナルコンピュータ（パソコン）
２  制御装置
３  ハードディスク装置
４  ＣＤ−ＲＯＭ
５  ＣＤ−ＲＯＭドライブ
７  ディスプレイ
８，２８  スピーカ
１１，１１ａ  中継サービス用管理コンピュータ
１２，１２ａ，１２ｂ  カメラ
１３，１３ａ，１３ｂ  マイク
２２  制御部
２１  コンテンツ再生部
２３  検索部
２４  ＣＤ−ＲＯＭ
２５  データベース記録部（記録領域）
２６  コンテンツ用データ及びプログラム記録部（記録領域）
４０  検索用データ抽出部
２７  表示部
【図１】
0003783222.tif 000002
【図２】
0003783222.tif 000003
【図３】
0003783222.tif 000004