(57)【要約】【課題】  音声を出力できない状況であっても、ユーザが音声付き画像の内容を理解できるようにする。【解決手段】  ユーザ端末１０は、音声付き画像であるコンテンツの注文の際に、ユーザの状態を示すプレゼンス情報を、通信ネットワーク１００を介して画像配信サーバ２０に送信する。画像配信サーバ２０は、画像蓄積サーバ３０からコンテンツを取得すると、プレゼンス情報にもとづいて音声を出力可能であるか否かを判断する。音声を出力不可であると判断すると、画像配信サーバ２０は、音声データをテキストデータに変換し、画像にあわせてテキストを表示するための統合データを生成する。そして、画像配信サーバ２０は、生成した統合データを、通信ネットワーク１００を介してユーザ端末１０に配信する。【選択図】  図２
2006115385.tif 000002
【特許請求の範囲】
【請求項１】
音声情報が付随する画像である音声付随画像を配信する画像配信システムであって、
音声付随画像を蓄積する画像蓄積手段と、
音声付随画像を配信する画像配信装置とを備え、
前記画像蓄積手段は、画像データと音声データとを対応付けて予め複数蓄積し、
前記画像配信装置は、
ユーザ端末からの要求に応じて、前記画像蓄積手段から、画像データ及び当該画像データに対応する音声データを抽出する情報抽出手段と、
ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断する音声出力可否判断手段と、
前記音声出力可否判断手段が音声を出力不可であると判断すると、前記情報抽出手段が抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成する変換データ生成手段と、
前記変換データ生成手段が生成した変換データを、通信ネットワークを介して前記ユーザ端末に送信する情報配信手段とを含む
ことを特徴とする画像配信システム。
【請求項２】
ユーザの現在の状態であるユーザ状態を設定するユーザ状態設定手段と、
音声付随画像の配信要求を、通信ネットワークを介して画像配信装置に送信する配信要求送信手段とを含むユーザ端末を備え、
前記配信要求送信手段は、前記ユーザ状態設定手段が設定するユーザ状態にもとづいて、前記配信要求とともにユーザ状態情報を送信する
請求項１記載の画像配信システム。
【請求項３】
ユーザ端末は、画像配信装置から変換データを受信すると、前記受信した変換データにもとづいて、画像にあわせて音声の内容をテキストで表示する請求項２記載の画像配信システム。
【請求項４】
画像配信装置は、音声出力可否判断手段が音声を出力不可であると判断すると、情報抽出手段が抽出した音声データをテキストデータに変換する音声変換手段を含み、
変換データ生成手段は、前記情報抽出手段が抽出した画像データと、前記音声変換手段が変換したテキストデータとの対応付けを行うことによって変換データを生成する
請求項１から請求項３のうちのいずれか１項に記載の画像配信システム。
【請求項５】
変換データ生成手段は、動画像に含まれるフレーム画像にテキストデータを対応付けることによって変換データを生成する請求項４記載の画像配信システム。
【請求項６】
音声出力可否判断手段は、
ユーザの状態と音声の出力の可否とを対応付けた対応テーブルを有し、
ユーザ状態情報にもとづいてユーザの状態を特定し、
前記対応テーブルを用いて、前記特定したユーザの状態にもとづいて、音声を出力可能であるか否かを判断する
請求項１から請求項５のうちのいずれか１項に記載の画像配信システム。
【請求項７】
情報配信手段は、音声出力可否判断手段が音声を出力可能であると判断すると、情報抽出手段が抽出した画像データ及び音声データを、通信ネットワークを介してユーザ端末に送信する
請求項１から請求項６のうちのいずれか１項に記載の画像配信システム。
【請求項８】
情報抽出手段は、ユーザ端末からの要求に応じて、音声付随画像の抽出要求を、通信ネットワークを介して画像蓄積手段に送信し、
前記画像蓄積手段は、
前記情報抽出手段から抽出要求を受信すると、画像データ及び当該画像データに対応する音声データを抽出し、
前記抽出した画像データ及び音声データを、通信ネットワークを介して画像配信装置に送信する
請求項１から請求項７のうちのいずれか１項に記載の画像配信システム。
【請求項９】
画像配信装置は、
変換データ生成手段が生成した変換データを記憶する変換データ記憶手段と、
音声出力可否判断手段が音声を出力不可であると判断すると、配信要求された音声付随画像に対応する変換データが前記変換データ記憶手段に既に記憶されているか否かを判断する変換データ有無判断手段とを含み、
情報配信手段は、
前記変換データ有無判断手段が配信要求された音声付随画像に対応する変換データが前記変換データ記憶手段に既に記憶されていると判断すると、前記配信要求された音声付随画像に対応する変換データを前記変換データ記憶手段から抽出し、
前記抽出した変換データを、通信ネットワークを介して前記ユーザ端末に送信する
請求項１から請求項８のうちのいずれか１項に記載の画像配信システム。
【請求項１０】
音声情報が付随する画像である音声付随画像を配信する画像配信装置であって、
ユーザ端末からの要求に応じて、画像データと音声データとを対応付けて予め複数蓄積する画像蓄積手段から、画像データ及び当該画像データに対応する音声データを抽出する情報抽出手段と、
ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断する音声出力可否判断手段と、
前記音声出力可否判断手段が音声を出力不可であると判断すると、前記情報抽出手段が抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成する変換データ生成手段と、
前記変換データ生成手段が生成した変換データを、通信ネットワークを介して前記ユーザ端末に送信する情報配信手段とを備えた
ことを特徴とする画像配信装置。
【請求項１１】
音声情報が付随する画像である音声付随画像を配信する画像配信方法であって、
画像蓄積手段が、画像データと音声データとを対応付けて予め複数蓄積するステップと、
画像配信装置が、ユーザ端末からの要求に応じて、前記画像蓄積手段から、画像データ及び当該画像データに対応する音声データを抽出するステップと、
前記画像配信装置が、ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断するステップと、
前記画像配信装置が、音声を出力不可であると判断すると、前記抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成するステップと、
前記画像配信装置が、前記生成した変換データを、通信ネットワークを介して前記ユーザ端末に送信するステップとを含む
ことを特徴とする画像配信方法。
【請求項１２】
ユーザ端末が、ユーザの現在の状態であるユーザ状態を設定するステップと、
前記ユーザ端末が、前記設定するユーザ状態にもとづいて、音声付随画像の配信要求とともに、ユーザ状態情報を通信ネットワークを介して画像配信装置に送信するステップとを含む
請求項１０記載の画像配信方法。
【請求項１３】
音声情報が付随する画像である音声付随画像を配信するための画像配信プログラムであって、
コンピュータに、
ユーザ端末からの要求に応じて、画像データと音声データとを対応付けて予め複数蓄積する画像蓄積手段から、画像データ及び当該画像データに対応する音声データを抽出する処理と、
ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断する処理と、
音声を出力不可であると判断すると、前記抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成する処理と、
前記生成した変換データを、通信ネットワークを介して前記ユーザ端末に送信する処理とを
実行させるための画像配信プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声情報が付随する画像である音声付き画像を配信する画像配信システム、画像配信装置、画像配信方法及び画像配信プログラムに関し、特にユーザの状態に応じて音声を変換して画像を配信できる画像配信システム、画像配信装置、画像配信方法及び画像配信プログラムに関する。
【背景技術】
【０００２】
インターネット等のネットワークを介して画像を配信する画像配信サービスを利用する場合、コンテンツとして音声付きの画像の配信が行われることがある。例えば、音声付き画像を配信するシステムとして、特許文献１には、映像及び音声を含むマルチメディア情報を利用者端末に配信できるマルチメディア情報通信サービスシステムが記載されている。また、特許文献２には、ネットワークの輻輳状態に応じて、音声付き映像の音声をテキストに変換して送信する通信システムが記載されている。
【０００３】
【特許文献１】特開２００３−９１０５号公報（段落００２７−００３３、図１）
【特許文献２】特開２００１−１４５１０３号公報（段落００６４−００７１、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１に記載されたシステムを画像配信システムとして利用すれば、ネットワークを介してユーザ端末が音声付きの画像をダウンロードできる。しかし、コンテンツをダウンロードしても、ユーザの状態によっては音声を出力できない場合がある。例えば、ユーザが通勤中や通学中で電車内にいる場合には、他の乗客に迷惑がかかるため、コンテンツをダウンロードしても音声を出力できない。また、例えば、業務休み時間等の空き時間を利用してコンテンツを視聴したい場合であっても、会社内では音声を出力できない。
【０００５】
音声を出力できない状況でコンテンツを視聴する場合、ボリュームを落とし音声を消した状態で視聴しなければならず、ユーザはコンテンツの内容を十分に理解することができない。また、音声を出力できない状況で音声を聞くためには、イヤホンを用いてコンテンツを視聴しなければならず煩雑である。
【０００６】
また、特許文献２に記載された通信システムを用いれば、ネットワークの輻輳状態に応じて音声をテキストに変換し、音声付き映像のデータ容量を小さくて送信する。そして、受信側でテキストを音声に変換することによって、マルチメディア情報の通信を継続できる。しかし、音声を出力できない状況で用いる場合には、音声を消した状態で視聴しなければならず、ユーザは音声を含むコンテンツの内容を十分に理解することができない。
【０００７】
そこで、本発明は、音声を出力できない状況であっても、ユーザが音声付き画像の内容を理解できる画像配信システム、画像配信装置、画像配信方法及び画像配信プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明による画像配信システムは、音声情報が付随する画像である音声付随画像（例えば、音声付き画像）を配信する画像配信システムであって、音声付随画像を蓄積する画像蓄積手段（例えば、画像蓄積サーバ３０によって実現される）と、音声付随画像を配信する画像配信装置（例えば、画像配信サーバ２０によって実現される）とを備え、画像蓄積手段は、画像データと音声データとを対応付けて予め複数蓄積し、画像配信装置は、ユーザ端末からの要求に応じて、画像蓄積手段から、画像データ及び画像データに対応する音声データを抽出する情報抽出手段（例えば、注文識別情報送信手段２０５によって実現される）と、ユーザの状態を示すユーザ状態情報（例えば、プレゼンス情報）にもとづいて、音声を出力可能であるか否かを判断する音声出力可否判断手段（例えば、プレゼンス状態判定手段２０７によって実現される）と、音声出力可否判断手段が音声を出力不可であると判断すると、情報抽出手段が抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データ（例えば、統合データ）を生成する変換データ生成手段（例えば、統合データ生成手段２０９によって実現される）と、変換データ生成手段が生成した変換データを、通信ネットワークを介してユーザ端末に送信する情報配信手段（例えば、画像配信手段２１１によって実現される）とを含むことを特徴とする。
【０００９】
また、画像配信システムは、ユーザの現在の状態であるユーザ状態（例えば、プレゼンス状態）を設定するユーザ状態設定手段（例えば、チャット機能を利用したユーザ端末１０のＣＰＵ及び記憶装置によって実現される）と、音声付随画像の配信要求（例えば、画像購入注文情報）を、通信ネットワークを介して画像配信装置に送信する配信要求送信手段（例えば、ユーザ端末１０のＣＰＵ及びネットワークインタフェース部によって実現される）とを含むユーザ端末を備え、配信要求送信手段は、ユーザ状態設定手段が設定するユーザ状態にもとづいて、配信要求とともにユーザ状態情報を送信するものであってもよい。そのような構成によれば、コンテンツの配信要求の際に、画像配信装置にユーザ状態情報を自動的に送信することができる。そのため、画像配信装置は、ユーザ端末から受信したユーザ状態情報にもとづいて、容易にユーザの現在の状態を特定することができる。
【００１０】
また、画像配信システムにおいて、ユーザ端末は、画像配信装置から変換データを受信すると、受信した変換データにもとづいて、画像にあわせて音声の内容をテキストで表示するものであることが望ましい。そのような構成によれば、ユーザは、表示されたテキストを見ることによって、音声の内容を容易に理解することができる。
【００１１】
また、画像配信システムにおいて、画像配信装置は、音声出力可否判断手段が音声を出力不可であると判断すると、情報抽出手段が抽出した音声データをテキストデータに変換する音声変換手段（例えば、音声データ変換手段２０８によって実現される）を含み、変換データ生成手段は、前記情報抽出手段が抽出した画像データと、前記音声変換手段が変換したテキストデータとの対応付けを行うことによって変換データを生成するものであってもよい。
【００１２】
また、変換データ生成手段は、動画像に含まれるフレーム画像にテキストデータを対応付けることによって変換データを生成するものであってもよい。
【００１３】
また、音声出力可否判断手段は、ユーザの状態と音声の出力の可否とを対応付けた対応テーブルを有し、ユーザ状態情報にもとづいてユーザの状態を特定し、対応テーブルを用いて、特定したユーザの状態にもとづいて、音声を出力可能であるか否かを判断するものであってもよい。そのような構成によれば、画像配信装置は、ユーザが音声を出力できる状況であるか否かを容易に判断することができる。
【００１４】
また、情報配信手段は、音声出力可否判断手段が音声を出力可能であると判断すると、情報抽出手段が抽出した画像データ及び音声データを、通信ネットワークを介してユーザ端末に送信するものであってもよい。
【００１５】
また、情報抽出手段は、ユーザ端末からの要求に応じて、音声付随画像の抽出要求（例えば、注文識別情報）を、通信ネットワークを介して画像蓄積手段に送信し、画像蓄積手段は、情報抽出手段から抽出要求を受信すると、画像データ及び画像データに対応する音声データを抽出し、抽出した画像データ及び音声データを、通信ネットワークを介して画像配信装置に送信するものであってもよい。
【００１６】
また、画像配信システムにおいて、画像配信装置は、変換データ生成手段が生成した変換データを記憶する変換データ記憶手段（例えば、統合データ保存手段２１０によって実現される）と、音声出力可否判断手段が音声を出力不可であると判断すると、配信要求された音声付随画像に対応する変換データが変換データ記憶手段に既に記憶されているか否かを判断する変換データ有無判断手段（例えば、プレゼンス状態判定手段２０７によって実現される）とを含み、情報配信手段は、変換データ有無判断手段が配信要求された音声付随画像に対応する変換データが変換データ記憶手段に既に記憶されていると判断すると、配信要求された音声付随画像に対応する変換データを変換データ記憶手段から抽出し、抽出した変換データを、通信ネットワークを介してユーザ端末に送信するものであってもよい。そのような構成によれば、同じコンテンツを２回目以降に配信する場合、音声データの変換処理を省略することができ、処理の効率化を図ることができる。
【００１７】
本発明による画像配信装置は、音声情報が付随する画像である音声付随画像を配信する画像配信装置であって、ユーザ端末からの要求に応じて、画像データと音声データとを対応付けて予め複数蓄積する画像蓄積手段から、画像データ及び画像データに対応する音声データを抽出する情報抽出手段と、ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断する音声出力可否判断手段と、音声出力可否判断手段が音声を出力不可であると判断すると、情報抽出手段が抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成する変換データ生成手段と、変換データ生成手段が生成した変換データを、通信ネットワークを介してユーザ端末に送信する情報配信手段とを備えたことを特徴とする。
【００１８】
本発明による画像配信方法は、音声情報が付随する画像である音声付随画像を配信する画像配信方法であって、画像蓄積手段が、画像データと音声データとを対応付けて予め複数蓄積するステップと、画像配信装置が、ユーザ端末からの要求に応じて、画像蓄積手段から、画像データ及び画像データに対応する音声データを抽出するステップと、画像配信装置が、ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断するステップと、画像配信装置が、音声を出力不可であると判断すると、抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成するステップと、画像配信装置が、生成した変換データを、通信ネットワークを介してユーザ端末に送信するステップとを含むことを特徴とする。
【００１９】
また、画像配信方法は、ユーザ端末が、ユーザの現在の状態であるユーザ状態を設定するステップと、ユーザ端末が、設定するユーザ状態にもとづいて、音声付随画像の配信要求とともに、ユーザ状態情報を通信ネットワークを介して画像配信装置に送信するステップとを含むものであってもよい。そのような構成によれば、コンテンツの配信要求の際に、画像配信装置にユーザ状態情報を自動的に送信することができる。そのため、画像配信装置は、ユーザ端末から受信したユーザ状態情報にもとづいて、容易にユーザの現在の状態を特定することができる。
【００２０】
本発明による画像配信プログラムは、音声情報が付随する画像である音声付随画像を配信するための画像配信プログラムであって、コンピュータに、ユーザ端末からの要求に応じて、画像データと音声データとを対応付けて予め複数蓄積する画像蓄積手段から、画像データ及び画像データに対応する音声データを抽出する処理と、ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断する処理と、音声を出力不可であると判断すると、抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成する処理と、生成した変換データを、通信ネットワークを介してユーザ端末に送信する処理とを実行させることを特徴とする。
【発明の効果】
【００２１】
本発明によれば、ユーザ状態情報にもとづいて音声の出力可否を判断し、音声を出力不可であると判断すると、画像にあわせて音声の内容をテキストで表示するための変換データを生成する。そして、生成した変換データをユーザ端末に配信する。そのため、音声を出力できない状況でコンテンツをダウンロードした場合であっても、音声を出力せずに、画像にあわせて音声の内容をテキストとして表示することができる。従って、音声を出力できない状況であっても、ユーザが音声付き画像の内容を理解することができる。
【発明を実施するための最良の形態】
【００２２】
以下、本発明の実施の形態を図面を参照して説明する。図１は、本発明による画像配信システムの構成の一例を示すブロック図である。本実施の形態では、画像配信システムは、コンテンツとして、音声情報が付随する画像である音声付き画像（動画像）を配信する。図１に示すように、画像配信システムは、ユーザが使用するユーザ端末１０と、音声付き画像を配信する画像配信サーバ２０と、音声付き画像を蓄積する画像蓄積サーバ３０とを含む。また、図１に示すように、ユーザ端末１０、画像配信サーバ２０及び画像蓄積サーバ３０は、インターネット等の通信ネットワーク１００を介して接続される。
【００２３】
ユーザ端末１０は、具体的には、携帯電話機や、家庭用のノート型パーソナルコンピュータ等の情報処理端末である。なお、図１では、１つのユーザ端末１０を示しているが、画像配信システムは、複数のユーザ端末１０を含む。ユーザ端末１０は、メーラやブラウザが搭載され、インターネット等のネットワーク接続機能を備える。
【００２４】
ユーザ端末１０は、通信ネットワーク１００を介して画像配信サーバ２０にアクセスし、注文情報を送信してコンテンツをダウンロードする機能を備える。本実施の形態では、ユーザ端末１０は、注文情報として、購入を希望するコンテンツに含まれる画像の画像名を含む画像購入注文情報を、通信ネットワーク１００を介して画像配信サーバ２０に送信する。また、ユーザ端末１０は、注文情報として、ユーザの現在の状態を示すプレゼンス情報を、画像購入注文情報とともに、通信ネットワーク１００を介して画像配信サーバ２０に送信する。
【００２５】
ユーザ端末１０は、ユーザの状態の変化に応じて、ユーザの現在の状態であるプレゼンス状態を設定する機能を備える。例えば、ユーザは予めユビキタス技術を用いたチャットサービスの利用契約を締結しており、ユーザ端末１０は、チャット機能を用いたプレゼンス状態の設定機能を備える。この場合、ユーザ端末１０は、ユーザの入力操作に従って、休暇中や仕事中、移動中等のユーザの現在の状態を入力する。そして、ユーザ端末１０は、入力したユーザの状態をプレゼンス状態として設定する。また、コンテンツを注文する際に、ユーザ端末１０は、現在のプレゼンス状態にもとづいて、休暇中や仕事中、移動中等のプレゼンス情報を画像配信サーバ２０に送信する。
【００２６】
なお、プレゼンス状態の設定方法は、チャット機能を利用する方法に限られない。例えば、ユーザ端末１０は、マナーモードの設定の有無をプレゼンス状態として設定してもよい、この場合、ユーザ端末１０は、画像購入注文情報とともに、プレゼンス情報として「マナーモード」又は「非マナーモード」の情報を画像配信サーバ２０に送信してもよい。
【００２７】
また、ユーザ端末１０は、ダウンロードしたコンテンツに含まれる画像を表示部に表示する機能を備える。本実施の形態では、ユーザ端末１０は、コンテンツに含まれる動画像を再生して表示する。また、ユーザ端末１０は、ダウンロードしたコンテンツにテキストデータが含まれる場合には、画像にあわせてテキストを表示する機能を備える。また、ユーザ端末１０は、ダウンロードしたコンテンツに音声が含まれる場合には、画像にあわせて音声を再生して出力する機能を備える。
【００２８】
画像配信サーバ２０は、通信ネットワーク１００を介して音声付き画像（コンテンツ）を配信する画像配信会社が運営するサーバである。画像配信サーバ２０は、具体的には、ワークステーションやパーソナルコンピュータ等の情報処理装置によって実現される。画像配信サーバ２０は、ユーザ端末１０からの注文に応じて、通信ネットワーク１００を介して画像蓄積サーバ３０にコンテンツを要求する機能を備える。また、画像配信サーバ２０は、画像蓄積サーバ３０からコンテンツを受信し、受信したコンテンツをユーザ端末１０に配信する機能を備える。また、画像配信サーバ２０は、ユーザのプレゼンス状態にもとづいてコンテンツに加工が必要か否かを判断し、必要に応じてコンテンツの音声を加工してユーザ端末１０に配信する機能を備える。
【００２９】
本実施の形態では、画像配信会社は、画像配信サーバ２０を用いて、画像配信サービスを提供するためのＷｅｂサイトを開設している。本実施の形態では、画像配信サーバ２０の記憶装置（図示せず）は、ユーザ端末１０に表示させるＷｅｂページ等の情報を記憶する。Ｗｅｂページの画面情報は、例えば、ＨＴＭＬやＸＭＬ等のページ記述言語によって記述された情報が用いられる。Ｗｅｂページは、ユーザ端末１０において、ＵＲＬが入力されたり、画面上のリンクが設定された部分がマウスクリックされることによって指定される。
【００３０】
図２は、画像配信サーバ２０の機能構成の一例を示す機能ブロック図である。図２に示すように、画像配信サーバ２０は、リスト情報送信手段２０１、注文情報受信手段２０２、注文識別情報生成手段２０３、注文識別情報記憶手段２０４、注文識別情報送信手段２０５、画像受信手段２０６、プレゼンス状態判定手段２０７、音声データ変換手段２０８、統合データ生成手段２０９、統合データ保存手段２１０及び画像配信手段２１１を含む。
【００３１】
リスト情報送信手段２０１及び注文情報受信手段２０２は、具体的には、プログラムに従って動作するＣＰＵ（図示せず）、記憶装置及びネットワークインタフェース部（図示せず）によって実現される。リスト情報送信手段２０１は、画像蓄積サーバ３０が蓄積するコンテンツの一覧を表示させる表示画面となるＷｅｂページ等の情報を予め記憶する。本実施の形態では、コンテンツの一覧を表示させる表示画面となるＷｅｂページの情報を画像ダウンロードリスト情報という。リスト情報送信手段２０１は、ユーザ端末１０からのアクセスに応じて、通信ネットワーク１００を介して画像ダウンロードリスト情報をユーザ端末１０に送信する機能を備える。注文情報受信手段２０２は、ユーザ端末１０から、通信ネットワーク１００を介して、画像購入注文情報及びプレゼンス情報を含む注文情報を受信する機能を備える。
【００３２】
注文識別情報生成手段２０３は、具体的には、プログラムに従って動作するＣＰＵによって実現される。注文識別情報生成手段２０３は、ユーザ端末１０からの注文情報にもとづいて、注文を識別するための注文識別情報を生成する機能を備える。本実施の形態では、注文識別情報生成手段２０３は、注文情報に対して、注文を識別するための注文識別番号を割り当てる。そして、注文識別情報生成手段２０３は、割り当てた注文識別番号、注文されたコンテンツの画像の画像名、及びプレゼンス情報を含む注文識別情報を生成する。また、注文識別情報生成手段２０３は、生成した注文識別情報を注文情報と対応付けて注文識別情報記憶手段２０４に記憶させる機能を備える。
【００３３】
注文識別情報記憶手段２０４は、具体的には、画像配信サーバ２０の記憶装置によって実現される。注文識別情報記憶手段２０４は、注文識別情報生成手段２０３が生成した注文識別情報と、注文情報受信手段２０２が受信した注文情報とを対応付けて記憶する。
【００３４】
注文識別情報送信手段２０５及び画像受信手段２０６は、具体的には、プログラムに従って動作するＣＰＵ、記憶装置及びネットワークインタフェース部によって実現される。注文識別情報送信手段２０５は、注文識別情報生成手段２０３が生成した注文識別情報を、通信ネットワーク１００を介して画像蓄積サーバ３０に送信する機能を備える。画像受信手段２０６は、画像蓄積サーバ３０から、通信ネットワーク１００を介してコンテンツを受信する機能を備える。
【００３５】
プレゼンス状態判定手段２０７、音声データ変換手段２０８及び統合データ生成手段２０９は、具体的には、プログラムに従って動作するＣＰＵ及び記憶装置によって実現される。プレゼンス状態判定手段２０７は、注文識別情報にもとづいて、ユーザの現在の状態（プレゼンス状態）を特定する機能を備える。また、プレゼンス状態判定手段２０７は、ユーザのプレゼンス状態にもとづいて、コンテンツの音声データの加工が必要であるか否かを判断する機能を備える。本実施の形態では、プレゼンス状態判定手段２０７は、プレゼンス状態にもとづいて、音声を出力できる状況であるか否かを判断する。そして、音声を出力できる状況でないと判断すると、プレゼンス状態判定手段２０７は、コンテンツの音声データに加工が必要であると判断する。
【００３６】
音声データ変換手段２０８は、コンテンツに含まれる音声データをテキストデータに変換する機能を備える。例えば、音声データ変換手段２０８は、単語辞書を予め記憶しており、記憶する単語辞書を用いて音声認識をすることによって、音声データをテキストデータに変換する。また、音声データ変換手段２０８は、コンテンツに含まれる音声データを所定単位に分割してテキストデータに変換する。例えば、音声データ変換手段２０８は、コンテンツに含まれる元の音声データを所定時間長分の音声データに分割し、分割した音声データをそれぞれテキストデータに変換する。
【００３７】
統合データ生成手段２０９は、コンテンツに含まれる画像データと、音声データ変換手段２０８が変換したテキストデータとを統合した統合データを生成する機能を備える。本実施の形態では、統合データ生成手段２０９は、画像データとテキストデータとの対応付けを行うことによって、画像にあわせて音声の内容をテキストで表示するための統合データを生成する。また、統合データ生成手段２０９は、生成した統合データを統合データ保存手段２１０に記憶させる機能を備える。
【００３８】
例えば、統合データ生成手段２０９は、動画像に含まれるフレーム画像（動画を構成する各静止画像）をキーとして、テキストデータを対応付けた統合データを生成する。統合データ生成手段２０９は、例えば、テキストデータが動画像に含まれる所定の１０個分のフレーム画像の映像シーンの音声を変換したデータである場合、その映像シーンの最初のフレーム画像にテキストデータを対応付けることによって統合データを生成する。この場合、統合データを受信したユーザ端末１０は、その映像シーンの最初のフレーム画像を表示するときに、対応するテキストデータにもとづいて画像とともにテキストを表示する。そして、ユーザ端末１０は、その映像シーンの１０個のフレーム画像を順に表示して動画像を再生している間、そのテキストを表示し続ける。そのようにすることによって、ユーザ端末１０は、動画像にあわせて音声の内容をテキストで表示することができる。
【００３９】
なお、統合データ生成手段２０９は、例えば、動画像の各フレーム画像にシーケンス番号を付与し、シーケンス番号を用いてフレーム画像とテキストデータとを対応付けてもよい。また、フレーム画像とテキストデータとの同期をとるために、統合データ生成手段２０９は、各フレーム画像に、対応するテキストデータがあるか否かを示すフラグを付与してもよい。
【００４０】
統合データ保存手段２１０は、具体的には、画像配信サーバ２０の記憶装置によって実現される。統合データ保存手段２１０は、統合データ生成手段２０９が生成した統合データを記憶する。
【００４１】
画像配信手段２１１は、具体的には、プログラムに従って動作するＣＰＵ、記憶装置及びネットワークインタフェース部によって実現される。画像配信手段２１１は、音声付き画像であるコンテンツを、通信ネットワーク１００を介してユーザ端末１０に送信する機能を備える。また、画像配信手段２１１は、統合データ保存手段２１０から統合データを抽出し、通信ネットワーク１００を介してユーザ端末１０に送信する機能を備える。
【００４２】
画像蓄積サーバ３０は、コンテンツを提供するコンテンツ提供事業者が運営するデータベースサーバである。画像蓄積サーバ３０は、具体的には、ワークステーションやパーソナルコンピュータ等の情報処理装置によって実現され、磁気ディスク装置等のデータベース装置を備える。なお、画像蓄積サーバ３０は、画像配信会社が運営するサーバであってもよい。また、画像蓄積サーバ３０は、１つに限らず複数存在してもよい。
【００４３】
画像蓄積サーバ３０は、コンテンツとして音声付きの動画像を予め複数蓄積する。また、画像蓄積サーバ３０は、画像配信サーバ２０からの要求に応じてコンテンツを抽出する機能を備える。また、画像蓄積サーバ３０は、抽出したコンテンツを、通信ネットワーク１００を介して画像配信サーバ２０に送信する機能を備える。
【００４４】
図３は、画像蓄積サーバ３０が予め蓄積するコンテンツの例を示す説明図である。図３に示すように、画像蓄積サーバ３０は、コンテンツとして、画像データと音声データとを対応付けて複数蓄積する。
【００４５】
なお、本実施の形態において、画像配信サーバ２０の記憶装置は、音声付き画像を配信するための各種プログラムを記憶している。例えば、画像配信サーバ２０の記憶装置は、コンピュータに、ユーザ端末からの要求に応じて、画像データと音声データとを対応付けて予め複数蓄積する画像蓄積手段から、画像データ及び画像データに対応する音声データを抽出する処理と、ユーザの状態を示すユーザ状態情報にもとづいて、音声を出力可能であるか否かを判断する処理と、音声を出力不可であると判断すると、抽出した画像データ及び音声データにもとづいて、画像にあわせて音声の内容をテキストで表示するための変換データを生成する処理と、生成した変換データを、通信ネットワークを介してユーザ端末に送信する処理とを実行させるための画像配信プログラムを記憶している。
【００４６】
次に、動作について説明する。図４は、ユーザ端末１０からの注文に応じて音声付き画像を配信する画像配信処理の一例を示す流れ図である。本実施の形態では、ユーザは、音声付き動画像であるコンテンツの配信サービスの利用契約を、予め画像配信会社と締結している。例えば、ユーザ端末１０は、ユーザの操作に従って、ユーザ名や住所、アドレス情報（例えば、ＩＰアドレス）、決済方法（例えば、クレジットカード情報）等のユーザ情報を通信ネットワーク１００を介して画像配信サーバ２０に送信し、ユーザ情報を登録している。また、ユーザ登録の際、画像配信サーバ２０は、ユーザ端末１０に対してユーザＩＤを発行している。
【００４７】
また、ユーザは、例えば、予めユビキタス技術を用いたチャットサービスの利用契約等を締結しており、休暇中や仕事中、移動中である等のユーザの状態の変化に応じて、ユーザ端末１０を操作してプレゼンス状態を随時入力指示する。ユーザ端末１０は、ユーザの操作に従って、ユーザのプレゼンス状態の設定を随時更新している。
【００４８】
コンテンツの配信サービスを利用する場合、ユーザは、ユーザ端末１０を操作して、ブラウザを用いて画像配信会社のＷｅｂサイトへのアクセスを入力指示する。ユーザ端末１０は、ユーザの操作に従って、通信ネットワーク１００を介してユーザＩＤを送信し、画像配信サーバ２０にアクセスする（ステップＳ１０１）。
【００４９】
画像配信サーバ２０のリスト情報送信手段２０１は、受信したユーザＩＤにもとづいてユーザを認証すると、画像ダウンロードリスト情報を、通信ネットワーク１００を介してユーザ端末１０に送信する（ステップＳ１０２）。すると、ユーザ端末１０は、受信した画像ダウンロードリスト情報にもとづいて、コンテンツの一覧である画像ダウンロードリストの表示画面を表示する（ステップＳ１０３）。
【００５０】
図５は、ユーザ端末１０が表示する画像ダウンロードリストの表示画面の例を示す説明図である。図５に示すように、ユーザ端末１０は、コンテンツに含まれる画像の画像名５０１と画像内容５０２とを対応付けたリストを含む表示画面を表示する。また、図５に示すように、表示画面には、送信ボタン５０４と、各コンテンツ毎に購入欄５０３とが含まれる。
【００５１】
ユーザ端末１０は、ユーザの操作に従って、購入を希望するコンテンツの画像を選択入力する（ステップＳ１０４）。例えば、「画像Ｃ」を含むコンテンツを購入したい場合には、ユーザは、図５に示す表示画面において、画像名５０１「画像Ｃ」に対応する購入欄５０３をマウスクリックする。すると、ユーザ端末１０は、「画像Ｃ」を選択入力し、図５に示すように、画像名５０１「画像Ｃ」に対応する購入欄５０３に「レ」印を表示する。なお、ユーザ端末１０は、ユーザの操作に従って、複数コンテンツの画像を選択入力してもよい。
【００５２】
画像を選択入力すると、ユーザ端末１０は、コンテンツの注文情報を、通信ネットワーク１００を介して画像配信サーバ２０に送信する（ステップＳ１０５）。例えば、図５に示す表示画面においてユーザが送信ボタン５０４をマウスクリックすると、ユーザ端末１０は、注文情報を画像配信サーバ２０に送信する。本例では、図５に示すように、「画像Ｃ」が選択されているので、ユーザ端末１０は、画像名「画像Ｃ」を含む画像購入注文情報を、注文情報として画像配信サーバ２０に送信する。
【００５３】
また、ユーザ端末１０は、設定する現在のプレゼンス状態にもとづいて、プレゼンス情報を注文情報として画像配信サーバ２０に送信する。例えば、現在のプレゼンス状態が「仕事中」である場合、ユーザ端末１０は、仕事中である旨のプレゼンス情報を画像配信サーバ２０に送信する。なお、例えば、現在マナーモードに設定されている場合、ユーザ端末１０は、マナーモードである旨のプレゼンス情報を画像配信サーバ２０に送信してもよい。
【００５４】
画像配信サーバ２０の注文情報受信手段２０２は、ユーザ端末１０から、通信ネットワーク１００を介して注文情報を受信する。すると、注文識別情報生成手段２０３は、注文情報に対して注文識別番号を割り当て注文識別情報を生成する（ステップＳ１０６）。また、注文識別情報生成手段２０３は、生成した注文識別情報を注文情報と対応付けて注文識別情報記憶手段２０４に記憶させる（ステップＳ１０７）。
【００５５】
なお、画像配信サーバ２０は、注文情報を受信すると、例えば、ユーザＩＤにもとづいて決済処理を行い、決済処理が完了すると注文識別情報を生成してもよい。この場合、画像配信サーバ２０は、例えば、予め登録するユーザ情報に含まれるクレジットカード情報にもとづいて決済処理を行い注文識別情報を生成する。
【００５６】
注文識別情報送信手段２０５は、ユーザ端末１０から注文されたコンテンツの抽出要求を、通信ネットワーク１００を介して画像蓄積サーバ３０に送信する。本実施の形態では、注文識別情報送信手段２０５は、コンテンツの抽出要求として、注文識別情報生成手段２０３が生成した注文識別情報を、通信ネットワーク１００を介して画像蓄積サーバ３０に送信する（ステップＳ１０８）。
【００５７】
画像蓄積サーバ３０は、受信した注文識別情報にもとづいて、データベースからコンテンツを抽出する（ステップＳ１０９）。本実施の形態では、図３に示すように、画像蓄積サーバ３０は、注文識別情報に含まれる画像名「画像Ｃ」もとづいて、データベースから画像データＣを抽出する。また、画像蓄積サーバ３０は、画像データＣに対応する音声データＣをデータベースから抽出する。
【００５８】
画像蓄積サーバ３０は、抽出したコンテンツを、通信ネットワーク１００を介して画像配信サーバ２０に送信する（ステップＳ１１０）。本実施の形態では、画像蓄積サーバ３０は、抽出した画像データＣ及び音声データＣを、コンテンツとして画像配信サーバ２０に送信する。
【００５９】
画像配信サーバ２０の画像受信手段２０６は、画像蓄積サーバ３０から、通信ネットワーク１００を介してコンテンツを受信する。すると、プレゼンス状態判定手段２０７は、注文識別情報記憶手段２０４が記憶する注文識別情報にもとづいて、ユーザのプレゼンス状態を特定する（ステップＳ１１１）。本実施の形態では、プレゼンス状態判定手段２０７は、注文識別情報に含まれるプレゼンス情報にもとづいて、ユーザの現在の状態を特定する。また、プレゼンス状態判定手段２０７は、特定したユーザの状態にもとづいて、コンテンツに含まれる音声データの変換が必要であるか否かを判断する（ステップＳ１１２）。
【００６０】
例えば、プレゼンス状態判定手段２０７は、ユーザのプレゼンス状態と音声の出力の可否とを対応付けた対応テーブルを予め記憶している。例えば、プレゼンス状態が「仕事中」や「移動中」、「マナーモード」である場合、プレゼンス状態判定手段２０７は、対応テーブルにもとづいて、音声を出力不可であると判断する。そして、音声を出力不可であると判断すると、プレゼンス状態判定手段２０７は、音声データの変換が必要であると判断する。
【００６１】
また、例えば、プレゼンス状態が「休暇中」や「非マナーモード」である場合、プレゼンス状態判定手段２０７は、対応テーブルにもとづいて、音声を出力可能であると判断する。そして、音声を出力可能であると判断すると、プレゼンス状態判定手段２０７は、音声データの変換が必要ないと判断する。
【００６２】
音声データの変換が必要であると判断すると、音声データ変換手段２０８は、受信したコンテンツに含まれる音声データをテキストデータに変換する（ステップＳ１１３）。また、統合データ生成手段２０９は、受信したコンテンツに含まれる画像データと、音声データ変換手段２０８が変換したテキストデータとの対応付けを行い統合データを生成する。そして、統合データ生成手段２０９は、生成した統合データを統合データ保存手段２１０に記憶させる（ステップＳ１１４）。
【００６３】
画像配信手段２１１は、統合データ保存手段２１０から統合データを抽出し、通信ネットワーク１００を介してユーザ端末１０に送信する（ステップＳ１１５）。すなわち、画像配信手段２１１は、音声をテキストに変換したコンテンツをユーザ端末１０に配信する。
【００６４】
なお、ステップＳ１１２で音声データの変換が必要ないと判断した場合には、ステップＳ１１３及びステップＳ１１４の処理を行わずに、画像配信手段２１１は、画像蓄積サーバ３０から受信したコンテンツを、そのまま通信ネットワーク１００を介してユーザ端末１０に送信する。すなわち、画像配信手段２１１は、音声付きのコンテンツをそのままユーザ端末１０に配信する。
【００６５】
以上の処理が実行されることによって、ユーザの状態に応じて、音声をテキストに変換したコンテンツ又は音声付きのコンテンツがユーザ端末１０に配信される。例えば、ユーザが仕事中である場合や電車で移動中である場合等音声を出力できない状況である場合には、画像配信サーバ２０は、音声をテキストに変換したコンテンツをユーザ端末１０に配信する。また、例えば、ユーザが休暇中である等音声を出力できる状況である場合には、画像配信サーバ２０は、音声付きのコンテンツをそのままユーザ端末１０に配信する。そのようにすることによって、ユーザの状態に見合ったコンテンツを配信することができる。
【００６６】
なお、ステップＳ１１２において、プレゼンス状態判定手段２０７は、音声データの変換が必要であると判断すると、受信したコンテンツに対応する統合データが統合データ保存手段２１０に既に保存されているか否か判断してもよい。そして、既に統合データが保存されていると判断すると、画像配信サーバ２０は、統合データ保存手段２１０から統合データを抽出し、抽出した統合データをそのままユーザ端末１０に配信してもよい。
【００６７】
例えば、統合データをユーザ端末１０に配信した後に、更に別のユーザ端末１０から同じコンテンツの注文情報を受信した場合、統合データ保存手段２１０には、既にそのコンテンツの統合データが保存されている。この場合、ステップＳ１１２で音声データの変換が必要であると判断した場合であっても、画像配信サーバ２０は、ステップＳ１１３及びステップＳ１１４の処理を行わずに、統合データ保存手段２１０から統合データを抽出してユーザ端末１０に配信してもよい。そのようにすれば、同じコンテンツを２回目以降に配信する場合、音声データの変換処理を省略することができ処理の効率化を図ることができる。また、画像配信サーバ２０は、注文識別情報を生成し保存するタイミングで統合データが既に保存されているか否か判断し、統合データが保存されてないと判断した場合に、画像蓄積サーバ３０にコンテンツの抽出要求を送信するようにしてもよい。
【００６８】
コンテンツを受信すると、ユーザ端末１０は、ダウンロードしたコンテンツを保存する。そして、ユーザ端末１０は、コンテンツに含まれる画像データにもとづいて動画像を再生し表示する（ステップＳ１１６）。この場合、受信したコンテンツがテキストデータを含む場合には、ユーザ端末１０は、動画像にあわせてテキストを表示する。また、受信したコンテンツが音声データを含む場合には、ユーザ端末１０は、動画像にあわせて音声を出力する。
【００６９】
以上のように、本実施の形態によれば、ユーザ端末１０は、コンテンツ注文の際に、ユーザの状態を示すプレゼンス情報を画像配信サーバ２０に送信する。また、画像配信サーバ２０は、プレゼンス情報にもとづいて音声の出力可否を判断し、音声を出力不可であると判断すると音声をテキストに変換した統合データを生成する。そして、画像配信サーバ２０は、生成した統合データをユーザ端末１０に配信する。
【００７０】
本実施の形態によれば、音声を出力できない状況で音声付き画像をダウンロードした場合であっても、ユーザ端末１０は、音声を出力せずに、画像にあわせて音声の内容をテキストとして表示する。従って、音声を出力できない状況であっても、ユーザが音声付き画像の内容を理解することができる。例えば、移動中の電車内で視聴する場合であっても音声付き画像の内容を理解することができ、車内マナーを守りつつ他の乗客に迷惑をかけずにコンテンツを十分に楽しむことができる。また、通勤や通学中、業務休み時間等の空き時間を有効に活用して、コンテンツを視聴することができる。
【００７１】
また、テキストデータに変換して音声を消去することにより、配信するコンテンツのデータ容量を低減することができ、通信コストを低減することができる。例えば、パケット通信による従量制の課金方法を用いている場合、データ容量の低減により通信コストを低減することができる。また、音声が使用していた帯域を利用して、画像の画質の向上を図ることができる。
【００７２】
また、ユーザの状態に応じた音声付き画像を配信するために、音声付きコンテンツと音声をテキストに変換したコンテンツとの両方を、予め画像蓄積サーバ３０に蓄積することも考えられる。しかし、この場合、コンテンツ提供者は、予め音声付きコンテンツと音声をテキストに変換したコンテンツとの両方を作成しなければならない。そのため、予め２種類のコンテンツを作成しなければならず、コンテンツ提供者の負担が大きい。本実施の形態によれば、画像配信サーバ２０がユーザの状態に応じて音声をテキストに変換してコンテンツを配信するので、コンテンツ提供者が１種類のコンテンツ（音声付きのコンテンツ）を作成するだけで、ユーザの状態に応じた音声付き画像の配信ができる。そのため、コンテンツ提供者にとっても、対応負担が大きくなく手軽にコンテンツを提供することができる。
【００７３】
なお、本実施の形態では、ユーザ端末１０がコンテンツをダウンロードし画像にあわせてテキストを表示する場合を説明したが、ユーザ端末１０は、ストリーミング配信を利用して、コンテンツの配信を受けながら、画像にあわせてテキストを表示するようにしてもよい。そのようにすれば、ユーザの状態に応じて配信を受けられる音声付きコンテンツの幅を拡大することができる。例えば、音声を聞くことができない聴覚障害者が利用できる音声付きコンテンツの幅を拡大することができる。
【００７４】
また、本実施の形態では、画像配信サーバ２０がプレゼンス状態を特定するための対応テーブルを予め記憶する場合を説明したが、ユーザ端末１０が対応テーブルを予め記憶してもよい。この場合、注文情報を送信する際に、ユーザ端末１０は、対応テーブルにもとづいて音声の出力が可能であるか否かを判断する。そして、ユーザ端末１０は、「音声出力可」又は「音声出力不可」のプレゼンス情報を画像配信サーバ２０に送信する。また、ユーザ端末１０は、ユーザの操作に従って、対応テーブルの「音声出力可」又は「音声出力不可」の設定値を変更できるようにしてもよい。
【００７５】
また、本実施の形態では、音声をテキストに変換したコンテンツを配信する場合を説明したが、画像配信システムが配信するコンテンツは、本実施の形態で示したものに限られない。例えば、画像蓄積サーバ３０に、画像データ及び音声データに加えて、予め動画像の内容を簡単に説明した音声データを蓄積していてもよい。そして、画像配信サーバ２０は、音声による簡単な動画解説を付加したコンテンツをユーザ端末１０に配信してもよい。そのようにすれば、配信するコンテンツの幅を更に拡大することができる。例えば、画像を見ることができない視覚障害者が利用できるコンテンツの幅を拡大することができる。
【００７６】
また、画像配信サーバ２０は、音声付きコンテンツを音声のみを含むデータや画像のみを含むデータに加工して、ユーザ端末１０に配信するようにしてもよい。そのようにすれば、音声だけしか必要ない場合や画像だけしか必要ない場合に、その状態に合わせてコンテンツを加工することができ、不要なパケットの通信を低減することができる。
【産業上の利用可能性】
【００７７】
本発明は、コンテンツとして音声付き画像を配信する画像配信サービスに利用できる。特に、本発明を用いることによって、ユーザの状況に応じて、音声をテキストに加工してコンテンツを配信することができる。
【図面の簡単な説明】
【００７８】
【図１】本発明による画像配信システムの構成の一例を示すブロック図である。
【図２】画像配信サーバ２０の機能構成の一例を示す機能ブロック図である。
【図３】画像蓄積サーバ３０が予め蓄積するコンテンツの例を示す説明図である。
【図４】ユーザ端末１０からの注文に応じて音声付き画像を配信する画像配信処理の一例を示す流れ図である。
【図５】画像ダウンロードリストの表示画面の例を示す説明図である。
【符号の説明】
【００７９】
１０  ユーザ端末
２０  画像配信サーバ
２０１  リスト情報送信手段
２０２  注文情報受信手段
２０３  注文識別情報生成手段
２０４  注文識別情報記憶手段
２０５  注文識別情報送信手段
２０６  画像受信手段
２０７  プレゼンス状態判定手段
２０８  音声データ変換手段
２０９  統合データ生成手段
２１０  統合データ保存手段
２１１  画像配信手段
３０  画像蓄積サーバ
１００  通信ネットワーク
【図１】
2006115385.tif 000003
【図２】
2006115385.tif 000004
【図３】
2006115385.tif 000005
【図４】
2006115385.tif 000006
【図５】
2006115385.tif 000007