(57)【要約】【課題】  携帯電話端末に対し音声付きライブ映像をリアルタイムに配信するシステムを提案する。【解決手段】  ストリーミング作成サーバ１０が取り込んだライブの音声及び映像からリアルタイムに携帯電話向けストリーミングデータを作成し、インターネット通信網２０を介してインターネット放送サーバ３０に即時配信する。一方で、インターネット放送サーバ３０は蓄積したストリーミングデータを携帯電話端末４０の要求に応じてインターネット通信網２０を介してリアルタイムに配信する。 【選択図】図１
2006237673.tif 000002
【特許請求の範囲】
【請求項１】
ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、
インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、
当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元した音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力する携帯電話端末と、
を有して構築された携帯電話向けインターネットライブ放送システムであって、
前記ストリーミングデータ作成サーバは、
ライブの音声、映像及び文字情報を取り込むライブソース取り込み手段と、
当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、
当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信手段と、
を具備し、
前記インターネット放送サーバは、
前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、
当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、
前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、
前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、
前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、
前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、
前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、
を具備し、
前記携帯電話端末は、
前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、
前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、
当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、
当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、
当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、
当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生するストリーミング視聴手段と、
を具備する、
ことを特徴とする携帯電話向けインターネットライブ放送システム。
【請求項２】
前記ストリーミングデータ作成サーバのストリーミングデータ作成手段は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、
当該区切られたライブ音声を前記携帯電話端末が基本機能として具備する音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成するよう機能構成され、
前記インターネット放送サーバのストリーミングデータ配信手段は、
通常は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該停滞電話端末に配信することで高ビットレートストリーミング配信を行い、
前記高ビットレートストリーミング配信を行うには通信速度が不足している場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行うよう機能構成され、
前記携帯電話端末のストリーミング視聴手段は、
前記ストリーミングデータ復元手段によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、当該一連の静止画ファイルの数に応じて当該単位時間を動的に変化させることにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力するよう機能構成される、
ことを特徴とする請求項１に記載の携帯電話向けインターネットライブ放送システム。
【請求項３】
前記携帯電話端末のストリーミング視聴手段は、
前記携帯電話端末の画面表示を二分割して、一方にはライブ映像をリアルタイムにストリーミング再生出力し、他方には字幕や広告などを文字情報又は静止画により再生表示するよう機能構成される、
ことを特徴とする請求項１又は２に記載の携帯電話向けインターネットライブ放送システム。
【請求項４】
前記インターネット放送サーバのストリーミングデータ記憶蓄積手段は、
事前に圧縮変換処理されたコンテンツのストリーミングデータをも記憶蓄積するよう機能構成される、
ことを特徴とする請求項１、２又は３に記載の携帯電話向けインターネットライブ放送システム。
【請求項５】
ライブの音声、映像及び文字情報からストリーミングデータ作成サーバがリアルタイムに作成したストリーミングデータを、
インターネット通信網及びインターネット放送サーバを介して携帯電話端末に配信し、
当該携帯電話端末で当該ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力する携帯電話向けインターネットライブ放送方法であって、
前記ストリーミングデータ作成サーバは、
まず、ライブソース取り込み処理によって、ライブの音声、映像及び文字情報を取り込み、
次に、ストリーミングデータ作成処理によって、当該ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理し、携帯電話の機種ごとに適したストリーミングデータを作成し、
続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、
一方、当該インターネット放送サーバは、
ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、
ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、
メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、
メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、
ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、
ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、
ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、
他方、当該携帯電話端末は、
メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、
メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、
ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、
ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、
ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、
ストリーミング視聴処理によって、当該音声、映像及び文字情報をタイミングを合わせて連続的に再生することにより、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生出力する、
ことを特徴とする携帯電話向けインターネットライブ放送方法。
【請求項６】
前記ストリーミングデータ作成サーバのストリーミングデータ作成処理は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、
当該区切られたライブ音声を前記携帯電話端末が基本機能として具備する音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成し、
前記インターネット放送サーバのストリーミングデータ配信処理は、
前記携帯電話端末の通信速度が十分高い場合は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該停滞電話端末に配信することで高ビットレートストリーミング配信を行い、
反対に、前記携帯電話端末の通信速度が低い場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行い、
前記携帯電話端末のストリーミング視聴処理は、
前記ストリーミングデータ復元処理によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、当該一連の静止画ファイルの数に応じて当該単位時間を動的に変化させることにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力する、
ことを特徴とする請求項５に記載の携帯電話向けインターネットライブ放送方法。
【請求項７】
前記携帯電話端末のストリーミング視聴処理は、
前記携帯電話端末の画面表示を二分割し、一方にはライブ映像をリアルタイムにストリーミング再生出力し、他方には字幕や広告などを文字情報又は静止画により表示出力する、
ことを特徴とする請求項５又は６に記載の携帯電話向けインターネットライブ放送方法。
【請求項８】
前記インターネット放送サーバのストリーミングデータ記憶蓄積処理は、
事前に圧縮変換処理されたコンテンツのストリーミングデータをも記憶蓄積する、
ことを特徴とする請求項５、６又は７に記載の携帯電話向けインターネットライブ放送方法。
【請求項９】
共にコンピュータの基本的機能を具備するとともに、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元したライブの音声、映像及び文字情報を再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムにおいて、前記ストリーミングデータ作成サーバに適用されるストリーミングデータ作成配信プログラムであって、
前記ストリーミングデータ作成サーバに、
ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、
当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、
当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させるとともに、
前記ストリーミングデータ作成処理手順は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切る手順と、
当該区切られたライブ音声を前記携帯電話端末が基本機能として具備する音声出力機能で出力可能な形式の音声ファイルに圧縮変換する手順と、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換する手順と、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルの総数及びそれぞれのサイズの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成する手順を踏む、
ことを特徴とするストリーミングデータ作成配信プログラム。
【請求項１０】
請求項９に記載のストリーミングデータ作成配信プログラムにおける各処理手順の実践手続をコンピュータ読取可能に実録してなる、
ことを特徴とするストリーミングデータ作成配信プログラムを記録した記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、インターネットに接続可能な携帯電話端末に対する音声付き動画のストリーミング放送に関するものである。
【背景技術】
【０００２】
携帯電話端末の高性能化に伴い、音声付き動画の視聴が可能となり、事前に記録した音声付き動画の再生、通信相手とお互いの音声及び映像をリアルタイムに交換するテレビ電話、テレビ電話システムを利用して音声付き動画をリアルタイムに配信するサービス、などが実用化されている。
【０００３】
さらに、インターネットパケット通信費用を定額制とするサービスが携帯電話キャリア各社から提供されており、メールの送受信やウェブサイトの閲覧などとは桁違いに大きなデータ転送量を必要とする音声付き動画ファイルなどの送受信も手軽に行えるようになっている。
【０００４】
そこで、携帯電話を利用した新しいサービスを提供するために、本発明の先行発明として、音声を含まないライブ映像を携帯電話に対してリアルタイムにストリーミング配信し、同時に文字情報による双方向通信をリアルタイムに行う携帯電話向けチャットサービスシステムに関する特許を本件出願人は出願済みである。
【特許文献１】特願２００４−１８０１１３号
【発明の開示】
【発明が解決しようとする課題】
【０００５】
携帯電話において音声付き動画を視聴するために、希望する音声付き動画を事前に記録した後に再生する場合は、実際には無視できない手間と時間をかけた準備が必要であり、また、ライブの音声及び動画のリアルタイムな視聴が不可能であるという問題がある。さらに、動画のファイルを携帯電話端末の記憶装置に一旦格納する必要があるため、当該動画の長さは前記記憶装置の容量によって制限され、実際には数分程度の動画しか視聴できないという問題がある。
【０００６】
さらに、テレビ電話はインターネットパケット通信費用定額制サービスの対象外なので、動画視聴時間に比例して高額な料金が課金されてしまうという問題がある。
【０００７】
ここにおいて、本発明の解決すべき主要な目的は以下の通りである。
【０００８】
本発明の第１の目的は、インターネットに接続可能な携帯電話端末で、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング視聴できるようストリーミング配信する、携帯電話向けインターネットライブ放送方法及びシステムを提供することにある。
【０００９】
本発明の第２の目的は、インターネットに接続可能な携帯電話端末で、当該携帯電話の通信速度が低下しても、ビットレート及びフレームレートを落とした上で安定した、マルチビットレートなストリーミング配信を行う、携帯電話向けインターネットライブ放送方法及びシステムを提供することにある。
【００１０】
本発明の第３の目的は、インターネットに接続可能な携帯電話端末で視聴するビデオオンデマンドのストリーミング配信にも容易に応用可能な、携帯電話向けインターネットライブ放送方法及びシステムを提供することにある。
【００１１】
本発明の第４の目的は、インターネットパケット通信を用いることにより、インターネットパケット通信定額制サービスに対応し、少ない通信費用で長時間の音声付き動画を視聴可能な、携帯電話向けインターネットストリーミング放送方法及びシステムを提供することにある。
【００１２】
本発明の他の目的は、明細書、図面、特に特許請求の範囲における各請求項の記載から自ずと明らかとなろう。
【課題を解決するための手段】
【００１３】
まず、本発明システムにおいては、ストリーミングデータ作成サーバが、ライブの音声、映像及び文字情報を取り込むライブソース取り込み手段と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、当該作成されたストリーミングデータをインターネット通信網を介してインターネット放送サーバに即時配信するストリーミングデータ配信手段と、を具備し、前記インターネット放送サーバが、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、前記インターネット通信網を介して、携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、を具備し、前記携帯電話端末が、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生するストリーミング視聴手段と、を具備する、という特徴的構成手段を講じる。
【００１４】
一方、本発明方法においては、ストリーミングデータ作成サーバにおいて、まず、ライブソース取り込み処理によって、ライブの音声、映像及び文字情報を取り込み、次に、ストリーミングデータ作成処理によって、当該ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理し、携帯電話の機種ごとに適したストリーミングデータを作成し、続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、一方、当該インターネット放送サーバにおいて、ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、他方、当該携帯電話端末において、メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、ストリーミング視聴処理によって、当該音声、映像及び文字情報をタイミングを合わせて連続的に再生することにより、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生出力する、いう特徴的構成手法を講じる。
【００１５】
他方、本発明ストリーミングデータ作成配信プログラムにおいては、ストリーミングデータ作成サーバに、ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させる、という特徴的構成手順を講じる。
【００１６】
本発明の記録媒体は、前記本発明ストリーミングデータ作成配信プログラムにおける実践手続をコンピュータ読み取り可能に実録する、という特徴的構成手続を講じる。
【００１７】
さらに、具体的詳細に述べると、当該課題の解決では、本発明が次に列挙する上位概念から下位概念に亙る新規な特徴的構成手法、手段、手順及び手続を採用することにより、前記目的を達成するように為される。
【００１８】
即ち、本発明システムの第１の特徴は、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元した音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムであって、前記ストリーミングデータ作成サーバが、ライブの音声、映像及び文字情報を取り込むライブソース取り込み手段と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信手段と、を具備し、前記インターネット放送サーバが、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、を具備し、前記携帯電話端末が、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生するストリーミング視聴手段と、を具備する、ことを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【００１９】
本発明システムの第２の特徴は、上記本発明システムの第１の特徴における前記ストリーミングデータ作成サーバのストリーミングデータ作成手段が、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、当該区切られたライブ音声を前記携帯電話端末が基本機能として具備する音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成するよう機能構成され、また、上記本発明システムの第１の特徴における前記インターネット放送サーバのストリーミングデータ配信手段が、前記携帯電話端末の通信速度が十分高い場合は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該停滞電話端末に配信することで高ビットレートストリーミング配信を行い、反対に、前記携帯電話端末の通信速度が低い場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行うよう機能構成され、さらに、上記本発明システムの第１の特徴における前記携帯電話端末のストリーミング視聴手段が、前記ストリーミングデータ復元手段によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、当該一連の静止画ファイルの数に応じて当該単位時間を動的に変化させることにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力するよう機能構成される、ことを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【００２０】
本発明システムの第３の特徴は、上記本発明システムの第１又は第２の特徴における前記携帯電話端末のストリーミング視聴手段が、前記携帯電話端末の画面表示を二分割して、一方にはライブ映像をリアルタイムにストリーミング再生出力し、他方には字幕や広告などを文字情報又は静止画により再生表示するよう機能構成される、ことを特徴とする請求項１に記載の携帯電話向けインターネットライブ放送システムの構成採用にある。
【００２１】
本発明システムの第４の特徴は、上記本発明システムの第１、第２又は第３の特徴における前記インターネット放送サーバのストリーミングデータ記憶蓄積手段が、事前に圧縮変換処理されたコンテンツのストリーミングデータをも記憶蓄積するよう機能構成される、ことを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【００２２】
一方、本発明方法の第１の特徴は、ライブの音声、映像及び文字情報からストリーミングデータ作成サーバがリアルタイムに作成したストリーミングデータを、インターネット通信網及びインターネット放送サーバを介して携帯電話端末に配信し、当該携帯電話端末で当該ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力する携帯電話向けインターネットライブ放送方法であって、前記ストリーミングデータ作成サーバが、まず、ライブソース取り込み処理によって、ライブの音声、映像及び文字情報を取り込み、次に、ストリーミングデータ作成処理によって、当該ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理し、携帯電話の機種ごとに適したストリーミングデータを作成し、続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、一方、当該インターネット放送サーバが、ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、他方、当該携帯電話端末が、メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、ストリーミング視聴処理によって、当該音声、映像及び文字情報をタイミングを合わせて連続的に再生することにより、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生出力する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【００２３】
本発明方法の第２の特徴は、上記本発明方法の第１の特徴における前記ストリーミングデータ作成サーバのストリーミングデータ作成処理が、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、当該区切られたライブ音声を前記携帯電話端末が基本機能として具備する音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成し、上記本発明方法の第１の特徴における前記インターネット放送サーバのストリーミングデータ配信処理が、前記携帯電話端末の通信速度が十分高い場合は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該停滞電話端末に配信することで高ビットレートストリーミング配信を行い、反対に、前記携帯電話端末の通信速度が低い場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行い、上記本発明方法の第１の特徴における前記携帯電話端末のストリーミング視聴処理が、前記ストリーミングデータ復元処理によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、当該一連の静止画ファイルの数に応じて当該単位時間を動的に変化させることにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【００２４】
本発明方法の第３の特徴は、上記本発明方法の第１又は第２の特徴における前記携帯電話端末のストリーミング視聴処理が、前記携帯電話端末の画面表示を二分割し、一方にはライブ映像をリアルタイムにストリーミング再生出力し、他方には字幕や広告などを文字情報又は静止画により表示出力する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【００２５】
本発明方法の第４の特徴は、上記本発明方法の第１、第２又は第３の特徴における前記インターネット放送サーバのストリーミングデータ記憶蓄積処理は、事前に圧縮変換処理されたコンテンツのストリーミングデータをも記憶蓄積する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【００２６】
他方、本発明ストリーミングデータ作成配信プログラムの第１の特徴は、共にコンピュータの基本的機能を具備するとともに、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元したライブの音声、映像及び文字情報を再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムにおいて、前記ストリーミングデータ作成サーバに適用されるストリーミングデータ作成配信プログラムであって、前記ストリーミングデータ作成サーバに、ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させるとともに、前記ストリーミングデータ作成処理手順は、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切る手順と、当該区切られたライブ音声を前記携帯電話端末が基本機能として具備する音声出力機能で出力可能な形式の音声ファイルに圧縮変換する手順と、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換する手順と、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成する手順と、を踏むことを特徴とするストリーミングデータ作成配信プログラムの構成採用にある。
【００２７】
また、本発明記録媒体の第１の特徴は、上記本発明ストリーミングデータ作成配信プログラムの第１の特徴における各処理手順の実践手続をコンピュータ読取可能に実録してなる、ストリーミングデータ作成配信プログラムを記録した記録媒体の構成採用にある。
【発明の効果】
【００２８】
インターネットに接続可能な携帯電話端末において、その限られた演算能力、記憶容量及び通信速度の中で、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング視聴できるという優れた効果を発揮する。
【００２９】
ストリーミングデータを複数に分割し、必要最低限のビットレートで構築されたストリーミングデータをメインストリーミングデータとし、他のサブストリーミングデータをメインストリーミングデータに加えることでより高いビットレートのストリーミングデータを構築するというストリーミングデータ構造を採用することにより、ストリーミングデータ作成サーバの処理負荷を増大することなくマルチビットレートストリーミングを実現し、携帯電話の電波状況などの影響で通信速度が一時的に低下しても、動画のフレームレートは下がるがストリーミング放送の受信を途切れなく安定して継続できるという優れた利点がある。
【００３０】
ストリーミング視聴する携帯電話端末の画面を二分割し、一方には音声付きライブ映像をストリーミング出力し、もう一方には文字情報又は静止画を表示することが可能であり、ストリーミング視聴に連動して字幕や広告を表示させるなどの利用方法が可能であり、商業的に幅広い応用が考えられる。
【００３１】
ストリーミングデータ作成サーバは音声、映像及び文字情報を別々に取り込むことが可能なので、例えば、複数のアングルから撮影している野球のテレビ中継映像と、同じ試合を解説しているラジオ放送の音声と、インターネット上でリアルタイムに更新される野球選手の実績データの文字情報とを、自由に組み合わせて携帯電話端末にストリーミング配信する、または、マルチアングル並びに複数言語の音声及び字幕を持つＤＶＤコンテンツを事前にストリーミングデータ化しておきビデオオンデマンドサービスとして携帯電話端末にストリーミング配信する、などの利用方法が可能であり、商業的に幅広い応用が考えられる。
【００３２】
ライブ音声、映像及び文字情報を圧縮変換してストリーミングデータを作成する処理と、当該ストリーミングデータの配信処理とを、別々のサーバに分散することで、両方の処理をリアルタイムに安定して行うことができ、さらに、将来的にストリーミング配信の規模を拡大又は縮小する場合にも、各種サーバの増減が容易に行えるという優れた利点がある。
【発明を実施するための最良の形態】
【００３３】
以下、本発明の実施の形態につき、システム例及びこれに対応する方法例を、図面を参照しつつ説明し、これに引き続き、この方法例を具現化するプログラム例及び記録媒体例を説明する。ただし、本発明は、以下に述べる実施形態に限定されず、その技術思想の範囲内で種々の変更が可能である。
一例として、テレビカメラで撮影中のライブの音声、映像及び文字情報をＮＴＴドコモの携帯電話端末の機種「ＦＯＭＡ９０１ｉシリーズ」でリアルタイムにストリーミング視聴する場合について説明する。
【００３４】
（システム例）
まず、図１は、本発明の一実施形態に係るシステム全体の構成例を示すブロック図である。同図に示すように、このシステムは、ストリーミングデータ作成サーバ１０、インターネット通信網２０、インターネット放送サーバ３０及び携帯電話端末４０からなる。
【００３５】
ストリーミングデータ作成サーバ１０は、ソースとなるライブの音声、映像及び文字情報を取り込む一方で、インターネット通信網２０に接続されており、音声、動画及び文字データを格納したストリーミングデータを作成すると同時にそのストリーミングデータをインターネット通信網２０を介してインターネット放送サーバ３０に向けて即時配信する。
なお、ストリーミングデータ作成サーバ１０の数は図１のように１つに限定されず、インターネット通信網２０に接続されたストリーミングデータ作成サーバ１０が複数あっても構わない。
【００３６】
インターネット通信網２０には、ストリーミングデータ作成サーバ１０、インターネット放送サーバ３０及び携帯電話端末４０が接続されている。ただし、インターネット通信網と携帯電話端末との間は、図示しない携帯電話基地局、電話回線、電話交換機などが中継している。
【００３７】
インターネット放送サーバ３０は、一方ではインターネット通信網２０を介してストリーミングデータ作成サーバ１０から配信されるストリーミングデータを受信すると同時に一旦自身の記憶装置に記憶蓄積し、他方では同じくインターネット通信網２０を介して、携帯電話端末４０による各種データの配信要求を受信し、当該要求に適合するデータを当該携帯電話端末４０に配信する。
なお、インターネット放送サーバ３０の数は図１のように１つに限定されず、インターネット通信網２０に接続されたインターネット放送サーバ３０が複数あっても良い。
【００３８】
また、インターネット放送サーバ３０がインターネット通信網２０を介して携帯電話端末４０に配信する各種データのうち、ストリーミングデータについては、ストリーミングデータ作成サーバ１０から配信されるライブの音声、映像及び文字情報に制限されず、予めストリーミングデータに変換されインターネット放送サーバが自身の記憶領域に保持するＤＶＤのコンテンツなどであっても良い。この場合、ビデオオンデマンド方式の携帯電話向けＤＶＤ放送のシステム及び方法が構築される。
【００３９】
携帯電話端末４０は、図示しない携帯電話基地局、電話回線、電話交換機などを介してインターネット通信網２０に接続されており、前記インターネット通信網２０を介して前記インターネット放送サーバ３０に対してストリーミングコンテンツの配信要求を送信し、また、同じく前記インターネット通信網２０を介して前記インターネット放送サーバ３０から配信される前記要求に応じたストリーミングデータを受信すると同時に一旦自身の記憶装置に記憶蓄積し、ストリーミングデータから音声、映像及び文字情報を復元し、タイミングに合わせて音声、映像及び文字情報を再生することで、ライブ放送のリアルタイムなストリーミング視聴を実現する。
なお、携帯電話端末４０の数は図１のように１つに限定されず、図示しない携帯電話基地局、電話回線、電話交換機などを介してインターネット通信網２０に接続された携帯電話端末４０が複数あっても良い。
【００４０】
本実施形態において、携帯電話端末４０でライブ放送のリアルタイムなストリーミング視聴を実現するストリーミングデータの構成例について、図２を用いて説明する。図２に示すように、本実施形態におけるストリーミングデータは、音声データ、文字情報データ及び静止画データを格納している。
音声データとしては、携帯電話端末４０固有の機能で再生可能な所謂「着メロ」の一部である、長さ１５秒、量子化ビット数１６ビット、サンプリング周波数８キロヘルツのＡＤＰＣＭ形式を用いている。
静止画データは、お互いに独立しており、サイズは携帯電話端末の画面に適した２４０×１８０ピクセルである。これらの静止画を携帯電話端末の画面上に毎秒３フレームで連続して順番に表示することで、映像を再生する。
なお、音声データ及び静止画データは、上記の形式に限定されず、他の形式であっても構わない。
本実施形態では、上記音声データ及び静止画データは、携帯電話端末の機種ごとに適する形式が異なるため、ストリーミングデータ作成サーバは、同じライブ音声、ライブ映像及び文字情報についで携帯電話端末の機種ごとにそれぞれ適する形式でストリーミングデータを作成する。
【００４１】
なお、図２に示すように、本実施形態においてはストリーミングデータをメインストリーミングデータ及びサブストリーミングデータの２つに分割することで、マルチビットレートストリーミングを実現している。
メインストリーミングデータには、メインストリーミングデータに含まれるデータの内容などを示すための管理情報、１５秒間分の音声データ、文字情報データ及び毎秒１フレーム目の静止画データを１５秒間分、計１５フレーム、が格納されている。
その一方、サブストリーミングデータには、サブストリーミングデータに含まれる管理情報、毎秒２フレーム目及び３フレーム目の静止画データを１５秒間分、計３０枚、が格納されている。
【００４２】
携帯電話端末４０は、メインストリーミングデータ及びサブストリーミングデータの両方を受信することで、合計で１５秒間分の音声データ、文字情報データ及び毎秒３フレームの静止画データを１５秒間分、計４５フレーム、を得る。しかし、電波状況の悪化などに伴い通信速度が低下した場合、メインストリーミングデータのみ受信しても、１５秒間の音声に同期した毎秒１フレームの映像及び文字情報がストリーミング視聴可能である。
なお、ストリーミングデータをマルチビットレートストリーミングにするためのストリーミングデータの分割数や分割方法は上記条件に限定されず、異なっても良い。
【００４３】
その他、ストリーミング視聴中に携帯電話端末の画面下部、２４０×６０ピクセルの領域には、ＤＶＤ放送の字幕などを表示させるために、管理情報及び文字情報を格納した字幕用データを用いる。同様に、ストリーミング視聴中に携帯電話端末の画面下部に文字情報や静止画による広告などを表示させるために、管理情報、文字情報及び静止画像を格納した広告用データを用いる。
なお、字幕又は広告などを表示する領域は上記のサイズに限らず、他の値であっても構わない。
【００４４】
前記字幕用データ及び前記広告用データは、データ量が比較的少なく、また、内容もリアルタイム性を必要とせず事前に用意できる場合が多いので、前記メインストリーミングデータ及びサブスリーミングデータのリアルタイムなストリーミング視聴の妨げにならないよう、携帯電話端末はストリーミング視聴の開始前に必要な字幕用データ及び広告用データを予め受信し記憶しておくことが望ましい。
【００４５】
次に、ストリーミングデータ作成サーバ１０の構成例について説明する。
本実施形態におけるストリーミングデータ作成サーバ１０は、図３に示すように、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、ＨＤＤ１４、ストリーミングデータ作成部１５、通信部１６０、ストリーミングデータ配信部１６１、映像入力部１７０、音声入力部１７１、文字情報入力部１７２、ライブソース取り込み部１７３及びこれらを相互に接続するバス１８からなる。
ＲＯＭ１２には各種制御プログラムなどが格納されており、ＣＰＵ１１はこれら制御プログラムを読み出して各種制御処理を行う。この際、ＲＡＭ１３はＣＰＵ１１のワークエリアとして用いられる。
【００４６】
ＨＤＤ１４は内部に、ストリーミングデータを作成しインターネット放送サーバ３０に配信するためにストリーミングデータ作成サーバの各部を制御するためのストリーミングデータ作成配信プログラム１４１及び当該作成されたストリーミングデータを配信するまで記憶するストリーミングバッファ１４２を格納している。
【００４７】
映像入力部１７０は、テレビカメラなどの映像撮影装置及びビデオキャプチャボードなどの映像データデジタル化装置からなり、映像撮影装置によって撮影したライブ映像を映像データデジタル化装置によってリアルタイムに変換してデジタル映像データを作成し、ライブソース取り込み部１７３を介してストリーミングデータ作成配信プログラム１４１に渡す。
なお、映像入力部１７０は映像撮影装置と映像データデジタル化装置の組み合わせに限定されず、その他、アンテナからテレビ番組を受信しリアルタイムにデジタル出力するテレビキャプチャユニットなどであっても良い。
【００４８】
音声入力部１７１は、マイクなどの音声取得装置及び音声入力サウンドボードなどの音声データデジタル化装置からなり、音声取得装置によって取得されたライブ音声を音声データデジタル化装置によってリアルタイムに変換してデジタル音声データを作成し、ライブソース取り込み部１７３を介してストリーミングデータ作成配信プログラム１４１に渡す。
なお、音声入力部１７１は音声取得装置と音声データデジタル化装置の組み合わせに限定されず、その他、アンテナからラジオ番組を受信しリアルタイムにデジタル出力するテレビキャプチャユニットなどであっても良い。
【００４９】
文字情報入力部１７２は、ライブの音声及び映像と同期して表示する字幕の内容をストリーミングデータに格納するために、本実施形態例では、予め字幕の内容、表示開始時刻及び表示終了時刻がストリーミングデータ作成サーバ１０に入力されており、これらのデータをライブソース取り込み部１７３を介してストリーミングデータ作成配信プログラム１４１に渡す。
なお、文字情報入力部は上記の構成に限定されず、その他、インターネット通信網及び通信部を介して外部よりリアルタイムに文字情報を取り込みストリーミングデータ作成配信プログラム１４１に渡すものなどであっても良い。
【００５０】
ライブ放送中は常時、ライブソース取り込み部１７３によってライブ映像データ、ライブ音声データ及び文字情報データが取り込まれ、ＨＤＤ１４内のストリーミングデータ作成配信プログラム１４１がＣＰＵ１１によって実行される。このとき、ＲＡＭ１３はＣＰＵ１１のワークエリアとして使用される。
通信部１６０はインターネット通信網２０に接続されており、ストリーミングデータ作成配信プログラム１４１によって作成されたストリーミングデータをインターネット通信網２０を介してインターネット放送サーバ３０に向けて即時配信する。
【００５１】
なお、ストリーミングデータ作成サーバ１０は１台のみに限定されず、インターネット通信網２０を介してインターネット放送サーバ３０と通信可能な複数のストリーミングデータ作成サーバ１０であっても良く、このことで複数のライブソースを取り込む際にストリーミングデータ作成サーバ１０の一台あたりの処理負荷を容易に分散できる。
【００５２】
次に、インターネット放送サーバ３０の構成例について説明する。
本実施形態におけるインターネット放送サーバ３０は、図４に示すように、ＣＰＵ３１、ＲＯＭ３２、ＲＡＭ３３、ＨＤＤ３４、通信部３５０、ストリーミングデータ記憶蓄積部３５１、メニュー管理データ配信要求受信部３５２、メニュー管理データ配信部３５３、ストリーミングコンテンツ配信要求受信部３５４、ストリーミングコンテンツ配信部３５５、ストリーミングデータ管理部３６、ストリーミングコンテンツ配信管理部３７及びこられを相互に接続するバス３８からなる。
ＲＯＭ３２には各種制御プログラムなどが格納されており、ＣＰＵ３１はこれら制御プログラムを読み出して各種制御処理を行う。この際、ＲＡＭ３３はＣＰＵ３１のワークエリアとして用いられる。
【００５３】
通信部３５０は、インターネット通信網２０に接続され、ストリーミングデータ作成サーバ１０及び携帯電話端末４０との通信を行う。
【００５４】
ＨＤＤ３４は内部に、携帯電話端末４０に対してストリーミングコンテンツを配信するためにインターネット放送サーバ３０の各部を制御するためのインターネット放送プログラム３４１、ストリーミングデータを記憶蓄積するストリーミングバッファ３４２、配信可能ストリーミングコンテンツに関する情報などを示すメニュー管理データ３４３及びそれぞれの携帯電話端末４０のストリーミング配信状態を管理する配信管理データ３４４を格納している。
【００５５】
ＨＤＤ３４内のインターネット放送プログラム３４１は常時ＣＰＵ３１によって実行されており、ストリーミングデータ作成サーバ１０から配信されるストリーミングデータをインターネット通信網２０に接続されている通信部３５０から受信し、ストリーミングデータ記憶蓄積部３５１においてストリーミングバッファ３４２に逐一記憶蓄積する。
【００５６】
ストリーミングバッファ３４２は、インターネット放送プログラム３４１がストリーミングデータ記憶蓄積部３５１においてストリーミングデータ作成サーバ１０から受信したストリーミングデータを格納する記憶領域である。
【００５７】
ストリーミングバッファ３４２は、ストリーミングデータの他に、携帯電話端末４０に配信し、ストリーミングコンテンツを視聴中の携帯電話端末の画面に表示する字幕や広告として使用される文字情報データ及び静止画データをも格納している。
【００５８】
その一方で、インターネット放送プログラム３４１は通信部３４及びインターネット通信網２０を介して携帯電話端末４０と通信し、メニュー管理データ配信要求受信部３５２において携帯電話端末４０からメニュー管理データの要求を受信し、当該要求されたメニュー管理データ３４３を当該携帯電話端末に配信する。
【００５９】
メニュー管理データ３４３は、インターネット放送サーバ３０がストリーミングデータ配信部３５５から携帯電話端末４０に対して配信できるデータのリストなどの、携帯電話端末４０のメニュー画面で表示される内容を格納しており、携帯電話４０からメニュー画面のデータを要求されるたびにインターネット放送プログラム３４１によって更新される。
【００６０】
また、同様に、インターネット放送プログラム３４１は通信部３４及びインターネット通信網２０を介して携帯電話端末４０と通信し、ストリーミングコンテンツ配信要求受信部３５４において携帯電話端末からストリーミングコンテンツの配信開始要求を受信し、当該要求されたストリーミングコンテンツに係るストリーミングデータをストリーミングデータ配信部３５５から当該携帯電話端末４０に対して配信する。
【００６１】
配信管理データ３４４では、インターネット放送サーバ３０がストリーミングデータ配信部３５５を介してどの携帯電話端末４０にどのストリーミングコンテンツを配信しているかが管理されており、配信状態の変化に伴いインターネット放送プログラム３４１によってストリーミングデータ配信管理部３７において適宜更新される。
【００６２】
次に、携帯電話端末の構成例について説明する。
本実施形態における携帯電話端末は、図５に示すように、ＣＰＵ４１、ＲＯＭ４２、ＲＡＭ４３、通信部４４０、メニュー管理データ配信要求部４４１、メニュー管理データ受信部４４２、ストリーミングコンテンツ配信要求部４４３、ストリーミングデータ記憶蓄積部４４４、ストリーミングデータ復元部４５、音声出力部４６０、映像出力部４６１、ストリーミング視聴部４６２、インターフェース４７部及びこれらを相互に接続するバス４８からなる。
ＲＯＭ４２には各種制御プログラムなどが格納されており、ＣＰＵ４１はこれら制御プログラムを読み出して各種制御処理を行う。この際、ＲＡＭ４３はＣＰＵ４１のワークエリアとして用いられる。
【００６３】
ＲＡＭ４３は内部に、前記インターネット放送サーバ３０に各種データの配信を要求し、また当該インターネット放送サーバ３０から配信された各種データを受信し、一旦逐一記憶蓄積した上で再生するインターネット放送視聴プログラム４３１と、前記インターネット放送サーバ３０から配信された各種データを記憶蓄積するストリーミングバッファ４３２を格納している。
【００６４】
インターフェース部４７は携帯電話端末４０の各種ボタン及びその制御装置から構成され、ユーザーによるボタン操作を受信しＣＰＵ４１に伝える。
【００６５】
通信部４４０は、アンテナや同調回路などから構成され、図示しない携帯電話基地局、電話回線、電話交換機などを介してインターネット通信網２０に接続され、インターネット放送サーバ３０と通信し、メニュー管理データ配信要求部４４１においてはインターネット放送サーバ３０に対してメニュー管理データの配信を要求し、メニュー管理データ受信部４４２においては当該インターネット放送サーバ３０から前記要求したメニュー管理データを受信し、ストリーミングコンテンツ配信要求部４４３においては前記インターネット放送サーバに対してストリーミングコンテンツの配信開始を要求し、ストリーミングデータ記憶蓄積部４４４においては前記インターネット放送サーバから配信されるストリーミングデータを逐一受信しストリーミングバッファ４３２に記憶蓄積する。
【００６６】
ストリーミングデータ復元部４５は、インターネット放送視聴プログラムによってストリーミングバッファ４３２内のストリーミングデータを元の音声、映像及び文字情報に適宜復元した上で、実際に出力されるタイミングまでストリーミングバッファ４３２に再度格納する。
【００６７】
ストリーミング視聴部４６２は、タイミングに合わせて、ストリーミングバッファ４３２に格納されている、復元された音声、映像及び文字情報を音声出力部及び映像出力部に渡す。
【００６８】
音声出力部４６０は、携帯電話端末のスピーカー及びその制御装置から構成され、ストリーミング配信されたコンテンツの音声などを出力する。
なお、音声の出力はスピーカーに制限されず、外部出力端子を介してヘッドフォンなどで出力しても良い。
【００６９】
映像出力部４６１は、携帯電話端末の画面及びその制御装置から構成され、メニュー画面やストリーミング配信されたコンテンツの映像などを表示する。
【００７０】
（方法例）
前記システム例に関する本実施形態例の方法例を説明する。図６は、ストリーミングデータがストリーミングデータ作成サーバ１０によって作成されてからインターネット放送サーバ３０によって記憶蓄積されるまでのシステムの実施方法を示すシーケンス図である。
【００７１】
ストリーミングデータ作成サーバ１０は、常時ストリーミングデータ作成配信プログラム１４１を実行しており、取り込まれた映像、音声及び文字情報をリアルタイムに圧縮加工処理しストリーミングデータに変換する（Ｓａ１）。
【００７２】
ここで、図７を参照しながら本実施形態例における音声の圧縮加工処理方法について説明する。
ストリーミングデータ作成サーバ１０によって取り込まれた音声（Ｓｂ１０１）を、まず、映像と同期して１５秒単位で分割し（Ｓｂ１０２）、量子化ビット数は１６ビット、サンプリング周波数は８キロヘルツのリニア音声に変換し（Ｓｂ１０３）、ノーマライズ処理により音量を均一化し（Ｓｂ１０４）、携帯電話端末４０の固有機能によって所謂「着メロ」として再生可能なＡＤＰＣＭ形式に変換し（Ｓｂ１０５）、出来上がった音声ファイルのファイルヘッダを削除する（Ｓｂ１０６）ただし、これらの圧縮加工処理に係る諸条件は限定的でなく、ストリーミング視聴する携帯電話端末４０の機種ごとに適した諸条件を用いて良い。
【００７３】
次に、同じく図７を参照しながら映像の圧縮加工処理方法について説明する。
ストリーミングデータ作成サーバ１０によって取り込まれた映像（Ｓｂ２０１）を、まず、音声と同期して１５秒単位で分割し（Ｓｂ２０２）、１／３秒ごとに１枚の静止画を抽出し（Ｓｂ２０３）、それぞれの静止画のサイズを携帯電話端末４０の画面サイズに合わせて２４０×１８０ピクセルに縮小し（Ｓｂ２０４）、ＪＰＥＧ圧縮する（Ｓｂ２０５）。ただしこのＪＰＥＧ圧縮は、圧縮後の静止画ファイルのサイズが６キロバイトに収まる条件で行う。最後に、全ての静止画ファイルから統一されたファイルヘッダを削除する（Ｓｂ２０６）。ただし、これらの圧縮加工処理に係る諸条件は限定的でなく、ストリーミング視聴する携帯電話端末４０の機種ごとに適した諸条件を用いて良く、またＪＰＥＧ圧縮の代わりにＰＮＧ圧縮など他の画像圧縮方法を用いても良い。
【００７４】
次に、同じく図７を参照しながらストリーミングデータの作成処理方法について説明する。
ある特定の１５秒間について、前述の通り作成された音声ファイルと、静止画ファイルのうち毎秒１枚目の静止画ファイル、計１５枚、文字情報及び管理情報を結合して、メインストリーミングデータを作成する（Ｓｂ１０７）。また、同じ１５秒間について、静止画ファイルのうち毎秒２枚目及び３枚目、計３０枚、及び管理情報を結合して、サブストリーミングデータを作成する（Ｓｂ２０７）。
なお、これらのストリーミングデータは、本発明のインターネットライブ放送のサービスが対応すると定める全ての携帯電話端末４０の機種についてそれぞれ適する条件で作成される。
【００７５】
ここで、図２を参照しながらメインストリーミングデータ及びサブストリーミングデータの構成を説明する。
図２に示すように、メインストリーミングデータには１５秒間の音声ファイル及び毎秒１枚目の静止画ファイルが格納されているので、１５秒間の音声に同期した毎秒１フレームの動画を再生することができる。また、サブストリーミングデータには毎秒３フレームの静止画のうち、２枚目と３枚目が格納されているので、前述のメインストリーミングデータと合わせることで、１５秒間の音声に同期した毎秒３フレームの動画を再生することができる。
【００７６】
このように、ストリーミングデータを２つに分割することで、通常はメインストリーミングデータとサブストリーミングデータの両方を用いて高フレームレートの動画再生を行い、もしも携帯電話端末の電波状況の悪化などで通信速度が低下した場合はメインストリーミングデータのみを用いて低フレームレートの動画再生を行うことで、本発明はマルチビットレートのストリーミング配信を実現している。
【００７７】
ここで、図６を参照しながら上記構成からなる実施形態の実施方法例についての説明に戻る。
ストリーミングデータ作成サーバ１０によって、取り込まれた音声、映像及び文字情報がリアルタイムに圧縮加工処理され、ストリーミングデータが作成されると同時に、当該ストリーミングデータはインターネット通信網２０を介してインターネット放送サーバ３０に即時配信される（Ｓａ２）。
【００７８】
インターネット放送サーバ３０は、ストリーミングデータ作成サーバ１０から配信されたストリーミングデータを受信し、記憶蓄積する（Ｓａ３）。
【００７９】
ここで、インターネット放送サーバ３０のストリーミングデータ記憶蓄積部３５１はストリーミングバッファ３４２を確認し、空き容量がある一定値を割り込んだ場合は、古いストリーミングデータから順に消去することにより前記一定値以上の空き容量を確保する（Ｓａ４）。
なお、インターネット放送サーバ３０のストリーミングバッファ３４２に確保すべき空き容量の値は、インターネット放送サーバ３０が安定して動作するべく臨機応変に設定する。
【００８０】
インターネット放送サーバ３０のストリーミングデータ管理部３６は、ストリーミングデータの受信または削除があると、随時、メニュー管理データ３４３を現状に即すように更新する（Ｓａ５）。
以上の動作は、携帯電話端末４０が実際にストリーミングコンテンツを視聴しているかいないかに係らず、常時行われている。
【００８１】
ここで、インターネット放送サーバ３０のメニュー管理データ３４３について説明する。
メニュー管理データ３４３は、携帯電話端末４０の画面上に表示されるメニューの内容を管理しており、例えば、ユーザーがボタン操作で移動する多階層メニュー内の複数のメニュー同志のつながり、コンテンツが有料か無料か、ライブ放送かＤＶＤ放送か、などを示すコンテンツタイプ、コンテンツのタイトル、などが格納されている。
なお、メニュー管理データ３４３は必ずしも単一のファイルである必要はなく、複数のファイルで分散管理されていても構わない。
【００８２】
次に、図８を参照しながら上記構成における本実施形態で、携帯電話端末４０がインターネット放送サーバ３０からインターネット通信網２０を介して配信されたストリーミングコンテンツを視聴している場合の実施方法例について説明する。
【００８３】
まず、携帯電話端末４０においてインターネット放送視聴プログラム４３１を起動する（Ｓｃ１）。
なお、本実施形態では、ＮＴＴドコモのｉアプリとして前記インターネット放送視聴プログラム４３１を作成実行しているが、これに制限されず、携帯電話の機種に適した方法で作成実行して構わない。
【００８４】
インターネット放送視聴プログラム４３１が起動すると、まず、メニュー管理データ配信要求部４４１がインターネット放送サーバ３０に対してメニュー管理データ３４３を要求する（Ｓｃ２）。このとき、携帯電話端末４０自身の機種に関する情報も併せて送信する。
【００８５】
インターネット放送サーバは、前記メニュー管理データ３４３を更新し（Ｓｃ３）、前記携帯電話端末４０の機種で視聴可能なストリーミングコンテンツのリストを含むメニュー管理データ３４３を当該携帯電話端末４０に向けて送信する（Ｓｃ４）。
【００８６】
インターネット放送サーバ３０からメニュー管理データ３４３を受信すると、携帯電話端末４０のインターネット放送視聴プログラム４３１はメニュー画面を表示する（Ｓｃ５）。
【００８７】
ユーザーはメニュー画面を操作して視聴するストリーミングコンテンツを選択決定し（Ｓｃ５）、選択コンテンツのストリーミング配信開始要求をインターネット放送サーバに送信する（Ｓｃ６）。
【００８８】
ここで、図９を参照しながら上記構成における本実施形態で、携帯電話端末４０におけるインターネット放送視聴プログラム４３１のメニュー画面の実施方法について説明する。
【００８９】
インターネット放送視聴プログラム４３１のメニュー画面は、多階層メニュー選択方式で構成されており、ユーザーは画面に表示された選択肢を上ボタン又は下ボタンを押下することで選択する。次に、決定ボタンを押下することで前記選択した選択肢を決定し、又は戻るボタンを押下することで前の画面に戻る。
【００９０】
本実施形態では、インターネット放送視聴プログラムのメニュー画面として最初に表示されるのは新規コンテンツの紹介などを目的とする「お知らせ」のページである。
図９のＳｄ４は「お知らせページ」の一例であるが、「お知らせ」のページで戻るボタンを押下すると、「メインメニュー」のページが表示される。
【００９１】
図９のＳｄ１は「メインメニュー」のページの一例であるが、ユーザーはここから多階層メニューを辿ってライブ放送やＤＶＤ放送を選択し視聴を決定する。
【００９２】
なお、図９のＳｄ６又はＳｄ７のように、有料コンテンツについてはユーザーに対して画面上で課金の確認を取っても良い。
【００９３】
ここで、図８の説明に戻る。
インターネット放送サーバ３０は、携帯電話端末４０からストリーミングコンテンツの配信要求を受信すると、配信管理データ３４４を更新し（Ｓｃ７）、配信要求されたストリーミングコンテンツのストリーミングデータを順番に当該携帯電話端末４０に対して連続的に配信する（Ｓｃ８）。
【００９４】
携帯電話端末４０は、インターネット放送サーバ３０から連続配信されるストリーミングデータを順番にまずはストリーミングバッファ４３２に記憶蓄積し（Ｓｃ９）、次に再生するべきストリーミングデータに格納された静止画データ、音声データ及び文字情報を復元し（Ｓｃ１０）、タイミングを計って前の再生が終わると同時に次の再生を開始し（Ｓｃ１１）、これらを連続実行することでつなぎ目の無い長時間のストリーミング視聴を実現する。
【００９５】
ここで、インターネット放送サーバの配信管理データ３４４について説明する。
配信管理データ３４４は、携帯電話端末４０へのストリーミングコンテンツ配信に係るデータを管理しており、携帯電話端末４０のユーザー識別番号、視聴コンテンツの識別番号、視聴年月日、その視聴の料金体系、などを格納している。
なお、配信管理データの内容は上記データに限らず、その他必要なデータを格納しても構わない。また、配信管理データ３５４は必ずしも単一のファイルである必要はなく、複数のファイルで分散管理されていても構わない。
【００９６】
ここで、図１０を参照しながら、携帯電話端末４０におけるストリーミングデータ復元方法について説明する。
携帯電話端末４０は、インターネット放送サーバ３０から配信されたストリーミングデータを受信すると、一旦これをストリーミングバッファ４３２に記憶蓄積し（Ｓｅ１０１）、また次のストリーミングデータを受信し（Ｓｅ１０２）、を繰り返す。
【００９７】
携帯電話端末４０のストリーミングバッファ４３２に蓄積されているストリーミングデータのうち、次に再生されるものを、元の音声、静止画及び文字情報のデータに復元する。
ストリーミングデータは音声データや静止画データのどを単純にバイナリ結合されているだけなので、管理部分の内容にしたがって分割する。
【００９８】
音声データは、メインストリーミングデータから抽出され（Ｓｅ２０２）、「着メロ」用のファイルヘッダを付加され（Ｓｅ３０３）、「着メロ」ファイル形式で携帯電話端末４０のストリーミングバッファ４３２に記憶蓄積される（Ｓｅ３０４）。
【００９９】
静止画データは、最低でもメインストリーミングデータから１５枚、サブストリーミングデータもストリーミングバッファ４３２に記憶蓄積されていればそこから３０枚、最高で計４５枚、が抽出され（Ｓｅ２０２）、それぞれに静止画用のファイルヘッダを付与され（Ｓｅ４０３）、静止画ファイル形式でストリーミングバッファ４３２に記憶蓄積される（Ｓｅ４０４）。
【０１００】
携帯電話端末４０のストリーミング視聴部４６２は、ストリーミング再生のタイミングを監視し（Ｓｅ２０５）、現在再生中の音声、静止画及び文字情報の再生が終わると同時に次の再生を開始することで、途切れのない長時間の再生を実現する。
【０１０１】
音声データは、携帯電話端末４０が固有に持っている所謂「着メロ」を演奏する機能を使用して再生するが、２つの「着メロ」を連続して再生すると２つの「着メロ」の間に無視できない無音時間が生じて大変聞き辛くなってしまうので、２つの音声再生チャンネルを交互に使うことにより、前の音声の再生終了と同時に、即ち無音時間の開始と同時に次の音声の再生を開始することで、途切れの無い長時間の音声ファイルを再生できる（Ｓｅ３０６）。
【０１０２】
静止画は、音声の再生開始と同時に１枚目を表示し（Ｓｅ４０６）、その後単位時間ごとに次の静止画を表示することによって擬似的に動画の再生を実現する（Ｓｅ４０７）。
ここで、静止画の表示を切り替える単位時間は、その静止画の枚数が４５枚なら１／３秒、１５枚なら１秒間隔となり、１５秒間の音声と同期されている。
【０１０３】
ここで、図１１を参照しながら、上記構成における本実施形態で、ストリーミング配信中に携帯電話端末４０に蓄積されたストリーミングデータの余裕が少なくなり、低ビットレートでのストリーミング視聴に切り替える場合の実施方法例について説明する。
【０１０４】
携帯電話端末４０の電波状況の変化などに伴う当該携帯電話端末４０の通信速度低下などにより当該携帯電話端末４０に蓄積されたストリーミングデータの余裕が少なくなった場合（Ｓｆ１）、当該携帯電話端末４０のインターネット放送視聴プログラム４３１はインターネット放送サーバ３０に対してメインストリーミングデータのみを配信要求し（Ｓｆ２）、当該インターネット放送サーバ３０からメインストリーミングデータのみを受信し（Ｓｆ３）、メインストリーミングデータのみを用いた低ビットレートのストリーミング視聴に切り替える。
【０１０５】
本願発明では、ストリーミング視聴の連続性を確保するために、携帯電話端末４０はそのストリーミングバッファ４３２の内部に、まずは余裕を持って最低でも３０秒間分のメインストリーミングデータを確保する。
ただし、ライブ放送の場合は、携帯電話端末４０におけるストリーミング再生がストリーミングデータ作成サーバ１０におけるストリーミングデータ作成に追いつくなどして、次にストリーミング再生するべきストリーミングデータがまだ存在しない場合があるので、最低限確保するメインストリーミングデータは１５秒間分であっても良い。
【０１０６】
低ビットレートのストリーミング配信では、携帯電話端末４０が表示できる動画は毎秒１フレームになるが、音声は高ビットレートのストリーミング配信と変わらず、通信速度が通常のおよそ半分で済むため、携帯電話端末４０の通信速度が低下しても安定したストリーミング配信を受け続けることができる（Ｓｆ４）。その間に携帯電話端末４０のストリーミングバッファ４３２にストリーミングデータが十分な余裕とともに蓄積される。
【０１０７】
その後、前記携帯電話端末４０のストリーミングバッファ４３２に蓄積されたストリーミングデータに十分な余裕が得られた場合（Ｓｆ５）、当該携帯電話端末４０のインターネット放送視聴プログラム４３１は前記インターネット放送サーバ３０に対してメインストリーミングデータの他にサブストリーミングデータも含めたストリーミングデータの配信要求を送信する（Ｓｆ６）。
【０１０８】
インターネット放送サーバ３０は、前記携帯電話端末４０からの要求に従い、高ビットレートのストリーミングデータ、即ち、メインストリーミングデータ及びサブストリーミングデータの両方を連続配信する（Ｓｆ７）ことで、携帯電話端末４０は高ビットレートのストリーミング視聴に戻る（Ｓｆ８）。
【０１０９】
ここで、図１２を参照しながら、上記構成における本実施形態で、ストリーミング配信中に携帯電話端末４０のストリーミングバッファ４３２でオーバーフローが発生した場合の実施方法例について説明する。
【０１１０】
携帯電話端末４０は、電波状況の変化などに伴い一時的に通信が途切れてしまうなどの不慮の事態に備えるために、インターネット放送サーバ３０からストリーミングデータを受信しストリーミングバッファ４３２に記憶蓄積し続けるが、携帯電話端末４０のストリーミングバッファ４３２の空きに余裕が無くなれば、ストリーミングバッファ４３２のオーバーフローが発生し（Ｓｇ１）、それ以上のストリーミングデータは受信できなくなるため、インターネット放送サーバに対するストリーミング配信要求を一時停止する（Ｓｇ２）。
【０１１１】
前記インターネット放送サーバ３０は、前記携帯電話端末４０からのストリーミング配信要求を受信するまで当該携帯電話端末４０に対して次のストリーミングデータを配信しないので、当該携帯電話端末４０はストリーミングバッファ４３２に蓄積されたストリーミングデータのみを用いてストリーミング視聴を続ける（Ｓｇ３）。
【０１１２】
その後、前記携帯電話端末４０のストリーミング視聴が進み、ストリーミングデータを消化し、ストリーミングバッファ４３２の空きに余裕が生まれ、ストリーミングバッファ４３２のオーバーフローが解消される（Ｓｇ４）と、当該携帯電話端末４０はインターネット放送サーバ３０に対するストリーミング配信要求を再開する（Ｓｇ５）。
【０１１３】
前記インターネット放送サーバ３０が前記携帯電話端末４０からのストリーミング配信の再生要求を受信すると、当該携帯電話端末４０に対するストリーミングデータの配信を再開し（Ｓｇ６）、当該携帯電話４０は通常のストリーミング視聴に戻る（Ｓｇ７）。
【０１１４】
ここで、図１３を参照しながら、上記構成における本実施形態で、ストリーミング視聴中に携帯電話端末４０のストリーミングバッファ４３２にストリーミングデータが不足した場合の実施方法例について説明する。
【０１１５】
ストリーミングデータ再生サーバ１０からインターネット放送サーバ３０へのストリーミング配信が滞る、インターネット放送サーバ３０から携帯電話端末４０へのストリーミング配信が先行し過ぎる又は携帯電話端末４０が通信不能に陥るなどの原因により、インターネット放送サーバ３０から携帯電話端末４０へのストリーミング配信が停止した場合でも、携帯電話端末４０のストリーミングバッファ４３２にストリーミングデータが蓄積されている限り、携帯電話端末４０でのストリーミング視聴は継続されるが、当該ストリーミングバッファ４３２に蓄積されたストリーミングデータが残り少なくなる（Ｓｈ１）と、携帯電話端末４０はインターネット放送サーバ３０に対してストリーミング配信要求をストリーミング配信が再開されるまで定期的に何度でも送信する（Ｓｈ２）。
【０１１６】
インターネット放送サーバ３０からのストリーミング配信が無いまま、携帯電話端末４０のストリーミング視聴が進み、ストリーミングデータを全て消費した場合は、当該ストリーミング視聴は一時停止状態に陥る（Ｓｈ３）。
【０１１７】
インターネット放送サーバ３０から携帯電話端末４０へのストリーミング配信が回復すれば（Ｓｈ４）、当該携帯電話端末４０のストリーミング視聴は通常通りに戻る（Ｓｈ５）。
【０１１８】
（プログラム例及び記録媒体例）
最後に、共にコンピュータの基本的機能を具備するとともに、インターネット放送のソースとなる音声、映像及び文字情報を取り込み、圧縮加工処理を施して携帯電話用ストリーミングデータとして即時配信するストリーミングデータ作成サーバ１０、当該配信されたストリーミングデータを一旦記憶蓄積した上で携帯電話端末４０から受信したストリーミングデータ配信要求に従い当該携帯電話端末４０にストリーミングデータを配信するインターネット放送サーバ３０及び当該インターネット放送サーバ３０から配信されたストリーミングデータを受信した上で当該ストリーミングデータから音声、映像及び文字情報を復元しストリーミング視聴する携帯電話端末４０にそれぞれ導入して実行されるプログラム例について説明する。
【０１１９】
ストリーミングデータ作成配信プログラム１４１は、ストリーミングデータ作成サーバ１０に、ストリーミングコンテンツのソースとなるライブの音声、映像及び文字情報を取り込む処理手順と、当該取り込まれた音声、映像及び文字情報を圧縮変換処理して携帯電話端末の機種ごとに適したストリーミングデータを作成する処理手順と、当該作成されたストリーミングデータをインターネット通信網２０を介してインターネット放送サーバに即時配信する処理手順と、を順次繰り返し実行させる。
【０１２０】
インターネット放送プログラム３４１は、インターネット放送サーバ３０に、一方では、インターネット通信網２０を介してストリーミングデータ作成サーバ１０から配信されたストリーミングデータを逐一受信し、ストリーミングバッファ３４２に逐一記憶蓄積する処理手順と、ストリーミングバッファ３４２の内容の変化に応じてメニュー管理データ３４３を更新する処理手順と、を順次繰り返し実行させ、
また、他方では、インターネット通信網２０を介して、携帯電話端末４０から送信されたメニュー管理データ３４３の配信要求を受信する処理手順と、当該携帯電話端末４０から要求されたメニュー管理データ３４３を当該携帯電話端末４０に送信する処理手順と、前記携帯電話端末４０から送信されるストリーミングデータの配信に係る各種要求を受信し、当該要求に応じて配信管理データ３４４を更新する処理手順と、前記インターネット通信網２０を介し携帯電話端末４０に対しストリーミングデータを配信する処理手順と、を繰り返し実行させる。
【０１２１】
インターネット放送視聴プログラム４３１は、携帯電話端末４０に、まず、メニュー画面を表示するために必要なメニュー管理データの配信を前記インターネット通信網２０を介して前記インターネット放送サーバ３０に対して要求する処理手順と、当該要求したメニュー管理データを受信する処理手順と、当該受信したメニュー管理データに基きメニュー画面を表示し、当該メニュー画面を操作して視聴するストリーミングコンテンツを選択する処理手順と、インターネット通信網２０を介してインターネット放送サーバ３０に対し前記選択したストリーミングコンテンツの配信開始を要求する処理手順と、を順次実行させ、
また、インターネット通信網２０を介してインターネット放送サーバ３０から配信されたストリーミングデータを受信する処理手順と、受信したストリーミングデータをストリーミングバッファ３４２に逐一記憶蓄積する処理手順と、蓄積したストリーミングデータから音声、映像及び文字情報を復元する処理手順と、復元した音声、映像及び文字情報を同期的に再生する処理手順と、を順次繰り返し実行させ、
さらに、携帯電話端末４０に蓄積されたストリーミングデータの余裕が少なくなった場合は、インターネット放送サーバに対してメインストリーミングデータのみを配信要求する処理手順と、インターネット放送サーバからメインストリーミングデータのみを受信する処理手順と、低ビットレートのストリーミング視聴を行う処理手順と、ストリーミングデータの蓄積に余裕が出たら高ビットレートのストリーミング視聴に戻る処理手順と、を適宜実行させ、
また、携帯電話端末４０のストリーミングバッファ４３２でオーバーフローが発生した場合は、インターネット放送サーバに対するストリーミングデータの配信要求を一時停止する処理手順と、ストリーミングバッファ４３２に蓄積されたストリーミングデータのみを用いてストリーミング視聴を続ける処理手順と、ストリーミングバッファ４３２のオーバーフローが解消されたらインターネット放送サーバに対してストリーミング配信要求を再開し通常のストリーミング視聴に戻る処理手順と、を適宜実行させ、
さらに、携帯電話端末４０のストリーミングバッファ内ストリーミングデータの不足が発生した場合は、インターネット通信網２０を介しインターネット放送サーバに対しストリーミングデータの配信再開を、当該ストリーミングデータの配信が再開されるまで要求する処理手順を、定期的に繰り返し実行させる。
【０１２２】
このとき、一連の処理手順からなる以上の３つのプログラム例をコンピュータ読み取り可能な実践手続として実録するそれぞれの記録媒体を得る。
【０１２３】
以上、本発明の実施の形態につき、ライブの音声、映像及び文字情報を取り込み、圧縮加工処理してストリーミング配信し、携帯電話端末４０上で視聴する場合を例に挙げて説明したが、本発明は必ずしも上述した手段、手法、手順及び手続にのみ限定されるものではなく、前述の効果を有する範囲内において、適宜、変更実施することが可能なものであり、例えば、予めストリーミングデータ全体を作成済みのＤＶＤをビデオオンデマンド方式により携帯電話端末４０上で視聴する場合などにも適用される。
【図面の簡単な説明】
【０１２４】
【図１】この発明の実施形態におけるシステム全体の構成を示すブロック図である。
【図２】同実施形態におけるストリーミングデータの構成を示す模式図である。
【図３】同実施形態におけるストリーミングデータ作成サーバの構成を示すブロック図である。
【図４】同実施形態におけるインターネット放送サーバの構成を示すブロック図である。
【図５】同実施形態における携帯電話端末の構成を示すブロック図である。
【図６】同実施形態においてストリーミングデータ作成サーバがストリーミングデータを作成してこれをインターネット放送サーバが記憶蓄積するまでの動作を示すシーケンス図である。
【図７】同実施形態において、ストリーミングデータ作成サーバがストリーミングデータを作成するフローチャート図である。
【図８】同実施形態において、携帯電話端末がインターネット放送視聴プログラムを起動してからストリーミングコンテンツが視聴されるまでの動作を示すシーケンス図である。
【図９】同実施形態において、携帯電話端末の画面に表示されるインターネット放送視聴プログラムのメニュー画面の一例を示す模式図である。
【図１０】同実施形態において、携帯電話端末がストリーミングデータを受信し、復元した音声及び映像を同期的に視聴するまでのフローチャート図である。
【図１１】同実施形態において、携帯電話端末に蓄積されたストリーミングデータの余裕が少なくなってから回復するまでの動作を示すシーケンス図である。
【図１２】同実施形態において、携帯電話端末のストリーミングバッファがオーバーフローしてから回復するまでの動作を示すシーケンス図である。
【図１３】同実施形態において、携帯電話端末に蓄積されたストリーミングデータが残り少なくなってから回復するまでの動作を示すシーケンス図である。
【符号の説明】
【０１２５】
１０  ストリーミングデータ作成サーバ
１１    ＣＰＵ
１２    ＲＯＭ
１３    ＲＡＭ
１４    ＨＤＤ
１４１    ストリーミングデータ作成配信プログラム
１４２    ストリーミングバッファ
１５    ストリーミングデータ作成部
１６０  通信部
１６１  ストリーミングデータ配信部
１７０  映像入力部
１７１  音声入力部
１７２  文字情報入力部
１７３  ライブソース取り込み部
１８    バス
２０  インターネット通信網
３０  インターネット放送サーバ
３１    ＣＰＵ
３２    ＲＯＭ
３３    ＲＡＭ
３４    ＨＤＤ
３４１    インターネット放送プログラム
３４２    ストリーミングバッファ
３４３    メニュー管理データ３５３
３４４    配信管理データ３５４
３５０  通信部
３５１  ストリーミングデータ記憶蓄積部
３５２  メニュー管理データ配信要求受信部
３５３  メニュー管理データ配信部
３５４  ストリーミングコンテンツ配信要求受信部
３５５  ストリーミングデータ配信部
３６    ストリーミングデータ管理部
３７    ストリーミングコンテンツ配信管理部
３８    バス
４０  携帯電話端末
４１    ＣＰＵ
４２    ＲＯＭ
４３    ＲＡＭ
４３１    インターネット放送視聴プログラム
４３２    ストリーミングバッファ
４４０  通信部
４４１  メニュー管理データ配信要求部
４４２  メニュー管理データ受信部
４４３  ストリーミングコンテンツ配信要求部
４４４  ストリーミングデータ記憶蓄積部
４５    ストリーミングデータ復元部
４６０  音声出力部
４６１  映像出力部
４６２  ストリーミング視聴部
４７    インターフェース部
４８    バス
【図１】
2006237673.tif 000003
【図２】
2006237673.tif 000004
【図３】
2006237673.tif 000005
【図４】
2006237673.tif 000006
【図５】
2006237673.tif 000007
【図６】
2006237673.tif 000008
【図７】
2006237673.tif 000009
【図８】
2006237673.tif 000010
【図１０】
2006237673.tif 000011
【図１１】
2006237673.tif 000012
【図１２】
2006237673.tif 000013
【図１３】
2006237673.tif 000014
【図９】
2006237673.tif 000015
【手続補正書】
【提出日】平成18年1月23日(2006.1.23)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１
【補正方法】変更
【補正の内容】
【請求項１】
ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、
インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、
当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元した音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力可能な携帯電話端末と、
を有して構築された携帯電話向けインターネットライブ放送システムであって、
前記ストリーミングデータ作成サーバは、
ライブの音声、映像及び文字情報を取り込むライブソース取り込み手段と、
当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、
当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信手段と、
を具備し、
前記インターネット放送サーバは、
前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、
当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、
前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、
前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、
前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、
前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、
前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、
を具備し、
前記ストリーミングデータは、それぞれが単位時間毎に区切られているとともにそれぞれのデータサイズが前記携帯電話端末独自の小さな記憶領域に収容可能であり、かつ、お互いに独立した静止画像データから構成された映像データ及び音声データを含み、
前記携帯電話端末は、
前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、
前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、
当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、
当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、
当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、
当該復元された各種データを用いて、ライブの音声をリアルタイムに再生する音声出力部と、映像及び文字情報を当該音声と同期的に再生する映像出力部と、を有するストリーミング視聴手段と、
を具備し、
当該音声出力部は、連続した音声データを長時間途切れなく再生可能に交互に使用される複数の音声再生チャンネルを有する、
ことを特徴とする携帯電話向けインターネットライブ放送システム。
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項２
【補正方法】変更
【補正の内容】
【請求項２】
前記ストリーミングデータ作成サーバのストリーミングデータ作成手段は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、
当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成するよう機能構成され、
前記インターネット放送サーバのストリーミングデータ配信手段は、
通常は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該携帯電話端末に配信することで高ビットレートストリーミング配信を行い、
前記高ビットレートストリーミング配信を行うには通信速度が不足している場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行うよう機能構成され、
前記携帯電話端末のストリーミング視聴手段は、
前記ストリーミングデータ復元手段によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、受信時のビットレートの高低に応じて当該一連の静止画を表示するフレームレートを動的に変更設定することにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力するよう機能構成される、
ことを特徴とする請求項１に記載の携帯電話向けインターネットライブ放送システム。
【手続補正３】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項４
【補正方法】変更
【補正の内容】
【請求項４】
前記インターネット放送サーバのストリーミングデータ記憶蓄積手段は、
既に圧縮変換処理済の既存コンテンツのストリーミングデータをも記憶蓄積するよう機能構成される、
ことを特徴とする請求項１、２又は３に記載の携帯電話向けインターネットライブ放送システム。
【手続補正４】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項５
【補正方法】変更
【補正の内容】
【請求項５】
ライブの音声、映像及び文字情報からストリーミングデータ作成サーバがリアルタイムに作成したストリーミングデータを、
インターネット通信網及びインターネット放送サーバを介して携帯電話端末に配信し、
当該携帯電話端末で当該ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力可能な携帯電話向けインターネットライブ放送方法であって、
前記ストリーミングデータ作成サーバは、
まず、ライブソース取り込み処理によって、ライブの音声、映像及び文字情報を取り込み、
次に、ストリーミングデータ作成処理によって、当該ライブの音声、映像及び文字情報を単位時間毎に区切ってリアルタイムに圧縮変換処理し、携帯電話の機種ごとに適した方式で、それぞれのデータサイズが前記携帯電話端末独自の小さな記憶領域に収容可能であり、映像データはお互いに独立した静止画像データから構成されるストリーミングデータを作成し、
続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、
一方、当該インターネット放送サーバは、
ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、
ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、
メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、
メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、
ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、
ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、
ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、
他方、当該携帯電話端末は、
メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、
メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、
ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、
ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、
ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、
ストリーミング視聴処理によって、当該音声データは、複数の音声再生チャンネルを交互に使用することで長時間途切れなく連続した音声としてリアルタイム再生し、当該映像及び文字情報は、当該音声とタイミングを合わせて同期的連続的に再生出力する、
ことを特徴とする携帯電話向けインターネットライブ放送方法。
【手続補正５】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項６
【補正方法】変更
【補正の内容】
【請求項６】
前記ストリーミングデータ作成サーバのストリーミングデータ作成処理は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、
当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成し、
前記インターネット放送サーバのストリーミングデータ配信処理は、
前記携帯電話端末の通信速度が十分高い場合は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該携帯電話端末に配信することで高ビットレートストリーミング配信を行い、
反対に、前記携帯電話端末の通信速度が低い場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行い、
前記携帯電話端末のストリーミング視聴処理は、
前記ストリーミングデータ復元処理によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、受信時のビットレートの高低に応じて当該一連の静止画を表示するフレームレートを動的に変更設定することにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力する、
ことを特徴とする請求項５に記載の携帯電話向けインターネットライブ放送方法。
【手続補正６】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項８
【補正方法】変更
【補正の内容】
【請求項８】
前記インターネット放送サーバのストリーミングデータ記憶蓄積処理は、
既に圧縮変換処理済の既存コンテンツのストリーミングデータをも記憶蓄積する、
ことを特徴とする請求項５、６又は７に記載の携帯電話向けインターネットライブ放送方法。
【手続補正７】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項９
【補正方法】変更
【補正の内容】
【請求項９】
共にコンピュータの基本的機能を具備するとともに、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元したライブの音声、映像及び文字情報を再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムにおいて、前記ストリーミングデータ作成サーバに適用されるストリーミングデータ作成配信プログラムであって、
前記ストリーミングデータ作成サーバに、
ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、
当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、
当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させるとともに、
前記ストリーミングデータ作成処理手順は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切る手順と、
当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換する手順と、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換する手順と、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルの総数及びそれぞれのサイズの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成する手順を踏む、
ことを特徴とするストリーミングデータ作成配信プログラム。
【手続補正８】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１０
【補正方法】変更
【補正の内容】
【請求項１０】
請求項９に記載のストリーミングデータ作成配信プログラムにおける各処理手順を実行させる手続をコンピュータ読取可能に実録してなる、
ことを特徴とするストリーミングデータ作成配信プログラムを記録した記録媒体。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
即ち、本発明システムの第１の特徴は、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元した音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力可能な携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムであって、前記ストリーミングデータ作成サーバが、ライブの音声、映像及び文字情報を取り込むライブソース取り込み手段と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信手段と、を具備し、前記インターネット放送サーバが、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、を具備し、前記ストリーミングデータは、それぞれが単位時間毎に区切られているとともにそれぞれのデータサイズが前記携帯電話端末独自の小さな記憶領域に収容可能であり、かつ、お互いに独立した静止画像データから構成された映像データ及び音声データを含み、前記携帯電話端末が、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、当該復元された各種データを用いて、ライブの音声をリアルタイムに再生する音声出力部と、映像及び文字情報を当該音声と同期的に再生する映像出力部と、を具備するストリーミング視聴手段と、を具備し、当該音声出力部は、連続した音声データを長時間途切れなく再生可能に交互に使用される複数の音声再生チャンネルを具備する、ことを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１９
【補正方法】変更
【補正の内容】
【００１９】
本発明システムの第２の特徴は、上記本発明システムの第１の特徴における前記ストリーミングデータ作成サーバのストリーミングデータ作成手段が、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成するよう機能構成され、また、上記本発明システムの第１の特徴における前記インターネット放送サーバのストリーミングデータ配信手段が、前記携帯電話端末の通信速度が十分高い場合は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該携帯電話端末に配信することで高ビットレートストリーミング配信を行い、反対に、前記携帯電話端末の通信速度が低い場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行うよう機能構成され、さらに、上記本発明システムの第１の特徴における前記携帯電話端末のストリーミング視聴手段が、前記ストリーミングデータ復元手段によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、受信時のビットレートの高低に応じて当該一連の静止画を表示するフレームレートを動的に変更設定することにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力するよう機能構成される、ことを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００２１
【補正方法】変更
【補正の内容】
【００２１】
本発明システムの第４の特徴は、上記本発明システムの第１、第２又は第３の特徴における前記インターネット放送サーバのストリーミングデータ記憶蓄積手段が、既に圧縮変換処理済の既存コンテンツのストリーミングデータをも記憶蓄積するよう機能構成される、ことを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
一方、本発明方法の第１の特徴は、ライブの音声、映像及び文字情報からストリーミングデータ作成サーバがリアルタイムに作成したストリーミングデータを、インターネット通信網及びインターネット放送サーバを介して携帯電話端末に配信し、当該携帯電話端末で当該ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力可能な携帯電話向けインターネットライブ放送方法であって、前記ストリーミングデータ作成サーバが、まず、ライブソース取り込み処理によって、ライブの音声、映像及び文字情報を取り込み、次に、ストリーミングデータ作成処理によって、当該ライブの音声、映像及び文字情報を単位時間毎に区切ってリアルタイムに圧縮変換処理し、携帯電話の機種ごとに適した方式で、それぞれのデータサイズが前記携帯電話端末独自の小さな記憶領域に収容可能であり、映像データはお互いに独立した静止画像データから構成されるストリーミングデータを作成し、続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、一方、当該インターネット放送サーバが、ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、他方、当該携帯電話端末が、メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、ストリーミング視聴処理によって、当該音声データは、複数の音声再生チャンネルを交互に使用することで長時間途切れなく連続した音声としてリアルタイム再生し、当該映像及び文字情報は、当該音声とタイミングを合わせて同期的連続的に再生出力する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００２３
【補正方法】変更
【補正の内容】
【００２３】
本発明方法の第２の特徴は、上記本発明方法の第１の特徴における前記ストリーミングデータ作成サーバのストリーミングデータ作成処理が、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切り、当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換し、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換し、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成し、上記本発明方法の第１の特徴における前記インターネット放送サーバのストリーミングデータ配信処理が、前記携帯電話端末の通信速度が十分高い場合は、前記マルチビットレートなストリーミングデータの全てであるメインストリーミングデータ及びサブストリーミングデータを当該携帯電話端末に配信することで高ビットレートストリーミング配信を行い、反対に、前記携帯電話端末の通信速度が低い場合は、前記マルチビットレートなストリーミングデータの一部であるメインストリーミングデータのみを当該携帯電話端末に配信することで低ビットレートストリーミング配信を行い、上記本発明方法の第１の特徴における前記携帯電話端末のストリーミング視聴処理が、前記ストリーミングデータ復元処理によって得られた一連の静止画ファイルを単位時間ごとに連続して順番に表示することで映像を出力するとき、受信時のビットレートの高低に応じて当該一連の静止画を表示するフレームレートを動的に変更設定することにより、マルチビットレートなストリーミングデータによる音声及び映像を同期的に再生出力する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００２５
【補正方法】変更
【補正の内容】
【００２５】
本発明方法の第４の特徴は、上記本発明方法の第１、第２又は第３の特徴における前記インターネット放送サーバのストリーミングデータ記憶蓄積処理は、既に圧縮変換処理済の既存コンテンツのストリーミングデータをも記憶蓄積する、ことを特徴とする携帯電話向けインターネットライブ放送方法の構成採用にある。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
他方、本発明ストリーミングデータ作成配信プログラムの第１の特徴は、共にコンピュータの基本的機能を具備するとともに、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元したライブの音声、映像及び文字情報を再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムにおいて、前記ストリーミングデータ作成サーバに適用されるストリーミングデータ作成配信プログラムであって、前記ストリーミングデータ作成サーバに、ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させるとともに、前記ストリーミングデータ作成処理手順は、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切る手順と、当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換する手順と、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換する手順と、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルのサイズなどの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話の機種ごとに作成する手順と、を踏むことを特徴とするストリーミングデータ作成配信プログラムの構成採用にある。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００２７
【補正方法】変更
【補正の内容】
【００２７】
また、本発明記録媒体の第１の特徴は、上記本発明ストリーミングデータ作成配信プログラムの第１の特徴における各処理手順を実行させる手続をコンピュータ読取可能に実録してなる、ストリーミングデータ作成配信プログラムを記録した記録媒体の構成採用にある。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００２８
【補正方法】変更
【補正の内容】
【００２８】
インターネットに接続可能な携帯電話端末において、その限られた演算能力、記憶容量及び通信速度の中で、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング視聴できるという優れた効果を発揮する。
また、映像を構成するそれぞれのフレームはお互いに独立した静止画像であるので、通信事故などの理由によりもしも１枚のフレームのデータが破壊されてしまっても、いわゆるＭＰＥＧシリーズの動画像のようにその後のフレームにも影響してしまうことが無いという優れた効果を発揮する。
【手続補正書】
【提出日】平成18年4月24日(2006.4.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項１
【補正方法】変更
【補正の内容】
【請求項１】
ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、
当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元した音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力可能な携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムであって、
前記ストリーミングデータ作成サーバは、
音声取得装置によって取得されたライブ音声、映像撮影装置によって撮影したライブ映像、予めストリーミングサーバ内に格納されている前記ライブ音声及び前記ライブ音声に同期して表示する字幕の内容となる文字情報を取り込むライブソース取り込み手段と、
当該取り込んだライブ音声を、リアルタイムで前記映像データと同期して携帯電話端末固有の機能である着メロとして再生可能にデジタル音声データとして圧縮加工処理し、かつ、当該取り込んだライブ映像をリアルタイムで前記音声データに同期して複数に分割し静止画を抽出すると共に、前記携帯電話端末用にて再生可能にデジタル映像データとして圧縮加工処理し、さらに、前記デジタル音声データと前記デジタル映像データを前記文字情報と結合する携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、
当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信手段と、
を具備し、
前記インターネット放送サーバは、
前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、
当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、
前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、
前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、
前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、
前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、
前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、
を具備し、
前記ストリーミングデータは、
それぞれが単位時間毎に区切られているとともにそれぞれのデータサイズが前記携帯電話端末内の記憶領域に収容可能なサイズであり、かつ、お互いに独立した静止画像データから構成された映像データ及び音声データを含み、
前記携帯電話端末は、
前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、
前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、
当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、
当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、
当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、
当該復元された各種データを用いて、ライブの音声をリアルタイムに再生する音声出力部と、映像及び文字情報を当該音声と同期的に再生する映像出力部と、を有するストリーミング視聴手段と、
を具備し、
当該音声出力部は、
連続した当該音声データを長時間途切れなく再生可能に交互に使用される複数の音声再生チャンネルを有する、
ことを特徴とする携帯電話向けインターネットライブ放送システム。
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項５
【補正方法】変更
【補正の内容】
【請求項５】
ライブの音声、映像及び文字情報からストリーミングデータ作成サーバがリアルタイムに作成したストリーミングデータを、  インターネット通信網及びインターネット放送サーバを介して携帯電話端末に配信し、
当該携帯電話端末で当該ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力する携帯電話向けインターネットライブ放送方法であって、
前記ストリーミングデータ作成サーバは、
まず、ライブソース取り込み処理によって、音声取得装置によって取得されたライブ音声、映像撮影装置によって撮影したライブ映像、予めストリーミングサーバ内に格納されている前記ライブ音声及び前記ライブ音声に同期して表示する字幕の内容となる文字情報を取り込み、
次に、当該取り込んだライブ音声を、リアルタイムで前記映像データと同期して携帯電話端末固有の機能である着メロとして再生可能にデジタル音声データとして圧縮加工処理し、かつ、当該取り込んだライブ映像をリアルタイムで前記音声データに同期して複数に分割し静止画として抽出すると共に、前記携帯電話端末用にて再生可能にデジタル映像データとして圧縮加工処理し、さらに、前記デジタル音声データと前記デジタル映像データを前記文字情報と結合し携帯電話の機種ごとに適した方式で、それぞれのデータサイズが前記携帯電話端末内の記憶領域に収納可能であり、映像データがお互いに独立した静止画像データから構成されるストリーミングデータを作成し、
続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、
一方、当該インターネット放送サーバは、
ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、
ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、
メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、
メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、
ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、
ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、
ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、
他方、当該携帯電話端末は、
メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、
メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、
ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、
ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、
ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、
ストリーミング視聴処理によって、当該音声、映像及び文字情報をタイミングを合わせて連続的に再生することにより、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生出力する、
ことを特徴とする携帯電話向けインターネットライブ放送方法。
【手続補正３】
【補正対象書類名】特許請求の範囲
【補正対象項目名】請求項９
【補正方法】変更
【補正の内容】
【請求項９】
共にコンピュータの基本的機能を具備するとともに、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元したライブの音声、映像及び文字情報を再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムにおいて、前記ストリーミングデータ作成サーバに適用されるストリーミングデータ作成配信プログラムであって、
前記ストリーミングデータ作成サーバに、
ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、
当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、
当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させるとともに、
前記ストリーミングデータ作成処理手順は、
前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切る手順と、
当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換する手順と、
一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、
当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換する手順と、
当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルの総数及びそれぞれのサイズの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、
前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、
に分割してマルチビットレートなストリーミングデータを、前記携帯電話端末の機種ごとに作成し、
当該携帯電話端末にて、前記ストリーミングサーバから前記ストリーミングデータ受信させ、当該ストリーミングデータに含まれる当該音声データ、当該静止画ファイル及び前記文字情報を復元し、当該携帯電話端末内における音声出力部が有する連続した音声データを長時間途切れなく再生可能に交互に使用される複数の音声再生チャンネルにて再生させるとともに、前記静止画ファイル及び前記文字情報を前記音声と同期的に再生する処理手段を順次実行させる、
ことを特徴とするストリーミングデータ作成配信プログラム。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１８
【補正方法】変更
【補正の内容】
【００１８】
即ち、本発明システムの第１の特徴は、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元した音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力可能な携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムであって、前記ストリーミングデータ作成サーバは、音声取得装置によって取得されたライブ音声、映像撮影装置によって撮影したライブ映像、予めストリーミングサーバ内に格納されている前記ライブ音声及び前記ライブ音声に同期して表示する字幕の内容となる文字情報を取り込むライブソース取り込み手段と、当該取り込んだライブ音声を、リアルタイムで前記映像データと同期して携帯電話端末固有の機能である着メロとして再生可能にデジタル音声データとして圧縮加工処理し、かつ、当該取り込んだライブ映像をリアルタイムで前記音声データに同期して複数に分割し静止画を抽出すると共に、前記携帯電話端末用にて再生可能にデジタル映像データとして圧縮加工処理し、さらに、前記デジタル音声データと前記デジタル映像データを前記文字情報と結合する携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成手段と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信手段と、を具備し、当該ストリーミングデータ作成手段は、前記インターネット放送サーバは、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して常時配信されるストリーミングデータを逐一受信し、記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積したストリーミングデータを管理するストリーミングデータ管理手段と、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信するメニュー管理データ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信するメニュー管理データ配信手段と、前記インターネット通信網を介して、前記携帯電話端末からストリーミングコンテンツの配信要求を受信するストリーミングコンテンツ配信要求受信手段と、前記インターネット通信網を介して、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信するストリーミングデータ配信手段と、前記携帯電話端末へのストリーミングコンテンツの配信を管理するストリーミングコンテンツ配信管理手段と、を具備し、前記ストリーミングデータは、それぞれが単位時間毎に区切られているとともにそれぞれのデータサイズが前記携帯電話端末内の記憶領域に収容可能なサイズであり、かつ、お互いに独立した静止画像データから構成された映像データ及び音声データを含み、前記携帯電話端末は、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求するメニュー管理データ配信要求手段と、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信するメニュー管理データ受信手段と、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求するストリーミングコンテンツ配信要求手段と、当該インターネット通信網を介して、当該インターネット放送サーバから連続配信されるストリーミングデータを逐一記憶装置に記憶蓄積するストリーミングデータ記憶蓄積手段と、当該記憶蓄積されたストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元するストリーミングデータ復元手段と、当該復元された各種データを用いて、ライブの音声をリアルタイムに再生する音声出力部と、映像及び文字情報を当該音声と同期的に再生する映像出力部と、を有するストリーミング視聴手段と、を具備し、当該音声出力部は、連続した当該音声データを長時間途切れなく再生可能に交互に使用される複数の音声再生チャンネルを有してなることを特徴とする携帯電話向けインターネットライブ放送システムの構成採用にある。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００２２
【補正方法】変更
【補正の内容】
【００２２】
一方、本発明方法の第１の特徴は、ライブの音声、映像及び文字情報からストリーミングデータ作成サーバがリアルタイムに作成したストリーミングデータを、インターネット通信網及びインターネット放送サーバを介して携帯電話端末に配信し、当該携帯電話端末で当該ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムにストリーミング再生出力する携帯電話向けインターネットライブ放送方法であって、前記ストリーミングデータ作成サーバは、まず、ライブソース取り込み処理によって、音声取得装置によって取得されたライブ音声、映像撮影装置によって撮影したライブ映像、予めストリーミングサーバ内に格納されている前記ライブ音声及び前記ライブ音声に同期して表示する字幕の内容となる文字情報を取り込み、次に、当該取り込んだライブ音声を、リアルタイムで前記映像データと同期して携帯電話端末固有の機能である着メロとして再生可能にデジタル音声データとして圧縮加工処理し、かつ、当該取り込んだライブ映像をリアルタイムで前記音声データに同期して複数に分割し静止画として抽出すると共に、前記携帯電話端末用にて再生可能にデジタル映像データとして圧縮加工処理し、さらに、前記デジタル音声データと前記デジタル映像データを前記文字情報と結合し携帯電話の機種ごとに適した方式で、それぞれのデータサイズが前記携帯電話端末内の記憶領域に収納可能であり、映像データがお互いに独立した静止画像データから構成されるストリーミングデータを作成し、続いて、ストリーミングデータ配信処理によって、当該ストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信し、一方、当該インターネット放送サーバは、ストリーミングデータ記憶蓄積処理によって、前記ストリーミングデータ作成サーバから前記インターネット通信網を介して受信したストリーミングデータを逐一受信し、記憶蓄積するとともに、ストリーミングデータ管理処理によって、当該記憶蓄積したストリーミングデータを管理し、メニュー管理データ配信要求受信処理によって、前記インターネット通信網を介して、前記携帯電話端末からメニュー管理データの配信要求を受信し、メニュー管理データ配信処理によって、前記インターネット通信網を介して、当該携帯電話端末から要求されたメニュー管理データを更新し、当該携帯電話端末に配信し、ストリーミングコンテンツ配信要求受信処理によって、前記インターネット通信網を介して、当該携帯電話端末からストリーミングコンテンツの配信要求を受信し、ストリーミングデータ配信処理によって、当該携帯電話端末から要求されたストリーミングデータを当該携帯電話端末に配信し、ストリーミングコンテンツ配信管理処理によって、前記携帯電話端末へのストリーミングコンテンツの配信を管理し、他方、当該携帯電話端末は、メニュー管理データ配信要求処理によって、前記インターネット通信網を介して、前記インターネット放送サーバに対して、メニュー画面を表示するために必要なメニュー管理データを要求し、メニュー管理データ受信処理によって、前記インターネット通信網を介して、前記インターネット放送サーバから、当該要求したメニュー管理データを受信し、ストリーミングコンテンツ配信要求処理によって、当該受信したメニュー管理データに基き表示したメニュー画面からストリーミングコンテンツを選択し、前記インターネット通信網を介して、前記インターネット放送サーバに対して、当該選択したストリーミングコンテンツの配信開始を要求し、ストリーミングデータ記憶蓄積処理によって、当該インターネット通信網を介して、当該インターネット放送サーバから配信されるストリーミングデータを逐一記憶装置に記憶蓄積し、ストリーミングデータ復元処理によって、当該ストリーミングデータからライブの音声、映像及び文字情報などの各種データを復元し、ストリーミング視聴処理によって、当該音声、映像及び文字情報をタイミングを合わせて連続的に再生することにより、当該復元された各種データを用いて、ライブの音声、映像及び文字情報を長時間途切れなく同期的にリアルタイムに再生出力してなる携帯電話向けインターネットライブ放送方法の構成採用にある。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００２６
【補正方法】変更
【補正の内容】
【００２６】
他方、本発明ストリーミングデータ作成配信プログラムの第１の特徴は、共にコンピュータの基本的機能を具備するとともに、ライブの音声、映像及び文字情報をリアルタイムに圧縮変換処理したストリーミングデータを作成配信するストリーミングデータ作成サーバと、インターネット通信網を介して受信された当該ストリーミングデータを記憶蓄積し、携帯電話端末からの配信要求に応じて当該記憶蓄積したストリーミングデータを配信するインターネット放送サーバと、当該インターネット放送サーバからインターネット通信網を介して受信された当該ストリーミングデータから復元したライブの音声、映像及び文字情報を再生出力する携帯電話端末と、を有して構築された携帯電話向けインターネットライブ放送システムにおいて、前記ストリーミングデータ作成サーバに適用されるストリーミングデータ作成配信プログラムであって、前記ストリーミングデータ作成サーバに、ライブの音声、映像及び文字情報を取り込むライブソース取り込み処理手順と、当該取り込んだライブの音声、映像及び文字情報をリアルタイムに圧縮変換し、携帯電話の機種ごとに適したストリーミングデータを作成するストリーミングデータ作成処理手順と、当該作成されたストリーミングデータを前記インターネット通信網を介して前記インターネット放送サーバに即時配信するストリーミングデータ配信処理手順と、を順次実行させるとともに、前記ストリーミングデータ作成処理手順は、前記取り込んだライブの音声、映像及び文字情報を同期的に単位時間ごとに区切る手順と、当該区切られたライブ音声を前記携帯電話端末の必須機能である音声出力機能で出力可能な形式の音声ファイルに圧縮変換する手順と、一方、当該区切られたライブ映像から単位時間ごとに静止画を抽出し、当該抽出された静止画のそれぞれについて、前記携帯電話端末が基本機能として具備する静止画表示機能で表示可能な形式のお互いに独立した静止画ファイルに圧縮変換する手順と、当該圧縮変換された音声ファイル、当該圧縮変換された一連の静止画ファイルのうち一定数おきに選出したもの、前記文字情報ファイル及びこれらファイルの総数及びそれぞれのサイズの情報を示す管理情報を格納し、低ビットレートで低フレームレートなストリーミング視聴が単体で可能に構成されるメインストリーミングデータと、前記圧縮された一連の静止画ファイルの残り及びこれらファイルのサイズなどの情報を示す管理情報を格納し、当該メインストリーミングデータが格納するデータと合わせて初めて高ビットレートで高フレームレートなストリーミング視聴が可能に構成されるサブストリーミングデータと、に分割してマルチビットレートなストリーミングデータを、前記携帯電話端末の機種ごとに作成し、当該携帯電話端末にて、前記ストリーミングサーバから前記ストリーミングデータ受信させ、当該ストリーミングデータに含まれる当該音声データ、当該静止画ファイル及び前記文字情報を復元し、当該携帯電話端末内における音声出力部が有する連続した音声データを長時間途切れなく再生可能に交互に使用される複数の音声再生チャンネルにて再生させるとともに、前記静止画ファイル及び前記文字情報を前記音声と同期的に再生する処理手段を順次実行させてなるストリーミングデータ作成配信プログラムの構成採用にある。