(57)【要約】【課題】携帯端末を使ってある程度の長さを持った動画映像と音声情報の配信を行う。【解決手段】インターネットを介して携帯端末に動画映像と音声情報の提供をパケット通信を用いて配信する動画映像音声情報処理システムを提供する。【選択図】図１０
2008109601.tif 000002
【特許請求の範囲】
【請求項１】
元となる動画映像と音声をリアルタイムで規定秒数への切り分け手段と、規定秒数内で一秒間に一枚以上の静止画像を表示させるために動画映像から静止画像ファイル群へと変換する静止画像変換手段と、規定秒数内で各種携帯端末毎の音声ファイルタイプの音声ファイルへと変換する音声変換手段と、一秒間に静止画像ファイル群からファイルサイズの差分により特徴抽出を行いファイルを抽出する特徴抽出ファイル選択手段と、一秒間に静止画像ファイル群から均等間隔にファイルを選択する均等配分ファイル選択手段と、規定秒数内で前記特徴抽出ファイル選択手段により再生索引部を作成する特徴抽出再生索引部作成手段と、規定秒数内で前記均等配分ファイル選択手段により再生索引部を作成する均等配分再生索引部作成手段と、規定秒数分のファイル内容を記述するファイル内容記述手段と、規定秒数分の静止画像ファイル群と音声ファイルとファイル内容をひとつの圧縮ファイルへ変換する圧縮手段を有す、動画映像音声情報処理サーバ。
【請求項２】
規定秒数毎の圧縮ファイルを順次格納領域に格納する取得手段と、圧縮されたファイルを静止画像群と音声ファイルとファイル内容へと変換する解凍手段と、順に従って再生する再生手段と、再生を一時停止し操作説明の画面を表示する一時停止手段と、早送りボタン／巻戻しボタンにより再生位置を決定する再生位置決定手段と、再生索引一覧を表示する再生索引一覧表示手段と、再生位置記憶ボタンにより現在の再生位置を記憶する再生位置記憶手段と、取得手段と再生手段と再生位置決定手段との同期を取る同期手段と、接続ボタンにより随時任意のサイト又は任意の電話番号へ接続を促す接続誘導手段と、動画映像音声情報の再生中に任意の文字情報を表示／非表示する文字情報表示手段と、１６：９および３：４の動画映像に対応させるために表示画面を９０度回転させる回転手段と、画面の明るさを保持する／しないを設定する輝度保持切替手段と、起動時に現在のバージョンを調査しバージョンアップを行う自動バージョン更新手段と、起動時に現在のマナーモードを調査しマナーモード解除の警告を表示するマナーモード警告手段と、起動時に多量のパケット通信を行う旨を表示し確認を行うパケット通信確認手段と、再生時に音声情報の音量を調整する音量調整手段と、を有する、インターネット接続可能な携帯端末。
【請求項３】
前記、動画映像音声情報処理サーバであって、ある程度の長さを持った動画ファイルおよびリアルタイムに取得された動画映像と音声を、規定秒数へ切り分けを行う、元となる動画映像と音声をリアルタイムで規定秒数への切り分け手段。
【請求項４】
前記、動画映像音声情報処理サーバであって、規定秒数内で、一秒間に、切り分けられた動画ファイルを最大六十枚の静止画へと変換を行う、規定秒数内で一秒間に一枚以上の静止画像を表示させるために動画映像から静止画像ファイル群へと変換する静止画像変換手段。
【請求項５】
前記、動画映像音声情報処理サーバであって、規定秒数内で、切り分けられた動画ファイルを各種携帯端末で再生可能なファイルタイプへと変換する、規定秒数内で各種携帯端末毎の音声ファイルタイプの音声ファイルへと変換する音声変換手段。
【請求項６】
前記、動画映像音声情報処理サーバであって、規定秒数内で、設定されたファイルサイズ閾値に従い、一秒間当たりに変換された静止画像群最大六十枚から設定されたファイルサイズ閾値により、最低でも一秒間に一枚以上の静止画像を格納する、一秒間に静止画像ファイル群からファイルサイズの差分により特徴抽出を行いファイルを抽出する特徴抽出ファイル選択手段。
【請求項７】
前記、動画映像音声情報処理サーバであって、規定秒数内で、均等間隔に、一秒間当たりに変換された静止画像群最大六十枚から、最低でも一秒間に一枚以上の静止画像を格納する、一秒間に静止画像ファイル群から均等間隔にファイルを選択する均等配分ファイル選択手段。
【請求項８】
前記、動画映像音声情報処理サーバであって、規定秒数内で、設定されたファイルサイズ閾値に従い、一秒間当たりに変換された静止画像群最大六十枚から設定されたファイルサイズ閾値により、最高で十六枚の静止画像とその再生位置を格納し再生索引部とする、規定秒数内で前記特徴抽出ファイル選択手段により再生索引部を作成する特徴抽出再生索引部作成手段。
【請求項９】
前記、動画映像音声情報処理サーバであって、規定秒数内で、均等間隔に、一秒間当たりに変換された静止画像群最大六十枚から、最高で十六枚の静止画像とその再生位置を格納し再生索引部とする、規定秒数内で前記均等配分ファイル選択手段により再生索引部を作成する均等配分再生索引部作成手段。
【請求項１０】
前記、動画映像音声情報処理サーバであって、規定秒数内で、一秒間当たりに変換された静止画像群最大六十枚から、最低でも一秒間に一枚以上の静止画像を格納した時に、格納されたファイル名をファイル内容として記述する、規定秒数分のファイル内容を記述するファイル内容記述手段。
【請求項１１】
前記、動画映像音声情報処理サーバであって、規定秒数内で、ファイル選択された静止画像群と音声ファイルとファイル内容を、一個の圧縮ファイルへと変換する、規定秒数分の静止画像ファイル群と音声ファイルとファイル内容をひとつの圧縮ファイルへ変換する圧縮手段。
【請求項１２】
前記、携帯端末であって、携帯端末内の記憶領域には限りがある為、最低一個以上の圧縮ファイルを、携帯端末の格納領域に、規定秒数毎の圧縮ファイルを順次格納領域に格納する取得手段。
【請求項１３】
前記、携帯端末であって、格納された圧縮ファイルを動画映像音声情報サーバで作成された、規定秒数分の静止画像ファイル群と音声ファイルとファイル内容を解凍し、携帯端末で静止画としておよび音声情報として使用できる形に復元する、圧縮されたファイルを静止画像群と音声ファイルへとファイル内容へと変換する解凍手段。
【請求項１４】
前記、携帯端末であって、最低一個以上格納された圧縮ファイルが解凍され、携帯端末で静止画としておよび音声情報として使用できる形に復元された情報を、最低でも一秒間に一枚以上の静止画像を表示し、音声情報を再生し、画面下部に全体の長さの矩形を表示、一秒に一秒再生位置を加算し、加算された再生位置までの矩形の塗りつぶしを行い、順に従って再生する再生手段。
【請求項１５】
前記、携帯端末であって、「一時停止ボタン」を押下時、現在の再生を停止し操作説明文を現在の静止画にかぶせて表示し、再度「一時停止ボタン」を押下時、再生を前回停止位置から続行する、再生を一時停止し操作説明の画面を表示する一時停止手段。
【請求項１６】
前記、携帯端末であって、「早送りボタン」を一回押下時、早送り状態へと推移し、画面下部に全体の長さの矩形を表示、秒数が００から５０までは一秒に十秒毎、状態が一分を超えれば一秒に一分毎、再生位置を加算し、加算された再生位置までの矩形の塗りつぶしを行う、「早送りボタン」を二回押下時、巻き戻し状態へと推移し、画面下部に全体の長さの矩形を表示、秒数が５０から００までは一秒に十秒毎、状態が一分を超えれば一秒に一分毎、再生位置を減算し、減算された再生位置までの矩形の塗りつぶしを行う、早送りボタン／巻戻しボタンにより再生位置を決定する再生位置決定手段。
【請求項１７】
前記、携帯端末であって、再生時に「再生索引一覧ボタン」押下時、再生索引一覧状態へと推移し、サーバから再生索引一覧ファイルを取得、左右上下により選択、決定後、指定された位置からの再生を行う、再生索引一覧を表示する再生索引一覧表示手段。
【請求項１８】
前記、携帯端末であって、「再生位置記憶ボタン」を二回押下時、現在の動画ファイル名と静止画情報と現在の再生位置を、携帯端末に保存する、「再生位置記憶ボタン」を一回押下時、格納された現在の動画ファイル名と静止画情報と現在の再生位置を、一覧で表示を行い、左右上下により選択、決定後、指定された位置からの再生を行う、再生位置記憶ボタンにより現在の再生位置を記憶する再生位置記憶手段。
【請求項１９】
前記、携帯端末であって、再生する内容が取得する内容を超える事が無いように同期を取る、取得手段と再生手段と再生位置決定手段との同期を取る同期手段。
【請求項２０】
前記、携帯端末であって、接続ボタンにより随時任意のサイト又は任意の電話番号へ接続を促す接続誘導手段。
【請求項２１】
前記、携帯端末であって、動画映像音声情報の再生中に任意の文字情報を表示／非表示する文字情報表示手段。
【請求項２２】
前記、携帯端末であって、１６：９および３：４の動画映像に対応させるために表示画面を９０度回転させる回転手段。
【請求項２３】
前記、携帯端末であって、画面の明るさを保持する／しないを設定する輝度保持切替手段。
【請求項２４】
前記、携帯端末であって、起動時に現在のバージョンを調査しバージョンアップを行う自動バージョン更新手段。
【請求項２５】
前記、携帯端末であって、起動時に現在のマナーモードを調査しマナーモード解除の警告を表示するマナーモード警告手段。
【請求項２６】
前記、携帯端末であって、起動時に多量のパケット通信を行う旨を表示し確認を行うパケット通信確認手段。
【請求項２７】
前記、携帯端末であって、音声情報の音量を調整する音量調整手段。
【発明の詳細な説明】
【発明の詳細な説明】
【技術分野】
【０００１】本発明は、インターネット上のサーバと携帯端末とを接続して動画映像と音声情報を処理して再生するシステムに関するものである。
【背景技術】
【０００２】非特許文献１には、動画ファイルの中から選択した任意の静止画と動画ファイルに関する任意の説明情報とからなる動画概要情報を送受信する方法が開示されている。【０００３】しかし、動画本体の再生は依然として動画ファイルをダウンロードして再生する必要があるため、携帯端末などの限られた帯域やメモリ上で動作することは困難である。【０００４】本発明の発明者は、動画をサーバ上で分割し、複数の静止画の組と複数の音声として準備し、メモリに収まるサイズで順次ダウンロードしながら再生を行うことで、限られた帯域および限られたメモリでも動画を再生することが可能ではないかと考えた。【０００５】本発明が解決しようとする課題は、大容量の動画ファイルを、複数の静止画と音声の組に分割し、帯域やメモリの限られた携帯端末などへ提供することにある。
【非特許文献１】特開２００４−２０８２５０  動画ファイル送受信システム
【０００６】非特許文献２には、小容量メモリを用いて高画素の画像データを処理する方法が開示されている。【０００７】しかし、大容量の動画ファイルを再生する機能を持たない携帯端末では、動画ファイルのままでは再生を行うことはできない。【０００８】本発明の発明者は、大容量の動画ファイルを、複数の静止画と音声の組に分割し、分割された静止画を順次ダウンロードしながら連続して表示することで、大容量の動画表示機能を持たない携帯端末でも動画の再生が可能ではないかと考えた。【０００９】本発明が解決しようとする課題は、大容量の動画ファイルを、複数の静止画と音声の組に分割し、大容量の動画ファイル再生機能のない携帯端末で、連続した静止画を表示する方法によって動画を提供することにある。
【非特許文献２】特開２００４−１９３６８６  カメラ付き携帯端末
【００１０】非特許文献３、非特許文献４および非特許文献５には、限られたハードウェア資源しか備えていない携帯電話のような端末でも動画又はそれに近い映像を再生できるような方法で画像を配信するシステムを提供する方法が開示されている。【００１１】しかし、音声を伴う動画を再生するには、動画から複数の静止画を生成してコマ送りのように表示させる方法だけでは、音声を再現することができないため不十分である。【００１２】また、画像と音声からなる動画を限られたハードウェア資源上で再生するためには、画像と音声を同期しながら再生することが必要である。【００１３】本発明の発明者は、音声を伴う動画ファイルから抽出された音声を特定の時間に切り分け、映像情報を一つの音声の再生時間に表示する複数の画像ファイルの組に分割して、音声と画像を一組にして順次ダウンロード再生を行うことで、音声を伴う動画ファイルを再生することが可能ではないかと考えた。【００１４】本発明が解決しようとする課題は、音声を伴う大容量の動画ファイルを、複数の静止画と音声の組に分割し、大容量の動画ファイル再生機能のない携帯端末で、音声と映像を同期しながら再生する方法を提供することにある。
【非特許文献３】特開２００４−２２９１０３  画像配信システム及び画像配信ビジネス方法
【非特許文献４】特開２００４−２２２１２４  動画配信サーバ
【非特許文献５】特開２００４−００７０７７  画像配信システム
【００１５】非特許文献６には、携帯電話やＰＤＡなどの比較的データ転送速度の遅いネットワークを用いる場合に、リアルタイムに映像を見ることができる映像データ変換処理装置及び、該装置を用いた映像変換サービスを提供する方法が開示されている。【００１６】しかし、音声を伴う動画ファイルを速度の遅いネットワークで転送する場合には、端末の映像処理能力を考慮しただけでは不十分であり、各端末で音声まで再現することができない。【００１７】本発明の発明者は、音声を伴う動画ファイルを再生するには、端末ごとに異なる映像および音声処理能力を考慮して、あらかじめサーバ上で端末に応じた形式に切り分けた映像と音声の組を作成しておき、端末から送信される機種情報を元に、対応する映像と音声の組を端末へ送出することで、限られたネットワーク上で、なおかつ機種ごとに映像と音声の処理能力が異なる場合でも、動画の再生が可能であると考えた。【００１８】本発明が解決しようとする課題は、機種ごとに音声および映像の処理能力が異なる場合でも、機種に応じた映像および音声を使用することで、音声を伴う動画ファイルを携帯端末で再生する方法を提供することにある。
【非特許文献６】特開２００２−３４４９１３ネットワークにおける映像データの変換処理装置及び変換処理方法並びに変換処理サービス
【発明の開示】
【発明が解決しようとする課題】
【００１９】本発明の発明者は、従来までのパケット料金は１パケット（１２８バイト）＝ｎ円の従量課金で、使った分を徴収されるものであったため、常時接続を考えられない状況であったのに対し、最近になって、携帯端末のパケット料金が定額制となり、誰でも簡単にいつでもインターネットにアクセスを出来るようになったことにより、パケット通信を用いて動画映像と音声情報の提供をすることが可能なのではないかと考えた。【００２０】本発明が解決しようとする課題は、インターネットを介してサーバ側に存在する動画映像と音声情報の提供をパケット通信を用いて提供する音声情報処理システムを提供することにある。
【課題を解決するための手段】
【００２１】本発明の動画映像音声情報処理システムは、インターネット上に設けられた動画映像音声情報処理サーバとインターネット接続可能な携帯端末とを有する動画映像音声情報処理システムであって、前記、動画映像音声情報処理サーバは、元となる動画映像と音声をリアルタイムで規定秒数への切り分け手段と、規定秒数内で一秒間に一枚以上の静止画像を表示させるために動画映像から静止画像ファイル群へと変換する静止画像変換手段と、規定秒数内で各種携帯端末毎の音声ファイルタイプの音声ファイルへと変換する音声変換手段と、一秒間に静止画像ファイル群からファイルサイズの差分により特徴抽出を行いファイルを抽出する特徴抽出ファイル選択手段と、一秒間に静止画像ファイル群から均等間隔にファイルを選択する均等配分ファイル選択手段と、規定秒数内で前記特徴抽出ファイル選択手段により再生索引部を作成する特徴抽出再生索引部作成手段と、規定秒数内で前記均等配分ファイル選択手段により再生索引部を作成する均等配分再生索引部作成手段と、規定秒数分のファイル内容を記述するファイル内容記述手段と、規定秒数分の静止画像ファイル群と音声ファイルとファイル内容をひとつの圧縮ファイルへ変換する圧縮手段を有し、前記、携帯端末は、規定秒数毎の圧縮ファイルを順次格納領域に格納する取得手段と、圧縮されたファイルを静止画像群と音声ファイルへとファイル内容へと変換する解凍手段と、順に従って再生する再生手段と、再生を一時停止し操作説明の画面を表示する一時停止手段と、再生索引部決定ボタン／早送りボタン／巻戻しボタンにより再生位置を決定する再生位置決定手段と、再生索引一覧を表示する再生索引一覧表示手段と、再生位置記憶ボタンにより現在の再生位置を記憶する再生位置記憶手段と、取得手段と再生手段と再生位置決定手段との同期を取る同期手段と、接続ボタンにより随時任意のサイト又は任意の電話番号へ接続を促す接続誘導手段と、動画映像音声情報の再生中に任意の文字情報を表示／非表示する文字情報表示手段と、１６：９および３：４の動画映像に対応させるために表示画面を９０度回転させる回転手段と、画面の明るさを保持する／しないを設定する輝度保持切り替え手段と、起動時に現在のバージョンを調査しバージョンアップを行う自動バージョン更新手段と、起動時に現在のマナーモードを調査しマナーモード解除の警告を表示するマナーモード警告手段と、起動時に多量のパケット通信を行う旨を表示し確認を行うパケット通信確認手段と、再生時に音声情報の音量を調整する音量調整手段と、を有する。
［サーバ側での動画の切り分け］
［図１参照］【００２２】携帯端末内部のアプリにて使用できる記憶領域と保存領域には限りがあるために、通常パソコンで再生できる長さの動画映像音声情報をそのままの形で再生できることは無い。【００２３】携帯端末内部の記憶領域に通信により取得し逐次再生を行う事を可能とする為に、元となる動画映像音声情報ファイルをリアルタイムで規定秒数に切り分ける。
［サーバ側での静止画変換］【００２４】携帯端末にて動画を再生させる為に、規定秒数で切り分けられた動画映像音声情報ファイルを、一秒あたり最大六十枚の静止画像へと変換させ、サーバ内に格納する。【００２５】静止画ファイル名を数値ファイル名＋拡張子とする事により静止画ファイル名で現在の秒数も算出可能となる。【００２６】携帯端末側では一秒間あたりに静止画像を複数枚高速表示し動画のように見せる。
［サーバ側での音声変換］
［図２参照］【００２７】携帯端末にて音声を再生させる為に、規定秒数で切り分けられた動画映像音声情報ファイルを、一個あたり規定秒数の各種携帯端末で再生可能なファイルタイプへと変換させＰＣＭデータだけの格納を行い、携帯端末にて音声ヘッダ＋ＰＣＭデータ＋音声フッタと合成させ再生できる形に復元する。
［サーバ側でのファイル選択二種］【００２８】規定秒数で動画表示させるための静止画はファイルサイズの閾値により選択する方法と、均等間隔で選択する方法の二種類がある。【００２９】最終的に圧縮されるファイルは携帯端末に送信される際の負荷を減らす為に、規定のファイルサイズに収める必要あり、出来上がったファイルサイズを毎回調査し繰り返し処理を行う。【００３０】規定秒数内の静止画ファイルは、どちらの場合も一秒間に一枚の静止画を格納することを必須として処理を行う。
［サーバ側でのファイルサイズの閾値によるファイル選択］【００３１】動画映像の場合、シーンからシーンの切れ目、もしくは通常画像から非常に細かい映像の場合に、画像ファイルサイズが変化する事が考えられる。【００３２】本発明の考案者は画像ファイルサイズに目を付け画像ファイルサイズで表示静止画の選択を行う手段を考案した。【００３３】具体的には前回とのファイルサイズ差分の絶対値を算出し差分の多い順に選択を行う。
［図３参照］【００３４】たとえば、規定秒数を一秒と設定して、四角い画面内に丸いボールがフレームインしてきたような静止画から、三枚の映像を選択する場合、【００３５】ファイル番号の小さい方から差分の絶対値を計算する。【００３６】以下のような計算を行う。
００１．ｊｐｇ−０００．ｊｐｇ  ＝    ５１３Ｂｙｔｅ
００２．ｊｐｇ−００１．ｊｐｇ  ＝  １４０３Ｂｙｔｅ
００３．ｊｐｇ−００２．ｊｐｇ  ＝  １４００Ｂｙｔｅ
００４．ｊｐｇ−００３．ｊｐｇ  ＝    ４２５Ｂｙｔｅ
００５．ｊｐｇ−００４．ｊｐｇ  ＝  １９４５Ｂｙｔｅ
００６．ｊｐｇ−００５．ｊｐｇ  ＝    ５３６Ｂｙｔｅ
００７．ｊｐｇ−００６．ｊｐｇ  ＝    ４１０Ｂｙｔｅ【００３７】並び替えを行い差分の多いファイルから選択を行う
００５．ｊｐｇ−００４．ｊｐｇ  ＝  １９４５Ｂｙｔｅ
００２．ｊｐｇ−００１．ｊｐｇ  ＝  １４０３Ｂｙｔｅ
００３．ｊｐｇ−００２．ｊｐｇ  ＝  １４００Ｂｙｔｅ
００６．ｊｐｇ−００５．ｊｐｇ  ＝    ５３６Ｂｙｔｅ
００１．ｊｐｇ−０００．ｊｐｇ  ＝    ５１３Ｂｙｔｅ
００４．ｊｐｇ−００３．ｊｐｇ  ＝    ４２５Ｂｙｔｅ
００７．ｊｐｇ−００６．ｊｐｇ  ＝    ４１０Ｂｙｔｅ
［図４参照］【００３８】この一秒間で選択されるファイル名は以下の通りとなる。
００５．ｊｐｇ  ００２．ｊｐｇ  ００３．ｊｐｇ【００３９】上記のファイルを時系列に並び替えると以下のようになる。
００２．ｊｐｇ  ００３．ｊｐｇ  ００５．ｊｐｇ【００４０】［サーバ側での均等間隔によるファイル選択］【００４１】動画映像で動きが少ない映像の場合に、画像ファイルサイズに変化があまり見られない場合がある場合は、以下の均等間隔によるファイル選択処理を行う。
［図５参照］【００４２】規定秒数を−秒と設定して、四角い画面内に丸いボールがフレームインしてきたような場合から、三枚の映像を選択する場合、
［サーバ側でのファイル内容記述］
［図６参照］【００４３】規定秒数内で、一秒間当たりに変換された静止画像群最大六十枚から、最低でも一秒間に一枚以上の静止画像を格納した時に、格納されたファイル名をファイル内容として記述する、これは静止画ファイル群を圧縮する際および、前記携帯電話内にて圧縮ファイルから、静止画ファイル群と音声情報ファイルを取得する際に使用される。
［サーバ側での特徴抽出による索引部作成］【００４４】前記、ファイルサイズの閾値によるファイル選択の手法を用いて簡単な再生用索引部を作成する。
［図１１参照］【００４５】具体的な例として、４×４＝１６個の再生索引部を生成する場合には、元となる動画映像音声情報ファイルを前記ファイルサイズの閾値によるファイル選択の手法により上位１６位まで選択し、再生索引部位置ファイルにそのファイル名の追加書き込みを行う。
［サーバ側での均等間隔による索引部作成］【００４６】前記、均等間隔によるファイル選択の手法を用いて簡単な再生用索引部を作成する。
［図１１参照］【００４７】具体的な例として、４×４＝１６個の再生索引部を生成する場合には、元となる動画映像音声情報ファイルの秒数を１６で割り該当する秒数の先頭一枚目の静止画像を取得、再生索引部位置ファイルにそのファイル名を追加書き込みを行う。
［サーバ側でのファイル圧縮］
［図６参照］【００４８】前記、ファイル内容記述にしたがって、静止画ファイル群と音声変換されたＰＣＭデータを圧縮する。
［携帯端末側でのパケット多量通信の注意］【００４９】前記、携帯端末の動画映像音声情報再生機能は、起動時に多量のパケット通信を行う旨を表示し、起動を行うか終了するかの選択を促す。終了が選択された場合は、処理を中止し終了する。【００５０】起動を行うが選択された場合は、起動された年月を携帯端末の保存領域に保存し、以降は起動した時の月が記憶されている月から新しい月に変わっている場合に、多量のパケット通信を行う旨の表示を行う。【００５１】また、携帯端末機能がバージョンアップされた場合は、同じ月であっても、多量のパケット通信を行う旨の表示を行う。
［携帯端末側でのマナーモード時の注意］【００５２】前記、携帯端末の動画映像音声情報再生機能は、起動時に現在のマナーモードを調査する。【００５３】マナーモード中の場合は音声が鳴らないため、マナーモード解除の警告を表示し、起動を行うか終了するかの選択を促す。【００５４】終了が選択された場合は、処理を中止し終了する。【００５５】起動が選択された場合は、処理を続行するが、マナーモードで音声が鳴動しないように設定されている場合には音声の再生は行われない。
［携帯端末側での自動バージョンアップ］【００５６】前記、携帯端末の動画映像音声情報再生機能は、起動時に、動画映像音声情報処理サーバからバージョン情報が記述されたファイルをダウンロードし、起動された携帯端末の動画映像音声情報再生機能のバージョン情報と比較を行う。【００５７】バージョン情報が異なる場合にはバージョンアップ確認画面を表示し、終了するかバージョンアップを行うかの選択を促す。【００５８】終了が選択された場合は、処理を中止し終了する。【００５９】バージョンアップが選択された場合は、携帯端末の動画映像音声情報再生機能のバージョンアップを行う。
［携帯端末側での視聴する動画映像音声情報の選択］【００６０】前記、携帯端末の動画映像音声情報再生機能は、サイト上から視聴する動画映像音声情報の番組を指定するパラメータを受け取って起動する方法と、パラメータを受け取らず単独で直接起動する方法の２通りの起動手段を持つ。【００６１】携帯端末の動画映像音声情報再生機能は、パラメータを受け取らず、単独で起動された場合には、視聴する動画映像音声情報の番組を選択するためのサイトへ接続を促す確認画面を表示する。【００６２】動画映像音声情報の番組を選択するためのサイトへ接続しない場合、処理を中止し終了する。【００６３】動画映像音声情報の番組を選択するためのサイトへ接続する場合、携帯端末のブラウザを起動し、動画映像音声情報の番組を選択するためのサイトを表示する。【００６４】携帯端末の動画映像音声情報再生機能は、サイト上から視聴する動画映像音声情報の番組を指定するパラメータを受け取った場合、指定された動画映像音声情報の番組を視聴する処理を開始する。
［携帯端末側でのリソース初期化処理］【００６５】前記、携帯端末の動画映像音声情報再生機能は、表示文言や各種定数値として設定可能な情報を動画映像音声情報処理サーバから取得し、保存領域に保存する。【００６６】以降、携帯端末の動画映像音声情報再生機能にて使用される各種文言や定数値は、保存領域に保存されている情報が使用される。
［携帯端末側での音声再生初期化処理］【００６７】携帯端末にて前記ＰＣＭ音声データを再生する場合、携帯端末の機種ごとに異なる音声ヘッダと音声フッタ情報が必要となる。【００６８】音声ヘッダと音声フッタ情報には、ＰＣＭ音声データの再生時間が記述されている。【００６９】動画映像音声情報処理サーバは、静止画像及び音声データを規定秒数分に切り分ける際には、切り分けた音声データの再生時間に対応した音声ヘッダと音声フッタを作成しておく必要がある。【００７０】動画映像音声情報の番組を選択するためのサイトは、視聴する動画映像音声情報の番組を指定するパラメータと併せて、起動しようとしている携帯電話の機種情報を判別し、該当機種で使用する音声ヘッダと音声フッタのＵＲＬ、及び当該機種が音声を滑らかに再生するための１音声再生時間をパラメータとして携帯端末の動画映像音声情報再生機能に引き渡す。
［携帯端末側での音声ヘッダと音声フッタのダウンロードと保存領域への保存］
［図７参照］【００７１】前記、携帯端末の動画映像音声情報再生機能は、起動時にサイト上から引き渡された音声ヘッダと音声フッタのＵＲＬを利用して、動画映像音声情報処理サーバから音声ヘッダと音声フッタをダウンロードし、保存領域に保存する。【００７２】以降、携帯端末の動画映像音声情報再生機能は、動画映像音声情報の番組が指定されて起動される場合、指定された番組が、保存領域に記憶されている音声ヘッダと音声フッタを使用する場合には、記憶されている音声ヘッダと音声フッタを使用するように初期化処理を行う。【００７３】保存領域に記憶されている音声ヘッダと音声フッタとは異なる音声ヘッダと音声フッタを使用する場合には、番組に応じた音声ヘッダと音声フッタをダウンロードし、保存領域の音声ヘッダと音声フッタを更新する。
［携帯端末側での動画映像音声情報の番組視聴準備］【００７４】携帯端末の動画映像音声情報再生機能は、起動時にサイト上から受け取った動画映像音声情報の番組を指定するパラメータを使用して、動画映像音声情報処理サーバから、動画映像音声情報の再生時間及び文字情報が記述されている番組情報ファイルを取得する。【００７５】携帯端末の動画映像音声情報再生機能は、取得した番組情報ファイルを解析し、番組の全体の長さを求める。【００７６】取得した番組情報ファイルから文字情報を取り出し、表示の準備をおこなう。【００７７】取得した番組情報ファイルからＵＲＬ又は電話番号を取り出し、接続誘導先情報として保持する。【００７８】携帯端末の動画映像音声情報再生機能は、リソース初期化処理、音声再生初期化処理、番組視聴準備中は「初期化中」となり、ボタン操作を受け付けない。
［携帯端末側での取得］
［図９参照］【００７９】番組視聴準備が完了すると「読込中」状態へ移行し、静止画像ファイル群と音声ファイルとファイル内容が圧縮された圧縮ファイルの取得を開始する。【００８０】圧縮ファイルは、動画映像音声情報処理サーバ上の、番組を指定するパラメータに記述されたディレクトリの配下で、携帯端末の機種に応じたディレクトリに格納されている。【００８１】携帯端末の動画映像音声情報再生機能は、起動時にサイトから引き渡された番組を指定するパラメータと機種情報に応じたディレクトリを指定するパラメータから、当該機種用のディレクトリを判定し、当該機種用ディレクトリ配下にある圧縮ファイルを順番に取得する。【００８２】携帯端末の動画映像音声情報再生機能は、取得した圧縮ファイルを保持するため、ヒープメモリ上に複数の格納領域を持っている。【００８３】取得した圧縮ファイルは、順に格納領域へ格納される。【００８４】ヒープメモリ上の格納領域全てに圧縮ファイルが格納されると、格納領域が解放されるまで圧縮ファイルの取得を中断する。【００８５】圧縮ファイルの再生を行う際には、格納領域に格納されている圧縮ファイルを復元して再生を行い、１圧縮ファイル分の再生が完了すると格納領域から再生が完了した圧縮ファイルを抹消し、新たな圧縮ファイルを格納する領域として解放する。【００８６】携帯端末の動画映像音声情報再生機能は、格納領域が空いているときは順次圧縮ファイルを取得し、空きがないときには取得を一時中断する処理を繰り返すことにより、順次再生するデータを準備し連続して再生を行うことを可能としている。
［携帯端末側での復元］
［図９、図１０参照］【００８７】携帯端末の動画映像音声情報再生機能は、圧縮ファイルを取得し、格納領域へ格納する際に、音声データおよび画像データの復元を行う。【００８８】圧縮ファイルは、音声データ、画像データ群、ファイル内容から構成され、圧縮ファイル内の音声データはＰＣＭデータのみが格納されており、そのままでは携帯端末で再生することができない。【００８９】音声データを復元する際には、音声再生初期化処理にて保存領域に保存した音声ヘッダと音声フッタを復元された音声データに付加し、携帯端末で再生表示可能な形式に合成することで、すぐに再生できるように準備された状態で格納領域へ保持する。【００９０】画像ファイル群の復元は、ファイル内容を元にして行う。【００９１】ファイル内容には、圧縮ファイル内の画像データを表示する際のフレームレートと、圧縮ファイルに含まれる画像ファイルのインデックスが記述されている。【００９２】圧縮ファイルからまずファイル内容を取り出し、ファイル内容の記述されているインデックスにしたがって画像データ群を復元する。【００９３】圧縮ファイルに含まれる画像データは数が多く、多くの画像データを表示可能な状態へ変換してしまうとヒープメモリが不足するため、復元時には表示可能な形式には変換せず、圧縮ファイルから取り出した１画像分を単位として格納領域に保持する。【００９４】画像データの携帯端末での表示形式への変換は、再生が開始され、それぞれの画像を表示する時点で行う。【００９５】ファイル内容に記述されているフレームレートと、画像ファイルのインデックスは画像の表示タイミングを制御するため、フレームレートとインデックスの情報は、音声データと画像データと併せて格納領域へ保持する。
［携帯端末側での再生］【００９６】携帯端末の動画映像音声情報再生機能は、格納領域にひとつの圧縮データを取得し、復元処理が完了した時点で「再生中」に移行し再生を開始する。【００９７】動画映像音声情報の再生は、格納領域に保持されている１圧縮ファイル分のデータを単位とした再生ブロックを規定秒数分の再生データとして利用する。【００９８】再生ブロックは規定秒数分の長さを持つ音声データひとつと、規定秒数内に表示更新される複数の画像ファイルから構成される。【００９９】再生が開始されると、再生ブロック中の音声データの再生を開始する。【０１００】音声データの再生と同時に、画像の表示更新が開始される。【０１０１】画像の更新タイミングは、格納領域に保持されているフレームレートと画像ファイルのインデックスにより制御される。【０１０２】圧縮ファイルには異なる数の画像データが保持されているが、最大では、フレームレート×秒数分の画像が保持されている。【０１０３】最大数の画像が保持されている場合、ファイル内容に記述されるインデックスは、００００１、００００２、００００３のように順番に並んでいる。【０１０４】ひとつひとつの画像サイズが大きい場合、圧縮ファイルには全ての画像が入らず、００００１、００００３、００００５などのように所々間引かれた状態でインデックスが並ぶことになる。【０１０５】全ての画像が揃っている場合でも、途中が間引かれた場合でも滑らかに表示を行うために、フレームレートとインデックスを利用する。【０１０６】フレームレートは、１秒間に表示する画像の枚数を表す。【０１０７】フレームレートが６の場合には、１つのインデックスに対応する画像の表示時間は１／６秒となり、インデックスが順に並んでいる場合、前の画像表示から１／６秒が経過すると次の画像を表示する。【０１０８】インデックスが１つおきの場合、前の画像表示から２／６秒の経過で次の画像を表示する。【０１０９】（次に表示するインデックス）−（現在表示されているインデックス）×（１／フレームレート）秒の式にて表される時間が経過するごとに、画像の更新を行う。【０１１０】再生中は画面下部に、全体の長さと現在の再生位置を示す再生バーと、全体長さ、再生時間の表示を行う。【０１１１】再生バーは、全体の長さを示す矩形の上に、現在の再生位置を示す矩形を重ねて表示することで、全体のどの部分が再生されているかを視覚的に表現する。【０１１２】全体長さ、再生時間の表示は、再生バーの上部に、再生中の経過時間および全体の長さを分秒で表示する。
［携帯端末側での一時停止］【０１１３】携帯端末の動画映像音声情報再生機能は、「一時停止ボタン」を押下することにより、一時停止状態へ推移する。【０１１４】一時停止中は、再生している音声を停止し、画像の更新を止める。【０１１５】一時停止中は、停止した時点での静止画の表示の上に、操作説明文をかぶせて表示する。【０１１６】再度「一時停止ボタン」を押下すると、前回停止した再生ブロックの先頭に再生位置を戻し、再生を再開する。
［携帯端末側での早送り］【０１１７】携帯端末の動画映像音声情報再生機能は、「早送りボタン」を一回押下時、早送り状態へと推移する。【０１１８】早送り状態では、早送り状態開始から５秒経過までは、１秒経過するごとに再生位置を１０秒ずつ加算、早送り状態開始から５秒を超えると１秒経過するごとに再生位置を１分単位で加算する。１分単位の加算時には、秒部分は００となるようにする。【０１１９】早送り状態での再生バー表示は、加算された再生位置までの矩形の塗りつぶしを行う。【０１２０】早送り中を分りやすく示すため、再生中と異なる色で、加算された再生位置までの矩形の塗りつぶしを行い、同時に再生時間表示も加算された再生時間を表示する。【０１２１】再生バーと同様に、再生中とは異なる色を使用して早送り中を示すとともに、再生時間表示の横に早送りを示すアイコンを表示することで早送り中であることを通知する。
［携帯端末側での巻戻し］【０１２２】携帯端末の動画映像音声情報再生機能は、「早送りボタン」を規定秒数内に二回押下すると、巻戻し状態へと推移する。【０１２３】巻戻し状態では、巻戻し状態開始から５秒経過までは、１秒経過するごとに再生位置を１０秒ずつ減算、巻戻し状態開始から５秒を超えると１秒経過するごとに再生位置を１分単位で減算する。１分単位の減算時には、秒部分は００となるようにする。【０１２４】巻戻し状態での再生バー表示は、減算された再生位置までの矩形の塗りつぶしを行う。【０１２５】巻戻し中を分りやすく示すため、再生中と異なる色で、減算された再生位置までの矩形の塗りつぶしを行う。【０１２６】同時に、再生時間表示も減算された再生時間を表示する。再生バーと同様に、再生中とは異なる色を使用して巻戻し中を示すとともに、再生時間表示の横に巻戻しを示すアイコンを表示することで巻戻し中であることを通知する。
［携帯端末側での再生位置の遷移］【０１２７】携帯端末の動画映像音声情報再生機能は、早送り状態／巻戻し状態中に、再度「早送りボタン」を押下すると、押下された時点で画面下部に表示されている再生位置へと再生位置を移動させ、移動した位置から再生を再開する。【０１２８】再生位置の遷移が発生した場合、圧縮ファイルの取得中であったときは、取得を行っている通信をキャンセルし、通信が停止するまで処理を中断する。【０１２９】通信が停止した後、格納領域に格納されているデータを解放する。【０１３０】格納領域のデータが解放された後、指定された時間へ再生位置を遷移させ、指定時間以降の圧縮データの取得を開始する以降、通常の取得、復元、再生の手順に従って再生を行う。
［携帯端末側での文字情報表示・非表示］【０１３１】携帯端末の動画映像音声情報再生機能は、動画映像音声情報の再生中に、番組視聴準備にて準備された任意の文字情報を画面上部に表示する。【０１３１】多くの文字情報を表示するため、文字情報をスクロール表示することにより、一画面に収まりきらない長さの文字情報を表示させることが可能である。【０１３２】スクロールの速度は、リソース初期化処理にて取得し保存領域に格納されたスクロール速度設定値を利用して行っており、表示速度を変更することが可能となっている。
［図１５参照］【０１３３】動画映像音声情報の再生中に、「文字情報ボタン」を押下することにより、画面上に文字情報を表示するか否かを切り替えることができる。【０１３４】文字情報表示切り替えを行った場合には、設定を保存領域に記憶し、次回起動時には前回の設定が復元される。
［携帯端末側での音量の調整］【０１３５】携帯端末の動画映像音声情報再生機能は、動画映像音声情報の再生中に「上下ボタン」を押下することにより、音声データ再生時の音量を切り替えることができる。【０１３６】音量は画面上の音量を示す領域に０〜１０の数値で示される。【０１３７】音量の調整を行った場合には、設定を保存領域に記憶し、次回起動時には前回の設定が復元される。
［携帯端末側での音声再生の有無］【０１３８】携帯端末の動画映像音声情報再生機能は、動画映像音声情報の再生中に「音声切り替えボタン」を押下することにより、音声データを再生するか否かを切り替えることができる。【０１３９】音声再生の有無は、画面上の音声を示す領域にアイコンで表示される。【０１４０】音声切り替えを行った場合には、設定を保存領域に記憶し、次回起動時には前回の設定が復元される。
［携帯端末側での索引表示］
［図１１参照］【０１４１】携帯端末の動画映像音声情報再生機能は、再生時に「再生索引一覧ボタン」押下することにより、再生索引一覧状態へと推移する。【０１４２】携帯端末の動画映像音声情報再生機能は、番組を視聴開始してから最初に再生索引一覧状態へ遷移した時に、動画映像音声情報処理サーバから再生索引一覧ファイルを取得する。【０１４３】再生索引一覧ファイルを取得する際には通信が必要となるため、圧縮ファイルの取得中であったときは、取得を行っている通信をキャンセルし、通信が停止するまで処理を中断する。【０１４４】再生索引一覧が取得されると、ヒープメモリ上の再生索引一覧ファイル格納領域に取得した再生索引一覧ファイルを格納する。【０１４５】再生索引一覧ファイルは、索引の位置を示す情報と、索引で示される位置の画像が縮小表示されて並んでいる一枚の画像ファイルから構成される。再生索引一覧状態は、一覧画像が表示され、「左右上下ボタン」により一覧表示されている索引を選択することができる。【０１４６】索引選択後、「決定ボタン」を押下することで索引に指定されている再生位置へ移動し、再生位置の遷移手順と同様に、指定された位置からの再生を行う。【０１４７】一度索引表示を行うと、再生索引一覧ファイルがヒープメモリ上に保持されるため、次回実行時には動画映像音声情報処理サーバから再生索引一覧ファイルを取得すること無しに、ヒープメモリ上に保持された再生索引一覧ファイルを利用して索引表示が可能となる。
［携帯端末側での再生位置記憶と記憶した再生位置への遷移］
［図１２参照］【０１４８】携帯端末の動画映像音声情報再生機能は、「再生位置記憶ボタン」を規定時間内に二回押下することで、現在の動画ファイル名と、現在の再生位置と現在表示されている静止画情報とを、携帯端末の保存領域に保存する。【０１４９】「再生位置記憶ボタン」を一回押下時、保存領域に格納されている再生位置情報を一覧表示する。【０１５０】一覧には、縮小された静止画情報、番組名、再生位置を記憶した時間、再生位置および、文字情報が表示され、「左右上下ボタン」を押下することにより一覧表示されている再生位置を選択することができる。【０１５１】再生位置選択後、「決定ボタン」を押下することで索引に指定されている再生位置へ移動し、再生位置の遷移手順と同様に、指定された位置からの再生を行う。
［携帯端末側での接続誘導］
［図１４参照］【０１５２】携帯端末の動画映像音声情報再生機能は、「接続ボタン」を押下することにより、番組視聴準備手順にて保持された任意のサイト又は任意の電話番号へ接続を促す表示を行う。【０１５３】接続を行わない場合、表示を消して動画映像音声情報の再生を継続する。【０１５４】接続を行う場合、携帯端末のブラウザを起動し、又は電話機能を起動することにより、指定されたサイト又は電話番号へ接続を行う。
［携帯端末側での画像回転］
［図１３参照］【０１５５】携帯端末の動画映像音声情報再生機能は、「回転ボタン」を押下することにより、表示領域を９０度回転させて表示を行うことができる。【０１５６】再度「回転ボタン」を押下すると、表示領域を元の状態に戻す。
［携帯端末側でのバックライトＯＮ／ＯＦＦ］
［図８参照］【０１５７】携帯端末の動画映像音声情報再生機能は、「バックライトボタン」を押下することにより、画面のバックライト状態を切り替えることができる。【０１５８】バックライトＯＮ状態では、携帯端末のキー操作を行わない状態で一定時間経過した後も、バックライトを消灯せずに明るい状態を保つ。【０１５９】バックライトＯＦＦ状態では、携帯端末の設定にしたがってバックライトが消灯される。【０１６０】バックライトＯＮ／ＯＦＦの切り替えを行った場合には、設定を保存領域に記憶し、次回起動時には前回のバックライトの設定が復元される。
［携帯端末の格納領域と保存領域］【０１６１】携帯端末のメモリ領域として、ヒープメモリは一時的な揮発性メモリ領域、格納領域は揮発性メモリ領域とし、アプリケーション停止時には携帯端末に留まらない記憶とし、保存領域は不揮発性メモリ領域とし、アプリケーション停止後も携帯端末に留まる記憶とする。
【産業上の利用可能性】
【０１６２】携帯端末による長時間の動画映像の配信に適用できる。
【図面の簡単な説明】
【０１６３】
【図１】  端末にはすべての情報を格納する領域がない為にあらかじめ処理サーバにて規定の数秒に切り分ける図。
【図２】  映像情報と一緒に音声情報も規定の秒数に切り分けを行う図。
【図３】  サンプル用として使用するボールがフレームインする図。
【図４】  ファイルサイズの差分により選択された静止画の図
【図５】  均等間隔により選択された静止画の図
【図６】  サーバ側で切り分けたデータをいったん圧縮し通信負担が掛からないようにする図
【図７】  初期起動時に音声情報ヘッダを取り込む図
【図８】  バックライトの制御をアプリ優先にした場合とシステム優先にした場合の図。
【図９】  携帯端末が圧縮データから映像情報群、音声情報を格納する図。
【図１０】  携帯端末がデータを取得する図。
【図１１】  前記２つのパターンにて生成される再生索引画像の図。
【図１２】  再生中に記憶した位置の一覧と登録の図。
【図１３】  最近のビスタサイズ液晶に合わせて画面を９０度回転する事ができる図。
【図１４】  任意の時点でコンテンツサイトや電話機能を使う事ができる図。
【図１５】  携帯端末側で表示させない文字のＯＮ／ＯＦＦの図。
【図１】
2008109601.tif 000003
【図２】
2008109601.tif 000004
【図３】
2008109601.tif 000005
【図４】
2008109601.tif 000006
【図５】
2008109601.tif 000007
【図６】
2008109601.tif 000008
【図７】
2008109601.tif 000009
【図８】
2008109601.tif 000010
【図９】
2008109601.tif 000011
【図１０】
2008109601.tif 000012
【図１１】
2008109601.tif 000013
【図１２】
2008109601.tif 000014
【図１３】
2008109601.tif 000015
【図１４】
2008109601.tif 000016
【図１５】
2008109601.tif 000017