(57)【要約】      （修正有）【課題】画像とオーディオの同期再生の処理方法及びデバイスを提供する。【解決手段】放送端末から送信される再生サービス要求を取得するステップと、再生サービス要求に対応する再生内容に基づいて複数のグループにグループ化される再生画面データとオーディオデータとを取得するステップと、再生画面データ、オーディオデータ、及び各グループとオーディオデータの属性情報との第一対応関係を確定するための情報を放送端末に送信して、放送端末が第一対応関係に基づいて再生画面データとオーディオデータとに対して相応の同期再生処理を実行するようにするステップと、を含む。【選択図】図１
2019174783.tif 000002
【特許請求の範囲】
【請求項１】
画像とオーディオの同期再生の処理方法であって、
放送端末から送信される再生サービス要求を取得するステップと、
前記再生サービス要求に対応する再生画面データとオーディオデータとを取得するステップであって、前記再生画面データは、再生内容に基づいて複数のグループにグループ化される、ステップと、
前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を前記放送端末に送信して、前記放送端末が前記第一対応関係に基づいて前記再生画面データと前記オーディオデータとに対して相応の同期再生処理を実行するようにするステップと、
を含むことを特徴とする方法。
【請求項２】
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報は、
各前記グループと前記オーディオデータの属性情報の第一マップ、又は、
各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップ、
を含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記方法は、前記オーディオデータに対応する文字内容を前記放送端末に送信するステップを更に含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報を前記放送端末に送信する前に、更に
前記文字内容に基づいて、前記オーディオデータのサイズと前記文字内容の第四マップを取得するステップと、
前記オーディオデータと前記第四マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定するステップと、
を含むことを特徴とする請求項２又は３に記載の方法。
【請求項５】
前記オーディオデータと前記第四マップに基づいて前記オーディオデータの放送時間と前記文字内容の第三マップを確定するステップは、
前記オーディオデータのサイズに基づいて、前記オーディオデータの放送時間と前記オーディオデータのサイズの第五マップを確定するステップと、
前記第四マップと前記第五マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定するステップと、
を含むことを特徴とする請求項４に記載の方法。
【請求項６】
前記再生画面データは、画像データと文字データのうちの少なくとも一つを含み、
前記再生画面データに文字データが含まれる場合に、前記方法は、更に、
各前記グループにおける各行の文字データと前記オーディオデータの属性情報との第二対応関係を確定して前記放送端末へ送信するステップを、
含むことを特徴とする請求項１〜３の何れか一つに記載の方法。
【請求項７】
画像とオーディオの同期再生の処理方法であって、
サーバに再生サービス要求を送信し、前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにクループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を受信するステップと、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップと、
を含むことを特徴とする方法。
【請求項８】
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータの属性情報の第一マップが含まれる場合に、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップは、
前記第一マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップを含み、
或いは、
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップが含まれる場合に、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップは、
前記第二マップと前記第三マップに基づいて、各前記グループと前記オーディオデータの属性情報の第六マップを確定するステップと、
前記第六マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップを含むことを特徴とする請求項７に記載の方法。
【請求項９】
前記第六マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップは、
前記ディスプレーインターフェースに再生された再生画面データに対して、グループ毎に基づいてタイムカウント処理を行って、各グループと当該グループに対応するオーディオデータの同期再生を制御するステップを含むことを特徴とする請求項８に記載の方法。
【請求項１０】
前記方法は、更に、
サーバから送信された各前記グループにおける各行の文字データと前記オーディオデータの属性情報の第二対応関係を受信するステップと、
前記第二対応関係に基づいて、前記ディスプレーインターフェースに再生された文字データに対して、行に基づいてタイムカウント処理を行って各行の文字データと当該行に対応するオーディオデータの同期再生を制御するステップと、
を含むことを特徴とする請求項９に記載の方法。
【請求項１１】
前記方法は、更に、
前記ディスプレーインターフェースにおける表示方式が他の行的文字データと異なるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御するステップを含むことを特徴とする請求項１０に記載の方法。
【請求項１２】
放送端末から送信される再生サービス要求を取得する第一取得モジュールと、
前記再生サービス要求に対応する再生画面データとオーディオデータを取得する第二取得モジュールであって、前記再生画面データは、再生内容に基づいて複数のグループにグループ化される、第二取得モジュールと、
前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を前記放送端末に送信して、前記放送端末が前記第一対応関係に基づいて前記再生画面データと前記オーディオデータとに対して相応の同期再生処理を実行するようにする第一送信モジュールと、
を備えることを特徴とするサーバ。
【請求項１３】
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報は、
各前記グループと前記オーディオデータの属性情報の第一マップ、又は、
各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップを含むことを特徴とする請求項１２に記載のサーバ。
【請求項１４】
前記第一送信モジュールは、更に、前記オーディオデータに対応する文字内容を前記放送端末に送信することを特徴とする請求項１３に記載のサーバ。
【請求項１５】
前記文字内容に基づいて、前記オーディオデータのサイズと前記文字内容の第四マップを取得する第三取得モジュールと、
前記オーディオデータと前記第四マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定する第四取得モジュールと、
を更に備えることを特徴とする請求項１３又は１４に記載のサーバ。
【請求項１６】
前記第四取得モジュールは、
前記オーディオデータのサイズに基づいて、前記オーディオデータの放送時間と前記オーディオデータのサイズの第五マップを確定する第一取得サブモジュールと、
前記第四マップと前記第五マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定する第二取得サブモジュールと、
を備えることを特徴とする請求項１５に記載のサーバ。
【請求項１７】
前記再生画面データは、画像データと文字データのうちの少なくとも一つを含み、
前記再生画面データに文字データが含まれる場合に、前記サーバは、更に、
各前記グループにおける各行の文字データと前記オーディオデータの属性情報との第二対応関係を確定する第一確定モジュールを備え、
前記第一送信モジュールは、更に、前記第二対応関係を前記放送端末に送信することを特徴とする請求項１２〜１４の何れか一つに記載のサーバ。
【請求項１８】
サーバに再生サービス要求を送信する第二送信モジュールと、
前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにグループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定する情報を受信する受信モジュールと、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する処理モジュールと、
を備えることを特徴とする放送端末。
【請求項１９】
前記処理モジュールは、具体的に、
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータの属性情報の第一マップが含まれる場合に、
前記第一マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行し、
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップが含まれる場合に、
前記第二マップと前記第三マップに基づいて、各前記グループと前記オーディオデータの属性情報の第六マップを確定し、前記第六マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行することを特徴とする請求項１８に記載の放送端末。
【請求項２０】
前記処理モジュールは、具体的に、
前記ディスプレーインターフェースに再生された再生画面データに対して、グループ毎に基づいてタイムカウント処理を行って、各グループと当該グループに対応するオーディオデータの同期再生を制御することを特徴とする請求項１９に記載の放送端末。
【請求項２１】
前記受信モジュールは、更に、
サーバから送信された各前記グループにおける各行の文字データと前記オーディオデータの属性情報の第二対応関係を受信し、
前記処理モジュールは、更に、
前記第二対応関係に基づいて、前記ディスプレーインターフェースに再生された文字データに対して、行に基づいてタイムカウント処理を行って各行の文字データと当該行に対応するオーディオデータの同期再生を制御することを特徴とする請求項２０に記載の放送端末。
【請求項２２】
前記ディスプレーインターフェースにおける表示方式が他の行の文字データと異なるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御する制御モジュールを更に備えることを特徴とする請求項２１に記載の放送端末。
【請求項２３】
少なくとも一つのプロセッサとメモリとを備えるサーバであって、
前記メモリにコンピュータプログラムが記憶され、前記少なくとも一つのプロセッサは前記メモリに記憶されたコンピュータプログラムを実行して請求項１〜６の何れか一つに記載の方法を実現することを特徴とするサーバ。
【請求項２４】
プロセッサとメモリとを備える放送端末であって、
前記メモリにコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されたコンピュータプログラムを実行して請求項７〜１１の何れか一つに記載の方法を実現することを特徴とする放送端末。
【請求項２５】
コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが実行されると、請求項１〜６の何れか一つに記載の方法を実現することを特徴とするコンピュータ読取可能な記憶媒体。
【請求項２６】
コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが実行されると、請求項７〜１１の何れか一つに記載の方法を実現することを特徴とするコンピュータ読取可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本願は、コンピュータ技術分野に関し、具体的に人工知能分野に関し、特に画像とオーディオの同期再生の処理方法及びデバイスに関する。
【背景技術】
【０００２】
情報のディジタル化及び人間の生活品質の向上に従い、人間の日常生活にスマートホームが益々多くなり、スマートスピーカーが製品の一つとして大衆に良く歓迎されている。
【０００３】
従来の幾つかのスマートスピーカーは、ディスプレーが設置され、関連の情報を表示することができる。しかし、従来のスマートスピーカーは、一般的にオーディオファイルとテキストファイルを予め記憶し、オーディオファイルの放送内容と表示文字の対応関係を予め標識して、放送内容と表示文字の同期、例えば曲を聴いている時に歌詞の表示を実現することができる。リアルタイムに取得された文字とピクチャ情報に対して、放送を行う際に同期を正確に実現できないため、ユーザの製品に対する体験が悪くなった。従って、ピクチャ／文字とオーディオの同期の正確性を如何に向上するかは、早急に解決すべき技術課題になる。
【発明の概要】
【０００４】
本願は、画像とオーディオの同期再生の処理方法及びデバイスを提供して、従来の技術において画像とオーディオの再生が正確に同期できないという欠陥を解決する。
【０００５】
本願の第一局面は、画像とオーディオの同期再生の処理方法であって、放送端末から送信される再生サービス要求を取得するステップと、前記再生サービス要求に対応する再生画面データとオーディオデータとを取得するステップであって、前記再生画面データは、再生内容に基づいて複数のグループにグループ化される、ステップと、前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を前記放送端末に送信して、前記放送端末が前記第一対応関係に基づいて前記再生画面データと前記オーディオデータとに対して相応の同期再生処理を実行するようにするステップと、を含む方法を提供する。
【０００６】
本願の第二局面は、画像とオーディオの同期再生の処理方法であって、サーバに再生サービス要求を送信し、前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにクループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を受信するステップと、前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップと、を含む方法を提供する。
【０００７】
本願の第三局面は、サーバに再生サービス要求を送信し、前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにクループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を受信するステップと、前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップと、を含むサーバを提供する。
【０００８】
本願の第四局面は、サーバに再生サービス要求を送信する第二送信モジュールと、前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにグループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定する情報を受信する受信モジュールと、前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する処理モジュールと、を備える放送端末を提供する。
【０００９】
本願の第五局面は、少なくとも一つのプロセッサとメモリとを備えるサーバであって、前記メモリにコンピュータプログラムが記憶され、前記少なくとも一つのプロセッサは前記メモリに記憶されたコンピュータプログラムを実行して第一局面により提供された方法を実現するサーバを提供する。
【００１０】
本願の第六局面は、プロセッサとメモリとを備える放送端末であって、前記メモリにコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されたコンピュータプログラムを実行して第二局面により提供された方法を実現する放送端末を提供する。
【００１１】
本願の第七局面は、コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが実行されると、第一局面により提供された方法を実現するコンピュータ読取可能な記憶媒体を提供する。
【００１２】
本願の第八局面は、コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが実行されると第二局面により提供された方法を実現するコンピュータ読取可能な記憶媒体を提供する。
【００１３】
本願により提供される画像とオーディオの同期再生の処理方法及びデバイスは、再生内容に基いて再生画面データを複数のグループにグループ化し、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基いて再生画面データとオーディオデータに対して相応の同期再生処理を実行させる。これにより、オーディオデータと各グループの再生内容の対応関係が作成されたので、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示の同期の正確性を効率的に向上することができる。
【図面の簡単な説明】
【００１４】
本願の実施例又は従来技術における技術案をより明瞭に説明するために、以下に実施例又は従来技術に対する説明に必要な図面を簡単に紹介する。明らかに、以下に説明される図面は本願の幾つかの実施例であり、当業者であればわかるように、創造的な労働を付しない前提で、これら図面に基いて他の図面を得ることもできる。
【００１５】
【図１】図１は本願の実施例により提供されるサービスシステムの構成模式図である。
【図２】本願の一つの実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートである。
【図３】本願の他の実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートである。
【図４】本願のもう一つの実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートである。
【図５】本願のもう一つの実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートである。
【図６】本願の一つの実施例により提供される行を逐一にハイライトすることの模式図である。
【図７】本願の一つの実施例により提供されるハイライト表示及び下へのスクロールのインターフェース模式図である。
【図８】本願の一つの実施例により提供される放送ページ送り同期のインターフェース模式図である。
【図９】本願の一つの実施例により提供されるサーバの構成模式図である。
【図１０】本願の一つの実施例により提供される放送端末の構成模式図である。
【図１１】本願の他の実施例により提供されるサーバの構成模式図である。
【図１２】本願のもう一つの実施例により提供される放送端末の構成模式図である。
【発明を実施するための形態】
【００１６】
前記の図面により、本願の明確的な実施例が示されたが、以下に詳しく説明する。これらの図面と文字記載は、如何なる手段で本開示に構想される範囲を制限することではなく、特定の実施例を参照して当業者に本願の概念を説明するものである。
【００１７】
本願の実施例の目的、技術案及び利点をより明らかにために、以下に本願の実施例における図面と合わせて本願の実施例における技術案に対して明確で完備的に説明する。勿論、説明される実施例は、本願の一部の実施例であり、全ての実施例ではない。当業者は、本願における実施例に基づいて、創造的な労働を付しない前提で得られる全ての他の実施例は、何れも本願の保護範囲に属する。
【００１８】
最初に本願に関する用語を説明する。
【００１９】
放送端末は、スピーカー及びディスプレーを備えるスマート端末であり、オーディオの放送及びスクリーンの表示を実現することができる。スマートスクリーン付きスピーカ、スマートフォーン、タブレットなどを含むが、それらに限定されない。
【００２０】
また、「第一」、「第二」等の用語は、単に説明のために使用するのであって、相対的な重要性を指示し又は示唆し、若しくは指示される技術的特徴の数を暗黙的に示すと理解すべきではない。以下の各実施例に対する説明において、「複数」は、明確で具体的に限定される場合以外、二つ以上を意味する。
【００２１】
以下のような幾つかの具体的な実施例は、互いに組み合わせることができ、同一又は類似の概念又は過程について幾つかの実施例で詳しく説明しない場合がある。以下に図面と合わせて本発明の実施例を説明する。
【００２２】
本願の実施例により提供される画像とオーディオの同期再生の処理方法は、放送端末とサーバとを備えるサービスシステムに適用可能である。図１は、本願の実施例により提供されるサービスシステムの構成模式図を示す。ユーザにより音声入力又は手動文字入力などの入力手段で放送端末へ再生サービス要求を入力可能し、放送端末により再生サービス要求をサーバへ送信する。サーバは、放送端末から送信された再生サービス要求に応答して相応の応答データを放送端末に返送することを担当する。放送端末は、応答データに基づいて相応の同期再生処理を実行する。
【００２３】
［実施例一］
本実施例は、再生サービスにおけるオーディオ放送と表示内容の同期再生に適用する画像とオーディオの同期再生の処理方法を提供して同期の正確性を向上させる。本実施例の実行主体は、サーバであっても良い。
【００２４】
図２は、本実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートを示す。当該方法は、以下のステップを含む。
【００２５】
ステップ１０１において、放送端末から送信された再生サービス要求を取得する。
【００２６】
具体的に、ユーザから放送サービスが要求される場合に、音声入力又は手動文字入力などの入力手段で放送端末へ再生サービス要求を入力し、放送端末により再生サービス要求をサーバへ送信することができる。サーバは、放送端末から送信された再生サービス要求を取得することができる。
【００２７】
好ましくは、再生サービス要求は、具体的に、天気予報サービス要求、目覚ましサービス要求、飲食店紹介サービス要求、メッセージ読取サービス要求、地理位置サービス要求などであっても良く、それらに限定されない。例えば、ユーザにより音声でスマートスピーカーから天気状況を放送するように要求される場合に、スマートスピーカーがユーザのオーディオ要求情報を受信する。スマートスピーカーは、オーディオ要求情報をそのままでサーバへ転送しても良く、オーディオ要求情報をテキスト情報に変換してからサーバへ転送しても良く、本実施例に限定されない。
【００２８】
ステップ１０２において、再生サービス要求に対応する、再生内容に基づいて複数のグループにグループ化された再生画面データとオーディオデータとを取得する。
【００２９】
具体的に、サーバは、放送端末から送信された再生サービス要求を取得した後に、再生サービス要求に対応する再生画面データとオーディオデータを取得することができる。なお、再生画面データは、再生内容に基づいて複数のグループにグループ化された。
【００３０】
好ましくは、再生画面データは、画像データと文字データとのうち少なくとも一つを含むことができる。再生画面データは、再生内容に基づいて複数のグループ、例えば警報関連画面、気温関連画面、大気質関連画面などにグループ化された。画像データは、ピクチャーであっても良く、ビデオであっても良い。オーディオデータは、再生サービス要求に対応する再生すべきオーディオデータである。
【００３１】
好ましくは、サーバは、再生サービス要求を解析してユーザの意図を取得し、ユーザの意図に基づいてサービスシステム内に再生サービス要求に対応する再生画面データとオーディオデータを検索することができる。又は、サーバは、ユーザの意図に基づいて第三者のサービスを介して第三者のサービス側から再生サービス要求に対応する再生画面データとオーディオデータを取得することができ、本実施例に限定されない。
【００３２】
好ましくは、サーバが再生サービス要求に対応するオーディオデータを取得することは、具体的に、再生サービス要求に対応する文字内容を取得し、文字内容に基づいて再生サービス要求に対応するオーディオデータを生成することを更に含んでも良く、本実施例に限定されない。
【００３３】
好ましくは、再生画面データが再生内容に基づいて複数のグループにグループ化されたことは、再生内容の異なるイベントに基づいてグループ化すること、再生内容の再生時間に基づいてグループ化すること、再生内容のサイズに基づいてグループ化することなどを含んでも良く、具体的に限定されない。
【００３４】
例示的に、天気放送を例として、オーディオデータの放送内容に「西安は今日が路面凍結の黄色警報、一日曇り、零下８℃〜１℃、大気質の指数２７６、重度の汚染」が含まれ、再生画面データに西安の今日の警報関連画像、気温関連画像及び大気質関連画像が含まれる場合に、再生内容に基づいて三つのグループにグループ化された。なお、警報関連画像は放送内容「西安は今日が路面凍結の黄色警報」に対応し、気温関連画像は放送内容「一日曇り、零下８℃〜１℃」に対応し、大気質関連画像は「大気質の指数２７６、重度の汚染」に対応する。
【００３５】
ステップ１０３において、再生画面データ、オーディオデータ、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基づいて再生画面データとオーディオデータに対して相応の同期再生処理を実行させる。
【００３６】
具体的に、サーバは、再生サービス要求に対応する再生画面データとオーディオデータを取得した後に、再生画面データ、オーディオデータ、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基づいて再生画面データとオーディオデータに対して相応の同期再生処理を実行させることができる。例示的に、オーディオデータの属性情報はオーディオデータの放送時間であっても良い。
【００３７】
好ましくは、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報は、サーバによりユーザの意図に基づいて検索されたものであっても良く、サーバにより再生画面データとオーディオデータが取得された後に、再生画面データとオーディオデータの具体的な内容に基づいて生成されたものであっても良い。
【００３８】
例示的に、天気予報サービスの場合に、サーバは第三者の天気予報サービス側から天気情報である「西安は今日が路面凍結の黄色警報、一日曇り、零下８℃〜１℃、大気質の指数２７６、重度の汚染」、及びグループ情報である「Ｗ：０−１３、Ｔ：１４−３２、Ａ：３３−４４」と対応の画像データを取得する。なお、グループ情報は、先頭から１３文字が警報の放送、１４−３２の文字が気温の放送、３３−４４の文字が大気質の放送を示す。サーバは取得されたグループ情報に基づいて再生画面データをグループ化する。
【００３９】
例示的に、目覚ましサービスの場合に、サーバは、ユーザからの複数の目覚ましサービス要求を取得し、ユーザに要求された異なる目覚ましのタイミングに基づいてグループ化して異なる目覚まし内容を示し、指定されたタイミングになった場合に、音声で目覚ましを放送すると共に、ディスプレーインターフェースに対応の目覚まし内容を表示する。
【００４０】
本実施例により提供された画像とオーディオの同期再生の処理方法は、再生内容に基づいて再生画面データを複数のグループにグループ化し、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基づいて再生画面データとオーディオデータに対して相応の同期再生処理を実行させる。これにより、オーディオデータと各グループの再生内容の対応関係が作成されたので、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示との同期の正確性を効率的に向上した。
【００４１】
［実施例二］
本実施例は、実施例一により提供された画像とオーディオの同期再生の処理方法に対して更に補足的に説明する。
【００４２】
図３は、本実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートを示す。当該フローチャートは、共通の処理フローを例示的に提供するものに過ぎず、本願に対する限定ではない。実際の応用において、あるステップや幾つかのステップが含まれなくても良く、各ステップの実行順も実際の状況に応じて当該フローと異なっても良い。
【００４３】
実施可能な方式の一つとして、前記の実施例一をもとに、好ましくは、ステップ１０３において、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に、各グループとオーディオデータの属性情報の第一マップ、又は、各グループとオーディオデータに対応する文字内容の第二マップ及び文字内容とオーディオデータの属性情報の第三マップが含まれる。各グループとオーディオデータの属性情報の第一対応関係は、サーバにより確定されてから放送端末へ送信されても良く、サーバにより各グループとオーディオデータに対応する文字内容の第二マップ及び文字内容とオーディオデータの属性情報の第三マップを放送端末へ送信し、放送端末により各グループとオーディオデータの属性情報の第一対応関係を確定しても良い。各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に各グループとオーディオデータの属性情報の第一マップが含まれる場合に、ステップ１０３は具体的に、再生画面データ、オーディオデータ、各グループとオーディオデータの属性情報の第一マップを放送端末へ送信するステップ１０３１を含む。
【００４４】
各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に、各グループとオーディオデータに対応する文字内容の第二マップ及び文字内容とオーディオデータの属性情報の第三マップが含まれる場合に、ステップ１０３は具体的に、再生画面データ、オーディオデータ、各グループとオーディオデータに対応する文字内容の第二マップ、及び文字内容とオーディオデータの属性情報の第三マップを放送端末へ送信するステップ１０３２を含む。
【００４５】
好ましくは、当該方法は、更に、オーディオデータに対応する文字内容を放送端末へ送信して、放送端末に放送を行う際にディスプレーインターフェースに対応の文字内容を表示させることを含んでも良い。
【００４６】
好ましくは、ステップ１０３の前に、当該方法は、以下のステップを含んでも良い。
【００４７】
ステップ２０１において、文字内容に基づいて、オーディオデータのサイズと文字内容の第四マップを取得する。
【００４８】
具体的に、サーバはオーディオデータ及びオーディオデータに対応する文字内容を取得することができる。取得されたソースデータがオーディオデータであれば、オーディオデータを音声認識で文字内容へ変換することができ、取得されたソースデータが文字内容であれば、文字内容を対応するオーディオデータへ変換することができる。具体的なオーディオデータと文字内容の変換手順は従来技術であるため、ここでは詳しく説明しない。サーバは、更に、オーディオデータのサイズと文字内容の第四マップを取得することができる。例えば、文字内容である「西安は今日が路面凍結の黄色警報、一日曇り、零下８℃〜１℃、大気質の指数２７６、重度の汚染」と対応するオーディオデータのサイズのマップは「（２５ｋ，５文字）（４９ｋ，９文字）…（２２０ｋ，４４文字）」であり、文字内容の先頭の５文字がオーディオデータのサイズの先頭２５ｋに対応し、文字内容の先頭の９文字がオーディオデータのサイズの先頭４９ｋに対応することを示し、繰り返して同様に推定できるため、ここでは詳しく説明しない。説明すべきなのは、オーディオデータサイズと文字内容のマップの粒度は、実際の必要に応じて設置可能である。例えば、文字のそれぞれを粒度としても良く、複数の文字を粒度としても良く、例えば（５ｋ、１文字）（１０ｋ、２文字）であっても良く、具体的に限定されない。
【００４９】
ステップ２０２において、オーディオデータと第四マップに基づいて、オーディオデータの放送時間と文字内容の第三マップを確定する。
【００５０】
具体的に、サーバは、オーディオデータの放送時間を取得することができる。具体的に、オーディオデータのサイズに基づいてオーディオデータの放送時間を演算して取得することができ、放送時間とオーディオデータのサイズのマップを取得することにより、オーディオデータの放送時間と文字内容の第三マップを更に取得することができる。
【００５１】
好ましくは、ステップ２０２は具体的に以下のステップを含んでも良い。
【００５２】
ステップ２０２１において、オーディオデータのサイズに基いて、オーディオデータの放送時間とオーディオデータのサイズの第五マップを確定する。
【００５３】
例示的に、オーディオデータのサイズと放送時間のマップは「（２５ｋ，１００ｍｓ）（４９ｋ，２００ｍｓ）…」であっても良い。
【００５４】
ステップ２０２２において、第四マップと第五マップに基いて、オーディオデータの放送時間と文字内容の第三マップを確定する。
【００５５】
例示的に、第三マップは「（１００ｍｓ，５文字）（２００ｍｓ，９文字）…」であっても良い。
【００５６】
他の実施可能な方式の一つとして、前記実施例一をもとに、好ましくは、再生画面データに、画像データと文字データとのうち少なくとも一つが含まれる。再生画面データに文字データが含まれれば、当該方法は更に、各グループにおける各行の文字データとオーディオデータの属性情報の第二対応関係を確定して放送端末へ送信して、放送端末に第二対応関係に基いて各行の文字データと当該行に対応するオーディオデータの同期再生を制御させることを含んでも良い。
【００５７】
具体的に、再生画面データに文字データが含まれれば、サーバは更に各グループのうち、各行の文字データとオーディオデータの属性情報の第二対応関係を確定して放送端末へ送信して、放送端末に第二対応関係に基いて各行の文字データと当該行に対応するオーディオデータの同期再生を制御させることができる。例示的に、依然として前記の西安の天気を例として、ディスプレーインターフェースにオーディオデータと同期する文字内容を表示しようとすると、各行文字データとオーディオデータの属性情報の対応関係が「（西安は今日が路面凍結の黄色警報、０−２８０ｍｓ）（一日曇り、２８０−３００ｍｓ）（零下８℃〜１℃、３００−５００ｍｓ）…」であると確定することができる。具体的な各行の文字データの確定は、文字内容の句読点に基づいて分割しても良く、オーディオデータにおけるオーディオの停頓に基づいて分割しても良い。具体的な実現方式は、従来技術における任意の実施可能な方式であっても良く、ここでは詳しく説明しない。
【００５８】
説明すべきなのは、本実施例における実施可能な方式のそれぞれは、単独で実施しても良く、衝突のない場合に任意の組み合わせで実施しても良く、本願では限定しない。
【００５９】
本実施例により提供された画像とオーディオの同期再生の処理方法は、前記実施例一をもとに、再生画面データに文字データが含まれれば、各行の文字データとオーディオデータの同期再生を制御可能であるため、行を逐一にハイライトしたりするようなユーザからスクリーンの肝心な情報に対する位置決めに寄与する表示効果を実現でき、ユーザの体験を一層に向上した。再生画面データに画像データと共に文字データが含まれれば、音声、文字、画像のような三者の正確的な同期再生を実現でき、ユーザの体験を一層に向上することを実現可能である。
【００６０】
［実施例三］
本実施例は、再生サービスにおけるオーディオの放送と表示内容との同期再生のための画像とオーディオの同期再生の処理方法を提供して、同期の正確性を向上させる。本実施例の実行主体は放送端末であっても良い。放送端末は、具体的にスマートスクリーン付きスピーカ、スマートフォン、タブレットなどを含むが、それらに限定されない。
【００６１】
図４は、本実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートを示す。当該方法は以下のステップを含む。
【００６２】
ステップ３０１において、サーバへ再生サービス要求を送信する。
【００６３】
具体的に、ユーザから放送サービスを要求した時に、音声入力又は手動文字入力などの入力手段で放送端末へ再生サービス要求を入力可能である。放送端末により再生サービス要求をサーバへ送信すると、サーバは放送端末から送信された再生サービス要求を取得することができる。
【００６４】
ステップ３０２において、サーバから再生サービス要求に応じて返送された再生画面データ、オーディオデータ、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を受信する。
【００６５】
なお、再生画面データは再生内容に基づいて複数のグループにグループ化された。
【００６６】
ステップ３０３において、第一対応関係に基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する。
【００６７】
具体的に、オーディオデータを再生する場合に、各グループとオーディオデータの属性情報の対応関係に基づいて、ディスプレーインターフェースに対応する再生画面を同期的に表示する。
【００６８】
例示的に、「西安は今日が路面凍結の黄色警報」が放送されている間に、ディスプレーインターフェースに警報関連の画像が表示され、それ以外に表示画像に「警報」などの提示情報を表示してユーザにとって現在の表示画面がどのような内容であるかをより明らかにすることができる。前記の内容の放送が終了し、  「一日曇り、零下８℃〜１℃」の放送が始まった場合に、ディスプレーインターフェースにおいて気温関連の画像、及び「気温」の提示情報などに遷移される。
【００６９】
本実施例により提供された画像とオーディオの同期再生の処理方法は、サーバから返送された各グループとオーディオデータの属性情報の第一対応関係に基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行することにより、オーディオデータと各グループの再生内容の対応関係が作成されたため、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示との同期の正確性が効率的に向上した。
【００７０】
［実施例四］
本実施例は、実施例三により提供された画像とオーディオの同期再生の処理方法に対して更に補足的に説明する。
【００７１】
図５は、本実施例により提供される画像とオーディオの同期再生の処理方法のフローチャートを示す。当該フローチャートは、例示的に共通の処理フローを提供することに過ぎず、本願に対する限定ではない。実際の応用において、あるステップや幾つかのステップが含まれなくても良く、各ステップの実行順も実際の状況に応じて当該フローと異なっても良い。
【００７２】
実施可能な方式の一つとして、前記の実施例三をもとに、好ましくは、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に各グループとオーディオデータの属性情報の第一マップが含まれる場合に、ステップ３０３は第一マップに基づいて再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行することを含む。具体的に、サーバにより各グループとオーディオデータの属性情報の第一マップを確定して放送端末へ送信すると、放送端末は直接に第一マップに基づいて再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行することができる。
【００７３】
好ましくは、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に、各グループとオーディオデータに対応する文字内容の第二マップ及び文字内容とオーディオデータの属性情報の第三マップが含まれる場合に、ステップ３０２は、具体的に、サーバから再生サービス要求に応じて返送された再生画面データ、オーディオデータ、各グループとオーディオデータに対応する文字内容の第二マップ、及び文字内容とオーディオデータの属性情報の第三マップを受信するステップ３０２１を含み、ステップ３０３は、第二マップと第三マップに基づいて、各グループとオーディオデータの属性情報の第六マップを確定するステップ３０３１と、第六マップに基づいて再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップ３０３２と、を含む。
【００７４】
具体的に、サーバは各グループとオーディオデータに対応する文字内容の第二マップ、及び文字内容とオーディオデータの属性情報の第三マップを確定して放送端末へ送信する。放送端末は、第二マップと第三マップに基づいて、各グループとオーディオデータの属性情報の第六マップを確定し、更に第六マップに基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する。
【００７５】
好ましくは、ステップ３０３２は、具体的に以下のステップを含んでも良い。
【００７６】
ステップ３０３２１において、ディスプレーインターフェースに再生された再生画面データについて、グループ毎に基づいてタイムカウント処理を行って各グループと当該グループに対応するオーディオデータの同期再生を制御する。
【００７７】
具体的に、各グループとオーディオデータの属性情報的マップは、各グループとオーディオデータの放送時間の対応関係であっても良い。ディスプレーインターフェースに再生された再生画面データについて、グループ毎に基づいてタイムカウント処理を行い、各グループとオーディオデータの放送時間の対応関係に基づいて、各グループの再生画面とオーディオデータとの同期再生を制御する。
【００７８】
他の実施可能な方式の一つとして、前記の実施例三をもとに、好ましくは、当該方法は更に以下のステップを含んでも良い。
【００７９】
ステップ４０１において、サーバから送信された各グループにおける各行の文字データとオーディオデータの属性情報の第二対応関係を受信する。
【００８０】
ステップ４０２において、第二対応関係に基づいて、ディスプレーインターフェースに再生された文字データについて、行に基づいてタイムカウント処理を行って、各行の文字データと当該行に対応するオーディオデータの同期再生を制御する。
【００８１】
具体的に、再生画面データに文字データが含まれ、且つサーバから送信された各グループにおける各行の文字データとオーディオデータの属性情報の第二対応関係が受信された場合に、放送端末は第二対応関係に基づいて、ディスプレーインターフェースに再生された文字データについて、行に基づいてタイムカウント処理を行って各行の文字データと当該行に対応するオーディオデータの同期再生を制御することができる。例えば、音声で「西安は今日が路面凍結の黄色警報」が放送された場合に、ディスプレーインターフェースにおいて文字として「西安は今日が路面凍結の黄色警報」が同期的に表示される。理解すべきなのは、再生画面データに画像データと文字データが含まれる場合に、放送端末はオーディオデータとディスプレーインターフェースに表示された画像データ及び文字データとの同期再生を同時的に制御することができる。
【００８２】
好ましくは、当該方法は更に、ディスプレーインターフェースにおける表示方式が他の行の文字データと異なるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御することを含んでも良い。
【００８３】
具体的に、ディスプレーインターフェースにおいてハイライトで表示したり、異なる色で表示したりすることにより他の行の文字データと区別させるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御することができる。
【００８４】
例示的に、図６は、本実施例により提供される行を逐一にハイライトすることの模式図を示す。なお、画像は、マイケル・ジャクソンの写真又はその関連ビデオであっても良く、ここでは例示的な説明に過ぎない。
【００８５】
好ましくは、オーディオデータと文字データの細かい粒度における対応関係、即ちオーディオデータの放送時間と各行における各文字の対応関係に基づいて、ディスプレーインターフェースにおける表示方式が他の行の文字及び当該行における他の文字と異なるように、オーディオで放送される各文字を制御し、即ち字を逐一にハイライトで表示することもできる。
【００８６】
好ましくは、下へスクロールして行を逐一に表示するように現在にディスプレーインターフェースにない各行の文字を表示するようにディスプレーインターフェースを制御すると共に、ハイライトで表示し、又は異なる色で表示することもできる。
【００８７】
例示的に、図７は、本実施例により提供されるハイライト表示及び下へのスクロールのインターフェース模式図を示す。第１項の「私に誕生日のプレゼントを買うように注意する」が放送された後に、下へスクロールして第４項の注意を表示し、それに応じて第１項の注意がディスプレーインターフェースから離れ、即ちディスプレーインターフェースにおいて第２、３、４項のような三つの注意が表示される。図８は、本実施例により提供される放送のページ送りの同期のインターフェース模式図を示す。雷電／豪雨の青色警報に関連する内容が放送された場合に、「雷電／豪雨」をハイライトで表示し、且つ「青色警報」という四つの文字を青色で表示すると共に、雷電／豪雨の関連画像を同期的に表示することができる。現在の気温に関連する内容が放送された場合に、「現在５℃、今日が一日２℃−９℃」をハイライトで表示すると共に、同期的に気温の関連画像へページ送りする。
【００８８】
説明すべきなのは、本実施例における実施可能な各方式は、単独で実施しても良く、衝突しない場合に任意の組み合わせで実施しても良く、本願では限定されない。
【００８９】
本実施例により提供された画像とオーディオの同期再生の処理方法は、前記の実施例三をもとに、再生画面データに文字データが含まれれば、更に各行の文字データとオーディオデータの同期再生を制御することができ、ディスプレーインターフェースにおける表示方式が他の行の文字データと異なるように現在に再生されたオーディオデータに対応する当該行の文字データを制御することもできるため、行を逐一でハイライトしたりするようなユーザからスクリーンの肝心な情報に対する位置決めに寄与する表示效果を実現でき、ユーザの体験を一層に向上した。
【００９０】
［実施例五］
本実施例は、前記の実施例一の画像とオーディオの同期再生の処理方法を実行するサーバを提供する。
【００９１】
図９は、本実施例により提供されるサーバの構成模式図を示す。当該サーバ５０は、第一取得モジュール５１と、第二取得モジュール５２と、第一送信モジュール５３とを備える。
【００９２】
なお、第一取得モジュール５１は、放送端末から送信された再生サービス要求を取得する。第二取得モジュール５２は、再生サービス要求に対応する、再生内容に基づいて複数のグループにグループ化された再生画面データとオーディオデータとを取得する。第一送信モジュール５３は、再生画面データ、オーディオデータ、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基づいて再生画面データとオーディオデータに対して相応の同期再生処理を実行させる。
【００９３】
本実施例におけるサーバにおいて、各モジュールが操作を実行する具体的な方式は既に当該方法に関する実施例に詳しく説明されたため、ここでは詳しく説明しない。
【００９４】
本実施例により提供されたサーバによれば、再生内容に基づいて再生画面データを複数のグループにグループ化し、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基づいて再生画面データとオーディオデータに対して相応の同期再生処理を実行させる。これにより、オーディオデータと各グループの再生内容の対応関係が作成されたため、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示との同期の正確性を効率的に向上した。
【００９５】
［実施例六］
本実施例は前記の実施例五により提供されたサーバに対して更に補足的に説明するものであって、前記の実施例二により提供された画像とオーディオの同期再生の処理方法を実行させる。
【００９６】
実施可能な方式の一つとして、前記の実施例五をもとに、好ましくは、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に、各グループとオーディオデータの属性情報の第一マップ、又は、各グループとオーディオデータに対応する文字内容の第二マップ及び文字内容とオーディオデータの属性情報の第三マップが含まれる。
【００９７】
好ましくは、第一送信モジュール５３は更にオーディオデータに対応する文字内容を放送端末へ送信する。
【００９８】
好ましくは、サーバ５０は更に第三取得モジュールと第四取得モジュールを備えても良い。
【００９９】
なお、第三取得モジュールは、文字内容に基づいて、オーディオデータのサイズと文字内容の第四マップを取得する。第四取得モジュールは、オーディオデータと第四マップに基づいて、オーディオデータの放送時間と文字内容の第三マップを確定する。
【０１００】
好ましくは、第四取得モジュールは、具体的に第一取得サブモジュールと第二取得サブモジュールを備えても良い。
【０１０１】
なお、第一取得サブモジュールは、オーディオデータのサイズに基づいて、オーディオデータの放送時間とオーディオデータのサイズの第五マップを確定する。第二取得サブモジュールは、第四マップと第五マップに基づいて、オーディオデータの放送時間と文字内容の第三マップを確定する。
【０１０２】
他の実施可能な方式の一つとして、前記の実施例五をもとに、好ましくは、再生画面データに画像データと文字データとのうち少なくとも一つが含まれる。
【０１０３】
再生画面データに文字データが含まれれば、サーバ５０は更に第一確定モジュールを備えても良い。
【０１０４】
なお、第一確定モジュールは、各グループにおける各行の文字データとオーディオデータの属性情報の第二対応関係を確定する。第一送信モジュールは更に第二対応関係を放送端末へ送信する。
【０１０５】
本実施例におけるサーバにおいて、各モジュールが操作を実行する具体的な方式は既に当該方法に関する実施例に詳しく説明されたため、ここでは詳しく説明しない。
【０１０６】
説明すべきなのは、本実施例における実施可能な各方式は、単独で実施されても良く、衝突しない場合に任意の組み合わせで実施されてもよく、本願では限定されない。
【０１０７】
本実施例のサーバによれば、前記の実施例五をもとに、再生画面データに文字データが含まれれば、各行の文字データとオーディオデータの同期再生を制御することもできるため、行を逐一でハイライトしたりするようなユーザからスクリーンの肝心な情報に対する位置決めに寄与する表示效果を実現でき、ユーザの体験を一層に向上した。再生画面データに画像データと共に文字データが含まれれば、音声、文字、画像の三者に対する正確的な同期再生を実現でき、ユーザの体験を一層に向上した。
【０１０８】
［実施例七］
本実施例は前記の実施例三により提供された画像とオーディオの同期再生の処理方法を実行する放送端末を提供する。
【０１０９】
図１０は、本実施例により提供された放送端末の構成模式図を示す。当該放送端末７０は、第二送信モジュール７１と、受信モジュール７２と、処理モジュール７３とを備える。
【０１１０】
なお、第二送信モジュール７１はサーバへ再生サービス要求を送信する。受信モジュール７２は、サーバから再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにグループされる再生画面データ、オーディオデータ、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を受信する。処理モジュール７３は、第一対応関係に基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する。
【０１１１】
本実施例における放送端末において、各モジュールが操作を実行する具体的な方式は既に当該方法に関する実施例に詳しく説明されたため、ここでは詳しく説明しない。
【０１１２】
本実施例の放送端末によれば、サーバから返送された各グループとオーディオデータの属性情報の第一対応関係に基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する。これにより、オーディオデータと各グループの再生内容の対応関係が作成されたため、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示との同期の正確性を効率的に向上した。
【０１１３】
［実施例八］
本実施例は、前記の実施例七により提供されたサーバに対して更に補足的に説明するものであって、前記の実施例四により提供された画像とオーディオの同期再生の処理方法を実行させる。
【０１１４】
実施可能な方式の一つとして、前記の実施例七をもとに、好ましくは、処理モジュール７３は具体的に、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に各グループとオーディオデータの属性情報の第一マップが含まれれば、第一マップに基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を行い、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報に各グループとオーディオデータに対応する文字内容の第二マップ及び文字内容とオーディオデータの属性情報の第三マップが含まれれば、第二マップと第三マップに基づいて、各グループとオーディオデータの属性情報の第六マップを確定し、第六マップに基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行することができる。
【０１１５】
好ましくは、処理モジュールは具体的に、ディスプレーインターフェースに再生された再生画面データについて、各グループに基づいてタイムカウント処理を行って、各グループと当該グループに対応するオーディオデータの同期再生を制御することができる。
【０１１６】
他の実施可能な方式の一つとして、前記の実施例七をもとに、好ましくは、受信モジュールは更に、サーバから送信された各グループにおける各行の文字データとオーディオデータの属性情報の第二対応関係を受信する。
【０１１７】
処理モジュールは更に、第二対応関係に基づいて、ディスプレーインターフェースに再生された文字データについて、行に基づいてタイムカウント処理を行って各行の文字データと当該行に対応するオーディオデータの同期再生を制御する。
【０１１８】
好ましくは、当該放送端末は更に、ディスプレーインターフェースにおける表示方式が他の行の文字データと異なるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御する制御モジュールを備えても良い。
【０１１９】
本実施例における放送端末において、各モジュールが操作を実行する具体的な方式は既に当該方法に関する実施例に詳しく説明されたため、ここでは詳しく説明しない。
【０１２０】
説明すべきなのは、本実施例における実施可能な各方式は、単独で実施されても良く、衝突しない場合に任意の組み合わせで実施されても良く、本願では限定されない。
【０１２１】
本実施例の放送端末によれば、前記の実施例七をもとに、再生画面データに文字データが含まれれば、各行の文字データとオーディオデータの同期再生を制御すると共に、ディスプレーインターフェースにおける表示方式が他の行の文字データと異なるように現在に再生されたオーディオデータに対応する当該行の文字データを制御することができるため、行を逐一でハイライトしたりするようなユーザからスクリーンの肝心な情報に対する位置決めに寄与する表示效果を実現でき、ユーザの体験を一層に向上した。
【０１２２】
［実施例九］
本実施例は、前記の実施例一又は実施例二により提供された方法を実行するサーバを提供する。
【０１２３】
図１１は、本実施例により提供されたサーバの構成模式図を示す。当該サーバ９０は、少なくとも一つのプロセッサ９１とメモリ９２を備える。
【０１２４】
なお、メモリにコンピュータプログラムが記憶され、少なくとも一つのプロセッサによりメモリに記憶されたコンピュータプログラムを実行して実施例一又は実施例二により提供された方法を実現させる。
【０１２５】
本実施例により提供されたサーバは、再生内容に基づいて再生画面データを複数のグループにグループ化し、各グループとオーディオデータの属性情報の第一対応関係を確定するための情報を放送端末へ送信して、放送端末に第一対応関係に基づいて再生画面データとオーディオデータに対して相応の同期再生処理を実行させる。これにより、オーディオデータと各グループの再生内容的対応関係が作成されたため、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示との同期の正確性を効率的に向上した。
【０１２６】
［実施例十］
本実施例は、前記の実施例三又は実施例四により提供された方法を実行する放送端末を提供する。
【０１２７】
図１２は、本実施例により提供された放送端末の構成模式図を示す。当該放送端末１００は、プロセッサ１００１とメモリ１００２とを備える。
【０１２８】
なお、メモリにコンピュータプログラムが記憶され、プロセッサによりメモリに記憶されたコンピュータプログラムを実行して実施例三又は実施例四により提供された方法を実現させる。
【０１２９】
本実施例により提供された放送端末は、サーバから返送された各グループとオーディオデータの属性情報の第一対応関係に基づいて、再生されたオーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する。これにより、オーディオデータと各グループの再生内容の対応関係が作成されたため、放送端末により再生を行う際に放送されたオーディオ内容と表示された再生画面を正確に同期することができ、オーディオの放送とスクリーンの表示との同期の正確性を効率的に向上した。
【０１３０】
［実施例十一］
本実施例は、コンピュータ読取可能な記憶媒体を提供する。当該コンピュータ読取可能な記憶媒体にコンピュータプログラムが記憶され、コンピュータプログラムが実行されると、実施例一又は実施例二により提供された方法を実現させる。
【０１３１】
［実施例十二］
本実施例はコンピュータ読取可能な記憶媒体を提供する。当該コンピュータ読取可能な記憶媒体にコンピュータプログラムが記憶され、コンピュータプログラムが実行されると、実施例三又は実施例四により提供された方法を実現させる。
【０１３２】
本願により提供された幾つかの実施例において、理解すべきなのは、開示された装置及び方法が他の手段で実現することができる。例えば、ここまで説明された装置の実施例は例示的なものに過ぎない。例えば、前記ユニットの区分は、ただロジック機能に対する区分に過ぎず、実際的な実現において他の区分手段があっても良い。例えば複数のユニット或いは部品は、組み合わせても良く、若しくは他のシステムに集積されても良い。又は、幾つかの特徴は無視されても良く、実行されなくても良い。また、示され或いは説明された同士間の結合、又は直接結合、又は通信接続は、幾つかのインターフェース、装置又はユニットによる間接結合又は通信接続であっても良く、電気的な手段、機械的な手段又は他の手段であっても良い。
【０１３３】
ここまで分離部品として説明されたユニットは、物理的に分離されてもされなくても良く、ユニットとして示された部品は、物理的なユニットであってもでなくても良く、即ち一箇所に位置されても良く、或いは複数のネットワークユニットに分散されても良い。実際の必要に応じてそのうち一部又は全てのユニットを選択して本実施例の技術案の目的を実現することができる。
【０１３４】
また、本願の各実施例における各機能ユニットは、一つの処理ユニットに集積されても良く、各ユニットが単独で物理的に存在しても良く、二つ又は二つ以上のユニットが一つのユニットに集積されても良い。前記の集積ユニットは、ハードウェアの手段で実現されても良く、ハードウェアに加えてソフトウェアの機能ユニットの手段で実現されても良い。
【０１３５】
ここまでソフトウェアの機能ユニットの手段で実現された集積ユニットは、一つのコンピュータ読取可能な記憶媒体に記憶されても良い。前記のソフトウェアの機能ユニットは、一つの記憶媒体に記憶されており、一つのコンピュータデバイス（パソコン、サーバ、又はネットワークデバイスなどであっても良い）又はプロセッサ（ｐｒｏｃｅｓｓｏｒ）に本願の各実施例における前記方法の一部のステップを実行させるように複数の指令を含む。前記の記憶媒体には、メモリカード、モバイルハードディスク、読取専用メモリ（Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ、ＲＯＭ）、ランダムアクセスメモリ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ、ＲＡＭ）、磁気ディスク又は光ディスクなどのような、プログラムコードを記憶可能な各種の媒体が含まれる。
【０１３６】
当業者であればわかるように、便利で簡潔的に説明するために、前記の各機能モジュールの区分で例を挙げて説明したが、実際の応用において、必要に応じて前記の機能を異なる機能モジュールに割り当て、即ち装置の内部構成を異なる機能モジュールに区分してここまで説明された一部又は全ての機能を完成させることができる。ここまで説明された装置の具体的な作動過程は、前記の方法の実施例における対応の過程を参照することができ、ここでは詳しく説明しない。
【０１３７】
最後に説明すべきなのは、前記の各実施例は、本願の技術案を説明したに過ぎず、それらに対する限定ではない。前記の各実施例を参照して本願を詳しく説明したが、当業者であればわかるように、前記の各実施例に記載された技術案に対して補正し、或いはその一部又は全ての技術的な特徴に対して等価な置換を行うことができる。このような補正又は置換を行っても、該当する技術案の要旨が本願の各実施例の技術案の範囲から逸脱することがない。
【図１】
2019174783.tif 000003
【図２】
2019174783.tif 000004
【図３】
2019174783.tif 000005
【図４】
2019174783.tif 000006
【図５】
2019174783.tif 000007
【図６】
2019174783.tif 000008
【図７】
2019174783.tif 000009
【図８】
2019174783.tif 000010
【図９】
2019174783.tif 000011
【図１０】
2019174783.tif 000012
【図１１】
2019174783.tif 000013
【図１２】
2019174783.tif 000014
【手続補正書】
【提出日】令和1年5月24日(2019.5.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像とオーディオの同期再生の処理方法であって、
放送端末から送信される再生サービス要求を取得するステップと、
前記再生サービス要求に対応する再生画面データとオーディオデータとを取得するステップであって、前記再生画面データは、再生内容に基づいて複数のグループにグループ化される、ステップと、
前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を前記放送端末に送信して、前記放送端末が前記第一対応関係に基づいて前記再生画面データと前記オーディオデータとに対して相応の同期再生処理を実行するようにするステップと、
を含むことを特徴とする方法。
【請求項２】
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報は、
各前記グループと前記オーディオデータの属性情報の第一マップ、又は、
各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップ、
を含むことを特徴とする請求項１に記載の方法。
【請求項３】
前記方法は、前記オーディオデータに対応する文字内容を前記放送端末に送信するステップを更に含むことを特徴とする請求項２に記載の方法。
【請求項４】
前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報を前記放送端末に送信する前に、更に
前記文字内容に基づいて、前記オーディオデータのサイズと前記文字内容の第四マップを取得するステップと、
前記オーディオデータと前記第四マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定するステップと、
を含むことを特徴とする請求項２又は３に記載の方法。
【請求項５】
前記オーディオデータと前記第四マップに基づいて前記オーディオデータの放送時間と前記文字内容の第三マップを確定するステップは、
前記オーディオデータのサイズに基づいて、前記オーディオデータの放送時間と前記オーディオデータのサイズの第五マップを確定するステップと、
前記第四マップと前記第五マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定するステップと、
を含むことを特徴とする請求項４に記載の方法。
【請求項６】
前記再生画面データは、画像データと文字データのうちの少なくとも一つを含み、
前記再生画面データに文字データが含まれる場合に、前記方法は、更に、
各前記グループにおける各行の文字データと前記オーディオデータの属性情報との第二対応関係を確定して前記放送端末へ送信するステップを、
含むことを特徴とする請求項１〜３の何れか一つに記載の方法。
【請求項７】
画像とオーディオの同期再生の処理方法であって、
サーバに再生サービス要求を送信し、前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにクループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を受信するステップと、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップと、
を含むことを特徴とする方法。
【請求項８】
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータの属性情報の第一マップが含まれる場合に、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップは、
前記第一マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップを含み、
或いは、
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップが含まれる場合に、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップは、
前記第二マップと前記第三マップに基づいて、各前記グループと前記オーディオデータの属性情報の第六マップを確定するステップと、
前記第六マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップを含むことを特徴とする請求項７に記載の方法。
【請求項９】
前記第六マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行するステップは、
前記ディスプレーインターフェースに再生された再生画面データに対して、グループ毎に基づいてタイムカウント処理を行って、各グループと当該グループに対応するオーディオデータの同期再生を制御するステップを含むことを特徴とする請求項８に記載の方法。
【請求項１０】
前記方法は、更に、
サーバから送信された各前記グループにおける各行の文字データと前記オーディオデータの属性情報の第二対応関係を受信するステップと、
前記第二対応関係に基づいて、前記ディスプレーインターフェースに再生された文字データに対して、行に基づいてタイムカウント処理を行って各行の文字データと当該行に対応するオーディオデータの同期再生を制御するステップと、
を含むことを特徴とする請求項９に記載の方法。
【請求項１１】
前記方法は、更に、
前記ディスプレーインターフェースにおける表示方式が他の行的文字データと異なるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御するステップを含むことを特徴とする請求項１０に記載の方法。
【請求項１２】
放送端末から送信される再生サービス要求を取得する第一取得モジュールと、
前記再生サービス要求に対応する再生画面データとオーディオデータを取得する第二取得モジュールであって、前記再生画面データは、再生内容に基づいて複数のグループにグループ化される、第二取得モジュールと、
前記再生画面データ、前記オーディオデータ、及び各前記グループと前記オーディオデータの属性情報との第一対応関係を確定するための情報を前記放送端末に送信して、前記放送端末が前記第一対応関係に基づいて前記再生画面データと前記オーディオデータとに対して相応の同期再生処理を実行するようにする第一送信モジュールと、
を備えることを特徴とするサーバ。
【請求項１３】
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報は、
各前記グループと前記オーディオデータの属性情報の第一マップ、又は、
各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップを含むことを特徴とする請求項１２に記載のサーバ。
【請求項１４】
前記第一送信モジュールは、更に、前記オーディオデータに対応する文字内容を前記放送端末に送信することを特徴とする請求項１３に記載のサーバ。
【請求項１５】
前記文字内容に基づいて、前記オーディオデータのサイズと前記文字内容の第四マップを取得する第三取得モジュールと、
前記オーディオデータと前記第四マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定する第四取得モジュールと、
を更に備えることを特徴とする請求項１３又は１４に記載のサーバ。
【請求項１６】
前記第四取得モジュールは、
前記オーディオデータのサイズに基づいて、前記オーディオデータの放送時間と前記オーディオデータのサイズの第五マップを確定する第一取得サブモジュールと、
前記第四マップと前記第五マップに基づいて、前記オーディオデータの放送時間と前記文字内容の第三マップを確定する第二取得サブモジュールと、
を備えることを特徴とする請求項１５に記載のサーバ。
【請求項１７】
前記再生画面データは、画像データと文字データのうちの少なくとも一つを含み、
前記再生画面データに文字データが含まれる場合に、前記サーバは、更に、
各前記グループにおける各行の文字データと前記オーディオデータの属性情報との第二対応関係を確定する第一確定モジュールを備え、
前記第一送信モジュールは、更に、前記第二対応関係を前記放送端末に送信することを特徴とする請求項１２〜１４の何れか一つに記載のサーバ。
【請求項１８】
サーバに再生サービス要求を送信する第二送信モジュールと、
前記サーバから前記再生サービス要求に応じて返送された、再生内容に基づいて複数のグループにグループ化された再生画面データ、オーディオデータ、及び各グループと前記オーディオデータの属性情報との第一対応関係を確定する情報を受信する受信モジュールと、
前記第一対応関係に基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行する処理モジュールと、
を備えることを特徴とする放送端末。
【請求項１９】
前記処理モジュールは、具体的に、
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータの属性情報の第一マップが含まれる場合に、
前記第一マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行し、
各前記グループと前記オーディオデータの属性情報の第一対応関係を確定するための情報に、各前記グループと前記オーディオデータに対応する文字内容との第二マップ、及び前記文字内容と前記オーディオデータの属性情報との第三マップが含まれる場合に、
前記第二マップと前記第三マップに基づいて、各前記グループと前記オーディオデータの属性情報の第六マップを確定し、前記第六マップに基づいて、再生された前記オーディオデータとディスプレーインターフェースに表示された再生画面データに対して相応の同期処理を実行することを特徴とする請求項１８に記載の放送端末。
【請求項２０】
前記処理モジュールは、具体的に、
前記ディスプレーインターフェースに再生された再生画面データに対して、グループ毎に基づいてタイムカウント処理を行って、各グループと当該グループに対応するオーディオデータの同期再生を制御することを特徴とする請求項１９に記載の放送端末。
【請求項２１】
前記受信モジュールは、更に、
サーバから送信された各前記グループにおける各行の文字データと前記オーディオデータの属性情報の第二対応関係を受信し、
前記処理モジュールは、更に、
前記第二対応関係に基づいて、前記ディスプレーインターフェースに再生された文字データに対して、行に基づいてタイムカウント処理を行って各行の文字データと当該行に対応するオーディオデータの同期再生を制御することを特徴とする請求項２０に記載の放送端末。
【請求項２２】
前記ディスプレーインターフェースにおける表示方式が他の行の文字データと異なるように、現在に再生されたオーディオデータに対応する当該行の文字データを制御する制御モジュールを更に備えることを特徴とする請求項２１に記載の放送端末。
【請求項２３】
少なくとも一つのプロセッサとメモリとを備えるサーバであって、
前記メモリにコンピュータプログラムが記憶され、前記少なくとも一つのプロセッサは前記メモリに記憶されたコンピュータプログラムを実行して請求項１〜６の何れか一つに記載の方法を実現することを特徴とするサーバ。
【請求項２４】
プロセッサとメモリとを備える放送端末であって、
前記メモリにコンピュータプログラムが記憶され、前記プロセッサは前記メモリに記憶されたコンピュータプログラムを実行して請求項７〜１１の何れか一つに記載の方法を実現することを特徴とする放送端末。
【請求項２５】
コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが実行されると、請求項１〜６の何れか一つに記載の方法を実現することを特徴とするコンピュータ読取可能な記憶媒体。
【請求項２６】
コンピュータプログラムが記憶されているコンピュータ読取可能な記憶媒体であって、前記コンピュータプログラムが実行されると、請求項７〜１１の何れか一つに記載の方法を実現することを特徴とするコンピュータ読取可能な記憶媒体。
【請求項２７】
コンピュータプログラムであって、
前記コンピュータプログラムがプロセッサにより実行されると、請求項１〜６の何れか一つに記載の方法を実現させるコンピュータプログラム。
【請求項２８】
コンピュータプログラムであって、
前記コンピュータプログラムがプロセッサにより実行されると、請求項７〜１１の何れか一つに記載の方法を実現させるコンピュータプログラム。
【外国語明細書】
2019174783.tif 000015
2019174783.tif 000016
2019174783.tif 000017
2019174783.tif 000018
2019174783.tif 000019
2019174783.tif 000020
2019174783.tif 000021
2019174783.tif 000022
2019174783.tif 000023
2019174783.tif 000024
2019174783.tif 000025
2019174783.tif 000026
2019174783.tif 000027
2019174783.tif 000028
2019174783.tif 000029
2019174783.tif 000030
2019174783.tif 000031
2019174783.tif 000032
2019174783.tif 000033
2019174783.tif 000034
2019174783.tif 000035
2019174783.tif 000036
2019174783.tif 000037
2019174783.tif 000038
2019174783.tif 000039
2019174783.tif 000040
2019174783.tif 000041
2019174783.tif 000042
2019174783.tif 000043
2019174783.tif 000044
2019174783.tif 000045
2019174783.tif 000046
2019174783.tif 000047
2019174783.tif 000048