(57)【要約】【課題】着信時に設定されているデータを判別することができ、音データを切り替えた際の著作権違反を防止することが可能な動画像再生装置、携帯端末装置、ならびに携帯端末装置のデータ処理方法を提供する。【解決手段】通信処理部１１にて着信もしくはメッセージ受信が検出され、動画再生部２１により動画を再生して着信あるいは受信報知を行っているときに、音声合成処理部１７を含む読み上げ機能の起動すべき所定のイベントが発生した場合に、たとえば着信した音声を含む動画情報に著作権が存在せず画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、読み上げ機能を動作させ、著作権が存在し切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、読み上げ機能を動作させる制御を行う制御部２０を有する。【選択図】      図１
2006126269.tif 000002
【特許請求の範囲】
【請求項１】
音声と画像とを含む動画の再生を行う動画再生部と、
少なくとも上記再生動画および文字列を表示可能な表示部と、
上記表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能を有する読み上げ部と、
上記動画再生部における動画再生中に、上記読み上げ部の起動すべき所定のイベントが発生したとき、画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、上記読み上げ部の読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、上記読み上げ部の読み上げ機能を動作させる制御部と
を有することを特徴とする動画再生装置。
【請求項２】
上記制御部は、読み上げが終了したときに、いまだ動画の再生が続く状況にある場合には、上記動画再生部に再び動画再生を行わせる
ことを特徴とする請求項１に記載の動画再生装置。
【請求項３】
上記制御部は、再生動画中の付属情報を参照し、所定のデータが含まれるか否かにより、動画と音声のデータ切り離しの可否を判定する
ことを特徴とする請求項１または２に記載の動画再生装置。
【請求項４】
音声と画像とを含む動画の再生を行う動画再生部と、
少なくとも上記再生動画および文字列を表示可能な表示部と、
上記表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能を有する読み上げ部と、
少なくとも着信およびメッセージ受信を検出可能な通信部と、
上記通信部にて着信もしくはメッセージ受信が検出され、上記動画再生部により動画を再生して着信あるいは受信報知を行っているときに、上記読み上げ部の起動すべき所定のイベントが発生した場合、画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、上記読み上げ部の読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、上記読み上げ部の読み上げ機能を動作させる制御部と
を有することを特徴とする携帯端末装置。
【請求項５】
上記制御部は、読み上げが終了したときに、いまだ着信あるいは受信報知を停止させる処理が行なわれなかった場合、上記動画再生部に再び動画再生を行わせる
ことを特徴とする請求項４に記載の携帯端末装置。
【請求項６】
上記制御部は、再生動画中の付属情報を参照し、所定のデータが含まれるか否かにより、動画と音声のデータ切り離しの可否を判定する
ことを特徴とする請求項４または５に記載の携帯端末装置。
【請求項７】
上記読み上げ部は、着信あるいは受信中に、発信者情報または受信中メールに関する情報を読み上げる機能を有する
ことを特徴とする請求項４乃至６のうちのいずれか一に記載の携帯端末装置。
【請求項８】
上記読み上げ部は、着信あるいは受信中に、所定の操作に応答して発信者または受信中メールに関する情報を読み上げる
ことを特徴とする請求項４乃至７のうちのいずれか一に記載の携帯端末装置。
【請求項９】
音声と画像とを含む動画の再生を行う動画再生機能と、
少なくとも上記再生動画および文字列を表示可能な表示機能と、
上記表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能と、
少なくとも着信およびメッセージ受信を検出可能な通信機能と、を有する携帯端末装置のデータ処理方法であって、
上記通信機能にて着信もしくはメッセージ受信を検出し、上記動画再生機能により動画を再生して着信あるいは受信報知を行っているときに、上記読み上げ機能の起動すべき所定のイベントが発生したか否かを判定し、
イベントが発生した場合、画像と音声のそれぞれのデータを切り離し可能であるか否かを判定し、
切り離し可能な場合には、動画の音声出力のみを停止するとともに、上記読み上げ部の読み上げ機能を動作させ、
切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、上記読み上げ部の読み上げ機能を動作させる
ことを特徴とする携帯端末装置のデータ処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示機能、読み上げ機能、並びに動画再生機能を備えた動画再生装置、およびこの動画再生装置を備えた携帯電話機等の携帯端末装置、並びに携帯端末装置のデータ処理方法に関するものである。
【背景技術】
【０００２】
近年、携帯端末装置等の電子機器としてキー操作に対応して、このキー操作により設定された機能名等をアナウンスするようにした携帯電話機が提案されている（たとえば特許文献１参照）。
この携帯電話機は、複数のキー操作部と、キー操作部の１あるいは複数のキー操作に従い電話機が備えた複数の機能のうち、キー操作に対応する機能に関して設定を行う制御部と、キー操作に連動して設定される機能名を音声出力する音声合成部とを有する。
【特許文献１】特開平１１−２５２２１６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、携帯電話機のような携帯端末装置において、着信／メール受信時に行う着信報知の手段として、画像および音声鳴動を伴うデータ（ムービーデータ）を指定しておくことで、着信時にはこれらの画像を表示しながら音声を鳴動させ、着信報知を行うことのできるものがある。また、着信／メール受信時に行う着信報知の手段として発信者の名前を音声合成して読上げるものもある。そこで、ムービーデータにて着信報知を行っている際にも発信者の名前を音声合成して読上げて欲しい、という要望が市場から生じることが予測される。
【０００４】
しかしながら、このような要望を満たす携帯端末装置を設計する場合、発信者の名前読上げの音声と、ムービーデータの音声とが競合してしまう事になるが、ムービーデータの製作者の意図も考慮するべきである。すなわち、ムービーデータの製作者の意図した形態を保持した状態で再生されるべきである。このように、上述した着信時における音声による発信者名読上げ着信報知のように、装置の状態を音声にて通知する割り込み処理が、ムービーデータの再生中に生じた際にも、ムービーデータの製作者の意図した形態を極力保持した状態で再生すべきである。
【０００５】
本発明の目的は、画像と音声を伴うムービーデータの再生中における、装置状態通知のための割り込み音声処理が生じた際にも、ムービーデータを製作者の意図した形態を極力崩すことの無い動画像再生装置、携帯端末装置、ならびに携帯端末装置のデータ処理方法を提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の第１の観点の動画再生装置は、音声と画像とを含む動画の再生を行う動画再生部と、少なくとも上記再生動画および文字列を表示可能な表示部と、上記表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能を有する読み上げ部と、上記動画再生部における動画再生中に、上記読み上げ部の起動すべき所定のイベントが発生したとき、画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、上記読み上げ部の読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、上記読み上げ部の読み上げ機能を動作させる制御部とを有する。
【０００７】
好適には、上記制御部は、読み上げが終了したときに、いまだ動画の再生が続く状況にある場合には、上記動画再生部に再び動画再生を行わせる。
【０００８】
好適には、上記制御部は、再生動画中の付属情報を参照し、所定のデータが含まれるか否かにより、動画と音声のデータ切り離しの可否を判定する。
【０００９】
本発明の第２の観点の携帯端末装置は、音声と画像とを含む動画の再生を行う動画再生部と、少なくとも上記再生動画および文字列を表示可能な表示部と、上記表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能を有する読み上げ部と、少なくとも着信およびメッセージ受信を検出可能な通信部と、上記通信部にて着信もしくはメッセージ受信が検出され、上記動画再生部により動画を再生して着信あるいは受信報知を行っているときに、上記読み上げ部の起動すべき所定のイベントが発生した場合、画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、上記読み上げ部の読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、上記読み上げ部の読み上げ機能を動作させる制御部とを有する。
【００１０】
好適には、上記制御部は、読み上げが終了したときに、いまだ着信あるいは受信報知を停止させる処理が行なわれなかった場合、上記動画再生部に再び動画再生を行わせる。
【００１１】
好適には、上記制御部は、再生動画中の付属情報を参照し、所定のデータが含まれるか否かにより、動画と音声のデータ切り離しの可否を判定する。
【００１２】
好適には、上記読み上げ部は、着信あるいは受信中に、発信者情報または受信中メールに関する情報を読み上げる機能を有する。
【００１３】
好適には、上記読み上げ部は、着信あるいは受信中に、所定の操作に応答して発信者または受信中メールに関する情報を読み上げる。
【００１４】
好適には、上記制御部は、動画の付属情報に著作権の有無を示すデータが含まれているか否かにより、上記動画の画像データと音声データが切り離し可能か不可能であるかを判定する。
【００１５】
本発明の第３の観点の携帯端末装置のデータ処理方法は、音声と画像とを含む動画の再生を行う動画再生機能と、少なくとも上記再生動画および文字列を表示可能な表示機能と、  上記表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能と、  少なくとも着信およびメッセージ受信を検出可能な通信機能と、を有する携帯端末装置のデータ処理方法であって、上記通信機能にて着信もしくはメッセージ受信を検出し、上記動画再生機能により動画を再生して着信あるいは受信報知を行っているときに、上記読み上げ機能の起動すべき所定のイベントが発生したか否かを判定し、イベントが発生した場合、画像と音声のそれぞれのデータを切り離し可能であるか否かを判定し、切り離し可能な場合には、動画の音声出力のみを停止するとともに、上記読み上げ部の読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、上記読み上げ部の読み上げ機能を動作させる。
【発明の効果】
【００１６】
本発明によれば、画像と音声を伴うムービーデータの再生中における、装置状態通知のための割り込み音声処理が生じた際にも、ムービーデータを製作者の意図した形態を崩して再生してしまうことを極力防止することができる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明の実施形態を添付図面に関連付けて説明する。
【００１８】
図１は、本発明の携帯端末装置としての携帯電話機１０のシステム構成の一例を図解したブロック図である。図２は、携帯電話機１の外観の一例を図解した図である。
携帯電話機１０は、可動機構を有する、いわゆる折り畳み式携帯電話機であって、図２（ａ）は開かれた状態（開状態）での正面図を、（ｂ）は閉じられた状態（閉状態）での正面図を、（ｃ）は開状態での側面図を、（ｄ）は閉状態での側面図を、それぞれ示す。
【００１９】
本実施形態に係る携帯電話機１０は、通常の携帯電話機の機能に加えて、音声と画像とを含む動画の再生を行う動画再生機能と、少なくとも再生動画および文字列を表示可能な表示機能と、表示部における表示中文字列および装置の状態を音声にて報知する読み上げ機能と、少なくとも着信およびメッセージ受信を検出可能な通信機能と、を有している。
そして、本実施形態の携帯電話機１０は、通信機能にて着信もしくはメッセージ受信を検出し、動画再生機能により動画を再生して着信あるいは受信報知を行っているときに、読み上げ機能の起動すべき所定のイベント（たとえば所定のキー操作）が発生したか否かを判定し、イベントが発生した場合、画像と音声のそれぞれのデータを切り離し可能であるか否かを判定し、切り離し可能な場合には、動画の音声出力のみを停止するとともに、読み上げ部の読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、読み上げ部の読み上げ機能を動作させるように構成されている。
携帯電話機１０によれば、画像と音声を伴うムービーデータの再生中における、装置状態通知のための割り込み音声処理が生じた際にも、ムービーデータを製作者の意図した形態を崩して再生してしまうことを極力防止することができる。
また、携帯電話機１０は、読み上げが終了したときに、いまだ着信あるいは受信報知を停止させる処理が行なわれなかった場合、上記動画再生部に再び動画再生を行わせる機能を有する。
携帯電話機１０は、再生動画中の付属情報を参照することにより、動画と音声のデータ切り離しの可否を判定する。
携帯電話機１０は、着信あるいは受信中に、発信者情報または受信中メールに関する情報を読み上げる機能を有する。
また、携帯電話機１０は、着信あるいは受信中に、所定の操作に応答して発信者または受信中メールに関する情報を読み上げる。
さらにまた、携帯電話機１０は、制御部は、動画の付属情報に著作権の有無を示すデータが含まれているか否かにより、動画の画像データと音声データが切り離し可能か不可能であるかを判定する。
【００２０】
以下、本実施形態に係る携帯電話機１０の各部の構成、機能、並びに、音声読み上げ制
御について順を追って説明する。
【００２１】
図１に示すように、携帯電話機１０は、送受信アンテナ１１１を含む通信処理部１１と、メモリ１２と、キー操作部１３と、ダイヤル入力部１４と、サブ表示部１５と、メイン表示部１６と、スピーカ１７１およびマイクロフォン１７２を含み読み上げ部としての機能を含む音声合成処理部１７と、開閉スイッチ１８と、読み上げキー入力部１９と、動画再生や音声制御機能を含む制御部（ＣＰＵ）２０とを有している。また、制御部２０は、動画再生部２１を有している。
また、図２（ａ）に示すように、携帯電話機１０の本体ケース１００は、第１の筐体としてのキー入力側本体ケース１０１と、第２の筐体としての表示側本体ケース１０２とが、図示しない可動機構により連結されて、開閉状態を形成するように構成される。
【００２２】
通信処理部１１は、基地局を介した無線通信動作、たとえば、電話番号の発呼動作や電子メールの送受信動作などを行う。
通信処理部１１は、送受信アンテナ１１１を含んで構成され、電波を利用した無線通信で行うために、制御部２０で処理された音声情報、電子メール等を変調して送受信アンテナ１１１により図示しない基地局に送信する。
また、通信処理部１１は、基地局から無線により送信され、送受信アンテナ１１１で受信した電子メールや動画像、音声情報等の各種情報を復調して制御部２０に出力する。通信処理部１１は、電子メールや動画像、音声情報等の着信およびメッセージ受信を検出可能に構成されている。
なお、送受信アンテナ１１１は、キー入力側本体ケース１０１または表示側本体ケース１０２に内蔵され、図２において外部に露出していない。
【００２３】
メモリ（記憶部）１２は、ＥＥＰＲＯＭ等の不揮発性メモリを含んで構成され、通話やメールの送受信のための制御プログラム、インターネットブラウザ、メッセージデータ、名前および電話番号が登録されたアドレス帳などを記憶する。
メモリ１２は、制御部２０の制御の下、画像データおよび音声データを記憶する。
メモリ１２は、後述する読み上げ機能に必要な文字列（テキスト列）およびテキスト列に関連付けられた説明文を含む音声読み上げデータベースを記憶する。このデータベースでは、読み上げのためのテキスト列について、前後の接続関係が文章として成立するように、体系的に整理されている。
メモリ１２は、表示部が表示するメニューの項目毎に、「標準テキスト」、「短縮テキスト」、「説明テキスト」および「制御テーブル」を記憶する。
【００２４】
キー操作部１３は、終了（終話）／電源キー、開始（発呼）キー、数字等に対応した複数のテンキー等を有し、これらのキーがユーザにより操作されることにより、ユーザからの入力情報を制御部２０に出力する。
また、キー操作部１３の操作により、メモリ１２に記憶される音声読み上げ機能の制御テーブルの各項目の読み上げするか否か（ＯＮ／ＯＦＦ）を制御部２０を通して設定可能である。
【００２５】
ダイヤル入力部１４は、図２（ｃ）に示すように、ユーザが開状態の携帯電話機１０を保持した時にユーザの親指により操作がしやすくなるように、表示側本体ケース１０２の側面に配設されるダイヤル式の入力部であり、上下２方向の操作が可能に構成される。
ダイヤル入力部１４に対する操作により、ユーザは、音声の出力音量やサブ表示部１５およびメイン表示部１６に表示する文字サイズを変更することが可能となる。
また、図２（ｃ）および（ｄ）から明らかなように、閉状態と開状態のダイヤル入力部１４を比較すると、上下２方向の操作方向が物理的に逆転することになるが、本実施形態においては、ユーザにとって違和感が生じないように、ユーザから見た操作方向と操作に対する作用（たとえば、上述した音量変更や表示フォントサイズ（表示する文字サイズ）の変更）が常に一致するように、制御部２０により制御される。
【００２６】
サブ表示部１５は、液晶表示装置（ＬＣＤ）等の表示デバイスを有し、図２（ｂ）に示すように、閉状態においてユーザに視認される。
メイン表示部１６は、液晶表示装置（ＬＣＤ）等の表示デバイスを有し、図２（ａ）に示すように、開状態においてユーザに視認される。
サブ表示部１５およびメイン表示部１６は、制御部２０の制御の下、それぞれ閉状態および開状態において、受信した電子メールのテキストやメモリ１２に格納された様々なテキストデータなどを表示する。主として、メイン表示部１６には、制御部２０の制御の下、たとえばＭＰＥＧ−4形式の３g２フォーマットに基づく動画像が表示される。
【００２７】
音声合成処理部１７は、音声処理回路を有し、通話機能のために音声出力を行うスピーカ１７１と音声入力を行うマイクロフォン１７２とが接続されている。
音声合成処理部１７は、マイクロフォン１７２により収音した音声に対して所定の処理を行って制御部２０に供給する。また、音声処理部１７は、制御部２０により供給された音声情報に対して所定の処理を行ってスピーカ１７１から出力させる。
すなわち、音声合成処理１７は、制御部２０から出力される音声データから音声信号を生成してスピーカ１７１に出力する。また、音声合成処理部１７は、マイクロフォン１７２から出力される音声信号から音声データを生成し、制御部２０へ出力する。
また、図２（ａ），（ｂ）に示すように、スピーカ１７１は、受話スピーカ１７１ａおよびリンガスピーカ１７１ｂの２箇所の音声出力部を含み、読み上げ機能の処理結果である音声を出力する。
さらに、音声合成処理部１７は、音声合成回路を有し、読み上げを行う際に、制御部２０においてメモリ１２から読み出され抽出されたテキストデータまたは説明文を音声データに変換して、音声出力部である受話スピーカ１７１ａまたはリンガスピーカ１７１ｂにより音声合成して音声出力させる。
音声合成処理部１７は、音声合成可能な文字列を含む表示画面に遷移したときに自動で読み上げる自動読み上げ設定と、音声合成実行要求がなされて読み上げる手動読み上げ設定とが選択可能に構成されている。
この自動読み上げ設定か手動読み上げ設定かは、たとえば制御部２０によりメモリ１２に記憶される制御テーブルを参照し、判別される。
たとえば、制御部２０は、読み上げ開始の理由として、読み上げキー操作部１９による手動読み上げ指示か、端末内部の状態遷移に応じた自動読み上げかを判定し、音声合成処理部１７に報知する。
【００２８】
開閉スイッチ１８は、携帯電話機１０の開閉状態を検出するためのスイッチである。
開閉スイッチ１８の具体的な構成としては、様々な技術を適用することができるが、たとえば図２（ａ）に示すように、キー入力側本体ケース１０１および表示側本体ケース１０２のそれぞれに接点部を有し、閉状態（図２（ｂ））において両接点が電気的に非導通となることにより、オフ状態となるような構成にすることができる。
または、携帯電話機１０が閉状態で開閉スイッチ１８はオン状態（ＯＮ状態）となり、開状態で開閉スイッチ１８はオフ状態（ＯＦＦ状態）となるように構成し、制御部２０が開閉スイッチの状態を検出することにより、携帯電話機１０の開閉状態を判別することもできる。
【００２９】
読み上げキー操作部１９は、図２（ｂ）に示すように、表示側本体ケース１０２の中央に配設される押下式ボタン１９ａと、当該ボタンによるスイッチ入力に対する入力回路と、を含んで構成される。
本実施形態における携帯電話機１０は、読み上げ機能を有し、押下式ボタン１９ａが押下（操作）されると、たとえば閉状態にリンガスピーカ２１により着信報知時の相手名等の表示中のテキスト、あるいは関連する説明文を音声出力し、開状態では受話スピーカ１７１より音声出力するように制御部２０により制御される。
後述する制御部２０は、携帯電話機１０の開閉状態を開閉スイッチ１８の出力により判別した後、読み上げのための音声出力先を音声合成処理部１７に通知する。
【００３０】
制御部２０は、マイクロコンピュータを主体として構成され、携帯電話機１の全体の制御を行う。たとえば、制御部２０は、通信処理部１１における各種情報の無線による送受信の制御、音声合成処理部１７に対する動画像、音声情報の処理、メイン表示部１６への情報の表示制御、キー入力部１３の入力情報に応じた処理、メモリ１２に対するアクセス制御等を行う。
制御部２０は、動画再生部２１を有し、通信処理部１１を介して受信したたとえばＭＰＥＧ−4形式の３g２フォーマットに基づく動画像データをデコードして表示用データを生成しメイン表示部１６への表示時制御機能を有する。
【００３１】
制御部２０は、通信処理部１１にて着信もしくはメッセージ受信が検出され、動画再生部２１により動画を再生して着信あるいは受信の報知を行っているときに、音声合成処理部１７を含む読み上げ機能の起動すべき所定のイベントが発生した場合に、たとえば着信した音声を含む動画情報について、画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、読み上げ機能を動作させ、切り離しが不可能な場合には、動画の画像と音声の両データの再生を停止するとともに、読み上げ機能を動作させる制御を行う。
【００３２】
制御部２０は、動画の画像と音声の両データの再生を停止しての読み上げが終了したときに、着信応答動作中、留守番電話機能への移行といった処理がなされずに、いまだ着信あるいは受信報知を停止させる処理が行なわれなかった場合、動画再生部２１において再び動画再生を行わせる。
制御部２０は、再生動画中の付属情報を参照することにより、動画と音声のデータ切り離しの可否を判定する。
具体的には、制御部２０は、後述する動画の付属情報に著作権の有無を示すデータが含まれているか否かにより、動画の画像データと音声データが切り離し可能か不可能であるかを判定する。
【００３３】
また、制御部２０は、音声合成処理部１７を含む読み上げ機能において、着信あるいは受信中に、自動的に発信者情報または受信中メールに関する情報を読み上げたり、着信あるいは受信中に、所定の操作に応答して発信者または受信中メールに関する情報を読み上げたりするように制御する。
【００３４】
制御部２０は、ユーザによる押下式ボタン１９ａの操作がなされると、表示されるテキストの読み上げ機能を実行する。その際、読み上げ機能として、読み上げ用の音声データを出力する方式ではなく、テキスト列を抽出／生成してそのテキストおよびその説明文を読み上げるテキスト読み上げ方式を用いている。
【００３５】
さらに制御部２０は、読み上げ開始の理由として、読み上げキー操作部１９による読み上げ指示か、端末内部の状態遷移に応じた自動読み上げかを判定する。
この自動読み上げは、たとえば電池残量または電波状況の遷移に基づくものである。
この自動読み上げに際しては、制御部２０は、メモリ１２に記憶されている音声読み上げ機能の制御テーブルを参照する。
【００３６】
ここで、本実施形態における動画データの構造を図３に関連付けて説明する。
【００３７】
図３に示すように、動画データの先頭にはヘッダが付加され、ヘッダに続いて画像データ（Video）と音声データ(Audio)が交互に並び、末尾にデータの終了を示すエンドコードが付加されている。
画像データはフレームから構成され、個々の装置の設計にもよるが、たとえば１秒間の動画データは１５フレームの画像データから構成される。また、フレームはＩフレームとＰフレームの２種類から構成される。Ｉフレームは画像を構成する基準となるフレームであり、完全な一つの静止画像を符号化したものである。Ｐフレームは直前のＩフレームまたはＰフレームと実際の静止画像の差分のみを符号化したものである。
画像データは、図２に示すように、Ｉフレームの後に複数のＰフレームが続いており、たとえば１秒１５フレームで構成される動画デ〜タの場合には、１秒間の画像データは１個のＩフレームと１４個のＰフレームで構成される。一方、音声データのフレームには画像データのようなＩフレームやＰフレームという概念はない。
【００３８】
画像データの各フレームには経過時間情報を示すタイムベースとタイムインクリメントが含まれている。タイムベースおよびタイムインクリメントはＭＰＥＧ規格で定められており、動画データ再生の際に再生間隔を示す情報として用いられる。タイムインクリメントはフレーム再生時の経過時間を示しており、タイムベースは補助的に用いられ、０または１の値をとる。
【００３９】
図２の動画データ先頭のヘッダにはフレームの情報を有するタイムテーブルが格納されている。タイムテーブルは、各フレームのフレームサイズ（ｓｔｓｚ）・フレーム判別情報（ｓｔｓｓ）・デコード間隔時間（ｓｔｔｓ）に関する情報を有している。
フレームサイズは各フレームのサイズを示している。フレームサイズはＩフレームとＰフレームで顕著に異なっている。フレーム判別情報はＩフレームの判別に用いられ、Ｉフレームの番号を情報として有している。
すなわち、どのフレームが基準画像を格納するＩフレームであるのかが把握しやすくなっており、このフレーム判別情報は動画データの早送り再生時にＩフレームのみをコマ送り再生するなどの手法に用いられる。
【００４０】
フレームは、制御部２０の動画再生部２１でデコードされた後、一時的に制御部２０内のバッファに蓄積され、一つ前のフレームの画像表示が完了した時点で、たとえばメイン表示部１６に出力される。
動画再生部２１におけるデコード間隔時間は、再生開始から再生終了までの時間を、各フレームのデータサイズに応じて分割し、各フレームに割り当てたものである。
すなわち、デコード間隔時間は、これに指定されるフレームのデコードおよび再生を行う時間である。そして、割り当てられたデコード間隔時間内に動画再生部２１においてフレームのデコードが終了した場合、このフレームの画像が表示部２に表示されるが、デコード間隔時間内にフレームのデコードが終了しなかった場合は、このフレームの画像は表示されず、次のフレームのデコードが行われる。
なお、音声データに関しても、フレームサイズおよびデコード間隔時間に相当するものがヘッダに格納されている。
【００４１】
また、動画データの各フレームにはフレームの先頭を示すフレーム先頭情報も格納されている。制御部２０は各フレームのデータを参照する場合に、このフレーム先頭情報に基づいてフレームの先頭を検索し、続けてフレーム判別情報に基づいて、そのフレームがＩフレームとＰフレームのどちらのフレームであるのか判断したり、タイムベース・タイムインクリメントに基づいて時間情報の取得を行ったりすることができる。
【００４２】
なお、上図のヘッダ中には、再生に必要な、フレームの情報を有するタイムテーブルが格納される他に、コメント欄（自由領域）を若干与えられている。ここには若干の文字列を記入することが可能であり、たとえば“ＴＹＯＳＡＫＵＫＥＮＡＲＩ”などと記述することができる。
そして、この自由領域を参照させることにより、著作権の有無を判断させることができる。
また、携帯電話事業者においては、著作権を付した動画ファイルについての扱いを、厳分割することや、再生に際しても、作者の意図しない再生状態が生じてしまわぬようにするため、再生速度を変更したり、音声のみの再生、画像のみの再生、と切り分けての再生を行うことなど、禁じている。
【００４３】
以上、携帯電話機１０の各構成要素について述べた。
次に、本実施形態に係る携帯電話機１０の音声読み上げ制御について、図４に関連付けて説明する。
図４は、本実施形態に係る読み上げ制御動作を説明するためのフローチャートである。
【００４４】
通信処理部１１にて着信もしくはメッセージ受信が検出されと、制御部２０は、メイン表示部１６やサブ表示部１５における設定画面の表示制御および音声合成処理部１７を通しての設定音の鳴動制御を行う（ＳＴ１）。
このとき、受信データが音声を含む動画データである場合には、着信あるいは受信報知制御に並行して制御部２０は、動画再生部２１において動画の再生処理を行う。
【００４５】
ここで、動画再生部２１により動画を再生して着信あるいは受信報知を行っているときに、音声合成処理部１７を含む読み上げ機能の起動すべき所定のイベントが発生した場合、たとえばユーザが、読み上げキー操作を行った場合、制御部２０は、読み上げ動作の制御に切り替える。(ＳＴ２)。
【００４６】
そして、制御部２０は、登録さているデータの内容が、画像、音声が別々に登録されているか、画像と音声データを含むムービーデータを登録したものであるかの判別を行う（ＳＴ３）。
ステップＳＴ３において、データが画像と音声が別々に登録されていると判別すると、設定された画像をメイン表示部１６に表示させるとともに、音声合成処理部１７を制御して所定の読み上げ処理を行う（ＳＴ４）。
一方、ステップＳＴ３において、登録されているデータ内容が、画像と音声を含むムービーデータであると判別すると、登録されているムービーデータ著作権が設定さているか否かの判別を行う（ＳＴ５）。
【００４７】
ステップＳＴ５において、着信した音声を含む動画情報に著作権が存在しないと判別すると、画像と音声のそれぞれのデータを切り離し可能であると判断し、動画の音声出力のみを停止するとともに、あらかじめ用意された著作権のない画像データであるプリセット画像をメイン表示部１６に表示させ、かつ、読み上げ機能を動作させる（ＳＴ６）。
一方、ステップＳＴ５において、着信した音声を含む動画情報に著作権が存在すると派別すると、画像と音声のそれぞれのデータを切り離し不可能であると判断し、動画の画像と音声の両データを停止して、設定されたムービー画像をメイン表示部１６に表示させるとともに、所定の読み上げ処理を行う（ＳＴ７）。
【００４８】
以上説明したように、本実施形態によれば、通信処理部１１にて着信もしくはメッセージ受信が検出され、動画再生部２１により動画を再生して着信あるいは受信報知を行っているときに、音声合成処理部１７を含む読み上げ機能の起動すべき所定のイベントが発生した場合に、たとえば着信した音声を含む動画情報に著作権が存在せず画像と音声のそれぞれのデータを切り離し可能な場合には、動画の音声出力のみを停止するとともに、読み上げ機能を動作させ、著作権が存在し切り離しが不可能な場合には、動画の画像と音声の両データを停止するとともに、読み上げ機能を動作させる制御を行う制御部２０を有する
ことから、以下の効果を得ることができる。
【００４９】
着信時に設定されているデータを判別することができ、音データを切り替えた際の著作権違反を防止することができる利点がある。
すなわち、着信／メール受信時に著作権が存在する音声と画像データを含むムービーデータを再生している状態で、ユーザの操作により、音声読み上げが開始された場合に、著作権を侵害することなく、音声読み上げ動作に移行することが可能となる。
したがって、ユーザはムービーデータを受信しているときであっても、著作権侵害を気にすることなく、音声読み上げ機能を使用することができる
【図面の簡単な説明】
【００５０】
【図１】携帯電話機のシステム構成の一例を図解したブロック図である。
【図２】携帯電話機の外観の一例を図解した図であり、（ａ）は開状態での正面の外観図を、（ｂ）は閉状態での背面の外観図を、（ｃ）は開状態での側面図を、（ｄ）は閉状態での側面図を、それぞれ示す。
【図３】本実施形態における動画データの構造を示す図である。
【図４】本実施形態に係る読み上げ制御動作を説明するためのフローチャートである。
【符号の説明】
【００５１】
１０…携帯電話機
１００…本体ケース
１０１…キー入力側本体ケース
１０２…表示側本体ケース
１１…通信処理部
１１１…送受信アンテナ
１２…メモリ
１３…キー操作部
１４…ダイヤル入力部
１５…サブ表示部
１６…メイン表示部
１７…音声合成処理部
１７１…スピーカ
１７２…マイクロフォン
１８…開閉スイッチ
１９…読み上げキー操作部
２０…制御部
２１…動画再生部
【図１】
2006126269.tif 000003
【図２】
2006126269.tif 000004
【図３】
2006126269.tif 000005
【図４】
2006126269.tif 000006