(57)【特許請求の範囲】
【請求項１】
外部の配信元とネットを介して接続される電子書籍装置において、
前記外部の配信元に対して、希望する書籍と、前記希望する書籍に関連する書籍データに対応した書籍内容を読み上げる、前記希望する書籍に登場し、台詞を有する複数のキャラクタに対応付けられる複数の朗読者と、を要求する要求手段と、
前記書籍データと、前記書籍内容に対応した、前記複数の朗読者の音声からなる音声データとを前記外部の配信元から受信する受信手段と、
前記書籍内容が前記複数のキャラクタに対応付けられた前記複数の朗読者の音声で再生されるように制御する制御手段と、
を備えることを特徴とする電子書籍装置。
【請求項２】
外部の配信元とネットを介して接続される電子書籍装置において、
前記外部の配信元に対して、希望する書籍に関連する書籍データと、
前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記希望する書籍に登場し、台詞を有する複数のキャラクタに対応した複数の朗読者の画像と、前記複数の朗読者の前記画像に関連する音声データとの配信を要求する配信要求手段と、
前記書籍データと、前記複数の朗読者の画像と、前記音声データとを前記外部の配信元から受信する受信手段と、
前記書籍データが前記複数のキャラクタに対応付けられた前記複数の朗読者の音声で再生されるように前記書籍データと前記画像の表示を制御する制御手段と、
を備えることを特徴とする電子書籍装置。
【請求項３】
外部の配信元とネットを介して接続される電子書籍装置において、
前記外部の配信元に対して、希望する書籍に対応する書籍データと、
前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記希望する書籍に登場し、台詞を有する複数のキャラクタに対応付けられる複数の朗読者の画像と、前記書籍内容と前記複数の朗読者の音声とに対応した音声データとの配信を要求する配信要求手段と、
前記書籍データと、前記複数の朗読者の画像と、前記音声データとを前記外部の配信元から受信する受信手段と、
前記書籍データと、前記複数の朗読者の画像と、前記音声データとを記憶する記憶手段と、
前記書籍内容と前記複数の朗読者の画像とを表示させるよう制御する表示制御手段と、
前記書籍内容が前記複数のキャラクタに対応付けられた前記複数の朗読者の音声で再生されるように制御する音声再生制御手段と、
を備えることを特徴とする電子書籍装置。
【請求項４】
請求項１又は請求項２に記載の電子書籍装置において、更に、前記複数の朗読者と前記希望する書籍に登場し、台詞を有する前記複数のキャラクタとの関係を対応づけて記憶する記憶手段を備えることを特徴とする電子書籍装置。
【請求項５】
請求項１から請求項３のいずれかに記載の電子書籍装置において、前記外部の配信元は、前記音声データを更新する更新手段を備えていることを特徴とする電子書籍装置。
【請求項６】
請求項１記載の電子書籍装置において、
前記受信手段は、前記複数の朗読者の画像を受信する画像受信手段を備えており、
前記制御手段は、前記書籍内容と前記複数の朗読者の画像とを表示させる第１の表示制御手段を備えることを特徴とする電子書籍装置。
【請求項７】
配信元装置を備えた音声再生システムにおいて、
前記配信元装置は、
書籍に関連する書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記書籍に登場し、台詞を有する複数のキャラクタに対応付けられる朗読者の画像と、前記書籍内容と前記朗読者の音声とに対応した音声データとを記憶するよう構成された記憶手段と、
前記書籍内容と、前記朗読者の画像と、前記音声データとを携帯型電子書籍装置に送信する送信手段とを備えており、
前記携帯型電子書籍装置は、
前記書籍と前記複数のキャラクタを描写する１つ又はそれ以上の朗読者とを要求する要求手段と、
前記書籍データと前記１つ又はそれ以上の朗読者の画像とを受信する受信手段と、
前記書籍内容が前記複数のキャラクタに対応付けられた前記１つ又はそれ以上の朗読者の音声で再生されるように制御する制御手段と、
を備えることを特徴とする音声再生システム。
【請求項８】
携帯型電子書籍装置と配信元装置とを備えた音声再生システムにおいて、
前記配信元装置は、
書籍に係る書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記書籍に登場し、台詞を有する複数のキャラクタに対応付けられる朗読者の画像と、前記朗読者の音声データとを記憶する記憶手段と、
前記書籍データと、前記画像と、前記音声データとを送信する送信手段とを備えており、
前記携帯型電子書籍装置は、
前記書籍データと、１つ又はそれ以上の前記朗読者の画像と、１つ又はそれ以上の朗読者の音声データとを要求する要求手段と、
前記書籍データと、前記１つ又はそれ以上の前記朗読者の前記画像と、前記１つ又はそれ以上の前記朗読者の前記音声データとを受信する受信手段と、
前記書籍データと前記１つ又はそれ以上の前記朗読者の前記画像とを表示し、前記書籍内容が前記複数のキャラクタに対応付けられた前記１つ又はそれ以上の前記朗読者の音声で再生されるように制御する制御手段と、
を備えることを特徴とする音声再生システム。
【請求項９】
書籍に関連する書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記書籍に登場し、台詞を有する複数のキャラクタに対応付けられる複数の朗読者の画像と、前記書籍内容と前記複数の朗読者の音声とに対応した音声データとを記憶する記憶手段と、
携帯型電子書籍装置から前記書籍に登場する各キャラクタを表示するために前記複数の朗読者の中から希望する朗読者を指定する要求を受信する受信手段と、
前記書籍データと、前記希望する朗読者の画像と、前記希望する朗読者の音声データとを前記携帯型電子書籍装置へ送信する送信手段と、
を備えることを特徴とする配信装置。
【請求項１０】
請求項７又は請求項８に記載の音声再生システムにおいて、
前記記憶手段は、前記音声データと前記書籍のキャラクタとの関係を対応づけて記憶することを特徴とする音声再生システム。
【請求項１１】
請求項７記載の音声再生システムにおいて、
前記制御手段は、前記書籍内容と前記朗読者の画像とを表示させる第１の表示制御手段を備えることを特徴とする音声再生システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、書籍データに対応した書籍内容を希望するキャラクタ画像の音声で再生する電子書籍装置および音声再生システムに関する。
【０００２】
【従来の技術】
近年、文字や音声や画像等の電子化が進み、これらのデータを組み合わせた所謂マルチメディアデータをインターネット等を介してＰＣ（パーソナルコンピュータ）等の端末に配信したり、これらのマルチメディアデータを再生する携帯型の端末が開発されている。こうした携帯型の端末には電子化された書籍データを再生する電子書籍装置がある。
【０００３】
電子書籍装置は電子化された書籍データを記憶する記憶媒体、液晶表示部、読みたい書籍データの選択やページ捲り等を手動操作する操作入力部、電子書籍装置の各部を制御する制御部等を備え、操作入力部により所望の書籍データが選択されると、制御部は記憶媒体から選択された書籍データを読み出して、その書籍データの１ページ目のデータを液晶表示部に表示する。また操作入力部においてページ捲りが指示されると液晶表示部に表示されている書籍データを次ページに切り替えて表示する。
【０００４】
上述の電子書籍装置は従来の紙の書籍と比較して、資源の消費を抑えることができ、また一つの装置で複数の書籍データを記憶できるので携帯に便利である。更に書籍の管理が容易である。このように様々な利点を持つことから、近年電子書籍装置の開発が急速に進められている。
【０００５】
【発明が解決しようとする課題】
しかしながら、上述の電子書籍装置は従来の紙の書籍と同様に文字データやイメージデータを表示することによる視覚からの読書を提供するだけなので表現力に乏しい。そのため、文字と音声や画像とを組み合わせたより豊かな表現力の実現が望まれる。
【０００６】
また、書籍といっても物語や小説のように主に文字で構成されるものから漫画のように画像と文字とが混在するものがある。漫画の場合は１ページ内に文字も画像も数多く表示されるため、携帯型の電子書籍装置では表示画面の大きさによる制約等によって文字や画像を見にくいという問題があった。
【０００７】
一方、携帯電話端末の普及やその他の携帯端末の普及に伴い、使用者は上述の携帯型の電子書籍装置を含め、多くの携帯機器を携帯して利用することが多い。そのため携帯する各機器それぞれの機能を同時に使用する場合における操作性や携帯時の利便性を向上することが望まれ、上述の電子書籍装置についても更なる開発の余地を残している。
【０００８】
本発明の課題は、書籍データに対応した書籍内容を希望する有名人、声優等の人物の音声で再生可能な電子書籍装置および音声再生システムを提供することである。
【０００９】
また、本発明の課題は、書籍データ、この書籍データに対応した書籍内容を読み上げてくれるキャラクタ画像、およびこのキャラクタ画像の音声データをいつでもどこにいても入手し、この入手した書籍データに対応した書籍内容を希望する有名人、声優等の人物の音声で再生可能な電子書籍装置および音声再生システムを提供することである。
【００１０】
また、本発明の課題は、使用者にとって快適な音声で書籍データを読み上げて再生することが可能な電子書籍装置および音声再生システムを提供することである。
【００１１】
【課題を解決するための手段】
本発明は、このような課題を達成するために、次のような特徴を備えている。なお、次に示す手段の説明中、括弧書きにより実施の形態に対応する構成を一例として例示する。符号等は、後述する図面参照符号等である。
【００１２】
請求項１記載の発明は、外部の配信元とネットを介して接続される電子書籍装置において、前記外部の配信元に対して、希望する書籍と、前記希望する書籍に関連する書籍データに対応した書籍内容を読み上げる、前記希望する書籍に登場し、台詞を有する複数のキャラクタに対応付けられる複数の朗読者と、を要求する要求手段と、前記書籍データと、前記書籍内容に対応した、前記複数の朗読者の音声からなる音声データとを前記外部の配信元から受信する受信手段と、前記書籍内容が前記複数のキャラクタに対応付けられた前記複数の朗読者の音声で再生されるように制御する制御手段と、を備えることを特徴とする。
【００１３】
請求項１記載の発明に係る電子書籍装置によれば、外部の配信元にて提供された複数の書籍の中から希望する書籍を指定した後、この指定された書籍に係る書籍データに対応した書籍内容を読み上げる複数の朗読者を指定すると、これに応答して、この指定された書籍データ、および、この朗読者に対応づけられた音声データを外部の配信元から受信することができ、この受信された書籍データに対応した書籍内容を前記音声データに対応する音声で再生させることができる。
【００１４】
従って、希望する朗読者の音声で、希望する書籍に係る書籍データ読み上げ再生してくれるので、読書を視覚及び聴覚によって楽しむことができる。
【００１５】
また請求項２記載の発明は、外部の配信元とネットを介して接続される電子書籍装置において、前記外部の配信元に対して、希望する書籍に関連する書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記希望する書籍に登場し、台詞を有する複数のキャラクタに対応した複数の朗読者の画像と、前記複数の朗読者の前記画像に関連する音声データとの配信を要求する配信要求手段と、前記書籍データと、前記複数の朗読者の画像と、前記音声データとを前記外部の配信元から受信する受信手段と、前記書籍データが前記複数のキャラクタに対応付けられた前記複数の朗読者の音声で再生されるように前記書籍データと前記画像の表示を制御する制御手段と、を備えることを特徴とする。
【００１６】
請求項２記載の電子書籍装置によれば、外部の配信元へ書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像の音声データの配信を要求すると、この要求に応じて、外部の配信元から配信された書籍データ、朗読者の画像、および、音声データを受信することができ、この受信された書籍データと朗読者の画像とを表示させた後に、受信された書籍データを音声データに従った音声で再生させることができる。
【００１７】
従って、配信された書籍データと朗読者の画像とを見ながら、配信された書籍データを希望する朗読者の画像の音声で聞くことができる。
【００１８】
請求項３記載の発明は、外部の配信元とネットを介して接続される電子書籍装置において、前記外部の配信元に対して、希望する書籍に対応する書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記希望する書籍に登場し、台詞を有する複数のキャラクタに対応付けられる複数の朗読者の画像と、前記書籍内容と前記複数の朗読者の音声とに対応した音声データとの配信を要求する配信要求手段と、前記書籍データと、前記複数の朗読者の画像と、前記音声データとを前記外部の配信元から受信する受信手段と、前記書籍データと、前記複数の朗読者の画像と、前記音声データとを記憶する記憶手段と、前記書籍内容と前記複数の朗読者の画像とを表示させるよう制御する表示制御手段と、前記書籍内容が前記複数のキャラクタに対応付けられた前記複数の朗読者の音声で再生されるように制御する音声再生制御手段と、を備えることを特徴とする。
【００１９】
請求項３記載の発明の電子書籍装置によれば、書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、この朗読者の画像に対応づけられた音声データの配信を外部の配信元にネットを介して要求すると、この要求に応答して、配信元から配信された書籍データ、朗読者の画像および音声データを受信することができ、この受信された書籍データに対応した書籍内容と朗読者の画像とを表示部に表示させることができる。また、同時に、受信した書籍データに対応した書籍内容を朗読者の画像に対応づけられた音声データに従った音声で再生させることができる。
【００２０】
従って、使用者は、受信した書籍データに対応した書籍内容と朗読者の画像とを表示部で見ながら、受信した書籍データに対応した書籍内容を朗読者の画像に対応づけられた音声データに従った音声で聞くことができる。
【００２１】
請求項４記載の発明は、請求項１又は請求項２に記載の電子書籍装置において、更に、前記複数の朗読者と前記希望する書籍に登場し、台詞を有する前記複数のキャラクタとの関係を対応づけて記憶する記憶手段を備えることを特徴とする。
【００２２】
請求項４記載の発明に係る電子書籍装置によれば、書籍に登場する複数の登場人物の朗読者の画像に対応する書籍データ部分を、登場人物に対応づけた朗読者の画像の音声データに従った音声で再生させることができる。
【００２３】
従って、書籍に登場する複数の登場人物毎に割り当てられた各朗読者の画像に対応する書籍データ部分を、各登場人物に対応づけた朗読者の画像の音声で聞くことができる。
【００２４】
請求項５記載の発明は、請求項１から請求項３のいずれかに記載の電子書籍装置において、前記外部の配信元は、前記音声データを更新する更新手段を備えていることを特徴とする。
【００２５】
請求項５記載の発明に係る電子書籍装置によれば、外部の配信元において、朗読者の画像とこの朗読者の画像の音声データとを更新してくれるので、新たな朗読者の画像とこの朗読者の画像の音声データとの配信を受けることができ、例えば、常に、新たにテレビや映画等に登場する芸能人等の音声を新鮮な気持ちで聞くことができる。
【００２６】
請求項６記載の発明は、請求項１記載の電子書籍装置において、前記受信手段は、前記複数の朗読者の画像を受信する画像受信手段を備えており、前記制御手段は、前記書籍内容と前記複数の朗読者の画像とを表示させる第１の表示制御手段を備えることを特徴とする。
【００２７】
請求項６記載の発明に係る電子書籍装置によれば、書籍データおよび音声データのほかに、指定された朗読者の画像を外部の配信元から受信することができ、これを受けて、受信された書籍データおよび朗読者の画像を表示部に表示させながら、この表示された書籍データに対応した書籍内容を受信した音声データに対応する音声で再生させることができる。
【００２８】
請求項７記載の発明は、配信元装置を備えた音声再生システムにおいて、前記配信元装置は、書籍に関連する書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記書籍に登場し、台詞を有する複数のキャラクタに対応付けられる朗読者の画像と、前記書籍内容と前記朗読者の音声とに対応した音声データとを記憶するよう構成された記憶手段と、前記書籍内容と、前記朗読者の画像と、前記音声データとを携帯型電子書籍装置に送信する送信手段とを備えており、前記携帯型電子書籍装置は、前記書籍と前記複数のキャラクタを描写する１つ又はそれ以上の朗読者とを要求する要求手段と、前記書籍データと前記１つ又はそれ以上の朗読者の画像とを受信する受信手段と、前記書籍内容が前記複数のキャラクタに対応付けられた前記１つ又はそれ以上の朗読者の音声で再生されるように制御する制御手段と、を備えることを特徴とする。
【００２９】
請求項７記載の発明の音声再生システムによれば、配信元装置は、書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像に対応づけられた音声データを携帯型電子書籍装置に送信することができる一方で、携帯型電子書籍装置は、配信元装置にて提供された複数の書籍の中から希望する書籍を指定した後、この指定された書籍に係る書籍データに対応した書籍内容を読み上げる複数の朗読者の画像の中から希望する朗読者の画像を指定すると、この指定された書籍データ、および、この朗読者の画像に対応づけられた音声データを外部の配信元から受信することができ、この受信された書籍データに対応した書籍内容を音声データに対応する音声で再生させることができる。
【００３０】
請求項８記載の発明は、携帯型電子書籍装置と配信元装置とを備えた音声再生システムにおいて、前記配信元装置は、書籍に係る書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記書籍に登場し、台詞を有する複数のキャラクタに対応付けられる朗読者の画像と、前記朗読者の音声データとを記憶する記憶手段と、前記書籍データと、前記画像と、前記音声データとを送信する送信手段とを備えており、前記携帯型電子書籍装置は、前記書籍データと、１つ又はそれ以上の前記朗読者の画像と、１つ又はそれ以上の朗読者の音声データとを要求する要求手段と、前記書籍データと、前記１つ又はそれ以上の前記朗読者の前記画像と、前記１つ又はそれ以上の前記朗読者の前記音声データとを受信する受信手段と、前記書籍データと前記１つ又はそれ以上の前記朗読者の前記画像とを表示し、前記書籍内容が前記複数のキャラクタに対応付けられた前記１つ又はそれ以上の前記朗読者の音声で再生されるように制御する制御手段と、を備えることを特徴とする。
【００３１】
請求項８記載の発明に係る音声再生システムによれば、配信元装置は、書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像に対応づけられた音声データを携帯型電子書籍装置に送信することができる一方で、携帯型電子書籍装置は、配信元装置へ書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像の音声データの配信を要求すると、この要求に応じて、外部の配信元装置から配信された書籍データ、朗読者の画像、および、音声データを受信することができ、この受信された書籍データと朗読者の画像とを表示させた後に、書籍データを音声データに従った音声で再生させることができる。
【００３２】
請求項９記載の発明は、書籍に関連する書籍データと、前記書籍データに対応した書籍内容を読み上げるのに利用可能な、前記書籍に登場し、台詞を有する複数のキャラクタに対応した複数の朗読者の画像と、前記書籍内容と前記複数の朗読者の音声とに対応付けられる音声データとを記憶する記憶手段と、携帯型電子書籍装置から前記書籍に登場する各キャラクタを表示するために前記複数の朗読者の中から希望する朗読者を指定する要求を受信する受信手段と、前記書籍データと、前記希望する朗読者の画像と、前記希望する朗読者の音声データとを前記携帯型電子書籍装置へ送信する送信手段と、を備えることを特徴とする。
【００３３】
請求項９記載の発明に係る配信装置によれば、配信装置は、書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像に対応づけられた音声データを記憶している。書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、この朗読者の画像に対応づけられた音声データの配信を受信すると、この要求に応答して、書籍データ、朗読者の画像および音声データを送信することができる。
【００３４】
請求項１０記載の発明は、請求項７又は請求項８に記載の音声再生システムにおいて、前記記憶手段は、前記音声データと前記書籍のキャラクタとの関係を対応づけて記憶することを特徴とする。
【００３５】
請求項１０記載の発明に係る音声再生システムによれば、複数の朗読者の画像の音声データと書籍に登場する複数の登場人物のキャラクタとの関係を対応づけて記憶し、この記憶された複数の登場人物のキャラクタ画像に対応する書籍データ部分を、対応づけた朗読者の画像の音声データに従った音声で再生させることができる。
【００３６】
請求項１１記載の発明は、請求項７記載の音声再生システムにおいて、前記制御手段は、前記書籍内容と前記朗読者の画像とを表示させる第１の表示制御手段を備えることを特徴とする。
【００３７】
請求項１１記載の発明に係る音声再生システムによれば、書籍の内容と朗読者の画像とを表示させながら音声データに対応する音声で再生させることができる。
【００３８】
【発明の実施の形態】
以下、図を参照して本発明に係る電子書籍装置、および音声再生システムの実施の形態を詳細に説明する。
〔第1の実施の形態〕
まず構成を説明する。図１はこの発明の音声再生システムの使用状態例、音声再生システムと外部機器との通信の様子を模式的に示す図であり、図２は音声再生システムを構成する電子書籍装置と携帯機器との間のデータ通信の様子を模式的に示す図であり、図３は電子書籍装置の構成、外部の書籍データ配信センターに設置されたホストサーバの構成、及び携帯機器の構成を示すブロック図であり、図４（Ａ）は電子書籍装置の内部ＲＡＭのメモリ構成を示す図であり、図４（Ｂ）は外部の配信センターのＲＯＭのメモリ構成を示す図である。
【００３９】
図１および図３に示すように、本実施の形態における音声再生システム１００は携帯型の電子書籍装置１及び携帯機器２０により構成される。図１及び図２に示すように電子書籍装置１は、蝶番状部材（図示省略）を介して開閉自在に連結される表示パネル１Ａ，１Ｂにより構成されている。表示パネル１Ａには例えば液晶ディスプレイにより構成される表示部４が備えられる。また、表示パネル１Ｂにも同様の表示部４が備えられ、更に通話用のマイク１Ｃが備えられる。そして、表示パネル１Ａ，１Ｂの内部には図３に示す電子書籍装置１の電子回路が内蔵されている。また図示せぬが表示パネル１Ａ，１Ｂの表面や側面または裏面の所定位置には後述する入力部３（ダイヤル部３ｄ、オートダイヤルスイッチ３Ｓを含む）、後述する回転スイッチ１１、電源スイッチ、その他のスイッチが設けられるとともに携帯機器２０に対してデータ送信するためのデータ送信窓が設けられる。裏面には電池パックやスピーカ１Ｅ等が設けられている。
【００４０】
携帯機器２０は図１及び図２に示すように機器本体２０Ａとイヤホン２８とによって概略構成され、機器本体２０Ａ内部には図３に示す携帯機器２０の電子回路が内蔵される。また図示せぬが機器本体２０Ａの所定位置には後述する操作入力部２２が設けられるとともに電子書籍装置１から送信されるデータを受信するためのデータ受信窓が設けられる。また、規格品のイヤホンプラグを着脱可能に接続するイヤホンジャック等が設けられている。この携帯機器２０は電子書籍装置１から無線送信される音声データ（通話音声データ及び書籍の読み上げ音声データを含む）を受信し、イヤホンまたはヘッドホン（以下、単にイヤホン２８という。）から音声を出力する。
【００４１】
本発明の電子書籍装置１は、書籍データを音声に変換して読み上げ再生する書籍データ読み上げ機能、外部との通話及びデータ通信を行う電話機能、及びカレンダー情報を表示する時計機能を備える。以下の説明において「書籍データ」といった場合は書籍に含まれる文字データ、イメージデータ、書籍に関連するデータ、読み上げ音声再生用データを含む。書籍に関連するデータとは、例えば書籍名、著作者名、出版社名等といった書籍の内容以外の情報である。読み上げ音声再生用データとは、電子書籍装置１の後述する読み上げ音声生成部１３において読み上げ音声データを生成する際に必要な各種データである。例えば、漫画タイプ、小説タイプといった書籍の種類や、擬音（爆発音や風音等）の再生情報（以下、擬音データと呼ぶ。）、登場人物の音声タイプを設定した登場人物別音声テーブル等を含む。
【００４２】
書籍モードにおいて、電子書籍装置１は入力部３の操作により使用者から選択された書籍データに含まれる文字データ及びイメージデータを表示部４に表示するとともに、前記書籍データの文字データを音声に変換（テキスト音声合成）し、電子書籍装置１本体に設けられるスピーカ１Ｅまたは携帯機器２０に設けられるイヤホン２８から出力する。イヤホン２８から出力する場合は前記書籍データに基づく読み上げ音声データ（詳細については後述する）を送信部１６を介して携帯機器２０に送信する。携帯機器２０は受信部２６において受信した読み上げ音声データをイヤホン２８から出力する。
【００４３】
また、電話モードにおいて電子書籍装置１は、図１に示すように、携帯電話やＰＨＳ（Personal Handyphone System）等の移動体通信端末の基地局４３を介して移動体通信網に通信接続し、相手先の移動体通信端末４４と通話したり、更に公衆回線網等のネットワーク回線４０を介して相手先の固定電話と通話できる。また、ネットワーク４０からアクセス可能な書籍データ配信サイトのホストサーバ３０（書籍データ配信センターＨＳ）にアクセスして所望の書籍データをダウンロードしたり、外部のＰＣ（パーソナルコンピュータ）との間で電子メールを送受信できる。
【００４４】
更に、書店やコンビニエンスストア等に設置された書籍データ配信端末４２と電子書籍装置１を有線または無線で接続し、書籍データ配信端末４２に蓄積されている書籍データをダウンロードしたり、書籍データ配信端末４２を介してアクセス可能なホストサーバ３０に蓄積された書籍データをダウンロードすることも可能である。また、電子書籍装置１において書籍データを音声に変換して読み上げ再生しているとき（書籍モード実行中）に電話の着信を検出すると、その旨を所定の着信音（アラーム音や着信メロディ等を含む）や音声やメッセージ表示または振動により報知するとともに書籍データの読み上げ再生を停止する。通話が終了すると、読み上げ再生を停止した位置から書籍データの読み上げを再開する。更に、時計モードにおいて、電子書籍装置１は現在時刻や日付等のカレンダー情報を表示部４に表示する。
【００４５】
次に、電子書籍装置１と携帯機器２０との間のデータ通信の概要を図２を参照して説明する。電子書籍装置１は通話時には通話音声データを送信部１６（図３参照）から携帯機器２０へ送信する。また、書籍データ読み上げ再生中には読み上げ音声データを送信部１６から携帯機器２０へ送信する。携帯機器２０は受信部２６において受信した通話音声データや読み上げ音声データをイヤホン２８から出力する。また、電子書籍装置１において電話の着信があると送信部１６から携帯機器２０に対して着信報知指示データを送信する。携帯機器２０は受信部２６において受信した着信報知指示データに従って着信を音や振動により報知する。また、書籍データの読み上げ再生中における電話の着信時には、電子書籍装置１は携帯機器２０に対して再生停止指示データを送信する。携帯機器２０は受信した再生停止指示データに従って読み上げ音声の再生を停止する。
【００４６】
次に図３を参照して、電子書籍装置１の回路構成、書籍データ配信センターＨＳに設置されたホストサーバ３０の回路構成、及び携帯機器２０の回路構成を説明する。図３に示すように電子書籍装置１は、ＣＰＵ（Central Processing Unit）２、入力部３、表示部４、表示駆動回路５、ＲＯＭ（Read Only Memory）６、内部ＲＡＭ（Random Access Memory）７、外部ＲＡＭ８、通信Ｉ／Ｆ（InterFace）部９、アンテナ部１０、回転スイッチ部１１、計時部１２、読み上げ音声生成部１３、音声入力部１４、音声出力部１５、及び送信部１６から構成される。
【００４７】
電子書籍装置１のＣＰＵ２は、入力部３から供給されるキー操作信号に基づき、ＲＯＭ６の所定の記憶領域に格納されている各種制御プログラムを読み出して内部ＲＡＭ７に一時格納し、当該プログラムに基づく各種処理を実行して電子書籍装置１の各部を集中制御する。すなわち、ＣＰＵ２は、前記読み出した所定プログラムに基づいて各種処理を実行し、その処理結果を内部ＲＡＭ７に格納するとともに、表示駆動回路５において当該処理結果に基づいて表示データを生成し表示部４に表示させる。
【００４８】
また、ＣＰＵ２はモードスイッチの押下操作（モード設定処理）に応じて、電話モード、時計モード、或いは書籍モードに対応する処理プログラムをＲＯＭ６から読み出し、各モードに対応した処理を実行する。例えば、電話処理、時計処理、書籍処理（図５参照）、書籍データのダウンロード処理（図５参照）等を実行する。
【００４９】
入力部３は、電話モード、時計モード、及び書籍モードのいずれかにモードを切り替える際に押圧操作されるモードスイッチ、ダイヤル操作や各種処理の実行指示を入力操作するためのダイヤル部３ｄ、各種選択操作を入力するためのカーソルスイッチ、書籍データ読み上げ開始を指示するプレイスイッチ，読み上げ停止を指示するストップスイッチ、音量調節スイッチ等を備える。更に、書籍データの早送りや巻き戻しを指示するスイッチや、意図的にページ捲りまたはコマ送りを指示するページ移行キーやコマ移行キーを設けるようにしてもよい。また、前記ダイヤル部３ｄのファンクションキーには、予め設定されている番号へ自動発呼する際に操作されるオートダイヤルスイッチ３Ｓや確認の際に押下操作されるＯＫキー等が含まれる。オートダイヤルスイッチ３Ｓは、書籍データ配信センターＨＳのホストサーバ３０にアクセスする際に押下操作されるスイッチであり、このオートダイヤルスイッチ３Ｓが押下操作されると、通信Ｉ／Ｆ部９に備えられた電話自動発信部によって自動的にホストサーバ３０へ回線を接続する。
【００５０】
表示部４は液晶ディスプレイ等により構成され、ＣＰＵ２からの表示指示に従って表示駆動回路５において生成された表示データを表示する。例えば、書籍モードでは書籍データに含まれる文字データやイメージデータ、書籍名や著作者名等の書籍に関連するデータ等を表示し、電話モードにおいては相手先の電話番号等を表示し、時計モードにおいては現在時刻や日付、曜日等の時計情報を表示する。また、外部から受信した電子メールの内容を表示する。書籍モード中に電話の着信がある場合はＣＰＵ２から入力される着信報知指示データに基づいて電話の着信がある旨を表示する。
【００５１】
ＲＯＭ６は電子書籍装置１の基本プログラムや各種処理プログラム、データ、処理に必要なデータ等を記憶している。処理プログラムには、例えばモード設定処理、電話処理、時計処理、書籍処理、書籍データの読み上げ再生処理（図７参照）、書籍データ選択処理（図６参照）、及び書籍データ等のダウンロード処理（図５参照）を含む。これらの各処理プログラムは、読み取り可能なプログラムコードの形態でＲＯＭ６に格納され、ＣＰＵ２はこのプログラムコードにしたがった動作を逐次実行する。また、ＲＯＭ６は、外部から配信される音声データを使用しないで、外部から配信される書籍データを読み上げるため、複数の音声波形データを蓄積した音声データＲＯＭ６Ａを備える。
【００５２】
この音声データＲＯＭ６Ａには、外部の書籍データ配信センターＨＳにおける音声データＲＯＭ内の音声データと同様、読み上げ音声生成部１３の採用する音声合成方式に適した音声波形データ（アナログデータまたはＰＣＭ（Pulse CodeModulation）データ）が記憶されている。例えば、録音編集方式では人が発生した音声波形をそのまま、あるいは波形符号化して蓄積する。波形の単位は単語としても文節としてもよい。またパラメータ編集方式では人が発声した音声波形を分析してパラメータに変換された形で蓄積する。また、規則合成方式では文字列あるいは音素記号列から音声学的・言語学的規則に基づいて切りだされた音節、音素、１ピッチ間の波形のような基本的な小さな単位の特徴パラメータを蓄積する。また、人間の音声以外にも動物の泣き声や自然界に存在する音（風音、爆発音等；擬音）の波形データを蓄積している。
【００５３】
読み上げ音声生成部１３は、書籍データのテキスト（文字）部分を音声データに変換するため、例えば、規則合成方式を用いたテキスト音声合成システムによって構成される。規則合成方式を用いたテキスト音声合成システムは、文章解析部と音声合成規則部と音声合成部とにより構成される。
【００５４】
文章解析部は単語を複数記憶した辞書を備える。辞書には読み仮名、文法情報、アクセント等の情報が蓄えられている。ここでは文章中の単語の文法的接続関係をチェック（構文解析）しながら、文章の頭から順に辞書に登録されている単語と照合を取り、単語の系列に区分化し、区分化された単語について読み仮名、文法情報、アクセント等の情報を取得する。
【００５５】
音声合成規則部は、語の連なりによって生じる語の連濁、鼻音化、無声化等の読みの変化（音韻規則）や、アクセントの移動、消失、生起といった変化（韻律規則）を解析し、発音記号とアクセントを決定して音声合成制御パラメータを決定する。音声合成制御パラメータは例えば文節のまとまりやポーズ（間）といった合成単位（ＣＶＣ単位等）や声の高さ、ストレス、イントネーションである。こうして音声合成の制御パラメータが定まると、音声合成部はＲＯＭ６の音声データＲＯＭ６Ａに蓄えられている合成単位と制御パラメータとに基づいて音声波形を合成する。
【００５６】
次に、図４を参照して内部ＲＡＭ７のメモリ構成、及び外部ＲＡＭ８のメモリ構成を説明する。内部ＲＡＭ７は指定された処理プログラム、入力指示、入力データ及び処理結果等を一時格納するワークメモリのほかに、図４（Ａ）に示すように表示レジスタ７ａ、モードデータ記憶領域７ｂ、書籍データＮｏ．記憶領域７ｃ、書籍データ記憶領域７ｄ、メールデータ記憶領域７ｅ、送信者ＩＤ記憶領域７ｆ、声優または有名人等のキャラクタ画像を記憶するキャラクタ画像記憶領域７ｇ、このキャラクタ画像自身の音声データを記憶する音声データ記憶領域７ｈのほかに、ダイヤルデータ、着信レジスタ、計時レジスタを含む記憶領域７ｉを有する。
【００５７】
表示レジスタ７ａには、表示駆動回路５において生成される表示部４に表示するための表示データが確保される。モードデータ記憶領域７ｂには、モードスイッチの操作によって設定されたモード設定データが格納される。電子書籍装置１において選択可能なモードには、電話モード、時計モード、及び書籍モードがある。上記３つのモードのうち何れかのモードに対応するモードスイッチが押下操作されると、ＣＰＵ２は、押下されたスイッチに対応するモードを内部ＲＡＭ７のモードデータ記憶領域７ｂに設定し、モードに対応する処理プログラムをＲＯＭ６から読み出して実行開始する。
【００５８】
書籍データＮｏ．記憶領域７ｃには、再生するために選択された書籍データの固有番号（以下、書籍データＮｏ．と呼ぶ。）が格納される。書籍データ記憶領域７ｄには、選択された書籍データＮｏ．に対応する書籍データが外部ＲＡＭ８から読み出されて記憶される。メールデータ記憶領域７ｅには、外部から受信した電子メールの内容（文字データ、イメージデータ等）が格納される。
【００５９】
送信者ＩＤ記憶領域７ｆには、自己の電子書籍装置１の送信者ＩＤが格納される。送信者ＩＤは、例えば、ホストサーバ３０から与えられるＩＤコードや登録コード、または個々の電子書籍装置１に個別に付与されている個別コード（シリアルナンバー等）である。書籍データをダウンロードする際に、ホストサーバ３０に対して配信を要求するデータとともに送信者ＩＤを通信Ｉ／Ｆ部９から送信する。
【００６０】
記憶領域７ｉのうち、ダイヤルデータ記憶領域部分には、登録された電話番号データが格納される。例えば、書籍データ配信センターＨＳのホストサーバ３０へ通信接続するための電話番号データや、相手先の電話番号データが登録されて記憶されている。記憶領域７ｉのうち、計時レジスタ部分には、計時部１２において計時される時間データや日付データが、逐次更新記憶される。記憶領域７ｉのうち、着信レジスタ部分には、書籍データを読み上げ再生中に電話を着信した場合において、読み上げ再生を停止した位置についての情報が記憶される。
【００６１】
外部ＲＡＭ８は電子書籍装置１本体に固定的に設けられる、若しくは着脱自在に設けられる磁気的、光学的記録媒体、若しくは半導体メモリで構成される。特に、電子書籍装置１の携帯性を考慮した場合は小型・可搬の半導体メモリにより構成されるメモリカードを利用することが好適である。そして外部ＲＡＭ８には、外部から受信した書籍データを複数記憶する領域である書籍データ記憶領域８ａが設けられる。書籍データ記憶領域８ａには複数の書籍データ及び書籍データＮｏ．が記憶される。
【００６２】
外部ＲＡＭ８に記憶されている書籍データは、例えば書籍データ配信センターＨＳからダウンロードしたものや、ＰＣ等の外部機器を利用して書き込まれたものである。使用者は外部ＲＡＭ８に記憶されている複数の書籍データの中から、所望の書籍データを選択して再生することができる。
【００６３】
通信Ｉ／Ｆ部９は、例えば携帯電話やＰＨＳ等の外部との通話及びデータ通信が可能な移動体通信ユニットにより構成される。通信Ｉ／Ｆ部９は通話音声データや電子メールを外部と送受信したり、書籍データ配信センターＨＳにアクセスして所望の書籍データをダウンロードするために各種データを送受信する。また、アンテナ部１０において電話の着信を検出すると着信検出信号をＣＰＵ２へ出力する。
【００６４】
通信Ｉ／Ｆ部９において電話の着信を検出した後に、ダイヤル部３ｄに設けられた通話スイッチが操作されると、ＣＰＵ２は通話処理を開始する。また、ダイヤル部３ｄの操作によって通話相手が指定されるとその相手先に対して発呼信号を送信し、相手の応答があると通話処理を開始する。
【００６５】
また、ダイヤル部３ｄに設けられたオートダイヤルスイッチ３Ｓが操作されると、通信Ｉ／Ｆ部９の電話自動発信部は書籍データ配信センターＨＳに設置されているホストサーバ３０へ自動的に回線を接続する。通信Ｉ／Ｆ部９はホストサーバ３０とデータ通信を行う。
【００６６】
図３に示す音声再生システム１００において、書籍データ配信センターＨＳと電子書籍装置１との間で送受信されるデータには、例えば、ホストサーバ３０から配信される書籍データ、及び電子書籍装置１から書籍データ配信センターＨＳへ送信される書籍データ配信要求データが含まれる。通信Ｉ／Ｆ部９は前記書籍データ配信要求データをホストサーバ３０へ送信する際、電子書籍装置１の送信者ＩＤをともに送信する。
【００６７】
なお、通信Ｉ／Ｆ部９として、携帯電話やＰＨＳ等の移動体通信ユニットを電子書籍装置１本体に直接搭載せずに、電子書籍装置１本体を携帯電話やＰＨＳに接続するためのコネクタやケーブルを備えたり、外部のデータ通信端末（例えばモデムやＴＡ（TerminalAdapter）を備えたＰＣや書籍データ配信端末等）に接続するための赤外線通信ユニットや無線通信ユニット等の通信インターフェイスを備えて構成するようにしてもよい。
【００６８】
回転スイッチ部１１は、使用者の指によって操作され、回転操作と押圧操作とをひとつのボタンで入力する機構である。回転操作では回転操作方向に連動して表示画面をスクロールしたり、カーソル位置を移動することができ、押圧操作では反転表示項目（カーソル位置）の選択を確定することができる。例えば、登録したダイヤル番号の選択や書籍データの選択等の選択・確定操作を容易に行うことができる。
【００６９】
計時部１２は時刻や日付を計時し、計時された時間データ等はＣＰＵ２を介して内部ＲＡＭ７の計時レジスタ７ｈに送られて順次更新セットされる。例えば、所定周波数の電気信号を発振する発振回路と該発振回路からの信号を分周して所定周波数の信号を得る分周回路とから構成され、その信号をカウントすることによって現在時刻を計時する構成としてもよい。音声入力部１４は、マイク部１Ｃから入力される使用者の音声信号（アナログ信号）をデジタル信号に変換して、ＣＰＵ２に出力する。音声出力部１５は、通信Ｉ／Ｆ部９を介して受信した相手先の通話音声をスピーカ１Ｅ、または送信部１６のいずれかに出力する。また、読み上げ音声生成部１３において生成された読み上げ音声データをスピーカ１Ｅまたは送信部１６に出力する。
【００７０】
送信部１６は、例えば赤外線通信ユニットまたは無線通信ユニット等の携帯機器２０側に設けられる受信部２６と対応した通信装置により構成され、通話音声データや読み上げ音声生成部１３により生成された読み上げ音声データを携帯機器２０へ送信する。また、ＣＰＵ２から入力された着信報知指示データや再生停止指示データを携帯機器２０へ送信する。
【００７１】
次に、携帯機器２０の具体的構成について図３を参照して説明する。携帯機器２０は、ＣＰＵ２１、着信報知部２３、内部ＲＡＭ２４、ＲＯＭ２５、受信部２６、音声出力部２７、及びイヤホン２８によって構成される。ＣＰＵ２１は、受信部２６において受信する各種指示信号（着信報知指示信号、再生停止指示信号等）に従って、携帯機器２０の各部を集中制御する。すなわち、ＣＰＵ２１は受信部２６において書籍データに基づく読み上げ音声データや通話音声データを受信すると、それらの音声データを音声出力部２７へ渡し、イヤホン２８から音声出力する。また、ＣＰＵ２１は受信部２６において着信報知指示データを受信すると、着信報知部２３に表示や音や振動によって電話の着信がある旨を報知させる。また再生停止指示データを受信すると読み上げ音声の出力を停止させる。
【００７２】
着信報知部２３は電子書籍装置１における電話の着信を報知するために、例えば所定の着信音を鳴動する着信音鳴動部や、バイブレータ等により構成される信号部や、着信の旨を表示する液晶表示部等のいずれか、またはこれらの組み合わせ手構成され、ＣＰＵ２１から入力される着信報知指示信号に従って着信を報知する。
【００７３】
内部ＲＡＭ２４は受信部により受信した各種データや操作入力部３により入力されたデータを一時格納する領域であるワークメモリを有する。また、ＲＯＭ２５は半導体メモリ等によって構成され携帯機器２０において実行される基本的な処理プログラムが格納されている。受信部２６は、例えば赤外線通信ユニットまたは無線通信ユニット等の電子書籍装置１側に設けられる送信部１６と対応した通信装置により構成され、読み上げ音声データ、通話音声データ、着信報知指示データ、再生停止指示データを受信して、ＣＰＵ２１に出力する。
【００７４】
音声出力部２７は増幅器等によって構成され、受信部２６において受信した音声データ（読み上げ音声データ及び通話音声データ）をＣＰＵ２１の指示によってイヤホン２８に対して出力する。イヤホン２８は音声出力部２７から出力された音声を放音する。なお、電子書籍装置１を遠隔制御するための操作キー群によって構成される操作入力部２２を設けるとともに、操作に応じた遠隔制御信号を電子書籍装置１側へ送信する送信部（図示省略）を設け流用にしてもよい。この場合は、電子書籍装置１にも前記遠隔制御信号を受信する受信部（図示省略）を設ける。携帯機器２０の操作入力部２２からの遠隔操作によって、電子書籍装置１における書籍データの表示や読み上げ音声の再生・停止等を制御するようにしてもよい。
【００７５】
次に、書籍データ配信センターＨＳに設置されるホストサーバ３０の具体的構成について説明する。ホストサーバ３０は、図３に示すように、書籍データを複数記憶している書籍データＲＯＭ３２と、通信接続された電子書籍装置１から要求された書籍データをその要求元に配信する配信部３３と、電子書籍装置１や電話端末間で各種データを転送する転送部３４と、書籍データＲＯＭ３２に記憶されている書籍データ等の要求先への配信処理を制御するＣＰＵ３１とから構成される。書籍データＲＯＭ３２は、図４（Ｂ）に示すように、書籍データを構成している文字データ、擬音データ、登場人物のキャラクタ画像等を記憶している書籍データ記憶領域３２Ａ、この書籍データ記憶領域３２Ａに記憶された書籍データを構成している文字データを読み上げる複数のキャラクタ画像Ａ、Ｂ、Ｃ・・・Ｎを記憶しているキャラクタ記憶領域３２Ｂ、これら各キャラクタ画像自身の音声を表わす複数の音声データａ、ｂ、ｃ・・・ｎを記憶している音声データ記憶領域３２Ｃを備えている。キャラクタ記憶領域３２Ｂに記憶されている各キャラクタ画像は、声優または有名人等の顔画像（図９（Ａ）を参照）、それの全身画像、動物、声を出す仮想の植物の画像のほか、有名なアニメ画像等を含む。また、音声データ記憶領域３２Ｃに記憶されている各音声データは、前述した声優または有名人等が発声した際における音声をアナログまたはデジタル録音した音声データである。このため、複数のキャラクタ画像Ａ、Ｂ、Ｃ・・・Ｎと複数の音声データａ、ｂ、ｃ・・・ｎとは互いに対応づけて各記憶領域３２Ｂ、３２Ｃに記憶される。
【００７６】
ＣＰＵ３１は通信接続された電子書籍装置１、ＰＣ、または書籍データ配信端末４２から書籍データ配信の申込みを受信すると、その申込みに応答して配信可能な書籍データに関連する情報（書籍名、著作者名、出版社名等のほかに、キャラクタ画像、このキャラクタ画像自身の音声データ）を書籍データＲＯＭ３２から読み出して申込み元の端末に配信部３３から送信する。更に電子書籍装置１、ＰＣ、または書籍データ配信端末４２から書籍データの配信要求を受信すると、その配信要求に応じて書籍データ等に対する料金データを送信する。配信要求元においてその料金が承諾されると、要求された書籍データを書籍データＲＯＭ３２から読み出して配信部３３から電子書籍装置１に向けて送信する。
【００７７】
次に動作を説明する。本発明に係る電子書籍装置１は、モード設定処理において設定される各種モードに応じた処理を実行するが、電源ＯＮ時はまず時計モードに設定されており、計時部１２において現在時刻を計時している。また、モードスイッチの押下操作を待機している。このモード設定処理おいて、電子書籍装置１は、モードスイッチの押下操作を待機し、押下されるとモード設定処理を開始する。ＣＰＵ２は、押下されたモードスイッチの種類を判別する。ここで、電話モードに対応するモードスイッチが操作されたと判断した場合は、後述する電話処理を実行する。また、時計モードに対応するモードスイッチが操作されたと判断した場合は、後述する時計処理を実行する。書籍モードに対応するモードスイッチが操作されたと判断した場合は、後述する書籍処理を実行する。
【００７８】
以下、電話モードにおける電話処理、時計モードにおける時計処理、書籍モードにおける書籍処理、所望の書籍データ選択してダウンロードする処理についてそれぞれ説明する。
（電話処理）電話の相手先へ発信する際に実行される電話処理（その１）と相手側からの呼び出しを着信する際に実行される電話処理（その２）とについて説明する。まず、電子書籍装置１を用いて、相手先へ発信して通話する電話処理（その１）の際は、電話モードスイッチを押下操作する。
【００７９】
その後、ダイヤル部３ｄの操作によって電話番号が入力され、または、回転スイッチ部１１の操作によって、内部ＲＡＭ７のダイヤルデータ記憶領域に記憶されている電話番号データの中から所望の通話相手が指定され、あるいは、オートダイヤルスイッチ３Ｓの操作によって書籍データ配信センターＨＳへのダイヤル接続が指示され、その後ダイヤル部３ｄのダイヤルスイッチ（通話スイッチ）がＯＮされると、通信Ｉ／Ｆ部９は、入力または選択された相手先へ信号を送信する。そして、相手先または書籍データ配信センターＨＳから応答があり、ダイヤル接続されると、通話処理を実行する。
【００８０】
相手先への通話処理では、マイク部１Ｃから入力される使用者の音声を音声入力部１４においてデジタル信号に変換し、所定の周波数に変調して通信Ｉ／Ｆ部９から通話相手に送信する。また、相手先からの信号を通信Ｉ／Ｆ部９において受信してＣＰＵ２に出力し、音声出力部１５において音声信号に変換してスピーカ１Ｅに出力したり、送信部１６から携帯機器２０へ送信し、イヤホン２８から適当な音量で出力する。また、ＣＰＵ２は、通話中には、相手先の電話番号等の通話関連データ（相手先の電話番号、氏名、通話時間等）を表示部４に表示してもよい。
【００８１】
電子書籍装置１を時計モードや書籍モードで使用している状態で、相手側からの呼び出しを着信すると、電話処理（その２）を開始する。通信Ｉ／Ｆ部９において着信を検出し、着信検出信号がＣＰＵ２に出力されると、現在、書籍データの再生中であるか否かを判断する。書籍データの再生中である場合は、ＣＰＵ２は再生を停止させるための再生停止指示データを送信部１６へ渡す。このときＣＰＵ２は書籍データの読み上げ停止位置を内部ＲＡＭ７の着信レジスタ７ｉに記憶する。更にＣＰＵ２は着信を報知するための着信報知指示データを送信部１６へ渡す。送信部１６は再生停止指示データと着信報知指示データとを携帯機器２０に送信する。携帯機器２０は受信部２６において受信した再生停止指示データと着信報知指示データとに基づいて、音声出力部２７における読み上げ音声の再生を停止し、着信報知部２３において着信を報知する。着信の報知は例えば所定の着信音やメッセージ音声（ＲＯＭ２５に着信音データやメッセージ音声データが格納されている）による報知やバイブレータ等を用いた振動による。なお、電子書籍装置１の表示部４に着信のメッセージを表示するようにしてもよい。
【００８２】
その後、通話スイッチの押下操作により着信に応答すると、通話処理を開始する。そして、通話が終了すると、ＣＰＵ２は内部ＲＡＭ７の着信レジスタ７ｉから書籍データの読み上げ停止位置データを読み出し、読み上げ停止位置から書籍データの読み上げ再生を再開して通常の書籍モードに戻り、電話処理（その２）を終了する。着信時に書籍データの読み上げ再生中ではない場合は、着信を報知し、通話スイッチの押下操作により着信に応答すると、通話処理を実行し、通話が終了すると、時計モードに戻り電話処理（その２）を終了する。
【００８３】
（時計処理）次に、 時計モードが設定された際に実行される時計処理を説明する。電子書籍装置１を用いて、現在の時刻や日時等のカレンダー情報を表示部４に表示させる場合には、モードスイッチの操作により時計モードを設定する。ＣＰＵ２は、内部ＲＡＭ７のモードデータ記憶領域７ｂに時計モードを設定すると、計時部１２において計時されている現在時刻を参照し、内部ＲＡＭ７の計時レジスタ７ｈに更新確保するとともに、表示駆動回路５へ出力し、表示駆動回路５において日付や現在時刻等を表示するための表示データを生成して、内部ＲＡＭ７の表示レジスタ７ａに記憶するとともに、表示部４に表示する。このように、モードスイッチの簡単な押下操作で時計モードに瞬時に切替え、現在の時刻や日付を表示部４に表示させることができる。
【００８４】
（書籍処理）次に、図５を参照して書籍処理について説明する。図５は電子書籍装置および書籍データ配信センタの各書籍処理を説明する全体フローチャート、図６は書籍データおよびキャラクタ画像を選択するための書籍データ・キャラクタ選択処理を説明するフローチャート、、図７は書籍データの読み上げ再生処理を説明するフローチャートである。電子書籍装置１において、外部ＲＡＭ８に複数の書籍データが記憶されるがこのうちのひとつの書籍データを選択しこの選択された書籍データを読み上げ再生する場合は、書籍モードに対応するモードスイッチを押下操作する。
【００８５】
まず、ＣＰＵ２は、外部ＲＡＭ８に記憶されている複数の書籍データについて書籍に関連するデータ（書籍データＮＯ．や書籍名）を全て読み出し、表示部４に一覧表示する（図示せず）。書籍選択画面が表示された表示部４では、「読みたい書籍は?」というメッセージとともに、「１ 書籍名Ｃ」、「２ 書籍名Ｄ」のように外部ＲＡＭ８に記憶されている複数の書籍データについての書籍データＮｏ．と書籍名とが一覧表示される。更に、いずれかの書籍データを選択するためのポインタが表示されている。この書籍選択画面において、入力部３カーソルスイッチの上下操作または回転スイッチ部１１の回転操作によって、再生したい書籍が選択され、更にプレイスイッチがオンされると、ＣＰＵ２は、選択した書籍名に対応する書籍データを外部ＲＡＭ８から読み出し、内部ＲＡＭ７の書籍データ記憶領域７ｄに格納する。そして、ＣＰＵ２は読み出した書籍データのうち最初のページ（表紙等）の表示データを表示駆動回路５に渡し、表示データを生成して表示部４に表示させる。そして、ＣＰＵ２は音声データＲＯＭ６Ａに記憶されている音声データを用いて、読み上げ音声生成部１３に対して読み上げ開始指示を出力し、書籍データの読み上げ再生処理を実行する。
【００８６】
以上が装置内部に記憶されている書籍データを、同じく装置内の音声データＲＯＭ６Ａに記憶されている音声データを用いて、読み上げ再生処理を実行した場合について説明したが、次に、図５を参照して、書籍データをダウンロードする際の書籍データ配信センターＨＳにおいて実行される処理について、電子書籍装置１との間で送受信されるデータ交換と合わせて説明する。まず、電子書籍装置１により書籍データ配信センターＨＳに対して書籍データ受信の申し込みに関するデータ及び送信者ＩＤが送信され（ステップＦ１）、ホストサーバ３０においてその申込みデータ及び送信者ＩＤを受信すると（ステップＦ２）、ホストサーバ３０のＣＰＵ３１は、受信した送信者ＩＤ等をホストサーバ３０のＲＡＭ３１Ａに記憶する。そして、ホストサーバ３０のＣＰＵ３１は、書籍データの選択を催促する表示（書籍選択画面）を電子書籍装置１に表示させるための書籍選択画面データ（書籍データの関連データを含む）を、前記送信元端末に返信する（ステップＦ３）。
【００８７】
電子書籍装置１は、受信した書籍選択画面データを表示部４に表示した後、書籍選択画面にて書籍データ等の選択処理を行なう（ステップＦ４；図６参照）。この書籍データ等の選択処理は、電子書籍装置１において、所望の書籍データ等を書籍データ配信センターＨＳからダウンロードする処理である。図６はダウンロードする書籍データを選択するために電子書籍装置１において実行される書籍データ選択処理を説明するフローチャート、図８はダウンロードする書籍データを選択するための書籍選択画面である。
【００８８】
書籍データをダウンロードする際は、まず、図６に示す書籍データ選択処理を実行する。電子書籍装置１においてオートダイヤルスイッチ３Ｓが押下操作されると、通信Ｉ／Ｆ部９に設けられた電話自動発信部は書籍データ配信センターＨＳへ自動的に回線を接続する。通信Ｉ／Ｆ部９は、書籍データ配信センターＨＳに対して書籍データ配信要求データとともに自己の電子書籍装置１の送信者ＩＤを送信する。書籍データ配信センターＨＳでは、書籍データ配信要求データとともに送信者ＩＤを受信すると、配信可能な書籍データについての関連データ（書籍名、著作者名、出版社名等）を送信する。電子書籍装置１は通信Ｉ／Ｆ部９において書籍データ配信センターＨＳから配信可能な書籍データについての関連データを受信すると、ＣＰＵ２は、図８に示すように、当該関連データを表示部４に一覧表示した書籍選択画面を表示部４に表示する。
【００８９】
この書籍選択画面の表示部４には、ダウンロードしたい書籍データの選択を促す「次の書籍データから選んで下さい」というメッセージＭ２とともに、配信可能な書籍データについての関連データＧ１，Ｇ２，Ｇ３，・・・が一覧表示される。例えば、書籍データＮｏ．「１」の関連データＧ１は「書籍名Ａ 日本国憲法」が表示され、書籍データＮｏ．「２」の関連データＧ２は「書籍名Ｂ 平家物語（上）」が表示され、書籍データＮｏ．「３」の関連データＧ３は「書籍名Ｃ漫画 日本の歴史（古代）」がそれぞれ表示される。また、同書籍選択画面にはポインタＰが表示され、カーソルスイッチの上下操作や回転スイッチ部１１の回転操作に伴って、ポインタＰの表示位置が移動され、上述の関連データの中から所望の書籍データを選択することができる。
【００９０】
書籍選択画面に選択可能に一覧表示されている関連データの中から、ダウンロードする書籍データが選択され、これが決定されると（ステップＥ２；Ｙｅｓ）、ＣＰＵ２は選択した書籍データのＮｏ．を内部ＲＡＭ７に格納する（ステップＥ３）。そして、ＣＰＵ２は、送信者ＩＤとともに、選択された書籍データの配信要求を選択した書籍データＮｏ．とともに通信Ｉ／Ｆ部９を介して書籍データ配信センターＨＳに自動送信する。その後、図８（Ｂ）に示すように、選択した書籍データ内の登場人物のキャラクタ画像４０２，４０３を表示部４に表示させる（ステップＥ４）。その後、図９（Ａ）に示すように、表示された登場人物のキャラクタ画像４０２，４０３に対してそれぞれ割り当てられるキャラクタ画像Ｎ２１〜Ｎ２５が一覧表示される（ステップＥ５）。その後、図９（Ｂ）に示すように、表示された登場人物のキャラクタ画像４０２，４０３とこれらに対して割り当てられるキャラクタ画像Ｎ２１〜Ｎ２５との対応付けのための使用者に対する催促表示がなされる（ステップＥ６）。
【００９１】
そこで、使用者による登場人物のキャラクタ画像と割り当てられるキャラクタ画像との対応付けのための選択とそれの決定が行なわれる（ステップＥ７）。すると、登場人物のキャラクタ画像４０２，４０３と割り当てられるキャラクタ画像Ｎ２１〜Ｎ２５とが対応付けて、ＲＡＭ７内の各領域７ｇ、７ｈにそれぞれ記憶されることとなる。例えば、使用者が、図９（Ａ）に示す複数のキャラクタ画像Ｎ２１〜Ｎ２５のなかから、「オードリー・ケプバーン」という有名人の顔画像をもつキャラクタ画像Ｎ２２を選択し、この選択されたキャラクタ画像Ｎ２２を、図９（Ｂ）に示すように、書籍データの登場人物である「乙さん」のキャラクタ画像４０２に対して割り当てた場合には、これに応答して、「乙さん」のキャラクタ画像４０２と「オードリー・ケプバーン」という有名人のキャラクタ画像Ｎ２２とは互いに対応づけて、ＲＡＭ７内の各領域７ｇ、７ｈにそれぞれ記憶されることとなる。同様に、登場人物である「甲くん」のキャラクタ画像４０３に対して「マイケル・ジョクソン」という有名人のキャラクタ画像Ｎ２１を使用者が割り当てた場合には、「甲くん」のキャラクタ画像４０３「マイケル・ジョクソン」という有名人のキャラクタ画像Ｎ２１とは互いに対応づけて、ＲＡＭ７内の各領域７ｇ、７ｈにそれぞれ記憶されることとなる。これにより、書籍データ・キャラクタ選択処理が終了する。
【００９２】
次に、図５に戻り、書籍データ等のダウンロードが行なうのであるが、それに先だって、電子書籍装置１においてオートダイヤルスイッチ３Ｓが押下操作されると、通信Ｉ／Ｆ部９に設けられた電話自動発信部は書籍データ配信センターＨＳへ自動的に回線を接続する。通信Ｉ／Ｆ部９は、書籍データ配信センターＨＳに対して書籍データ配信要求データとともに自己の電子書籍装置１の送信者ＩＤを送信する。書籍データ配信センターＨＳでは、書籍データ配信要求データとともに送信者ＩＤを受信すると、配信可能な書籍データについての関連データ（書籍名等）を送信する。その後、通信Ｉ／Ｆ部９において、書籍データ配信センターＨＳから返信される受信確認のメッセージを受信すると、ＣＰＵ２は、当該メッセージを表示部４に表示する。その後、書籍選択画面において選択された書籍データのＮｏ．を送信者ＩＤとともに書籍データ配信センターＨＳへ送信する（ステップＦ５）。
【００９３】
ホストサーバ３０では、電子書籍装置１から選択された書籍データのＮｏ．及び送信者ＩＤを受信すると（ステップＦ６）、ＲＡＭ３１Ａに確保し、その後、図示しないホストサーバ３０内のメッセージＲＯＭ（図示せず）から選択書籍データのＮｏ．を受信した旨の確認メッセージを読み出して、送信元へ返信する（ステップＦ７）。電子書籍装置１は、受信した確認メッセージを表示部４に表示する（ステップＦ８）。次に、ホストサーバ３０は、電子書籍装置１に対して、書籍データ・キャラクタ画像・音声データを送信する（ステップＦ９）。電子書籍装置１は、送信された書籍データ・キャラクタ画像・音声データを受信し、自己のＲＡＭ７内の書籍データ記憶領域７ｄ、キャラクタ画像記憶領域７ｇ、音声データ記憶領域７ｈへのダウンロードを実行する（ステップＦ１０）。ダウンロードが終了すると、電子書籍装置１は、ダウンロードが終了した旨のデータをホストサーバ３０に送信する（ステップＦ１１）。
【００９４】
ホストサーバ３０では、ダウンロードされた書籍データ等にかかった料金データを電子書籍装置１に返信する（ステップＦ１２）。電子書籍装置１は、受信した料金データ表示部４に表示する（ステップＦ１３）。電子書籍装置１は、この料金データの決済処理を行なう。例えば、金融機関等に対して料金データに対応した料金の支払いを依頼し、ホストサーバ３０への支払いの決済をおこなう（ステップＦ１４）。この後は、図７に示す書籍データの読み上げ再生処理を行う（ステップＦ１４）。以下、図７を参照して書籍データ読み上げ再生処理を説明する。
【００９５】
この書籍データの読み上げ再生処理において、ＣＰＵ２は、内部ＲＡＭ７の書籍データ記憶領域７ｄに記憶されている、配信された書籍データについて書籍のタイプを判断する。すなわち、漫画タイプであるかその他のタイプであるかを判断する。漫画タイプである場合は（ステップＤ１；Ｙｅｓ）、まず、書籍データ記憶領域７ｄから題名、著作者名、目次等のデータを読み出して表示部４に表示させる（ステップＤ２）。次いで、図１０（Ａ）に示すように、書籍データに含まれている登場人物のキャラクタ画像４０２、４０３や人物名データ（乙さん、甲さん）のほかに、書籍データの読み上げ者となるキャラクタ画像Ｎ２１、Ｎ２２を抽出して、そのキャラクタ画像４０２、４０３およびキャラクタ画像Ｎ２１、Ｎ２２等を表示させる（ステップＤ３）。
【００９６】
すなわち、図１０（Ａ）は漫画タイプの書籍データの再生開始時における表示例を示している。この図に示すように「漫画 日本の歴史（古代）」として書籍の題名４０１が表示されるとともに、登場人物Ｎｏ．１の「乙さん」の画像４０２が表示される。同様に、登場人物Ｎｏ．２の「甲くん」の画像４０３が表示される。また、書籍データの読み上げ者として使用者が選択し、ＲＡＭ７のキャラクタ記憶領域７ｇに記憶されているキャラクタ画像Ｎ２１、Ｎ２２が表示される。
【００９７】
次にＣＰＵ２はページカウンタｎを初期値「１」に設定する（ステップＤ４）とともに、コマカウンタＮを初期値「１」に設定し（ステップＤ５）、１ページ目の１コマ目の吹き出し部分についての登場人物Ｎｏ．、文字データ、及びコマ内に含まれる擬音データ等を含む書籍データを書籍データ記憶領域７ｄから読み出し、１コマ目に含まれる登場人物の画像や背景画像を表示するとともに、吹き出し部４０９，４１０やこの吹き出し部４０９，４１０に包まれる文字データを表示する（ステップＤ６；図１０（Ｂ）参照）。図１０（Ｂ）は１ページ目の書籍データの表示例を示している。この図では２コマを１表示単位とし、１コマ目と２コマ目とが表示されている。そして、右側の１コマ目には「甲くん」のキャラクタ画像４０３や背景の画像４０６が表示されるとともに、文字データ４０８と文字データを包む吹き出し部４０９が表示されている。この１コマ目の吹き出し部４０９内の文字データ４０９は「甲くん」の登場人物Ｎｏ．「２」と対応付けられている。なお、コマの表示単位は2コマに限定されるものではなく、例えば、１コマ単位としたり、3コマ以上の複数コマ単位としたり、コマの大きさによって一度に表示させるコマ数を適応的に変更するようにしてもよい。
【００９８】
左側の２コマ目には「乙さん」のキャラクタ画像４０２や背景の画像４０７が表示されるとともに、文字データ４１１と文字データを包む吹き出し部４１０が表示される。この吹き出し部４１０内の文字データ４１１は「乙さん」の登場人物Ｎｏ．「１」と対応付けられている。背景の画像（亀型石）４０７の吹き出し部４１２には文字データ４１３が表示される。そして「ブー」という擬音の文字４１５が表示されている。読み上げ音声生成部１３では、ＲＡＭ７の音声データ記憶領域７ｈに記憶されている音声データに従った音声で、吹き出し部４０９，４１０内の書籍データである文字データを読み上げる（ステップＤ７）。例えば、図１０（Ｂ）に示す例では、１コマ目の吹き出し部４０９内の文字データ４０８に含まれる「最近秩父・・・されたね」という部分がイヤホン２８から音声再生されているところを示しているが、ステップＤ７の処理によって、これらの文字データである言葉は、使用者が登場人物である「甲くん」のキャラクタ画像４０３に割り当てられたキャラクタ画像Ｎ２１（「マイケル・ジョクソン」という有名人の顔画像）自身のもつ音声で読み上げられることなる。
【００９９】
また、２コマ目では１コマ目と同様、「甲くん！ 奈良・・・されたわ！」という部分がイヤホン２８から音声再生されているところを示しており、ステップＤ７の処理によって、これらの文字データである言葉は、使用者が登場人物である「乙さん」のキャラクタ画像４０３に割り当てられたキャラクタ画像Ｎ２２（「オードリー・ケプバーン」という有名人の顔画像）自身のもつ音声で読み上げられることなる。また、ステップＤ８の処理によって「ブー」という擬音データも対応する音で出力され、イヤホン２８から出力されいるところを示している。読み上げられた音声は音声出力部１５から出力される。また、音声出力部１５は、ＲＡＭ７の音声データ記憶領域７ｈに記憶されている音声データに従った音声を送信部１６へ渡し、送信部１６はこの音声を携帯機器２０へ送信する。携帯機器２０は受信部２６において音声を受信し、イヤホン２８から出力する。このため、使用者は、希望する有名人の音声で、「漫画 日本の歴史（古代編）」内の文章を聞くことができる。
【０１００】
また、読み上げ音声生成部１３は、擬音データ（風音、爆発音等）に対応した擬音を音声出力部１５へ出力する。音声出力部１５は擬音を送信部１６へ渡し、送信部１６は擬音を携帯機器２０へ送信する。携帯機器２０は受信部２６において擬音を受信し、読み上げ音声と合わせてイヤホン２８から出力する（ステップＤ８）。更に、ＣＰＵ２は音声の読み上げと同時に読み上げられた音声に同期して吹き出し部４０９，４１０内の文字データの色を変更するように制御する（ステップＤ９）。例えば、図１０（Ｂ）に示す例では、現在、２コマ目の吹き出し部４１０内の文字データ４１１に含まれる「奈良」という部分がイヤホン２８から音声再生されているところを示しているが、ステップＤ９の処理によって音声の読み上げに同期して吹き出し部４０９，４１０内の文字４１４の色が変更されている。
【０１０１】
吹き出し部４０９，４１０の音声再生が終了すると、ＣＰＵ２は更にＮコマ目（ここでは「１」コマ目）に他の吹き出し部４０９，４１０がないか判断する（ステップＤ１０）。他の吹き出し部がある場合（ステップＤ１０；Ｎｏ）はステップＤ７へ移行し、ステップＤ７、ステップＤ９と同様の処理を実行して他の吹き出し部分についてテキスト（文字）部分を、キャラクタ画像に対応する音声で読み上げ再生し、擬音データを再生し、読み上げられた音声に同期した部分の色を変更する。その後、Ｎコマ目（ここでは「１」コマ目）に他の吹き出し部分がないと判断すると（ステップＤ１０；Ｙｅｓ）、コマカウンタをインクリメントして（Ｎ＋１→Ｎ；ステップＤ１１）、１ページに含まれる全ての文字データについて読み上げ終了したか否かを判断する（ステップＤ１２）。１ページ内の全ての文字データについて読み上げが終了していない場合は（ステップＤ１２；Ｎｏ）、ステップＤ６、ステップＤ１１の処理を繰り返し、読み上げる音声に同期してコマをスクロールして表示する。すなわち、次のコマが表示画面の中央に表示されるようにスクロールして表示するとともに、表示中のコマに含まれる吹き出し部分の文字を読み上げ、擬音データを再生し、また読み上げている吹き出し部分の色を変更制御する。
【０１０２】
そして、表示中の１ページに含まれる各コマ内の全ての文字データについて読み上げを終了すると（ステップＤ１２；Ｙｅｓ）、ページカウンタｎをインクリメント（ｎ＋１→ｎ；ステップＤ１３）し、全てのページについての読み上げが終了していなければ（ステップＤ１４；Ｎｏ）、次のページにスクロール表示して、表示されている各コマの１コマ目から順次音声で読み上げる。すなわち、ＣＰＵ２は内部ＲＡＭ７の書籍データ記憶領域７ｄに格納されている書籍データに基づいてｎページ目の表示データを生成し、表示部４に表示する。そしてステップＤ５〜Ｄ１３の処理を繰り返し、ｎページ目に含まれるＮコマの各吹き出し部分を登場人物に対応する音声で読み上げ再生し、擬音データを再生し、また、読み上げ再生中の吹き出し部分の色を変更制御する。これらの音声に同期してコマをスクロール表示する。
【０１０３】
その後、全てのページについて読み上げ再生を終了すると（ステップＤ１４；Ｙｅｓ）、書籍データの読み上げ再生処理を終了する。一方、書籍データの読み上げ再生処理のステップＤ１において書籍データが漫画タイプではない場合、すなわち、例えば小説や物語のようなタイプであれば以下の処理（ステップＤ１５〜ステップＤ２１）を実行する。まず、書籍データ記憶領域７ｄから題名、著作者名、目次等のデータを読み出して表示部４に表示させる（ステップＤ１５）。次いで、書籍データから朗読者の画像データや朗読者名データを抽出して、その画像や朗読者名を表示させる（ステップＤ１６；図１１（Ａ）参照）。
【０１０４】
図１１（Ａ）は物語タイプの書籍データの再生開始時における朗読者の選択画面の表示例を示している。この図に示すように「平家物語（上）」として書籍の題名４２０が表示される。同時に、朗読者Ｎｏ．１の「琵琶法師」の画像４２１と朗読者Ｎｏ．２の「講談師」の画像４２２のほかに、これら各画像に使用者により割り当てられたキャラクタ画像Ｎ４２１、４２２が表示される。カーソル４２３の移動操作によって何れかの朗読者が選択される。すると、選択された朗読者の音声の種類とこれに割り当てられたキャラクタ画像とを内部ＲＡＭ７に設定したあと、ページカウンタｎを初期値「１」を設定し（ステップＤ１７）、「１」ページ目の書籍データを表示部４に表示する。ＣＰＵ２は１ページ目の書籍データに含まれる文字データ４２５を選択したキャラクタ画像の音声で読み上げる（ステップＤ１８）。
【０１０５】
例えば、図１１（Ａ）に示す朗読者の種類のうち、朗読者Ｎｏ．２の「講談師」が選択されると、ＣＰＵ２はこの「講談師」に割り当てられたキャラクタ画像Ｎ２２の音声データを取得し、内部ＲＡＭ７に設定する。そして、図１１（Ｂ）に示すように書籍データの１ページ目の文字データ４２５を表示部４に表示させると同時に、文字データを読み上げ音声生成部１３に渡し、選択されたキャラクタ画像Ｎ２２の音声データに従った音声で、「講談師」として読み上げ出力する。このとき、読み上げられている音声に同期して表示されている文字４２６の色を変更する。すなわち、イヤホン２８から「諸行」という音声を出力しているときには、表示部４に表示されている「諸行」という文字４２６の色が変更される。
【０１０６】
なお、文字データ内に含まれない擬音データを適宜挿入して再生するようにしてもよい。例えば、図１１（Ｂ）に示すように、「講談師」が調子を取るために扇子を机に叩きつける音「バシッ」が読み上げ音声再生中にイヤホン２８から出力されるようにしてもよいし、書籍データに擬音データの発声タイミングを設定しておき、所定のタイミングで擬音を再生し、文章の表現を言葉だけでなく、金の音や虫の鳴き声等の擬音とともに表現するようにしてもよい。その後、ｎページ目の全ての文字データの読み上げを終了すると（ステップＤ１９；Ｙｅｓ）、ページカウンタｎをインクリメントし（ｎ＋１→ｎ；ステップＤ２１）、全てのページの読み上げが終了したか否かを判断する。全てのページの読み上げが終了していないときは、次のページをスクロール表示してステップＤ２０へ戻り、表示中のｎページ目の文字データを読み上げる。その後、全てのページの読み上げが終了すると（ステップＤ２１；Ｙｅｓ）、書籍データの再生を停止し、書籍データの読み上げ再生処理を終了する。なお、書籍データを再生している途中にストップスイッチがオンされると、書籍データの再生を停止し、書籍データの再生を終了する。
【０１０７】
以上のように、本発明の電子書籍装置１では、読み上げられる音声に同期して表示中のコマやページがスクロール表示されるので、使用者は意図的にページ捲りやコマ送りの操作を入力する必要がなく、電子書籍装置１において快適に読書を楽しむことができる。一方、ホストサーバ３０では、新たにテレビ、映画等で有名となった俳優、芸能人、ノーベル賞受賞者、スポーツで活躍した選手等のキャラクタ画像とこのキャラクタ画像の音声データとを常に新しいものに更新し、この更新されたキャラクタ画像および音声データをＲＡＭ３１Ａに記憶する。この更新されたキャラクタ画像および音声データは、ホストサーバー３０のホームページ等に掲載されるので、電子書籍装置１側からその更新されたキャラクタ画像および音声データを書籍データとともに要求すれば、対応する料金を支払うことを条件として、配信部３３からネットを介して、電子書籍装置１へ送信してもらうことができる（ステップＦ１６）。したがって、電子書籍装置１では、受信した書籍データ、更新されたキャラクタ画像および音声データを内部ＲＡＭ７および外部ＲＡＭ８に受信して格納することができる（ステップＦ１７）。
【０１０８】
以上説明したように、書籍処理では、外部ＲＡＭ８に記憶されている書籍データの中から所望の書籍データおよび音声データを読み出して、音声データに対応する音声で書籍データに対応する書籍内容を読み上げ再生することができる。また、外部からダウンロードした書籍データおよび音声データ等を内部ＲＡＭ７等に複数記憶することができる。なお、書籍データの読み上げ再生中に電話の着信があると、ＣＰＵ２は着信を報知するため着信報知指示信号を出力するとともに、書籍データの読み上げ停止指示を出力する。着信があった時点での書籍データの読み上げ位置を着信レジスタ７ｉに記憶し、通話が終了すると、記憶した停止位置から書籍データの読み上げを再開する。
【０１０９】
更に、ＣＰＵ２は書籍データのタイプを判断し、タイプに応じて表示単位を変更したり読み上げる音声の種類の設定の仕方を変更したりする。例えば、漫画タイプであればコマ単位（例えば２コマ単位）で表示し、登場人物に対応づけて割り当てられたキャラクタ画像の音声で吹き出し部内の文字データを読み上げ再生する。その他のタイプであればページ単位で表示し、使用者により指定されたキャラクタ画像の音声で文字データを読み上げ再生する。読み上げ再生時には、読み上げられる音声に同期して表示中のコマやページがスクロール表示する。従って、電子書籍装置１は、所望の書籍データおよび音声データを外部からダウンロードして容易に取得することができるので、使用者は表示された書籍データを黙読し視覚的に楽しむことができるだけでなく、表示された書籍データを目で確認しながら、音声データに従って読み上げられる音声を聴取することで聴覚的にも読書を楽しむことができる。また、書籍データの読み上げ再生中に電話の着信があると、電話の着信を報知する一方で書籍データの読み上げ再生を自動的に停止するので読書中にも迅速に電話に応答できる。また、電話の着信時における書籍データの再生位置を記憶しておき、通話が終了すると自動的に前記再生位置から書籍データの再生を自動的に再開するので読書を再開するときになんら操作を必要とせず、便利である。
【０１１０】
また、書籍のタイプが漫画タイプである場合は登場人物の画像、この画像が発言する文字データ、及びこの文字データを包む吹き出し部をコマ単位で表示させ、表示された吹き出し部内の文字データを登場人物に対応づけて割り当てられたキャラクタ画像の音声で読み上げ、吹き出し部内の文字データの読上げが完了すると自動的に他のコマの処理に移行（スクロール表示）するように制御するので、ページを捲る操作やコマを送る操作を必要とせず、操作を簡便なものとすることができる。また登場人物毎に割り当てられたキャラクタ画像の音声で書籍データが読み上げられるので、読み上げる音声の違いから登場人物を区別でき、視覚に頼らずに読書できる。さらに、音声で読上げられている文字データを他の文字データと区別可能に表示させるので、読み上げられている箇所を容易に確認でき、例えば表示されている画像と文字とを交互に見る場合にも、画像から文字に視線を移したときにどの部分を読み上げているかを瞬時に判断できるので、快適な読書を提供できる。
【０１１１】
また、小説や物語タイプの書籍では読み上げ対象となる文字データをページ単位で表示させ、表示された文字データを使用者の指定したキャラクタ画像の音声で読み上げ、文字データの読上げが完了したら、次のページに移行（スクロール表示）するので、ページ捲りの操作を必要とせず、読書中の操作を簡便にできる。また登場人物に割り当てられるキャラクタ画像の選択を通じて、キャラクタ画像音声を指定できるので、その指定された音声で使用者は快適に読書できる。
【０１１２】
なお、本発明は、上述の実施形態の内容に限定されるものではなく、本発明の趣旨を逸脱しない範囲で適宜変更可能である。例えば、音声認識部２Ａを設け、この音声認識部２Ａにて、音声入力部１４から入力された音声信号について、音声スペクトラム短縮化等の分析処理を行った後に、標準パターン等とのパターンマッチングを行って音声認識を行い、その音声認識結果を出力する音声認識処理を施すことも可能である。例えば、電話モードにおいて、相手方の電話端末にダイヤルする場合に、ダイヤル部３ｄにおけるダイヤルキーの手動操作に代えて、予め内部ＲＡＭ７のダイヤルデータ記憶領域に記憶されている電話番号データや電話番号データに対応付けられている相手の名前などをマイク部１Ｃから音声入力し、上述の音声認識部２Ａの音声認識処理によってダイヤル先を指示することや、再生する書籍データを音声によって指示することも可能である。
【０１１３】
また、上述の実施の形態では読み上げる音声を書籍データとしたが、例えば通信Ｉ／Ｆ部９を介して外部から受信した電子メールの内容を、サーバ３０から配信されたキャラクタ画像の音声で読み上げるようにしてもよい。この場合、ＣＰＵ２は通信Ｉ／Ｆ部９において外部から送信された電子メール（文字データ）を受信して内部ＲＡＭ７のメールデータ記憶領域７ｅに記憶しておき、入力部３の操作に従ってメールデータ記憶領域７ｅに記憶された電子メールの内容を、サーバ３０から配信されたキャラクタ画像の音声で読み上げる構成とすれば、電子書籍装置１において書籍データを読み上げるだけでなく、外部から受信した電子メールについての読み上げ音声を聴取することも可能となる。また、この場合において、各キャラクタ画像Ｎ２１〜Ｎ２５毎に、電子メールの文字データ（単語、言葉、挨拶文などを含む）に対応した動作を表すキャラクタ画像を複数枚、キャラクタ画像ＲＯＭ３２Ｂに記憶しておき、このキャラクタ画像ＲＯＭ３２Ｂに記憶してある各キャラクタ画像Ｎ２１〜Ｎ２５毎の、複数枚のキャラクタ画像をサーバ３０から配信してもらい、メールデータ記憶領域７ｅに記憶された電子メールの内容を、同じく配信されたキャラクタ画像の音声で読み上げる際に、当該電子メールの文字データに従った動作の各キャラクタ画像を順次読み出して表示部４に表示させてゆけば、電子メールの内容に従った動作を行うキャラクタ画像とすることができる。例えば、電子メールの文字データが「こんにちは」という挨拶文であった場合には、この「こんにちは」という文字データに従った音声で、キャラクタ画像Ｎ２１等が「お辞儀」の動作を行うように表示させることができる。
【０１１４】
また、電子書籍装置１の２つの表示パネル１Ａ，１Ｂの表示画面にタッチパネルを設け、一方の表示パネルの一部を押圧指定すると他方の表示パネルにその詳細な内容が表示されるようにしてもよい。例えば、一方の表示パネルに目次を表示しておき、その目次のうち所望のタイトル部分を押圧すると、他方の表示パネルに該タイトルの示す章の書籍データを表示するようにしてもよい。この場合は、電子書籍装置１におけるページ捲り操作が簡便化され、さらに快適な読書を楽しむことができる。また、携帯機器２０をヘッドホン型書籍データ再生装置とし、それのイヤーパッド内にメモリカード（外部メモリ）を収納する部位を設けるとともに書籍データの読み上げ音声を再生するための読み上げ音声生成部１３及び音声出力部１５を設け、通信Ｉ／Ｆ部９を介して所望の書籍データを外部（書籍データ配信センターＨＳのホストサーバ３０）からダウンロードして前記メモリカードに複数記憶しておき、使用者によって選択された書籍データを、選択された音声データに対応した音声で読み上げる。このようなヘッドホン型の書籍データ再生装置においても、書籍データに基づく音声の読み上げ再生中に電話の着信があると、ＣＰＵ２は着信報知指示信号及び再生停止指示信号を発生して、着信を報知するとともに書籍データの読み上げ音声の再生を停止させ、電子書籍装置５０の表示部４における書籍データの表示を停止させる。またこのとき再生の停止位置を内部ＲＡＭ７の着信レジスタ７ｉに記憶する。そして通話が終了すると読み上げ音声の再生停止位置から書籍データの読み上げを再開する。
【０１１５】
従って、ヘッドホン型書籍データ再生装置でも、所望の書籍データを外部からダウンロードして容易に取得し、メモリカードに記憶することができる。また、使用者は書籍データに従って読み上げられる音声を聴取することで聴覚的に読書を楽しむことができる。また書籍データの読み上げ再生中に電話の着信があると、電話の着信を報知する一方で書籍データの読み上げ再生を自動的に停止するので読書中にも迅速に電話に応答できる。また、電話の着信時における書籍データの再生位置を記憶しておき、通話が終了すると自動的に前記再生位置から書籍データの再生を自動的に再開するので読書を再開するときになんら操作を必要とせず、便利である。その他、計時部１２をヘッドホン型書籍データ再生装置６０側に設けたり、音声入力部１４や回転スイッチ部１１を電子書籍装置５０側に設けるといった内容の変更については、本発明の趣旨を逸脱しない範囲で適宜可能である。
【０１１６】
【発明の効果】
請求項１記載の発明に係る電子書籍装置によれば、外部の配信元にて提供された複数の書籍の中から希望する書籍を指定した後、この指定された書籍に係る書籍データに対応した書籍内容を読み上げる複数の朗読者を指定すると、これに応答して、この指定された書籍データ、および、この朗読者に対応づけられた音声データを外部の配信元から受信することができ、この受信された書籍データに対応した書籍内容を前記音声データに対応する音声で再生させることができる。従って、希望する朗読者の音声で、希望する書籍に係る書籍データ読み上げ再生してくれるので、読書を視覚及び聴覚によって楽しむことができる。請求項２記載の電子書籍装置によれば、外部の配信元へ書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像の音声データの配信を要求すると、この要求に応じて、外部の配信元から配信された書籍データ、朗読者の画像、および、音声データを受信することができ、この受信された書籍データと朗読者の画像とを表示させた後に、受信された書籍データを音声データに従った音声で再生させることができる。従って、配信された書籍データと朗読者の画像とを見ながら、配信された書籍データを希望する朗読者の画像の音声で聞くことができる。
【０１１７】
請求項３記載の発明の電子書籍装置によれば、書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、この朗読者の画像に対応づけられた音声データの配信を外部の配信元にネットを介して要求すると、この要求に応答して、配信元から配信された書籍データ、朗読者の画像および音声データを受信することができ、この受信された書籍データに対応した書籍内容と朗読者の画像とを表示部に表示させることができる。また、同時に、受信した書籍データに対応した書籍内容を朗読者の画像に対応づけられた音声データに従った音声で再生させることができる。従って、使用者は、受信した書籍データに対応した書籍内容と朗読者の画像とを表示部で見ながら、受信した書籍データに対応した書籍内容を朗読者の画像に対応づけられた音声データに従った音声で聞くことができる。請求項４記載の発明に係る電子書籍装置によれば、書籍に登場する複数の登場人物の朗読者の画像に対応する書籍データ部分を、登場人物に対応づけた朗読者の画像の音声データに従った音声で再生させることができる。従って、書籍に登場する複数の登場人物毎に割り当てられた各朗読者の画像に対応する書籍データ部分を、各登場人物に対応づけた朗読者の画像の音声で聞くことができる。
【０１１８】
請求項５記載の発明に係る電子書籍装置によれば、外部の配信元において、朗読者の画像とこの朗読者の画像の音声データとを更新してくれるので、新たな朗読者の画像とこの朗読者の画像の音声データとの配信を受けることができ、例えば、常に、新たにテレビや映画等に登場する芸能人等の音声を新鮮な気持ちで聞くことができる。請求項６記載の発明に係る電子書籍装置によれば、書籍データおよび音声データのほかに、指定された朗読者の画像を外部の配信元から受信することができ、これを受けて、受信された書籍データおよび朗読者の画像を表示部に表示させながら、この表示された書籍データに対応した書籍内容を受信した音声データに対応する音声で再生させることができる。
【０１１９】
請求項７記載の発明の音声再生システムによれば、配信元装置は、書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像に対応づけられた音声データを携帯型電子書籍装置に送信することができる一方で、携帯型電子書籍装置は、配信元装置にて提供された複数の書籍の中から希望する書籍を指定した後、この指定された書籍に係る書籍データに対応した書籍内容を読み上げる複数の朗読者の画像の中から希望する朗読者の画像を指定すると、この指定された書籍データ、および、この朗読者の画像に対応づけられた音声データを外部の配信元から受信することができ、この受信された書籍データに対応した書籍内容を音声データに対応する音声で再生させることができる。請求項８記載の発明に係る音声再生システムによれば、配信元装置は、書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像に対応づけられた音声データを携帯型電子書籍装置に送信することができる一方で、携帯型電子書籍装置は、配信元装置へ書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像の音声データの配信を要求すると、この要求に応じて、外部の配信元装置から配信された書籍データ、朗読者の画像、および、音声データを受信することができ、この受信された書籍データと朗読者の画像とを表示させた後に、書籍データを音声データに従った音声で再生させることができる。
【０１２０】
請求項９記載の発明に係る配信装置によれば、配信装置は、書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、および、この朗読者の画像に対応づけられた音声データを記憶している。書籍に係る書籍データ、この書籍データに対応した書籍内容を読み上げる朗読者の画像、この朗読者の画像に対応づけられた音声データの配信を受信すると、この要求に応答して、書籍データ、朗読者の画像および音声データを送信することができる。請求項１０記載の発明に係る音声再生システムによれば、複数の朗読者の画像の音声データと書籍に登場する複数の登場人物のキャラクタとの関係を対応づけて記憶し、この記憶された複数の登場人物のキャラクタ画像に対応する書籍データ部分を、対応づけた朗読者の画像の音声データに従った音声で再生させることができる。
【０１２１】
請求項１１記載の発明に係る音声再生システムによれば、書籍の内容と朗読者の画像とを表示させながら音声データに対応する音声で再生させることができる。
【図面の簡単な説明】
【図１】この発明における音声再生システムの使用状態例、音声再生システムと外部とのデータ通信の様子を模式的に示す図である。
【図２】音声再生システムを構成する電子書籍装置と携帯機器との間のデータ通信の様子を模式的に示す図である。
【図３】電子書籍装置の構成、書籍データ配信センターに設置されたホストサーバの構成、及び携帯機器の構成を示すブロック図である。
【図４】（Ａ）は電子書籍装置の内部ＲＡＭのメモリ構成、（Ｂ）はホストサーバの内部の書籍ＲＯＭのメモリ構成を示す図である。
【図５】電子書籍装置と書籍データ配信センターのホストサーバとでそれぞれ実行される各処理の流れを示すフローチャートである。
【図６】書籍データ・キャラクタ選択処理を説明するフローチャートである。
【図７】書籍データの読み上げ再生処理を説明するフローチャートである。
【図８】（Ａ）および（Ｂ）は  読み上げる書籍を選択するための書籍選択画面の表示例および選択後の表示例である。
【図９】（Ａ）および（Ｂ）は書籍データの読み上げるキャラクタ画像の選択を行う際における表示部の表示例、および、登場人物とキャラクタ画像との割り当ての際における対応関係を示す表示例である。
【図１０】（Ａ）および（Ｂ）は登場人物とキャラクタ画像との割り当て後における対応関係を示す表示例、および、書籍データの読み上げ再生中における表示例である。
【図１１】（Ａ）および（Ｂ）は物語タイプにおける登場人物とキャラクタ画像との割り当て後における対応関係を示す表示例、および、その書籍データの読み上げ再生中における表示例である。
【符号の説明】
１００  音声再生システム
１      電子書籍装置
１Ｃ    マイク部
１Ｅ    スピーカ部
２      ＣＰＵ
４      表示部
６      ＲＯＭ
７      内部ＲＡＭ
８      外部ＲＡＭ
１５、２７    音声出力部
２０    携帯機器
ＨＳ    書籍データ配信センター
３０    ホストサーバ
３２Ａ  書籍データＲＯＭ
３２Ｂ  キャラクタＲＯＭ
３２Ｃ  音声データＲＯＭ
３３        配信部
【図１】
0004729171.tif 000002
【図２】
0004729171.tif 000003
【図３】
0004729171.tif 000004
【図４】
0004729171.tif 000005
【図５】
0004729171.tif 000006
【図６】
0004729171.tif 000007
【図７】
0004729171.tif 000008
【図８】
0004729171.tif 000009
【図９】
0004729171.tif 000010
【図１０】
0004729171.tif 000011
【図１１】
0004729171.tif 000012