(57)【特許請求の範囲】
【請求項１】
ページ毎に同一または異なる形状の枠を有する複数のコマが配置された漫画のページ認識方式であって、
見開いた漫画のページ画像を入力する画像入力手段と、
前記画像入力手段で入力したページ画像をモノクロ画像に変換する手段と、
前記画像入力手段で入力したページ画像のひずみを補正するページ歪み補正手段と、
前記モノクロ変換され歪み補正されたページ画像から直線ラインを検出することによりページを形成するページ枠およびページ枠内の１以上のコマ枠を取得するページ情報取得手段と、
前記ページ枠からページの縦横左右比率またはページの各辺寸法を取得するページ縦横情報取得手段と、
前記ページ枠内の１以上のコマ枠よりコマの数を取得するページ内コマ数取得手段と、
前記ページ枠内の各コマ枠に対し、コマの縦横左右比率またはコマの各辺寸法を得るページ内コマ縦横情報取得手段と、
多数種類の漫画について各漫画毎に、タイトル情報，ページ番号とページ内コマ数とページ縦横情報とを含むページ情報およびコマ縦横情報を含むコマ情報を格納するデータベースと、
前記取得したページ縦横情報，ページ内コマ数およびコマ縦横情報と前記データベース内の情報を比較することにより、入力した漫画ページの漫画タイトルおよびページを特定する漫画ページ特定手段と、
を備えたことを特徴とする漫画のページ認識方式。
【請求項２】
前記画像入力手段は、漫画ページを撮影してページ画像を入力する撮像素子カメラまたはページ面を走査してページ画像を入力するスキャナーであることを特徴とする請求項１記載の漫画のページ認識方式。
【請求項３】
ページ毎に同一または異なる形状の枠を有する複数のコマが配置された漫画のページ認識方式による漫画情報再生システムであって、
通信端末装置，ネットワーク回線およびサーバ装置とを備え、
前記通信端末装置は、
見開いた漫画のページを撮影し、漫画ページ画像を得るカメラ部と、
前記漫画ページ画像を前記ネットワーク回線を介してサーバ装置に送信し、該サーバ装置からのページ画像に関する情報を受信可能な送受信部とを有し、
前記サーバ装置は、
前記通信端末装置からネットワーク回線を通じて送信されてくる漫画ページ画像を受信する受信部と、
前記漫画ページ画像の歪みを補正するページ歪み補正部と、
前記ページ歪み補正部で歪み補正されたページ画像から直線ラインを検出することによりページを形成するページ枠およびページ枠内の１以上のコマ枠を取得するページ情報取得部と、
前記ページ枠からページの縦横左右比率またはページの各辺寸法を取得するページ縦横情報取得部と、
前記ページ枠内の１以上のコマ枠よりコマの数を取得するページ内コマ数取得部と、
前記ページ枠内の各コマ枠に対し、コマの縦横左右比率またはコマの各辺寸法を得るページ内コマ縦横情報取得部と、
多数種類の漫画について各漫画毎に、タイトル情報，ページ番号とページ内コマ数とページ縦横情報とを含むページ情報およびコマ縦横情報を含むコマ情報を格納するデータベースと、
前記取得したページ縦横情報，ページ内コマ数およびコマ縦横情報と前記データベース内の情報を比較することにより、入力した漫画ページの漫画タイトルおよびページを特定する漫画ページ特定部と、
前記特定された漫画ページおよびコマに関する付加効果データを前記通信端末装置に送信する送信部とを有し、
前記通信端末装置で送信した漫画ページの画像に対応して前記サーバ装置で認識したページとコマに関する付加効果データを前記通信端末装置で再生可能にしたことを特徴とする漫画情報再生システム。
【請求項４】
前記通信端末装置に前記カメラ部で撮影した漫画ページ画像をモノクロ画像に変換する手段を設け、前記サーバ装置に該モノクロ画像を漫画ページ画像として送信することを特徴とする請求項３記載の漫画情報再生システム。
【請求項５】
前記通信端末装置はカメラを内蔵する携帯電話機またはカメラもしくはスキャナーが接続されたパソコンであり、
前記付加効果データは、特定されたページおよびコマに関する音楽，効果音またはセリフであることを特徴とする請求項３または４記載の漫画情報再生システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、漫画の見開いたページを画像パターンとして認識し、どんなタイトルの漫画のどのページおよびコマかを認識するマンガのページ認識方式および認識したページ等の情報を取得して音声，ＢＧＭなどの聴覚による効果を与えることができる漫画情報再生システムに関する。
【背景技術】
【０００２】
印刷物の図形や文章などに対応させてＱＲコードを記載しておき、ＱＲコードをカメラで読み込み認識することにより、目的とする情報の処理を行ったり、情報を取得したりすることが広く行われている。
特許文献１は携帯型通信端末によって画像とそれに付随する音声とを入力可能にするもので、携帯電話機のＱＲコードリーダにより印刷媒体のＱＲコードを解読してメッセージ管理装置に発信すると、これにメッセージ管理装置が応答して呼を確立させ、印刷媒体の画相に対応するメッセージが再生されるものである。印刷媒体を受け取った携帯電話機のユーザは画像に付随する音声メッセージ（画像がある観光名所の説明など）を聞くことができるものである。
【０００３】
しかしながら、この提案は予め規定されているＱＲコードによって画像および音声メッセージを受信するものであり、ＱＲコードが付設されていないものについては画像および音声メッセージを受けることができない。
【特許文献１】特開２００５−１９７９４３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上記特許文献１の他に雑誌やカタログなどの特定のページにおいて製品などについてＱＲコードを使って製品を注文するシステムが提案されているが、各ページを特定化してページの内容を読者に音声などで提供することは、実現されていない。すべてのページを特定化する場合に各ページごとにＱＲコードを印刷することが考えられるが、各ページ毎にＱＲコードの印刷スペースを確保することは、それだけ記載部分が少なくなり効率的ではない。さらに多ページに及ぶ印刷物において、各ページだけではなく、そのページ毎に異なる形状で区画化された部分の認識はさらに煩雑なものとなる。
【０００５】
ところで、定型で描画された漫画等など各ページ内の各コマの絵ごとにストーリーが進行する印刷本は、各コマ毎の情報を漫画本の記載部分から視覚によって直接得ることができるが、漫画読者にとってさらにインパクトがあって興味を引くためには視覚による以外に、漫画ページに関連する画像や音声などを再生できることが望まれる。
しかしながら、所定の画像や音声などを再生するためには各ページを認識し端末装置で音声などを再生しなければないない。ＱＲコードを用いて認識するのでは上述したように問題が存在する。
本発明は上記背景を鑑みたもので、その目的は、見開き漫画ページを携帯電話機やパソコンなどの通信端末装置のカメラを利用して画像入力し、入力したページおよびそのページのコマを特定化し、サーバ装置から特定化したページの付加効果情報を通信端末装置で受信して再生することにより視覚以外の形で漫画ページの情報を得ることができる漫画のページ認識方式および漫画情報再生システムを提供することにある。
【課題を解決するための手段】
【０００６】
前記目的を達成するために本発明の請求項１は、ページ毎に同一または異なる形状の枠を有する複数のコマが配置された漫画のページ認識方式であって、見開いた漫画のページ画像を入力する画像入力手段と、前記画像入力手段で入力したページ画像をモノクロ画像に変換する手段と、前記画像入力手段で入力したページ画像のひずみを補正するページ歪み補正手段と、前記モノクロ変換され歪み補正されたページ画像から直線ラインを検出することによりページを形成するページ枠およびページ枠内の１以上のコマ枠を取得するページ情報取得手段と、前記ページ枠からページの縦横左右比率またはページの各辺寸法を取得するページ縦横情報取得手段と、前記ページ枠内の１以上のコマ枠よりコマの数を取得するページ内コマ数取得手段と、前記ページ枠内の各コマ枠に対し、コマの縦横左右比率またはコマの各辺寸法を得るページ内コマ縦横情報取得手段と、多数種類の漫画について各漫画毎に、タイトル情報，ページ番号とページ内コマ数とページ縦横情報とを含むページ情報およびコマ縦横情報を含むコマ情報を格納するデータベースと、前記取得したページ縦横情報，ページ内コマ数およびコマ縦横情報と前記データベース内の情報を比較することにより、入力した漫画ページの漫画タイトルおよびページを特定する漫画ページ特定手段とを備えたことを特徴とする。
本発明の請求項２は、請求項１記載の発明において前記画像入力手段は、漫画ページを撮影してページ画像を入力する撮像素子カメラまたはページ面を走査してページ画像を入力するスキャナーであることを特徴とする。
本発明の請求項３は、ページ毎に同一または異なる形状の枠を有する複数のコマが配置された漫画のページ認識方式による漫画情報再生システムであって、通信端末装置，ネットワーク回線およびサーバ装置とを備え、前記通信端末装置は、見開いた漫画のページを撮影し、漫画ページ画像を得るカメラ部と、前記漫画ページ画像を前記ネットワーク回線を介してサーバ装置に送信し、該サーバ装置からのページ画像に関する情報を受信可能な送受信部とを有し、前記サーバ装置は、前記通信端末装置からネットワーク回線を通じて送信されてくる漫画ページ画像を受信する受信部と、前記漫画ページ画像の歪みを補正するページ歪み補正部と、前記ページ歪み補正部で歪み補正されたページ画像から直線ラインを検出することによりページを形成するページ枠およびページ枠内の１以上のコマ枠を取得するページ情報取得部と、前記ページ枠からページの縦横左右比率またはページの各辺寸法を取得するページ縦横情報取得部と、前記ページ枠内の１以上のコマ枠よりコマの数を取得するページ内コマ数取得部と、前記ページ枠内の各コマ枠に対し、コマの縦横左右比率またはコマの各辺寸法を得るページ内コマ縦横情報取得部と、多数種類の漫画について各漫画毎に、タイトル情報，ページ番号とページ内コマ数とページ縦横情報とを含むページ情報およびコマ縦横情報を含むコマ情報を格納するデータベースと、前記取得したページ縦横情報，ページ内コマ数およびコマ縦横情報と前記データベース内の情報を比較することにより、入力した漫画ページの漫画タイトルおよびページを特定する漫画ページ特定部と、前記特定された漫画ページおよびコマに関する付加効果データを前記通信端末装置に送信する送信部とを有し、前記通信端末装置で送信した漫画ページの画像に対応して前記サーバ装置で認識したページとコマに関する付加効果データを前記通信端末装置で再生可能にしたことを特徴とする。
本発明の請求項４は、請求項３記載の発明において前記通信端末装置に前記カメラ部で撮影した漫画ページ画像をモノクロ画像に変換する手段を設け、前記サーバ装置に該モノクロ画像を漫画ページ画像として送信することを特徴とする。
本発明の請求項５は、請求項３または４記載の発明において前記通信端末装置はカメラを内蔵する携帯電話機またはカメラまたはスキャナーが接続されたパソコンであり、前記付加効果データは、特定されたページおよびコマに関する音楽，効果音またはセリフであることを特徴とする。
【発明の効果】
【０００７】
上記構成によれば、ユーザは漫画を見る以外にページに対応した音による情報、すなわち音楽，効果音，解説などの情報を聞くことができる。また、ページの一部分のみで単行本等の本を認識することが可能となる。
【発明を実施するための最良の形態】
【０００８】
以下、図面を参照して本発明の実施の形態を詳しく説明する。
図１は、本発明による漫画のページ認識方式および漫画情報再生システムの概略図である。
ユーザが携帯電話機３のカメラ５によって漫画１の見開いたページを撮影し、撮影した漫画ページ画像を携帯電話機３のネットワーク回線を介してネット上のサーバ装置７に送信する。また、他のユーザはパソコン４に接続されたカメラ６を用いて漫画２の見開いたページを撮影し、撮影した漫画ページ画像をインターネット回線を通じてサーバ装置７に送信する。
【０００９】
サーバ装置７は、送られてきた漫画ページ画像を解析し、解析した画像からページおよびコマを特定するためのパターンデータを検出し、検出したパターンからページ情報およびコマ情報を得、該情報をデータベース８内の記憶部１に記憶されているページ情報データおよびコマ情報データと比較することにより漫画タイトルを特定し、特定した漫画のページを特定する。特定された漫画のページについて記憶部２より音楽，セリフ，効果音などの効果用データを読み出し、漫画ページ画像を送ってきたパソコン４，携帯電話機３に付加効果データを配信する。
パソコン４，携帯電話機３では受信した付加効果データを再生しスピーカより出力させることができる。ユーザは、見開いた漫画のページおよびコマに対し、音楽（ＢＧＭ），効果音，解説などを聞くことができる。なお、付加効果データとして画像データを送信しパソコン４，携帯電話機３の表示部に表示することも可能である。
【００１０】
図２は、見開いた漫画のページの画像を取得する方法を説明するための図である。
カメラ１０を操作し漫画１１の１ページ分よりすこし大きめの範囲を撮影できるように構図を定めて撮影を行う。カメラ１０は携帯電話機であれば内蔵カメラ，パソコンであればＵＳＢ接続されたカメラであり、また、携帯電話機やパソコンに直に接続されていないディジタルカメラなどを用いても良い。かかる場合にはディジタルカメラで撮影した画像データをメモリカードに格納し、該メモリカードをディジタルカメラから外し、携帯電話機やパソコンのメモリカードアダプタに挿入することにより、ネットワーク通信ができる端末装置に受け渡すようにする。なお、ディジタルカメラをＵＳＢケーブルや１３９４ケーブルで接続して携帯電話機やパソコンに送ることも可能である。また、扱いが煩雑になるが、スキャナーなどの画像入力装置を用いても漫画ページ画像のデータを得ることができる。
【００１１】
図３は、特定のページ内のコマの配置例を示す図である。
ページ内の各コマは種々の大きさの矩形形状のコマが配置されており、画像パターン認識ではページの上下左右の線および各線の寸法を得る。また、各コマについて同様に上下左右の線および各線の寸法を得る。なお、各コマ内に種々の形状の吹き出し１２ａ，１２ｂがコマを形成する枠の上に被っている場合は、被った部分を除いた枠の線長を線の長さとしている。
データベース内の記憶部１内にはこのように配置された特定の漫画の各ページについて、ページ番号，ページ内コマ数，ページ縦横左右比率または上下左右の寸法がページ情報として格納されている（図４（ａ））。また、各コマについて製品番号，漫画タイトル，ページ数，コマ番号，コマの縦横左右比率または上下左右の寸法がコマ情報として格納されている（図４（ｂ））。
【００１２】
図５は、あるページのある１コマの各辺の寸法の具体例を示す図である。
コマ番号はＫ０００１で、コマの上枠の線長Ｎは４．５０cm，下枠の線長Ｓは４．５０cm，右枠の線長Ｅは１２．００cm，左枠の線長Ｗは１２．００cmのコマである。
【００１３】
図６Ａは、本発明システムに端末装置として用いられる携帯電話機の回路例を示すブロック図である。
アンテナ２０からの受信信号は送受分離器２１で受信部２２に入力され、受信部２２で復調され、データ処理部２４に送られる。データ処理部２４では、デコード処理され，多重信号がチャネル分離され、サウンド処理部２５でアナログ信号に変換されスピーカ２６より音声等が出力される。マイク２７に入力した音声はサウンド処理部２５でディジタル信号に変換された後、データ処理部２４でチャネル多重化されコード化処理され、送信部２３で変調され、送受分離器２１を介してアンテナ２０より送信される。
着呼，発信の際、制御部２８の電話制御機能部２８ａがユーザのキー入力部３２の操作に従って上記各回路部を制御することより通話が可能となる。また、ネット上のサーバ装置にアクセスし、情報を送信したり、受信したりすることができる。
【００１４】
制御部２８はこの他にカメラ撮影制御機能部２８ｂおよびフラッシュ給電制御機能部２８ｃを有しており、カメラ３０および発光部を有する発光制御部３１を制御可能である。
カメラ撮影制御機能部２８ｂはキー入力部３２の特定ボタンが操作されることにより、カメラ３０を起動して撮影モードに入る。また、フラッシュ給電制御機能部２８ｃは、自動発光機能がオンに設定されている場合、被写体が所定以下の明るさでは発光制御部３１を起動して充電を開始し、シャッタ動作に同期して発光させるように制御する。
漫画３２に対しカメラ３０を向け、漫画を液晶表示部３３に表示させ、漫画ページ全体をカメラの撮影範囲に捕らえたか否かを確認した後、ユーザはシャッタボタンを押すこととなる。
【００１５】
カメラ撮影制御機能部２８ｂは漫画ページをカメラ３０で撮影し、画像データを取り込み、所定形式の画像データに変換（モノクロ変換）した後、メモリ部２９に格納する。ユーザがサーバ装置にアクセスし、メモリ部２９に格納した漫画ページの画像データを選択すると、制御部２８はデータ処理部２４で画像データをコード化し、送信部２３で変調した後、送受分離器２１を介してアンテナ２０よりネット上のサーバ装置に送信する。
サーバ装置がこの漫画ページ画像の送信に応答して処理した結果、ナレーションなどの音声，ＢＧＭ，効果音などの付加効果データが送られてくると、制御部２８は送受分離器２１を介して受信部２２で受信し、データ処理部２４，サウンド処理部２５で処理した後、スピーカ２６よりナレーションなどの音声，ＢＧＭ，効果音などを出力する。なお、効果データとしてアニメなどの画像データも送られてくる場合には、液晶表示部３３に表示する。
上記画像取得方法ではシャッタボタンを押して画像を取得する例について説明したが、カメラを撮影モードすることにより自動的に画像の取り込みを行うことも可能である。
【００１６】
図６Ｂは、本発明システムに端末装置として用いられるパソコンの回路例を示すブロック図である。
ＣＰＵ３６は電源投入によりＨＤＤ３８内のＯＳをＲＡＭ３７に読み込むことにより立ち上げ、ＯＳ初期画面をグラフィック回路４８を介してディスプレイ４３に表示する。入出力インタフェース部３５はＬＡＮ端子，ＯＳ／２端子，サウンド出力端子，ＵＳＢ端子，１３９４端子などを備え、各端子にはぞれぞれルータ４０，マウス４５，キーボード４４，スピーカ４１，カメラ４２，フラットベッドスキャナー４７が接続されている。ルータ４０には電話回線に接続されたＡＤＳＬモデム３９が接続され、ネット上のサーバ装置とはインターネットを介して通信することができる。マンガのページ画像はカメラ４２またはフラットベッドスキャナー４７によって取り込みが可能である。
【００１７】
漫画データをカメラ４２で取り込む場合について説明する。
ユーザがカメラを動かして見開きページ全体が撮影できるようにディスプレイ４３上で構図を確認しマウス４５を操作することにより漫画ページの画像が取り込まれ、モノクロ画像に変換される。ＣＰＵ３６はモノクロの漫画ページ画像を一時ＲＡＭ３７内に格納する。この漫画ページ画像はキーボード４４，マウス４５の操作により、ＨＤＤ３８の所定のフォルダに保存することが可能である。
ここで、既にインターネット回線を介してサーバ装置に接続されていれば、ＲＡＭ３７内の漫画ページ画像はバス４６，周辺機器制御部４９，入出力インタフェース部３５，ルータ４０，ＡＤＳＬモデム３９を通じてサーバ装置に送信される。
【００１８】
サーバ装置が漫画ページ画像の送信に応答し処理した結果、ナレーションなどの音声，ＢＧＭ，効果音などの付加効果データが送られてくると、ＣＰＵ３６は付加効果データをＡＤＳＬモデム３９，ルータ４０，入出力インタフェース部３５を介して受信し、周辺機器制御部４９でサウンド処理した後，スピーカ４１よりナレーションなどの音声，ＢＧＭ，効果音などを出力する。この他に画像データが送られてくる場合には、ディスプレイ４３に表示される。
【００１９】
図６Ｃは、本発明システムのサーバ装置の回路例を示すブロック図である。
制御部５１に通信回路５０，入力装置５２，ＲＡＭ５３，記憶部５４および表示装置５５が接続され、サーバ装置５６はこれら回路ブロックによって構成されている。
通信回路５０は有線または無線のネットワーク回線で接続された携帯電話機，パソコンと通信を行うものである。入力装置５２は、サーバ装置を操作するキーボード，マウス等であり、表示装置５５はディスプレイなどの画像表示部である。ＲＡＭ５３は、制御部５１が演算などで用いる作業エリア，一時記憶部の機能を有する。
【００２０】
記憶部５４は記憶部１，２のエリアを有し、記憶部１には各漫画毎のページ，コマ情報，漫画タイトル情報，付加効果情報が格納されている。記憶部２には付加効果データであるナレーションなどの説明，ＢＧＭ，効果音などが格納されている。記憶部５４はこの他にサーバ装置を制御するためのプログラム，関連するデータを格納している。
制御部５１はサーバ装置全体の制御を司るとともに画像歪み補正回路５１ａ，ページ情報取得回路５１ｂ，コマ情報取得回路５１ｃ，漫画特定回路５１ｄ，データ付加処理回路５１ｅの各機能を有している。
【００２１】
画像歪み補正回路５１ａは、送信されてきたモノクロの漫画ページ枠が例えば台形状になるような歪みがあれば、ページが矩形形状（正方形または長方形）になるように補正する。また、コマ画像についてもひずみがあれば同様に補正する。ページ情報取得回路５１ｂは、直線ラインを検出することによりページを構成する上下左右のそれぞれのラインを取得する（画像パターン）とともにページ縦横左右の比率（または上下左右の線の寸法）およびページ内のコマの数を得てＲＡＭ５３に記憶する。コマ情報取得回路５１ｃは、歪み補正された各コマについて直線ラインを検出することによりコマを構成する上限左右のそれぞれのラインを取得する（画像パターン）とともにコマ縦横左右の比率（または上下左右の線の寸法）を得てＲＡＭ５３に記憶する。
【００２２】
漫画特定回路５１ｄは、記憶部１に格納されているコマ情報，ページ情報と上記ＲＡＭ５３に記憶されたページ縦横左右の比率（または上下左右の線の寸法），ページ内のコマ数，および各コマについてコマ縦横左右の比率（または上下左右の線の寸法）とを比較する（パターンマッチングにより識別）ことにより、各コマおよびページを特定化し、これにより漫画タイトルを特定してどの漫画のどのページかを判断する。
データ付加処理回路５１ｅは、漫画およびページが特定されたことによりその漫画の特定化されたページ対応の付加効果データを記憶部２から読み出し、付加効果データを端末装置に送信する。
【００２３】
つぎに図７Ａ〜図７Ｃのフローチャートを用いて携帯電話機で漫画の画像を取得し、受信した漫画のページを認識し付加情報などを得、送られてくる情報を携帯電話機側で再生するまでを説明する。
携帯電話機３を操作することにより撮影モードのソフト（画像取得ソフト）を起動する（ステップ（以下「Ｓ」という）０１）。ユーザは起動したソフトによって表示される液晶表示部３３の表示によって自動取得か、または手動取得かを選択でき（Ｓ０２）、自動取得を選択すれば、現在表示されている画像をそのまま取得し、取得した画像はモノクロに変換されてサーバ装置に転送される（Ｓ０３，Ｓ０４，Ｓ０７）。一方、ユーザが手動を選択した場合にはシャッタボタンを押すことにより漫画ページを取得し、取得した画像をモノクロ変換してサーバ装置に転送する（Ｓ０５，Ｓ０６，Ｓ０７）。
【００２４】
図７Ｂにおいて、サーバ装置５６は転送されてきた漫画ページのモノクロ画像を受信する（Ｓ０８）と、ページについて画像歪みを補正し（Ｓ０９）、その後、直線ラインを検出することにより  画像パターン認識用データ（ページの枠パターンおよびページ内の各コマの枠パターンの抜き出し）を作成し、該データをページ全体情報として取得する（Ｓ１０，Ｓ１１）。
上記処理によりページ取得を行うと、その情報をＲＡＭ（一時記憶装置）５３に記憶する。つぎにページ全体の枠パターンよりページ縦横左右の比率（または上下左右の寸法）を得、さらに，ページ内コマ数を取得し（Ｓ１３，Ｓ１４）、その情報をＲＡＭ５３に記憶する。
【００２５】
さらに抜き出したコマについてコマ画像歪み補正を行った（Ｓ１５）後、直線ラインを検出する（Ｓ１６）ことにより、コマの縦横左右の比率（または上下左右の寸法）を得て（Ｓ１７）、その情報をＲＡＭ５３に記憶する。各コマについてコマ情報を取得する（Ｓ１８）と、つぎは漫画特定回路５１ｄでＲＡＭ５３に記憶したページ情報およびコマ情報を検索し、取得したページの特定化をする（Ｓ１９）。
記憶装置（１）５４ａにはコマ情報として製品番号，漫画タイトル，各ページのコマおよびコマ比率情報並びに効果情報が格納されている。ページ情報としてページ数，ページ内コマ数およびペ─ジＮＥＷＳ（東西南北の４つ）の寸法の情報が格納されている。
漫画特定回路５１ｄは上記記憶装置（１）５４ａの情報と比較することによりコマを特定し、ページを特定化して漫画タイトルを特定化する（Ｓ２０，Ｓ２１，Ｓ２２）。
【００２６】
漫画タイトルを特定化できない場合には、制御部５１は該当データなしとし、携帯電話機３にエラー表示を送信する（Ｓ２６，Ｓ２７）。携帯電話機３の液晶表示部３３にはエラー表示がなされる（Ｓ２８）。漫画タイトルを特定化できた場合は、データ付加処理回路５１ｅは、記憶装置（２）５４ｂよりその特定化した漫画のページ対応の付加効果データ（ＢＧＭ，効果音，ナレーションなど）を読み出し（Ｓ２４）、携帯電話機３に送信する（Ｓ２５）。携帯電話機３は付加効果データを送受信分離器２１，受信部２２を介して受信し（Ｓ２９）、データ処理部２４でデコード処理してサウンド処理部２５で音を再生しスピーカ２６よりＢＧＭ，効果音，ナレーションなどを出力する（Ｓ３０）。
【００２７】
以上の実施の形態は、漫画ページを画像を取得する画像入力手段として携帯電話機内蔵のカメラ，パソコンに接続されたカメラやフラットベッドスキャナで取り込む例について説明したが、他の画像入力手段で取り込む場合にも同様に適用できるものである。
また、携帯電話機のネットワーク回線およびパソコンのインタネット回線を介して通信する場合について説明したが、サーバ装置にアクセスできる他の通信方式を利用することも可能である。さらに変形例として漫画ページの画像を送る通信端末装置とサーバ装置から付加効果データを受信する通信端末装置は必ずしも同一である必要はなく、他の通信端末装置で受信しても良い。
【産業上の利用可能性】
【００２８】
通信端末装置，ネットワーク回線およびサーバ装置よりなり、通信端末装置のカメラなどで撮影した漫画ページをサーバ装置に送り、サーバ装置が漫画ページおよびコマ情報を参照して送られてきた漫画ページを特定して、対応の付加効果データを通信端末装置に送り返すことにより通信端末装置で再生できる漫画情報再生システムである。
【図面の簡単な説明】
【００２９】
【図１】本発明による漫画のページ認識方式および漫画情報再生システムの概略図である。
【図２】見開いた漫画のページの画像を取得する方法を説明するための図である。
【図３】あるページ内のコマの配置例を示す図である。
【図４】各コマの情報のデータ形式の一例を示す図である。
【図５】１つのコマ各辺の寸法の一例を示す図である。
【図６Ａ】本発明システムに端末装置として用いられる携帯電話機の回路例を示すブロック図である。
【図６Ｂ】本発明システムに端末装置として用いられるパソコンの回路例を示すブロック図である。
【図６Ｃ】本発明システムのサーバ装置の回路例を示すブロック図である。
【図７Ａ】端末装置で漫画の画像を取得する流れを説明するためのフローチャートである。
【図７Ｂ】受信した漫画のページを認識し付加情報などを取得する流れを説明するためのフローチャートである。
【図７Ｃ】漫画のページについて送られてくる情報の再生を説明するためのフローチャートである。
【符号の説明】
【００３０】
１，２，１１，３２  漫画  
３  カメラ付き携帯電話機
４  カメラ付きパソコン
５，６，１０，３０，４２  カメラ
７  サーバ装置
８  記憶装置（記憶部１，記憶部２）
１１ａ  ページ
１１ｂ  コマ
２０  アンテナ
２１  送受分離器
２２  受信部
２３  送信部
２４  データ処理部
２５  サウンド処理部１
２６，４１  スピーカ
２７  マイク
２８  制御回路
２９  メモリ部
３１  発光制御部  
３２  キー入力部
３３  液晶表示部
３５  入出力インタフェース部
３６  ＣＰＵ
３７  ＲＡＭ
３８  ＨＤＤ
３９  ＡＤＳＬモデム
４０  ルータ
４３  ディスプレイ
４４  キーボード
４５  マウス
【図１】
0004407955.tif 000002
【図２】
0004407955.tif 000003
【図３】
0004407955.tif 000004
【図４】
0004407955.tif 000005
【図５】
0004407955.tif 000006
【図６Ａ】
0004407955.tif 000007
【図６Ｂ】
0004407955.tif 000008
【図６Ｃ】
0004407955.tif 000009
【図７Ａ】
0004407955.tif 000010
【図７Ｂ】
0004407955.tif 000011
【図７Ｃ】
0004407955.tif 000012