(57)【要約】 【課題】漫画等の画像全体を表示したまま、翻訳文等を見やすく表示することができるようにする。【解決手段】ディスプレイの表示画面に画像を表示させる画像表示手段と、前記画像の前記表示画面内における表示位置情報を取得する表示位置情報取得手段と、前記画像に関連付けられたテキストを表示するテキスト表示手段とを有し、前記画像が表示されていない位置に、前記テキストに対応する第二テキストを表示することを特徴とする表示装置。【選択図】図５
2017187586.tif 000002
【特許請求の範囲】
【請求項１】
ディスプレイの表示画面に画像を表示させる画像表示手段と、前記画像の前記表示画面内における表示位置情報を取得する表示位置情報取得手段と、前記画像に関連付けられたテキストを表示するテキスト表示手段とを有し、
前記画像が表示されていない位置に、前記テキストに対応する第二テキストを表示することを特徴とする表示装置。
【請求項２】
前記テキストは、前記画像に近接して表示されていることを特徴とする請求項１記載の表示装置。
【請求項３】
前記第二テキストは、前記テキストの翻訳文であることを特徴とする請求項２記載の表示装置。
【請求項４】
前記画像表示手段は、前記画像の所定位置を選択した場合に、前記画像を下方に縮小表示させ、前記第二テキストを上方に横書きで表示することを特徴とする請求項１記載の表示装置。
【請求項５】
前記画像は、漫画、又はイラストであることを特徴とする請求項１〜４のいずれか１項に記載の表示装置。
【請求項６】
前記画像は、動画のスクリーンショットであることを特徴とする請求項１〜４のいずれか１項に記載の表示装置。
【請求項７】
ディスプレイの表示画面に画像を表示させるステップと、前記画像の前記表示画面内における表示位置情報を取得するステップと、前記画像に関連付けられたテキストを表示するステップと、前記画像が表示されていない位置に、前記テキストに対応する第二テキストを表示するステップとを有する表示方法。
【請求項８】
ディスプレイの表示画面に画像を表示させるステップと、前記画像の前記表示画面内における表示位置情報を取得するステップと、前記画像に関連付けられたテキストを表示するステップと、前記画像が表示されていない位置に、前記テキストに対応する第二テキストを表示するステップとをコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子データ化された漫画や雑誌等を表示するシステムに関し、特に、該データに関連付けられたセリフを表示するシステム、方法、及びコンピュータプログラムに関する。
【背景技術】
【０００２】
近年、電子データ化された漫画、雑誌、及び書籍等のいわゆる電子書籍を、画像表示機能を備えたコンピュータ（例えば、パーソナルコンピュータ（personal computer）、以下「ＰＣ」という）や、携帯端末等（例えば、タブレット端末やスマートフォン等）に表示させる技術が普及している。
【０００３】
特に、前記電子書籍のデータに含まれるセリフ等の文字列に関して、例えば、話し手から吹き出した形に描くセリフを囲む曲線（以下、単に「吹き出し」という）の表示領域を示す技術や、該吹き出し内に表示されるセリフの表示方法に関する技術が開示されている（例えば、特許文献１〜３参照）。
【０００４】
特許文献１に開示されている技術によれば、電子コミックを閲覧する際に、セリフの原文を翻訳した翻訳文の全文が予め設定された文字サイズで入るか否かを判別し、該セリフの翻訳文の全文が入ると判別されると、該吹き出し内にセリフの翻訳文の全文を表示させる。一方、前記セリフの翻訳文の全文が入らないと判別されると、前記吹き出しを拡大表示されると共に、該拡大された吹き出し内にセリフの翻訳文を表示させる。
また、特許文献２に開示されている技術によれば、例えば、電子コミックを閲覧する際に、セリフの原文を翻訳した翻訳文が縦長の吹き出し内に収まらない場合、該縦長の吹き出しを横長の吹き出しに書き換えると共に、該翻訳文を該横長の吹き出し内に表示させる。
また、特許文献３に開示されている技術によれば、例えば、電子コミックを閲覧する際に、オリジナルの言語から任意の言語に変換されたセリフの文字列を過不足なく配置する吹き出しを描画する。また、表示されているイラストや写真やマンガのイメージを損なうことなく、セリフや解説を他の言語に自由に設定可能とすることができ、且つ、セリフや解説の表示位置を自由に設定できるようにする。
【０００５】
ところで、前記特許文献１〜３に開示された技術では、ユーザが任意の翻訳文を選択し閲覧する際、翻訳文は前記吹き出し内に表示されるが、該翻訳文の文字数や行数が、原文である言語の文字数や行数よりも多い場合には、前記文字数や行数を前記吹き出し内に収める必要があった。
従って、前記吹き出しの大きさを大きくする必要があり、その結果、前記吹き出しがイラストに重なってしまい、漫画等の画像が隠れてしまうという不具合があった。
また、前記吹き出しがイラストに重ならない箇所に配置された場合であっても、翻訳文を前記吹き出し内に小さく表示させることになり、その結果、読みにくいという不具合があった。また、スクロール操作により翻訳文の全文を読めるように構成した場合であっても、操作が煩雑であるという不具合があった。
【特許文献１】特許第５６７４４５１号公報
【特許文献２】特許第５６７４４５０号公報
【特許文献３】特許第３５２２６４４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
本発明は、以上のような従来の不具合を解消するためのものであって、その課題は、漫画等の画像全体を表示したまま、翻訳文等を見やすく表示することができるシステムを提供することにある。
【課題を解決するための手段】
【０００７】
前記課題を解決するために、請求項１に記載の発明にあっては、ディスプレイの表示画面に画像を表示させる画像表示手段と、前記画像の前記表示画面内における表示位置情報を取得する表示位置情報取得手段と、前記画像に関連付けられたテキストを表示するテキスト表示手段とを有し、前記画像が表示されていない位置に、前記テキストに対応する第二テキストを表示することを特徴とする。
ここで、テキストとは、例えば漫画の画像に描かれている吹き出し内に記載されているセリフや、前記画像中の背景に記載された効果音や、ナレーション等の文字列である。
また、第二テキストとは、前記セリフの翻訳文や解説等の文字列である。
【０００８】
請求項１に記載の表示装置によれば、前記画像表示手段によって前記ディスプレイの表示画面に前記画像が表示され、前記表示位置情報取得手段によって前記画像の前記表示画面内における表示位置情報が取得されるため、前記テキスト表示手段によって前記ディスプレイの表示画面内の前記画像が表示されていない位置に、前記第二テキストを表示することができる。
【０００９】
請求項２に記載の発明にあっては、前記テキストは、前記画像に近接して表示されていることを特徴とする。
請求項２に記載の表示装置によれば、前記テキストと前記画像とを互いに重なり合うことなく表示することができる。
【００１０】
請求項３に記載の発明にあっては、前記第二テキストは、前記テキストの翻訳文であることを特徴とする。
請求項３に記載の表示装置によれば、前記画像が表示されていない位置に、前記テキストの翻訳文を表示することができる。
【００１１】
請求項４に記載の発明にあっては、前記画像表示手段は、前記画像の所定位置を選択した場合に、前記画像を下方に縮小表示させ、前記第二テキストを上方に横書きで表示することを特徴とする。
請求項４に記載の表示装置によれば、前記画像を縮小表示させることで、前記画像の全体イメージを表示した状態を保ちつつ、前記第二テキストを前記テキストと比べ、より大きく表示することができる。
【００１２】
請求項５に記載の発明にあっては、前記画像は、漫画、又はイラストであることを特徴とする。従って、例えば、漫画のセリフに対応する翻訳文を表示することができる。
【００１３】
請求項６に記載の発明にあっては、前記画像は、動画のスクリーンショットであることを特徴とする。従って、例えば、動画のセリフに対応する翻訳文を表示することができる。
【発明の効果】
【００１４】
本発明によれば、漫画等の画像全体を表示したまま、翻訳文等を見やすく表示することができる。
【図面の簡単な説明】
【００１５】
【図１】図１は、本発明の一実施形態に係る画像表示システムの構成例を示す図である。
【図２】図２は、図１の画像表示システムにおける、画像表示装置のイメージ図である。
【図３】図３は、図２に記載の画像表示装置における、ハードウェア構成の一例を示したブロック図である。
【図４】図４は、図２に記載の画像表示装置における、画像表示部に表示される画像の一例を示す図である。
【図５】図５は、図４に記載の画像における、セリフ選択時に表示される画像の一例を示す図である。
【図６】図６は、図４に記載の画像における、効果音選択時に表示される画像の一例を示す図である。
【図７】図７は、電子書籍ビューワ起動時における、画像表示処理の一例を示すフローチャートである。
【図８】図８は、図２に記載の画像表示装置における、表示画面に表示される動画スクリーンショットの一例、及び字幕選択時に表示される画像の一例を示す図である。
【図９】図９は、動画スクリーンショットビューワ起動時における、画像表示処理の一例を示すフローチャートである。
【発明を実施するための最良の形態】
【００１６】
以下、本発明を実施するための形態を、図面を参照して詳細に説明する。なお、本発明の画像表示システムは、以下の実施例に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【００１７】
＜第一実施形態＞  
図１は、本発明の一実施形態に係る画像表示システムの構成例を示す図である。
画像表示システム１０は、配信元サーバ１、ＰＣ５、外部記憶媒体８、画像表示装置２０により構成されている。
配信元サーバ１は、図示しない通信インタフェースを備えており、電子データ化された漫画、雑誌、及び書籍等のいわゆる電子書籍を、インターネットやＬＡＮ（Local Area Network）等のネットワーク３を介しＰＣ５や画像表示装置２０に配信する機能を有する。
【００１８】
配信元サーバ１には、前記電子書籍の画像データや、前記画像に関連付けられたテキストデータ（例えば、漫画のセリフや効果音や解説文など）が格納されている。また、配信元サーバ１には、例えば、前記テキストデータに関連付けられている第二のテキストデータ（例えば、翻訳文）も格納されている。なお、前記種々のデータ（前記画像データ、前記画像に関連付けられたテキストデータ、及び前記テキストデータに関連付けられている第二のテキストデータ）の格納場所は、配信元サーバ１に限定されるものではなく、配信元が備える図示しない他の装置であってもよい。
【００１９】
ＰＣ５は、図示しない通信インタフェースを備えたコンピュータ（例えば、パーソナルコンピュータ（personal computer））であって、例えば携帯電話端末で利用されている無線通信方式（以下、「無線通信４」と記す）や、いわゆる無線ＬＡＮで利用されている無線通信方式（以下、「無線通信９」と記す）を利用し、ネットワーク３へ接続する機能を有する。つまり、ＰＣ５は、無線通信４や無線通信９を通じて、ネットワーク３を介し、配信元サーバ１との相互通信を可能にする機能を有する、ユーザにより操作可能な装置である。
【００２０】
また、ＰＣ５は、前記通信インタフェース、無線通信９を介して画像表示装置２０と相互通信可能に接続でき、ＰＣ５と画像表示装置２０との間で前記種々のデータの送受信を可能にする機能を有する。また、ＰＣ５は、例えばＵＳＢ（Universal Serial Bus）ポート（図示しない）を備えており、ＵＳＢ規格に従った通信によって、外部記憶媒体８と相互通信可能に接続でき、ＰＣ５と外部記憶媒体８との間で前記種々のデータの送受信を可能にする機能を有する。
【００２１】
また、ＰＣ５は、配信元サーバ１や外部記憶媒体８や画像表示装置２０より入手した前記種々のデータを格納する機能を有する。また、ＰＣ５は、本発明の一つを実現するためのアプリケーションプログラムを格納し、前記アプリケーションプログラムを所定の制御により実行する機能を有する。
【００２２】
ディスプレイ６は、ＰＣ５から出力された前記種々のデータを視認できるよう表示する表示画面を備えている。また、ディスプレイ６の表示画面は、ユーザが前記表示画面を直接触って操作するいわゆるタッチパネル方式に対応する機能を有する。なお、本実施例では、ＰＣ５とディスプレイ６は離れた構成として説明しているが、前記構成に限定されるものではない。
【００２３】
マウス７は、ディスプレイ６の表示画面におけるポインティング手段の一つとして、ＰＣ５に接続される。マウス７は、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の無線接続、或いはＵＳＢコネクタ等を使用した有線接続により接続される汎用品を使用することができる。
【００２４】
外部記憶媒体８は、例えば、不揮発性の半導体メモリであるフラッシュメモリであり、ＰＣ５や画像表示装置２０とに備えられているＵＳＢポートを介して、ＰＣ５や画像表示装置２０とそれぞれ通信可能に接続できる。また、外部記憶媒体８は、ＰＣ５や画像表示装置２０より入手した前記種々のデータが格納されている。外部記憶媒体８は、前記ＵＳＢポートを介してＰＣ５や画像表示装置２０に接続されると、それぞれの装置（ＰＣ５や画像表示装置２０）の制御下で、外部記憶媒体８に対するデータの読み出し、データの書き込み等の処理が行われる。
【００２５】
画像表示装置２０は、図示しない通信インタフェースを備えた、例えばタブレット端末やスマートフォン等のユーザにより操作可能な携帯端末である。画像表示装置２０は、前記通信インタフェースを介し、無線通信４や無線通信９を利用し、ネットワーク３へ接続する機能を有する。つまり、画像表示装置２０は、無線通信４や無線通信９を通じて、ネットワーク３を介し、配信元サーバ１との相互通信を可能にする機能を有する、ユーザにより操作可能な装置である
【００２６】
また、画像表示装置２０は、前記通信インタフェース、無線通信９を介してＰＣ５と相互通信可能に接続でき、画像表示装置２０とＰＣ５との間で前記種々のデータの送受信を可能にする機能を有する。また、画像表示装置２０は、例えば前記ＵＳＢポート（図示しない）を備えており、ＵＳＢ規格に従った通信によって、外部記憶媒体８と相互通信可能に接続でき、画像表示装置２０と外部記憶媒体８との間で前記種々のデータの送受信を可能にする機能を有する。
【００２７】
また、画像表示装置２０は、配信元サーバ１やＰＣ５や外部記憶媒体８より入手した前記種々のデータを格納する機能を有する。また、画像表示装置２０は、本発明の一つを実現するためのアプリケーションプログラムを格納し、前記アプリケーションプログラムを所定の制御により実行する機能を有する。
【００２８】
図２は、図１の画像表示システムにおける、画像表示装置のイメージ図である。
画像表示装置２０は、配信元サーバ１やＰＣ５や外部記憶媒体８より入手した前記種々のデータを視認できるよう表示する、画像表示部２１を備えている。画像表示部２１は、ユーザが画像表示部２１の表面に直接触れて操作するいわゆるタッチパネル方式に対応している。なお、画像表示部２１に表示されるイメージは、図４以降で詳述する。
【００２９】
図３は、図２に記載の画像表示装置における、ハードウェア構成の一例を示したブロック図である。
画像表示装置２０は、制御部４１、記憶部４２、表示位置情報取得部４７、関連テキスト表示部４８、第二テキスト表示部４９、及び操作認識部５０を備える。前記各部（４１乃至５０）は、バスライン４５を通じて相互に通信可能に接続される構成になっている。
【００３０】
制御部４１は、画像表示装置２０全体を制御する。具体的には、制御部４１は、一例としてＣＰＵ（Central Processing Unit）であり、バスライン４５を介して画像表示装置２０内部のハードウェア構成要素（前記各部４１乃至５０）に接続される。また、制御部４１は、記憶部４２に格納されているアプリケーションプログラム４４に従い、揮発性メモリからなるＲＡＭ（図示しない）を一時記憶作業領域として、画像表示装置２０内部のハードウェア構成要素を制御することによって、画像表示装置２０全体を制御する。
また、制御部４１は、記憶部４２に格納されているアプリケーションプログラム４４に従い、必要に応じて、表示位置情報取得部４７、関連テキスト表示部４８、及び第二テキスト表示部４９から読み込んだ種々のデータを用いて、アプリケーションプログラム４４が要求する演算処理動作を行う。
また、制御部４１は、画像表示部２１を通じ操作認識部５０を介して送信される、ユーザからの各種の指令に従い、画像表示装置２０の前記各部（４１乃至５０）を制御する。
【００３１】
記憶部４２は、例えば、画像表示装置２０が所定の処理動作を実行するのに必要なＯＳ（オペレーティング・システム）（図示しない）や、制御部４１が実行する演算処理動作を規定した、アプリケーションプログラム４４と共に、図示しない種々のアプリケーションや種々のデータを記憶しておくためのメモリであり、例えばハードディスクや半導体メモリ等が用いられる。記憶部４２に記憶される種々のデータは、それぞれ、バスライン４５を介して制御部４１から出力されるデータ書き込み指令信号に基づき書き込まれ、またバスライン４５を介して制御部４１から出力されるデータ読み出し指令信号に基づき読み込まれる。
【００３２】
アプリケーションプログラム４４は、例えば、制御部４１により実行される、画像表示装置２０の各部（４１乃至５０）を制御するための制御プログラムと、配信元サーバ１、ＰＣ５、外部記憶媒体８から入手した前記種々のデータと、前記種々のデータと前記種々のデータに関連するデータとを、前記電子書籍として画像表示部２１へ表示するよう制御する、電子書籍ビューワプログラムとを含む。
アプリケーションプログラム４４は、画像表示装置２０の画像表示部２１を通じてユーザから入力された指令情報に基づき、制御部４１の制御動作を規定している。なお、アプリケーションプログラム４４は、本実施例においては、画像表示装置２０で実行可能としているが、プログラムであるため、例えばＰＣ５のような制御部を備えるコンピュータであれば実行可能である。
【００３３】
表示位置情報取得部４７は、制御部４１の制御下で、配信元サーバ１や、ＰＣ５や、外部記憶媒体８より出力された前記電子書籍に係わる画像データから、画像表示部２１における前記画像データを表示する位置に関する情報を取得する。表示位置情報取得部４７により取得された表示位置情報は、制御部４１の制御下で、バスライン４５を介して記憶部４２に格納される。表示位置情報取得部４７により取得された表示位置情報は、制御部４１の制御下で、アプリケーションプログラム４４からの関連テキスト表示指令や第二テキスト表示指令に基づき、適宜参照される。
【００３４】
関連テキスト表示部４８は、制御部４１の制御下で、配信元サーバ１や、ＰＣ５や、外部記憶媒体８より出力された前記電子書籍に係わる画像データに関連付けられたテキストを表示する。本実施例においては、前記画像データに関連付けられたテキストとは、主にセリフや効果音や解説文等であるが、文字列であればこれらに限定されることはない。また、前記画像データに関連付けられたテキストは、配信元サーバ１や、ＰＣ５や、外部記憶媒体８から前記電子書籍が出力される際に、前記電子書籍の画像データに関連付けられて出力され、制御部４１の制御下で、バスライン４５を介して記憶部４２に格納される。
【００３５】
また、関連テキスト表示部４８は、制御部４１の制御下で、アプリケーションプログラム４４より出力される関連テキスト表示指令に基づき、記憶部４２に格納されている前記画像データに関連付けされたテキストを参照し、参照された前記テキストを画像表示部２１へ表示する。
【００３６】
第二テキスト表示部４９は、制御部４１の制御下で、配信元サーバ１や、ＰＣ５や、外部記憶媒体８より出力された前記電子書籍に係わる前記テキストデータに関連付けられている第二のテキストを表示する。本実施例においては、前記第二のテキストとは、主に前記画像データに関連付けられたテキストの翻訳文であるが、これに限定されることはない。また、前記第二テキストは、配信元サーバ１や、ＰＣ５や、外部記憶媒体８から前記電子書籍が出力される際に、前記電子書籍の前記テキストデータに関連付けられて出力され、制御部４１の制御下で、バスライン４５を介して記憶部４２に格納される。
【００３７】
また、第二テキスト表示部４９は、制御部４１の制御下で、アプリケーションプログラム４４より出力される第二テキスト表示指令に基づき、記憶部４２に格納されている前記テキストデータに関連付けされた第二テキストを参照し、参照された前記第二テキストを画像表示部２１へ表示する。
【００３８】
操作認識部５０は、制御部４１の制御下で、画像表示部２１を通じて、ユーザからの選択指令信号を受信すると、前記選択指令信号を制御部４１へ出力する。なお、本実施例においては、前記選択指令信号とは、画面表示部２１に表示される種々の画像やテキストをユーザが選択した際に出力される信号や、ユーザの画面操作に応じた種々の動作（いわゆる、タップ、スワイプ、フリック、ピンチイン、ピンチアウト等）の実行を指令する信号としているが、これらに限定されることはない。
【００３９】
図４は、図２に記載の画像表示装置における、画像表示部に表示される画像の一例を示す図である。
ページ２２は、ユーザが画像表示部２１を操作することにより、画像表示装置２０の制御部４１の制御下で、アプリケーションプログラム４４の画像表示指令に基づき、画像表示部２１に表示される漫画画像の一部である。なお、本実施例においては、ページ２２は、いわゆるコマ割りが複数なされているが、前記コマ割りは無くてもよく、これに限定されることはない。
【００４０】
ページ２２の漫画画像は、図４から明らかなように、特定の対象物である人物画像２３、背景画像２５、及び特定の対象物である乗り物画像２６とで構成されている。人物画像２３の近傍には、例えば、前記人物画像２３に関連付けられたテキストがセリフ２４（Ａ）（例えば、「おはよう」）として表示されている。同様に、例えば、前記乗り物画像２６の近傍には、例えば、前記乗り物画像２６に関連付けられたテキストが効果音２７（Ａ）（例えば、「ビビー！」）として表示されている。
ページ２２の漫画画像は、例えば、制御部４１の制御下で、アプリケーションプログラム４４の画像表示指令に基づき、予め記憶部４２に格納されている閲覧したいページの画像データや、前記画像データに関連付けされたテキスト（セリフ）や、前記テキストデータに関連付けされた第二テキスト（翻訳文）、や、前記画像の表示位置情報などから、閲覧する際に必要なデータや情報が適宜、参照／選択されることで表示される。
また、ページ２２の表示サイズは、出力先の画像表示部の大きさに合わせて、アプリケーションプログラム４４の所定の処理動作に基づき適宜調整される。
【００４１】
図５は、図４に記載の画像における、セリフ選択時に表示される画像の一例を示す図である。
図５に示す画像表示部２１には、図４で詳述したページ２２の一部をユーザが選択した際に表示されるイメージを示している。具体的には、画像表示部２１は、テキストを表示するテキスト表示部２１（Ａ）と、ページ２２の縮小版を表示する画像表示部２１（Ｂ）と、テキスト表示部２１（Ａ）に表示されるテキストの拡張機能を選択する機能選択部２１（Ｃ）との３つの領域に分かれている。画像表示部２１の中で、これら３つの前記各部（２１（Ａ）乃至２１（Ｃ））が占めるそれぞれの領域は、前記それぞれの領域に配置（表示）されるテキストの長さや文字の大きさ、或いは画像の大きさ等によって、制御部４１の制御下で、アプリケーションプログラム４４の所定の指令に基づき適宜調整される。そのため、本実施例で割り当てられた領域に限定はされない。
【００４２】
テキスト表示部２１（Ａ）には、図４のセリフ２４（Ａ）に関連付けられている第二テキストが表示される。上述したように、前記画像データには、前記画像データに関連付けられたテキスト（セリフ）や、前記テキスト（セリフ）に関連付けられた第二テキスト（翻訳文）が予め関連付けられており、記憶部４２へ格納されている。例えば、ユーザにより、図４のセリフ２４（Ａ）の選択操作がなされると、制御部４１は、アプリケーションプログラム４４の第二テキスト表示指令に基づいて、記憶部４２から前記セリフ２４（Ａ）に関連付いている翻訳文（図５の翻訳文２４（Ｂ））を抽出し、第二テキスト表示部４９を介して、テキスト表示部２１（Ａ）に表示させる。
また、テキスト表示部２１（Ａ）には、スクロールバー２８が配置されている。スクロールバー２８は、例えば、翻訳文２４（Ｂ）が長文であったり、文字サイズを大きく表示するような設定をしているような場合において、画面表示部２１（Ａ）の領域に収まりきらない時には、スクロールバー２８をユーザが操作することで、テキスト表示部２１（Ａ）に表示されている全文を確認することができる。
【００４３】
画像表示部２１（Ｂ）には、図４に表示されているページ２２全体の、縮小画像が表示される。上述したように、前記画像データには、前記画像を表示する位置の情報である表示位置情報が予め関連付けられており、記憶部４２へ格納されている。例えば、ユーザにより、図４のセリフ２４（Ａ）の選択操作がなされると、制御部４１は、予め取得している前記表示位置情報、及びアプリケーションプログラム４４の画像縮小指令に基づいて、テキスト表示部２１（Ａ）及び機能選択表示部２１（Ｃ）に重ならないように、図４のページ２２を縮小し、画面表示部２１（Ｂ）に表示させる。
【００４４】
機能選択部２１（Ｃ）には、テキスト表示部２１（Ａ）に表示されるテキストの拡張機能を実行させる種々のアイコン（２９（Ａ）乃至２９（Ｆ））が表示される。
例えばアイコン２９（Ａ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、翻訳文２４（Ｂ）の言語をユーザが所望する様々な国の言語に切り替え、表示することができる。
また、例えばアイコン２９（Ｂ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、翻訳文２４（Ｂ）のコピーを記憶しておくことができる。
また、例えばアイコン２９（Ｃ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、翻訳文２４（Ｂ）の意味や使用例を、図示しないブラウザを介してＷｅｂ上から検索することができる。
また、例えばアイコン２９（Ｄ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、前記Ｗｅｂから検索された結果を前記ブラウザに記憶させておくことができる。
また、例えばアイコン２９（Ｅ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、画像表示部２１（Ａ）を閉じ、画像表示部２１（Ｂ）の領域を拡大し、前記拡大された領域に合わせて、ページ２２を大きく表示することができる。
また、例えばアイコン２９（Ｆ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、ユーザ所望の種々の機能を追加できる。なお、本実施例においては、アイコン２９（Ａ）乃至２９（Ｅ）の説明の中で、２４（Ｂ）は翻訳文とし説明したが、これは翻訳文に限らず、文字列であれば効果音や解説文等でも同様の処理が可能である。
【００４５】
図６は、図４に記載の画像における、効果音選択時に表示される画像の一例を示す図である。
なお、図５と図６の相違点は、テキスト表示部２１（Ａ）に表示される文字列が、ページ２２のセリフ（図５の２４（Ａ））の翻訳文ではなく、特定の対象物である乗り物画像の近傍に表示されている効果音２７（Ａ）の翻訳文であることである。そのため、説明は、効果音２７（Ａ）及び翻訳文２７（Ｂ）のみとする。
【００４６】
テキスト表示部２１（Ａ）には、図４の効果音２７（Ａ）に関連付けられている第二テキストが表示される。上述したように、前記画像データには、前記画像データに関連付けられたテキスト（効果音）や、前記テキスト（効果音）に関連付けられた第二テキスト（翻訳文）が予め関連付けられており、記憶部４２へ格納されている。例えば、ユーザにより、図４の効果音２７（Ａ）の選択操作がなされると、制御部４１は、アプリケーションプログラム４４の第二テキスト表示指令に基づいて、記憶部４２から前記効果音２７（Ａ）に関連付いている翻訳文（図５の翻訳文２７（Ｂ））を抽出し、第二テキスト表示部４９を介して、テキスト表示部２１（Ａ）に表示させる。
【００４７】
画像表示部２１（Ｂ）には、図４に表示されているページ２２全体の、縮小画像が表示される。上述したように、前記画像データには、前記画像を表示する位置の情報である表示位置情報が予め関連付けられており、記憶部４２へ格納されている。例えば、ユーザにより、図４の効果音２７（Ａ）の選択操作がなされると、制御部４１は、予め取得している前記表示位置情報、及びアプリケーションプログラム４４の画像縮小指令に基づいて、テキスト表示部２１（Ａ）及び機能選択部２１（Ｃ）に重ならないように、図４のページ２２を縮小し、画面表示部２１（Ｂ）に表示させる。
なお、既に図５で詳述しているが、前記各部（２１（Ａ）乃至（Ｃ））が占めるそれぞれの領域は、前記それぞれの領域に配置（表示）されるテキストの長さや文字の大きさ、或いは画像の大きさ等によって、制御部４１の制御下で、アプリケーションプログラム４４の所定の指令に基づき適宜調整される。そのため、本実施例で割り振られた領域に限定はされない。
【００４８】
図７は、電子書籍ビューワ起動時における、画像表示処理の一例を示すフローチャートである。
図７において、まず、ユーザからの電子書籍ビューワ起動指示を受け、制御部４１によりアプリケーションプログラム４４が起動され、これにより以下に説明する画像表示処理が開始される（ステップＳ１）。
次に、制御部４１は、ユーザが所望するいわゆる電子書籍を、配信元サーバ１や、ＰＣ５や、外部記憶媒体８等から取得するべく、所定の処理動作を実施する。次に、制御部４１は、取得した電子書籍から、画像データや、前記画像データが表示される表示位置情報や、前記画像データに関連付けられているテキスト情報や、前記テキスト情報に関連付けられている第二テキスト情報などを取得する（ステップＳ２）。
次に、制御部４１は、アプリケーションプログラム４４の処理動作に基づき、取得した画像データを、画像表示部２１に表示する（ステップＳ３）。これにより、ユーザは、画像（漫画）を閲覧することが可能となる。
そして、ユーザにより、例えば画像から吹き出しているセリフが選択されると、制御部４１は、アプリケーションプログラム４４の処理動作に基づき、取得した前記表示位置情報を参照し、画像が表示されていない位置を認識すると共に、予め前記セリフに関連付けられている第二テキスト（例えば翻訳文）を前記画像が表示されていない位置に横書きで表示し、さらに、前記取得した画像を前記第二テキストに重ならない位置に縮小表示させる（ステップＳ４）。
そして、ユーザからの電子書籍ビューワ終了指示を受け、制御部４１によりアプリケーションプログラム４４が終了され、一連の画像表示処理が終了する。（ステップＳ５）。なお、電子書籍ビューワを終了せずに、閲覧を続ける場合は、制御部４１は、アプリケーションプログラム４４の処理動作に基づき、ステップＳ２乃至Ｓ４までの処理を引き続き実行する。
【００４９】
＜第二実施形態＞  
図８は、図２に記載の画像表示装置における、表示画面に表示される動画スクリーンショットの一例、及び字幕選択時に表示される画像の一例を示す図である。
図８（Ａ）は、ユーザが画像表示部２１を操作することにより、画像表示装置２０の制御部４１の制御下で、アプリケーションプログラム４４の動画スクリーンショット表示指令に基づき、画像表示部２１に表示される動画のスクリーンショットの一部である。
なお、第二の実施形態においても、画像データや画像データに関連付けられているテキストや、前記テキストに関連付けられている第二のテキストや、前記画像の表示位置情報などの種々のデータ（情報）取得方法は、第一の実施形態で上述した方法と同様である。また、前記種々のデータ（情報）の表示方法、制御部４１の制御下でアプリケーション４４による処理方法も、また同様である。つまり、第一の実施形態では、表示処理する対象が画像（いわゆる電子書籍）であったが、第二の実施形態では、洋画や、海外ドラマや、インターネット配信される動画等のスクリーンショットである。
【００５０】
画像表示部２１は、動画スクリーンショットを表示する動画スクリーンショット表示部３０（Ａ）と、動画スクリーンショットの場面に応じた字幕を表示する字幕表示部３１（Ａ）との２つの領域に分かれている。画像表示部２１の中で、これら２つの前記表示部（３０（Ａ）、及び３１（Ａ））が占めるそれぞれの領域は、前記それぞれの領域に配置（表示）されるテキストの長さや文字の大きさ、或いは動画スクリーンショットの大きさ等によって、制御部４１の制御下で、アプリケーションプログラム４４の所定の指令に基づき適宜調整される。そのため、本実施例で割り振られた領域に限定はされない。
例えば、動画スクリーンショット表示部３０（Ａ）に表示されるスクリーンショットが洋画の場合には、字幕表示部３１（Ａ）には、例えば、特定の対象物である人物画像３２の話している内容の字幕として（例えば、「Ｇｏｏｄ  Ｍｏｒｎｉｎｇ」３３（Ａ））と原文で表示される。
【００５１】
図８（Ｂ）は、ユーザが画像表示部２１を操作し、図８（Ａ）の字幕３３（Ａ）を選択することにより、画像表示装置２０の制御部４１の制御下で、アプリケーションプログラム４４の動画スクリーンショット表示指令に基づき、画像表示部２１に表示される動画のスクリーンショットの一部である。
画像表示部２１は、テキストを表示するテキスト表示部３１（Ｂ）と、動画スクリーンショットの縮小版を表示する動画スクリーンショット表示部３０（Ｂ）と、テキスト表示部３１（Ｂ）に表示されるテキストの拡張機能を選択する機能選択部３１（Ｃ）との３つの領域に分かれている。画像表示部２１の中で、これら３つの前記各部（３０（Ｂ）、３１（Ｂ）、３１（Ｃ）が占めるそれぞれの領域は、前記それぞれの領域に配置（表示）されるテキストの長さや文字の大きさ、或いは画像の大きさ等によって、制御部４１の制御下で、アプリケーションプログラム４４の所定の指令に基づき適宜調整される。そのため、本実施例で割り当てられた領域に限定はされない。
【００５２】
テキスト表示部３１（Ｂ）には、図８（Ａ）の３３（Ａ）に関連付けられている原文の字幕を翻訳した文が表示される。上述したように、動画スクリーンショットには、前記動画スクリーンショットに関連付けられたテキスト（原文の字幕）や、前記テキスト（原文の字幕）に関連付けられた第二テキスト（翻訳文）が予め関連付けられており、記憶部４２へ格納されている。例えば、ユーザにより、図８の字幕３３（Ａ）の選択操作がなされると、制御部４１は、アプリケーションプログラム４４の第二テキスト表示指令に基づいて、記憶部４２から字幕３３（Ａ）に関連付いている翻訳文（図８の翻訳文３３（Ｂ））を抽出し、第二テキスト表示部４９を介して、テキスト表示部３１（Ｂ）に表示させる。
また、テキスト表示部３１（Ｂ）には、スクロールバー３４が配置されている。スクロールバー３４は、例えば、翻訳文３３（Ｂ）が長文であったり、文字サイズを大きく表示するような設定をしているような場合において、テキスト表示部３１（Ｂ）の領域に収まりきらない時には、スクロールバー３４をユーザが操作することで、テキスト表示部３１（Ｂ）に表示されている全文を確認することができる。
【００５３】
動画スクリーンショット表示部３０（Ｂ）には、図８（Ａ）の動画スクリーンショット表示部３０（Ａ）に表示されている動画のスクリーンショット全体の縮小画像が表示される。上述したように、前記動画スクリーンショットには、前記動画スクリーンショットを表示する位置の情報である表示位置情報が予め関連付けられており、記憶部４２へ格納されている。例えば、ユーザにより、図８の字幕３３（Ａ）の選択操作がなされると、制御部４１は、予め取得している前記表示位置情報、及びアプリケーションプログラム４４の画像縮小指令に基づいて、テキスト表示部３１（Ｂ）及び機能選択部３１（Ｃ）に重ならないように、図８（Ａ）の動画スクリーンショットを縮小し、動画スクリーンショット表示部３０（Ｂ）に表示させる。
【００５４】
機能選択部３１（Ｃ）には、テキスト表示部３１（Ｂ）に表示されるテキストの拡張機能を実行させる種々のアイコン（３５（Ａ）乃至３５（Ｆ））が表示される。
例えばアイコン３５（Ａ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、字幕３３（Ａ）や翻訳文３３（Ｂ）の言語をユーザが所望する様々な国の言語に切り替え、表示することができる。
また、例えばアイコン３５（Ｂ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、字幕３３（Ａ）や翻訳文３３（Ｂ）のコピーを記憶しておくことができる。
また、例えばアイコン３５（Ｃ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、字幕３３（Ａ）や翻訳文３３（Ｂ）の意味や使用例を、図示しないブラウザを介してＷｅｂ上から検索することができる。
また、例えばアイコン３５（Ｄ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、前記Ｗｅｂから検索された結果を前記ブラウザに記憶させておくことができる。
また、例えばアイコン３５（Ｅ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、テキスト表示部３１（Ｂ）を閉じ、動画スクリーンショット表示部３０（Ｂ）の領域を拡大し、前記拡大された領域に合わせて、動画スクリーンショットを大きく表示することができる。
また、例えばアイコン３５（Ｆ）がユーザにより選択された場合には、制御部４１の制御下で、アプリケーションプログラム４４の所定の処理動作に基づき、ユーザ所望の種々の機能を追加できる。
【００５５】
図９は、動画スクリーンショットビューワ起動時における、画像表示処理の一例を示すフローチャートである。
図９において、まず、ユーザからの動画スクリーンショットビューワ起動指示を受け、制御部４１によりアプリケーションプログラム４４が起動され、これにより以下に説明する画像表示処理が開始される（ステップＳ１１）。
次に、制御部４１は、ユーザが所望する動画のスクリーンショットを、配信元サーバ１や、ＰＣ５や、外部記憶媒体８等から取得するべく、所定の処理動作を実施する。次に、制御部４１は、取得した動画のスクリーンショットから、画像データや、前記画像データが表示される表示位置情報や、前記画像データに関連付けられているテキスト情報や、前記テキスト情報に関連付けられている第二テキスト情報などを取得する（ステップＳ１２）。
次に、制御部４１は、アプリケーションプログラム４４の処理動作に基づき、取得した動画のスクリーンショットを、画像表示部２１に表示する（ステップＳ１３）。これにより、ユーザは、動画のスクリーンショットを閲覧することが可能となる。
そして、ユーザにより、例えば動画スクリーンショットの字幕が選択されると、制御部４１は、アプリケーションプログラム４４の処理動作に基づき、取得した前記表示位置情報を参照し、動画のスクリーンショットが表示されていない位置を認識すると共に、予め前記字幕に関連付けられている第二テキスト（例えば翻訳文）を前記動画のスクリーンショットが表示されていない位置に横書きで表示し、さらに、前記取得した動画のスクリーンショットを前記第二テキストに重ならない位置に縮小表示させる（ステップＳ１４）。
そして、ユーザからの動画スクリーンショットビューワ終了指示を受け、制御部４１によりアプリケーションプログラム４４が終了され、一連の画像表示処理が終了する。（ステップＳ１５）。なお、動画スクリーンショットビューワを終了せずに、閲覧を続ける場合は、制御部４１は、アプリケーションプログラム４４の処理動作に基づき、ステップＳ１２乃至Ｓ１４までの処理を引き続き実行する。
【産業上の利用可能性】
【００５６】
本発明に係る画像表示装置、画像表示システム、画像表示方法、及びコンピュータプログラムは、漫画等の画像全体を表示したまま、翻訳文等を見やすく表示することができ、電子書籍配信産業、及び映像コンテンツ配信産業等で利用が可能である。
【符号の説明】
【００５７】
１  配信元サーバ
３  ネットワーク
４  無線通信（携帯電話端末で利用されている無線通信方式）
５  ＰＣ
６  ディスプレイ
７  マウス
８  外部記憶媒体
９  無線通信（無線ＬＡＮで利用されている無線通信方式）
１０  画像表示システム全体
２０  画像表示装置
２１  画像表示部
２１（Ａ）  テキスト表示部
２１（Ｂ）  画像表示部
２１（Ｃ）  機能選択部
２２  ページ
２３  特定の対象物である人物画像
２４（Ａ）  セリフ
２４（Ｂ）  翻訳文
２５  背景画像
２６  特定の対象物である乗り物画像
２７（Ａ）  効果音
２７（Ｂ）  翻訳文
２８  スクロールバー
２９（Ａ）〜２９（Ｆ）  アイコン
３０（Ａ）  動画スクリーンショット表示部
３０（Ｂ）  動画スクリーンショット表示部
３１（Ａ）  字幕表示部
３１（Ｂ）  テキスト表示部
３１（Ｃ）  機能選択部
３２  特定の対象物である人物画像
３３（Ａ）  字幕
３３（Ｂ）  翻訳文
３４  スクロールバー
３５（Ａ）〜３５（Ｆ）  アイコン
４１  制御部
４２  記憶部
４４  アプリケーションプログラム
４５  バスライン
４７  表示位置情報取得部
４８  関連テキスト表示部
４９  第二テキスト表示部
５０  操作認識部
【図１】
2017187586.tif 000003
【図２】
2017187586.tif 000004
【図３】
2017187586.tif 000005
【図４】
2017187586.tif 000006
【図５】
2017187586.tif 000007
【図６】
2017187586.tif 000008
【図７】
2017187586.tif 000009
【図８】
2017187586.tif 000010
【図９】
2017187586.tif 000011