(57)【要約】【課題】対象画像内に含まれている文字列のうち、注目される文字列を、利用者に提示する注目文字列として選択することのできる画像処理装置を提供する。【解決手段】対象画像、及び当該対象画像内において時間とともに移動する注目位置を示す注目位置情報を取得し、対象画像内に含まれる複数の文字列を抽出するとともに、当該抽出した各文字列の位置を特定し、注目位置情報により示される注目位置と、抽出した各文字列の位置と、に基づいて、抽出した複数の文字列の中から、時間とともに変化する注目文字列を出力する文字列として選択する画像処理装置である。【選択図】図１
2009193229.tif 000002
【特許請求の範囲】
【請求項１】
対象画像を取得する画像取得手段と、
前記対象画像内において時間とともに移動する注目位置を示す注目位置情報を取得する注目位置情報取得手段と、
前記対象画像内に含まれる複数の文字列を抽出するとともに、当該抽出した各文字列の位置を特定する文字列抽出手段と、
前記注目位置情報により示される注目位置と、前記抽出した各文字列の位置と、に基づいて、前記抽出した複数の文字列の中から、時間とともに変化する注目文字列を出力する文字列として選択する注目文字列選択手段と、
を含むことを特徴とする画像処理装置。
【請求項２】
前記注目文字列選択手段は、前記抽出した各文字列の位置として特定された前記対象画像内の領域のうち、各時点における前記注目位置が含まれる領域に対応する文字列を、当該時点における前記注目文字列として選択する
ことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記注目文字列選択手段は、前記抽出した各文字列の位置として特定された前記対象画像内の領域の一つに前記注目位置が所定時間以上の期間にわたって存在する場合に、当該領域に対応する文字列を、当該期間における前記注目文字列として選択する
ことを特徴とする請求項１記載の画像処理装置。
【請求項４】
前記注目文字列選択手段は、前記注目位置が前記対象画像内を移動する時間を複数の時間区間に分割し、分割された時間区間のそれぞれにおける前記注目位置の移動範囲に基づいて、当該時間区間における前記注目文字列を選択する
ことを特徴とする請求項１記載の画像処理装置。
【請求項５】
前記文字列抽出手段は、前記抽出した各文字列の位置として、当該文字列に外接する矩形領域を所定方向に向けて延伸させた領域を特定する
ことを特徴とする請求項１から４のいずれか一項記載の画像処理装置。
【請求項６】
対象画像を取得する画像取得手段、
前記対象画像内において時間とともに移動する注目位置を示す注目位置情報を取得する注目位置情報取得手段、
前記対象画像内に含まれる複数の文字列を抽出するとともに、当該抽出した各文字列の位置を特定する文字列抽出手段、及び
前記注目位置情報により示される注目位置と、前記抽出した各文字列の位置と、に基づいて、前記抽出した複数の文字列の中から、時間とともに変化する注目文字列を出力する文字列として選択する注目文字列選択手段、
としてコンピュータを機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びプログラムに関する。
【背景技術】
【０００２】
例えばプレゼンテーションや講義などの講演の際に使用された画像などを、講演の終了後にも閲覧したい場合がある。そこで、この講演で使用された画像（対象画像）を、講演中に講演者が話した音声の情報や、講演者が指し示した画像内の位置（例えばマウスポインタの位置）を示す情報などとともに記録する技術が提案されている（特許文献１参照）。このような技術により記録された対象画像は、対象画像の閲覧を希望する利用者の要求に応じて、当該利用者が使用する利用者端末に提供される。これにより、利用者端末は、講演時に記録された音声などとともに、当該端末の表示画面に応じた大きさで、対象画像を表示することができる。
【特許文献１】特開２００３−５８９０１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
本発明は、対象画像内に含まれている文字列のうち、注目される文字列を、利用者に提示する注目文字列として選択することのできる画像処理装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００４】
請求項１記載の発明は、画像処理装置であって、対象画像を取得する画像取得手段と、前記対象画像内において時間とともに移動する注目位置を示す注目位置情報を取得する注目位置情報取得手段と、前記対象画像内に含まれる複数の文字列を抽出するとともに、当該抽出した各文字列の位置を特定する文字列抽出手段と、前記注目位置情報により示される注目位置と、前記抽出した各文字列の位置と、に基づいて、前記抽出した複数の文字列の中から、時間とともに変化する注目文字列を出力する文字列として選択する注目文字列選択手段と、を含むことを特徴とする。
【０００５】
請求項２記載の発明は、請求項１記載の画像処理装置であって、前記注目文字列選択手段は、前記抽出した各文字列の位置として特定された前記対象画像内の領域のうち、各時点における前記注目位置が含まれる領域に対応する文字列を、当該時点における前記注目文字列として選択することを特徴とする。
【０００６】
請求項３記載の発明は、請求項１記載の画像処理装置であって、前記注目文字列選択手段は、前記抽出した各文字列の位置として特定された前記対象画像内の領域の一つに前記注目位置が所定時間以上の期間にわたって存在する場合に、当該領域に対応する文字列を、当該期間における前記注目文字列として選択することを特徴とする。
【０００７】
請求項４記載の発明は、請求項１記載の画像処理装置であって、前記注目文字列選択手段は、前記注目位置が前記対象画像内を移動する時間を複数の時間区間に分割し、分割された時間区間のそれぞれにおける前記注目位置の移動範囲に基づいて、当該時間区間における前記注目文字列を選択することを特徴とする。
【０００８】
請求項５記載の発明は、請求項１から４のいずれか一項記載の画像処理装置であって、前記文字列抽出手段は、前記抽出した各文字列の位置として、当該文字列に外接する矩形領域を所定方向に向けて延伸させた領域を特定することを特徴とする。
【０００９】
請求項６記載の発明は、対象画像を取得する画像取得手段、前記対象画像内において時間とともに移動する注目位置を示す注目位置情報を取得する注目位置情報取得手段、前記対象画像内に含まれる複数の文字列を抽出するとともに、当該抽出した各文字列の位置を特定する文字列抽出手段、及び前記注目位置情報により示される注目位置と、前記抽出した各文字列の位置と、に基づいて、前記抽出した複数の文字列の中から、時間とともに変化する注目文字列を出力する文字列として選択する注目文字列選択手段、としてコンピュータを機能させるためのプログラムである。
【発明の効果】
【００１０】
請求項１及び６記載の発明によれば、対象画像内に含まれている文字列のうち、注目される文字列を、利用者に提示する注目文字列として選択することができる。
【００１１】
請求項２記載の発明によれば、各時点で注目位置が位置している文字列を、注目文字列として選択できる。
【００１２】
請求項３記載の発明によれば、限られた時間だけしか注目位置が位置していない文字列は、注目文字列として選択しないようにできる。
【００１３】
請求項４記載の発明によれば、各時間区間における注目位置の移動範囲により、より注目されていると推定される文字列を注目文字列として選択できる。
【００１４】
請求項５記載の発明によれば、各文字列の所定の近傍の領域に注目位置が位置している場合も、当該文字列を注目文字列として選択できる。
【発明を実施するための最良の形態】
【００１５】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【００１６】
図１は、本発明の一実施形態に係る講演情報配信装置（画像処理装置）１の概略の構成例を示す図である。図１に示すように、講演情報配信装置１は、ＬＡＮや無線通信網などの通信手段を介して講演記録装置２及び利用者端末３とデータ通信可能に接続されている。
【００１７】
講演情報配信装置１は、例えばサーバコンピュータ等であって、図１に示すように、制御部１１と、記憶部１２と、通信部１３と、を含んで構成される。講演情報配信装置１は、講演が行われた際に記録された講演情報を、講演記録装置２から受け入れて蓄積する。また、利用者端末３からの要求に応じて、蓄積された講演情報を利用者端末３に対して配信する。さらに、本実施形態において、講演情報配信装置１は、受け入れた講演情報に含まれる対象画像の中に含まれる文字列を抽出し、講演情報とともに利用者端末３に配信する。
【００１８】
制御部１１は、例えばＣＰＵ等であって、記憶部１２に格納されるプログラムに従って各種の情報処理を実行する。本実施形態において制御部１１が実行する処理の具体例については、後述する。
【００１９】
記憶部１２は、例えばＲＡＭやＲＯＭ等のメモリ素子、ハードディスクなどを含んで構成される。記憶部１２は、制御部１１によって実行されるプログラムや、各種のデータを保持する。また、記憶部１２は、制御部１１のワークメモリとしても動作する。
【００２０】
通信部１３は、例えばＬＡＮカード等のネットワークインタフェースであって、ＬＡＮや無線通信網などの通信手段を介して、講演記録装置２及び利用者端末３との間で情報の送受信を行う。
【００２１】
講演記録装置２は、例えばパーソナルコンピュータ等の情報処理装置であって、講演者が講演を行う際に使用される。本実施形態では、講演者は、例えばスクリーンやモニタの画面などに画像（講演画像）を表示しながら、プレゼンテーションや講義などの講演を行う。そして、講演記録装置２は、この講演画像や、講演の際の音声などの各種情報を、講演情報として記録する。
【００２２】
具体例として、講演記録装置２は、プレゼンテーション・プログラムを実行して、予め用意された画像をスクリーンに投影して表示させる。また、講演記録用のプログラムを実行して、表示される画像を所定時間おきに監視するとともに、マイクロフォンにより講演者が話す内容を録音する。そして、記録開始時及び表示される画像が講演者の指示などによって変更された場合には、新たに表示された画像を講演画像として記録し、画像の切り替えタイミングを示す時刻情報を記録する。また、それまで録音された音声を一つの音声データファイルとして出力して、新たな音声の録音を開始する。これにより、講演の際に聴衆に提示された複数の講演画像のそれぞれについて、当該講演画像が画面上に表示された表示時間が記録されるともに、当該講演画像の表示中に録音された音声情報を含んだ音声データファイルが生成される。
【００２３】
さらに、本実施形態においては、講演記録装置２は、講演の際に、講演画像内において時間とともに移動する注目位置を特定し、当該注目位置を示す注目位置情報を記録する。この注目位置は、講演中に注目されると考えられる講演画像内の位置であって、具体的には、講演者によって指し示される講演画像内の位置などである。この注目位置は、講演の進行に伴って、講演画像内を移動する。一例として、講演記録装置２は、講演画像が表示された画面上を講演者の操作により移動するマウスポインタの位置を示す情報を所定時間おきに取得し、注目位置情報として記録する。また、レーザーポインタ等によって講演者が指し示したスクリーン上の位置をセンサ等によって特定することによって、注目位置情報を記録してもよい。
【００２４】
以上説明した処理によって、講演記録装置２は、図２に例示するような講演情報を記録する。図２の例では、講演情報は、講演中に表示された講演画像のデータと、当該講演画像の提示中に録音された音声データと、当該講演画像内を移動する注目位置を示す注目位置情報と、を互いに関連づけて含んだ情報である。
【００２５】
また、各講演画像に関連づけられた注目位置情報は、図３に例示するようなデータとして記録される。図３の例では、注目位置情報は、対応する講演画像の表示開始時を基準時点として、この基準時点からの経過時間を示す情報と、当該時間が経過した時点における当該講演画像内の注目位置の位置座標（Ｘ座標及びＹ座標）と、を関連づける情報となっている。これにより、講演画像内における注目位置の移動経路が特定される。ここでは基準時点からの経過時間を示す情報として、基準時点から数えた所定の時間間隔（例えば０．１秒）おきの時系列のインデックスを表す時系列番号が記録されている。例えば時系列番号「１」は基準時点を、時系列番号「２」は基準時点から０．１秒経過後の時点を、時系列番号「３」は基準時点から０．２秒経過後の時点を、それぞれ表している。なお、基準時点からの経過時間を示す情報は、例えば秒を単位とした時間そのものを表す値であってもよい。講演記録装置２は、これらの講演情報を、講演情報配信装置１に送信する。
【００２６】
利用者端末３は、講演情報配信装置１に蓄積された講演情報の利用を希望する利用者が使用する情報処理装置である。本実施形態では、この利用者端末３は、例えば携帯電話やＰＤＡ（Personal Digital Assistant）、電子ブックリーダなど、利用者が携帯して持ち運ぶことの可能な携帯型端末であるものとする。利用者端末３は、講演情報配信装置１から講演情報の配信を受け、当該講演情報に含まれる画像を対象画像としてディスプレイの画面上に表示したり、当該講演情報に含まれる音声データをスピーカから再生したりする。
【００２７】
以下、本実施形態に係る講演情報配信装置１が実現する機能について、説明する。講演情報配信装置１は、機能的に、図４に示すように、講演情報取得部２１と、文字列抽出部２２と、注目文字列選択部２３と、講演情報配信部２４と、を含んで構成される。これらの機能は、例えば制御部１１が記憶部１２に格納されているプログラムを実行することにより、実現される。また、このプログラムは、例えばインターネット等の通信手段を介して提供されてもよいし、例えばＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等、各種のコンピュータ読み取り可能な情報記憶媒体に格納されて提供されてもよい。
【００２８】
講演情報取得部２１は、利用者の視聴に供するために、講演記録装置２から送信される講演情報を取得し、記憶部１２に格納する。具体的に、講演情報取得部２１は、利用者端末３に表示させる対象となる対象画像として、複数の講演画像を取得する。また、各講演画像内を当該講演画像が講演時に表示されていた時間にわたって移動する注目位置を示す注目位置情報を取得する。
【００２９】
文字列抽出部２２は、講演情報取得部２１が取得した各対象画像について、当該対象画像内に含まれる文字列を抽出するとともに、抽出した文字列の位置を特定する。以下、文字列抽出部２２が実行する処理の具体例について、説明する。
【００３０】
まず文字列抽出部２２は、公知の文字認識処理などにより、対象画像内に含まれる文字のそれぞれを抽出する。図５は、文字列抽出部２２による処理の対象となる対象画像の一例を示す図である。文字列抽出部２２は、この図に例示されるような対象画像に対して文字認識処理を実行した結果として、図６に例示するような各文字の位置情報を出力する。図６の例では、文字列抽出部２２が抽出した文字のそれぞれに対して、当該文字の位置を示す位置情報が関連づけられている。ここでは、各文字の位置は、当該文字が占める矩形領域（すなわち、当該文字に外接する矩形領域）の左上及び右下それぞれの位置を示す座標値（Ｘ座標及びＹ座標）によって示されており、各座標値は、対象画像の左下の座標値を（０，０）とした場合の例を示している。
【００３１】
さらに、文字列抽出部２２は、抽出した各文字の位置関係や、抽出した文字の中に含まれる区切り文字などに基づいて、抽出した文字を含んでなる文字列（セグメント）を特定する。ここで特定されるセグメントは、意味的にまとまりがあると推定される複数の文字からなる文字列である。例えば文字列抽出部２２は、互いの間の距離が所定の閾値以下になる文字どうしを、同じセグメントに属する文字であると判定する。なお、このときの判定基準となる閾値は、例えば判定の対象となる文字が占める矩形領域の大きさによって決定されてもよい。また、画像の上下方向及び左右方向それぞれの距離について、異なる閾値を用いて判定を行ってもよい。これにより、例えば改行された前後の文字列や、スペース（空白）の前後の文字列が、互いに異なるセグメントに分類される。
【００３２】
また、文字列抽出部２２は、抽出した文字の中から所定の区切り文字（例えば句読点など）を特定し、当該区切り文字との間の位置関係に応じて、例えば区切り文字の前後の文字列が互いに異なるセグメントとなるように、各文字が属するセグメントを決定してもよい。あるいは、文字列抽出部２２は、抽出した文字からなる文章を表す文字列に対して、当該文字列を構成する単語や文節を特定する形態素解析処理を行い、この形態素解析処理の結果に基づいて、各文字が属するセグメントを決定してもよい。例えば図５に示す対象画像の例において、文字列抽出部２２は、「新車の販売台数の低下」という文字列に対して、形態素解析を行うことにより、この文字列を構成する単語である「新車」、「の」、「販売台数」、「の」、「低下」のそれぞれをセグメントとして特定してもよい。
【００３３】
また、文字列抽出部２２は、各セグメントに含まれる文字数が所定の上限を超えないように、各セグメントに属する文字を特定してもよい。例えば上述したように、改行前後の文字列を互いに異なるセグメントに分割することとした場合に、これにより得られた複数のセグメントの中に文字数が所定の上限を超えるセグメントがあるときには、この文字数が所定の上限を超えるセグメントだけ、各文字間の間隔や所定の区切り文字の有無といった他の基準により、各セグメント内の文字数が所定の上限以下になるようにさらに分割することとしてもよい。
【００３４】
続いて、文字列抽出部２２は、特定したセグメントそれぞれの対象画像内における位置を特定する。例えば文字列抽出部２２は、各セグメントの位置を、当該セグメントに外接する矩形領域（以下、セグメント領域という）の左上及び右下それぞれの位置を示す座標値によって、特定する。この場合のセグメント領域の左上及び右下それぞれの位置の座標値は、当該セグメントに含まれる文字のそれぞれが占める矩形領域を表す座標値のうちの、Ｘ座標及びＹ座標それぞれの最小値及び最大値によって特定される。
【００３５】
図７は、このセグメントを特定する処理によって得られるセグメント情報の一例を示す図である。図７の例では、各セグメントを識別する情報（セグメントＩＤ）に対して、当該セグメントの文字列の内容と、当該セグメントの対象画像内における位置を示す情報と、が関連づけられている。また、この図７の例では、図６に例示した対象画像において、当該対象画像中の位置が上下方向に所定の閾値以上離れた文字どうしが、互いに異なるセグメントに属するように、各セグメントが特定されている。
【００３６】
注目文字列選択部２３は、講演情報取得部２１が取得した注目位置情報により示される注目位置と、文字列抽出部２２が抽出した各セグメントの対象画像内における位置と、に基づいて、文字列抽出部２２が抽出したセグメントの中から、時間とともに変化する注目文字列（注目セグメント）を選択する。そして、選択した注目セグメントを示す注目セグメント情報を出力する。出力された注目セグメント情報は、利用者端末３による表示処理に用いられる情報の一部として、講演情報取得部２１が取得した講演情報とともに、記憶部１２に格納される。
【００３７】
具体的に、注目文字列選択部２３は、文字列抽出部２２によって抽出された複数のセグメント（以下、候補セグメントという）の中から、講演中に対象画像が表示されていた時間に対応する時間にわたって、時間とともに切り替わるように、注目セグメントを選択する。例えば注目文字列選択部２３は、講演中に対象画像が表示されていた時間に対応する時間を、所定の時間間隔で区切って得られる複数の時点のそれぞれについて、当該時点での注目セグメントを、候補セグメントの中から選択する。これにより、時間とともに切り替わる注目セグメントが得られる。なお、ここでの各時点は、対象画像の表示開始時を基準時点とした場合における、講演記録装置２が注目位置を記録した時点に対応するものであってよい。
【００３８】
以下、注目文字列選択部２３が実行する処理の具体例について、説明する。まず注目文字列選択部２３は、注目セグメントを選択する対象となる各時点において、複数の候補セグメントそれぞれのセグメント領域のうち、どの領域に注目位置が含まれるかを判定する。そして、注目位置が含まれるセグメント領域に対応する候補セグメントを、当該時点における注目セグメントとして選択する。なお、ある時点において、注目位置がどのセグメント領域にも含まれない場合、注目文字列選択部２３は、当該時点では注目セグメントが存在しないと判定してもよい。あるいは、注目位置に最も近い位置にあるセグメント領域に対応する候補セグメントや、当該時点の直前の時点の注目セグメントとして選択された候補セグメントを、当該時点における注目セグメントとして選択してもよい。
【００３９】
これにより、注目文字列選択部２３は、例えば図８に示すような注目セグメント情報を記憶部１２に出力する。図８の例では、図３に示した注目位置情報内の時系列番号と同様の、所定の時間間隔ごとの時系列のインデックスを表す時系列番号に対して、当該時系列番号により表される時点における注目セグメントとして選択された候補セグメントを識別するセグメントＩＤが関連づけられている。ここで、注目セグメントのセグメントＩＤの欄が「−」となっている場合は、その時点における注目セグメントが存在しないことを示している。なお、この注目セグメント情報は、例えば注目文字列選択部２３が図３に示した注目位置情報のデータファイルに追記することで、記憶部１２に記憶されてもよい。
【００４０】
また、注目文字列選択部２３は、注目位置が所定時間以上の期間にわたって一つのセグメント領域内に存在する場合に、当該セグメント領域に対応する候補セグメントをこの期間における注目セグメントとして選択してもよい。この場合、ある時点において注目位置があるセグメント領域内に存在したとしても、その前後の所定時間にわたって注目位置が当該セグメント領域内に存在していない場合には、当該時点における注目セグメントとして当該セグメント領域に対応する候補セグメントを選択しないこととなる。
【００４１】
あるいは、注目文字列選択部２３は、以下のようにして注目セグメントを選択してもよい。すなわち、まず注目文字列選択部２３は、講演中に対象画像が表示されていた時間に対応する時間の全体を、所定の数又は長さの複数の時間区間に分割する。そして、分割された各時間区間における注目位置の移動範囲に基づいて、当該時間区間における注目セグメントを複数の候補セグメントの中から選択する。具体的には、分割された時間区間のそれぞれについて、注目位置が最も長く滞在したセグメント領域に対応する候補セグメントを、注目セグメントとして選択する。この場合、ある時間区間において、例えば注目位置が隣接する他のセグメント領域に含まれる時間があったとしても、それ以上の時間にわたって注目位置が特定のセグメント領域に含まれていれば、当該セグメント領域に対応する候補セグメントが注目セグメントとして選択される。
【００４２】
なお、以上説明した注目セグメント選択のためのいくつかの判定基準は、組み合わせて用いられることとしてもよい。
【００４３】
講演情報配信部２４は、利用者端末３からの配信要求を受け付けて、当該配信要求に応じて、要求された講演に関して記憶部１２に格納されている情報を利用者端末３に対して配信する。この配信される情報には、講演情報取得部２１が取得した講演情報、文字列抽出部２２によって抽出された各セグメントに関するセグメント情報、及び注目文字列選択部２３によって選択された注目セグメントを示す注目セグメント情報が含まれる。なお、講演情報配信部２４は、配信要求の対象となった講演に関する全ての情報を一括して利用者端末３に送信してもよいし、利用者端末３の再生状況に応じて少しずつ情報を送信するストリーミング配信を行ってもよい。
【００４４】
利用者端末３は、配信された講演情報に含まれる画像及び音声を、講演時に記録された順番で表示及び再生することによって、講演の内容を利用者に提示する。具体的に、利用者端末３は、配信された講演情報に含まれる対象画像を画面上に表示するとともに、当該対象画像が講演で表示された際に録音された音声データの再生を開始する。このとき、対象画像は、画面内にその全体が含まれるようなサイズで表示される。そのため、画面の大きさによっては、文字の判別がし難い場合がある。そこで、利用者端末３は、対象画像の表示中に、当該対象画像を閲覧する利用者によるテキスト切り替え指示を受け付ける。利用者がボタン操作などによってテキスト切り替え指示を行うと、利用者端末３は、このテキスト切り替え指示に応じて、画面上への対象画像の表示を中断し、代わりに文字列抽出部２２によって対象画像から抽出された文字列を画面上に表示するテキスト表示モードに移行する。図９は、この利用者端末３によって表示されるテキスト表示モードの画面の一例を示す図である。ここで、利用者端末３は、講演情報配信装置１から配信されたセグメント情報を参照して、画面上に表示する文字列を読み出す。なお、利用者端末３は、当該文字列に含まれる各文字を所定サイズ以上の大きさで表示することとしてもよい。
【００４５】
さらに、このテキスト表示モードでは、利用者端末３は、対象画像の表示及び対応する音声データの再生を開始した時点を基準時点として、当該基準時点からの経過時間に応じて、当該時間が経過した時点における注目セグメントを、利用者が他の文字列と区別可能な態様で表示してもよい。具体的に、例えば利用者端末３は、注目セグメント情報により示される各時点での注目セグメントを、他の文字列より大きなサイズで表示したり、他の文字列と異なる目立つ色で表示したり、例えばボールド体など他の文字列と異なるフォントで表示したりする。これにより、音声データの再生中に、当該再生中の音声が講演の際に録音された時点において聴衆に注目されていた文字列が、強調して利用者に提示される。
【００４６】
なお、テキスト表示モードで表示対象となる文字列全体の分量が多く、画面上に一度に表示しきれないときは、利用者端末３は、一部の文字列だけを表示し、利用者の指示に応じて当該表示されている文字列をスクロールさせることにより、他の文字列を表示することとしてもよい。さらに、利用者端末３は、利用者の指示がなくとも、注目セグメントが画面上に表示されるように、表示されている文字列をスクロールさせてもよい。また、利用者端末３は、対象画像と、当該対象画像から抽出された文字列と、を画面上に両方表示してもよい。この場合、利用者端末３は、対象画像から抽出された文字列のうち、注目セグメントを選択的に画面上に表示してもよい。
【００４７】
以上説明した本実施の形態によれば、対象画像内において時間とともに移動する注目位置に基づいて選択された、時間とともに変化する注目文字列が、利用者端末３の画面上に他の文字列と区別可能な態様で表示される。これにより、講演時に注目されていた文字列が、利用者に提示される。
【００４８】
なお、本発明の実施の形態は、以上説明したものに限られない。例えば、本実施形態において講演情報配信装置１が実行することとした処理の一部は、利用者端末３側で実行することとしてもよい。すなわち、講演情報配信装置１から講演情報の配信を受けた利用者端末３が、取得した講演情報に基づいて上述したような文字列抽出処理及び注目文字列選択処理を行い、注目セグメントを利用者に提示してもよい。この場合、利用者端末３が本発明における画像処理装置として機能することとなる。
【００４９】
また、以上の説明においては、文字列抽出部２２は、各セグメントに外接する矩形領域を、当該セグメントの対象画像内における位置（セグメント領域）として特定している。しかしながら、これに限らず、文字列抽出部２２は、この矩形領域の周囲の、所定の基準に従って定められる領域も含めて、当該セグメントの位置として特定してもよい。例えば文字列抽出部２２は、各セグメントに外接する矩形領域に加えて、当該矩形領域の下側の所定幅の領域も含むように、各セグメント領域を特定する。これにより、各セグメントに外接する矩形領域よりも上下方向の幅が所定値だけ広い領域が、セグメント領域として特定される。あるいは、文字列抽出部２２は、各セグメントに外接する矩形領域の四方の所定幅の領域も含むように、各セグメント領域を特定する。これにより、各セグメントに外接する矩形領域よりも、上下方向及び左右方向それぞれの幅が所定値だけ広い領域が、セグメント領域として特定される。このように、各セグメントに外接する矩形領域を所定方向に向けて延伸させた領域をセグメント領域として特定することにより、例えば講演者があるセグメントの下の行間の位置でマウスポインタを動かしたり、当該セグメントの全体を囲むようにマウスポインタを動かしたりして当該セグメントを指し示した場合などにおいて、当該セグメントが注目セグメントとして選択される。
【図面の簡単な説明】
【００５０】
【図１】本発明の実施の形態に係る画像処理装置の概略の構成例を表す図である。
【図２】講演記録装置が記録する講演情報の一例を示す図である。
【図３】注目位置情報の一例を示す図である。
【図４】本発明の実施の形態に係る画像処理装置が実現する機能の一例を示す機能ブロック図である。
【図５】対象画像の一例を示す図である。
【図６】文字列抽出部によって抽出される各文字の位置情報の一例を示す図である。
【図７】文字列抽出部によって生成されるセグメント情報の一例を示す図である。
【図８】注目文字列選択部によって選択された注目セグメントを示す注目セグメント情報の一例を示す図である。
【図９】利用者端末によって表示される画面の一例を示す図である。
【符号の説明】
【００５１】
１  講演情報配信装置、２  講演記録装置、３  利用者端末、１１  制御部、１２  記憶部、１３  通信部、２１  講演情報取得部、２２  文字列抽出部、２３  注目文字列選択部、２４  講演情報配信部。
【図１】
2009193229.tif 000003
【図２】
2009193229.tif 000004
【図３】
2009193229.tif 000005
【図４】
2009193229.tif 000006
【図５】
2009193229.tif 000007
【図６】
2009193229.tif 000008
【図７】
2009193229.tif 000009
【図８】
2009193229.tif 000010
【図９】
2009193229.tif 000011