(57)【要約】【課題】視聴時間を拘束されずに所望の映像を容易に検索して視聴できるようにする。【解決手段】映像信号中に現れる文字情報を文字認識器６によって抽出し、その文字情報と映像ストリーム生成器７によって符号化された映像ストリームとを時間情報を通じて関連付けてストリーム蓄積器９に記録する。そして、ストリーム蓄積器９に蓄積されている文字情報の中からキーワードに適合する文字情報を検索し、その文字情報に関連する映像ストリームを映像信号に再生する。【選択図】        図１
2004297647.tif 000002
【特許請求の範囲】
【請求項１】
入力された映像信号から文字認識によって文字情報を抽出し、その文字情報に認識時の時間情報を付加する文字認識手段と、
上記映像信号を映像ストリームに符号化し、その映像ストリームに符号化時の時間情報を付加する映像信号符号化手段と、
上記時間情報を付加した文字情報と上記時間情報を付加した映像ストリームとをストリーム蓄積手段に記録するストリーム記録手段と
を備えた
ことを特徴とする映像信号記録装置。
【請求項２】
上記映像信号を記憶して、第１のフレーム映像信号とこの第１のフレーム映像信号よりも１フレーム遅延した第２のフレーム映像信号とを出力するフレームメモリと、
上記両フレーム映像信号間のフレーム差分信号を生成する差分信号生成手段と
をさらに備え、
上記文字認識手段は、上記フレーム差分信号から文字認識によって文字情報を抽出する
ことを特徴とする請求項１記載の映像信号記録装置。
【請求項３】
上記差分信号生成手段は、上記両フレームメモリから入力されたフレーム映像信号間の差分から映像信号に重畳された微細な雑音成分を除去して上記フレーム差分信号を生成することを特徴とする請求項２記載の映像信号記録装置。
【請求項４】
上記ストリーム記録手段は、上記映像ストリームに上記文字情報を多重して記録することを特徴とする請求項１記載の映像信号記録装置。
【請求項５】
上記ストリーム記録手段は、上記映像ストリームと上記文字情報とを別々のストリームとして記録することを特徴とする請求項１記載の映像信号記録装置。
【請求項６】
映像信号から文字認識によって抽出して認識時の時間情報を付加した文字情報と上記映像信号を符号化して符号化時の時間情報を付加した映像ストリームとが蓄積されているストリーム蓄積手段について、キーワードが入力されると、上記蓄積されている文字情報の再生を要求し、再生された文字情報から上記キーワードに適合する文字情報を検索し、検索した文字情報に時間情報を通じて関連する映像ストリームの再生を要求するキーワード検索手段と、
上記蓄積されている文字情報を上記文字情報の再生要求に応じて再生し、上記蓄積されている映像ストリームの内の上記検索された文字情報に関連する映像ストリームを上記映像ストリームの再生要求に応じて再生するストリーム再生手段と、
上記再生された映像ストリームを映像信号に再生する映像信号再生手段と
を備えた
ことを特徴とする映像信号再生装置。
【請求項７】
上記キーワード検索手段によって検索された上記キーワードに適合する文字情報を表示する表示手段をさらに備え、
上記キーワード検索手段は、上記表示された文字情報の内から選択された文字情報に時間情報を通じて関連する映像ストリームの再生を要求する
ことを特徴とする請求項６記載の映像信号再生装置。
【請求項８】
上記再生された映像信号を表示する表示手段をさらに備えたことを特徴とする請求項６記載の映像信号再生装置。
【請求項９】
入力された映像信号から文字認識によって文字情報を抽出し、その文字情報に認識時の時間情報を付加する文字認識手段と、
上記映像信号を映像ストリームに符号化し、その映像ストリームに符号化時の時間情報を付加する映像信号符号化手段と、
上記時間情報を付加した文字情報と上記時間情報を付加した映像ストリームとを記録するストリーム記録手段と、
上記時間情報を付加した映像ストリームと上記時間情報を付加した文字情報とが上記ストリーム記録手段によって記録されて蓄積されているストリーム蓄積手段と、
キーワードが入力されると、上記蓄積されている文字情報の再生を要求し、再生された文字情報から上記キーワードに適合する文字情報を検索し、検索した文字情報に時間情報を通じて関連する映像ストリームの再生を要求するキーワード検索手段と、
上記蓄積されている文字情報を上記文字情報の再生要求に応じて再生し、上記蓄積されている映像ストリームの内の上記検索された文字情報に関連する映像ストリームを上記映像ストリームの再生要求に応じて再生するストリーム再生手段と、
上記再生された映像ストリームを映像信号に再生する映像信号再生手段と
を備えた
ことを特徴とする映像信号記録再生装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像信号を映像ストリームに符号化してストリーム蓄積手段に記録する映像信号記録装置、およびストリーム蓄積手段に蓄積されている映像ストリームを映像信号に再生する映像信号再生装置に関するものである。
【０００２】
【従来の技術】
本発明に関連する従来の技術としては、テレビ映像信号中に視聴者があらかじめ登録したキーワードが出現しないかを自動監視し、そのキーワードが出現した場合には、ビープ音やランプ音などの通知手段によって視聴者に通知することによって、視聴者が所望のテレビ映像を容易に視聴できるようにしたテレビ受像機があった（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開平８−２０５０４３号公報（第３頁、図１）
【０００４】
【発明が解決しようとする課題】
しかしながら、上記従来のテレビ受信機では、視聴者はキーワードをあらかじめ設定しておく必要があるとともに、テレビ放送時間中にテレビ映像をすぐに視聴できるように待機していなければキーワードが出現した所望の映像を視聴することができないという課題があった。
【０００５】
一方、従来の映像信号記録再生装置では、記録した映像の中から所望の映像を検索して視聴するのに手間および時間がかかるという課題があった。
【０００６】
本発明は、このような従来の課題を解消するためになされたものであり、自由な時間に所望の映像を容易に検索して視聴できるようにすることを目的とするものである。
【０００７】
【課題を解決するための手段】
本発明の映像信号記録再生装置は、映像信号中に現れる文字情報を文字認識によって抽出し、その文字情報と映像信号とを時間情報を通じて関連付けて記録し、時間情報を通じて映像情報と関連付けられて蓄積されている文字情報の中からキーワードに適合する文字情報を検索し、その文字情報に関連する映像信号を再生するものである。
【０００８】
【発明の実施の形態】
図１は本発明の実施の形態１の映像信号記録装置の構成図である。この実施の形態１の映像信号記録装置は、映像信号入力端子１と、時間情報入力端子２と、フレームメモリ３，４と、差分信号生成器５と、文字認識器６と、映像ストリーム生成器７と、ストリーム記録器８と、ストリーム蓄積器９とを備えている。
【０００９】
テレビ受信機などの映像信号は、映像信号入力端子１を通じて、フレームメモリ３および映像ストリーム生成器７に入力される。
【００１０】
フレームメモリ３では、映像信号入力端子１から入力された１フレーム分の映像信号を蓄積し、第１のフレーム映像信号をフレームメモリ４および差分信号生成器５に出力する。
【００１１】
フレームメモリ４では、フレームメモリ３から入力された第１のフレーム映像信号を蓄積し、この第１のフレーム映像信号よりも１フレーム遅延した第２のフレーム映像信号を差分信号生成器５に出力する。
【００１２】
差分信号生成器５では、フレームメモリ３から入力された第１のフレーム映像信号と、フレームメモリ４から入力された第２のフレーム映像信号（第１のフレーム映像信号よりも１フレーム遅延した映像信号）との差分をとり、その差分から映像信号に重畳された微細な雑音成分を除去してフレーム間差分信号を生成し、文字認識器６に出力する。
【００１３】
差分信号の大きな箇所は動きのある箇所であり、差分信号の小さな箇所は静止している箇所である。画面に表示されるテロップなどの文字パターンの内で製作者が重要と考えるものに関しては数秒間静止させ、視聴者の認識度を高めることが多い。このため、フレーム間差分信号から、文字認識器６において静止している箇所を判別することによって文字パターンを認識でき、文字情報を抽出できる。
【００１４】
また、映像信号には雑音成分が混じっていることが多いので、文字認識の誤動作を防ぐために微細な差分信号をカットする。テロップなどで使用される文字パターンは、背景となる映像と見分けやすくするために、背景と文字との明るさや色の差を大きくしてあったり、文字に対して文字とは明るさや色が大きく異なる縁取り線をつけているので、差分信号生成器５において微細な差分信号を除去してフレーム間差分信号を生成しても、そのフレーム間差分信号から文字情報が失われる可能性は非常に低い。
【００１５】
文字認識器６には、差分信号生成器５から出力されたフレーム間差分信号と、時間情報入力端子２に入力された時間情報とが入力される。文字認識器６では、上記フレーム間差分信号をもとにして映像信号中に現れるテロップなどの文字パターンを認識することによって、映像信号から文字情報を抽出し、その文字情報に上記時間情報を付加して、この時間情報付き文字情報をストリーム記録器８に出力する。なお、テロップなどの文字パターンは、数秒以上にわたって画面上に表示されることが大半であるので、抽出された文字情報が変化したときにのみ時間情報付き文字情報を出力し、同じ文字パターンが認識されている間は、時間情報付き文字情報を出力しない。
【００１６】
一方、映像ストリーム生成器７には、映像信号入力端子１に入力された映像信号と、時間情報入力端子２に入力された時間情報とが入力される。映像ストリーム生成器７では、上記映像信号を映像ストリームに符号化し、その映像ストリームに上記時間情報を付加して、この時間情報付き映像ストリームをストリーム記録器８に出力する。なお、ここでは映像ストリームの符号化に用いる映像信号を映像信号入力端子１から入力された映像信号のみとしているが、符号化に用いるメモリを効率化するためにフレームメモリ３，４から出力される映像信号を追加して入力してもよい。
【００１７】
ストリーム記録器８には、文字認識器６から出力された時間情報付き文字情報と、映像ストリーム生成器７から出力された時間情報付き映像ストリームとが入力される。ストリーム記録器８では、蓄積するストリームの種類を単純化するために、時間情報を基準にして、上記時間情報付き文字情報を上記時間情報付き映像ストリームに多重した多重記録ストリームとして、ストリーム蓄積器９に記録する。あるいは、文字情報に対するアクセスを高速化するために、時間情報付き文字情報と時間情報付き映像ストリームを別々の記録ストリームとして、ストリーム蓄積器９に記録してもよい。
【００１８】
ストリーム蓄積器９には、ストリーム記録器８によって記録された記録ストリーム（時間情報付き文字情報および時間情報付き映像ストリーム）が蓄積される。
【００１９】
このように実施の形態１によれば、映像信号中に現れる文字情報を文字認識によって抽出し、その文字情報と映像信号とを時間情報を通じて関連付けて記録することにより、記録した映像信号を文字情報を用いて検索することが可能になる。
【００２０】
これによって、テロップなどの文字パターンが表示される番組を記録した場合において、記録されて蓄積されている番組群の再生時の検索性やアクセス性が向上するので、視聴者に快適な視聴環境を提供できる。例えば、様々なキーワードで番組群を検索することや、検索した番組の一覧をテキスト表示して番組内容を把握することが可能となる。
【００２１】
また、フレーム間差分信号の微細な信号を除去することにより、映像信号に混じった雑音成分を除去して文字認識の誤動作を防止できる。
【００２２】
また、時間情報を基準にして、時間情報付き文字情報を時間情報付き映像ストリームに多重したストリームを記録することにより、蓄積するストリームを単純化できる。
【００２３】
また、時間情報付き文字情報と時間情報付き映像ストリームを別々のストリームとして記録することにより、検索時の文字情報に対するアクセスを高速化できる。
【００２４】
図２は本発明の実施の形態２の映像信号再生装置の構成図である。図２において、図１と同じものには同じ符号を付してある。この実施の形態２の映像信号再生装置は、ストリーム蓄積器９と、キーワード入力端子１０と、再生要求端子１１と、キーワード検索器１２と、ストリーム再生器１３と、映像信号再生器１４と、表示器１５とを備えている。
【００２５】
視聴者がキーワードを映像信号再生装置に入力すると、そのキーワードは、キーワード信号Ｓ１として、キーワード入力端子１０を通じてキーワード検索器１２に入力される。
【００２６】
キーワード検索器１２では、キーワード信号Ｓ１が入力されると、それをトリガーとして、蓄積されている文字情報の再生を要求する再生信号Ｓ２をストリーム蓄積器９に出力する。
【００２７】
ストリーム蓄積器９では、上記文字情報の再生を要求する再生信号Ｓ２に従って、蓄積されている記録ストリームを読み出し、読み出したストリームＳ３をストリーム再生器１３に出力する。なお、上記文字情報の再生要求に応じて出力されるストリームＳ３は、多重記録ストリームあるいは時間情報付き文字情報のみの記録ストリームである。
【００２８】
ストリーム再生器１３では、上記文字情報の再生要求に応じて出力されたストリームＳ３から時間情報付き文字情報を再生し、再生した時間情報付き文字情報Ｓ４をキーワード検索器１２に出力する。
【００２９】
キーワード検索器１２では、キーワード信号Ｓ１が入力された場合において、ストリーム再生器１３から入力された再生された時間情報付き文字情報Ｓ４をキーワード信号Ｓ１のキーワードと比較し、再生された時間情報付き文字情報Ｓ４の中から上記キーワードに適合する文字情報を検索し、検索した文字情報をキーワード適合情報Ｓ５として表示器１５に出力して表示させる。キーワード適合情報Ｓ５は、上記キーワードに適合する文字情報、あるいは上記キーワードに適合する文字情報およびそれに付加されている時間情報である。
【００３０】
視聴者が表示器１５に表示されたキーワード適合情報Ｓ５中のいずれかの文字情報を再生したい内容として選択して映像信号再生装置に入力すると、その選択された文字情報は、再生要求信号Ｓ６として、再生要求端子１１を通じてキーワード検索器１２および映像信号再生器１４に入力される。なお、再生要求信号Ｓ６は、上記選択された文字情報に時間情報を通じて関連する映像ストリームの再生を要求する信号である。
【００３１】
キーワード検索器１２では、再生要求信号Ｓ６が入力されると、視聴者によって選択された文字情報に付加されている時間情報に関連する時間情報が付加されている映像ストリームの再生を要求する再生信号Ｓ２をストリーム蓄積器９に出力する。なお、上記関連する時間情報は、例えば、文字情報に付加されている時間情報との時間差が所定範囲内となる時間情報である。
【００３２】
ストリーム蓄積器９では、上記映像ストリームの再生を要求する再生信号Ｓ２に従って、蓄積されているストリームの中から上記関連する時間情報が付加されている記録ストリームを読み出し、その読み出したストリームＳ３をストリーム再生器１３に出力する。なお、上記映像ストリームの再生要求に応じて出力されるストリームＳ３は、上記関連する時間情報が付加された多重記録ストリームあるいは時間情報付き映像ストリームのみの記録ストリームである。
【００３３】
ストリーム再生器１３では、上記映像ストリームの再生要求に応じて出力されたストリームＳ３から時間情報付き映像ストリームを再生し、再生した時間情報付き映像ストリームＳ７を映像信号再生器１４に出力する。
【００３４】
映像信号再生器１４には、ストリーム再生器１３から出力された映像ストリームＳ７と、再生要求端子１１から入力された再生要求信号Ｓ６とが入力される。映像信号再生器１４では、再生要求信号Ｓ６が入力された場合において、映像ストリームＳ７を映像信号に再生し、再生した映像信号Ｓ８を表示器１５に出力して表示させる。
【００３５】
このように実施の形態２によれば、時間情報を通じて映像信号と関連付けられて蓄積されている文字情報の中からキーワードに適合する文字情報を検索し、その文字情報に関連する映像信号を再生することにより、キーワードに適合する映像信号を容易に検索して再生することが可能になる。
【００３６】
これによって、テロップなどの文字パターンが表示される番組群が蓄積されている場合において、視聴者の自由な時間に、蓄積されている番組群の中から様々なキーワードによって所望の番組の所望のシーンを容易に検索して視聴することができるので、視聴者に快適な視聴環境を提供できる。
【００３７】
なお、上記実施の形態１の映像信号記録装置を記録部、上記実施の形態２の映像信号再生装置を再生部として、映像信号記録再生装置を構成することも可能である。
【００３８】
【発明の効果】
以上説明したように本発明によれば、映像信号とその映像信号から抽出した文字情報を時間情報を通じて関連付けて記録し、キーワードに適合する映像信号を上記文字情報を用いて検索して再生することにより、自由な時間に所望の映像を容易に検索して視聴できるという効果がある。
【図面の簡単な説明】
【図１】本発明の実施の形態１の映像信号記録装置の構成図である。
【図２】本発明の実施の形態２の映像信号再生装置の構成図である。
【符号の説明】
１  映像信号入力端子、  ２  時間情報入力端子、  ３，４  フレームメモリ、  ５  差分信号生成器、  ６  文字認識器、  ７  映像ストリーム生成器、  ８  ストリーム記録器、  ９  ストリーム蓄積器、  １０  キーワード入力端子、  １１  再生要求端子、  １２  キーワード検索器、  １３  ストリーム再生器、  １４  映像信号再生器、  １５  表示器。
【図１】
2004297647.tif 000003
【図２】
2004297647.tif 000004