【手続補正書】
【提出日】平成24年11月6日(2012.11.6)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
入力された映像のフレーム間に補間フレームを挿入してフレームレートを変換する画像処理装置であって、
入力された映像を複数のブロックに分割し、ブロック毎の動きベクトルを検出する動きベクトル検出手段と、
入力された映像から水平方向に移動する水平テロップ及び垂直方向に移動する垂直テロップを検出するテロップ検出手段と、
前記複数のブロックのうち水平テロップを含むブロックの動きベクトルを補正する第１補正手段と、
前記複数のブロックのうち垂直テロップを含むブロックの動きベクトルを補正する第２補正手段と、
前記テロップ検出手段の検出結果に基づいて、前記第１補正手段と前記第２補正手段を制御する制御手段と、
ブロック毎の動きベクトルを用いて補間フレームを生成する生成手段と、
を有し、
前記制御手段は、前記テロップ検出手段で水平テロップと垂直テロップの両方が検出された場合に、前記第１補正手段と前記第２補正手段のうち一方の補正手段による補正を行い、他方の補正手段による補正を省略するように、前記第１補正手段と前記第２補正手段を制御する
ことを特徴とする画像処理装置。
【請求項２】
前記テロップ検出手段で水平テロップと垂直テロップの両方が検出された場合に、速さが速い方のテロップを選択する選択手段をさらに有し、
前記制御手段は、前記選択手段で水平テロップが選択された場合に、前記第１補正手段による補正を行い、前記選択手段で垂直テロップが選択された場合に、前記第２補正手段による補正を行うように、前記第１補正手段と前記第２補正手段を制御する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記テロップ検出手段で水平テロップと垂直テロップの両方が検出された場合に、サイズが大きい方のテロップを選択する選択手段をさらに有し、
前記制御手段は、前記選択手段で水平テロップが選択された場合に、前記第１補正手段
による補正を行い、前記選択手段で垂直テロップが選択された場合に、前記第２補正手段による補正を行うように、前記第１補正手段と前記第２補正手段を制御する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記テロップ検出手段で水平テロップと垂直テロップの両方が検出された場合に、輝度が高い方のテロップを選択する選択手段をさらに有し、
前記制御手段は、前記選択手段で水平テロップが選択された場合に、前記第１補正手段による補正を行い、前記選択手段で垂直テロップが選択された場合に、前記第２補正手段による補正を行うように、前記第１補正手段と前記第２補正手段を制御する
ことを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記選択手段は、前記水平テロップの速さ、前記垂直テロップの速さをそれぞれ所定の閾値と比較して、それぞれのテロップが高速か低速かを判定し、
一方のテロップが高速と判定された場合には、該テロップを選択し、
両方のテロップの判定結果が同じ場合には、水平テロップを選択する
ことを特徴とする請求項２に記載の画像処理装置。
【請求項６】
前記選択手段は、前記水平テロップのサイズ、前記垂直テロップのサイズをそれぞれ所定の閾値と比較して、それぞれのテロップが大サイズか小サイズかを判定し、
一方のテロップが大サイズと判定された場合には、該テロップを選択し、
両方のテロップの判定結果が同じ場合には、水平テロップを選択する
ことを特徴とする請求項３に記載の画像処理装置。
【請求項７】
前記選択手段は、前記水平テロップの輝度、前記垂直テロップの輝度をそれぞれ所定の閾値と比較して、それぞれのテロップが高輝度か低輝度かを判定し、
一方のテロップが高輝度と判定された場合には、該テロップを選択し、
両方のテロップの判定結果が同じ場合には、水平テロップを選択する
ことを特徴とする請求項４に記載の画像処理装置。
【請求項８】
前記選択手段は、前記両方のテロップの判定結果が同じ場合であって、且つ、１つ前の補間フレームを生成するときに前記第２補正手段による補正が行われていた場合には、水平テロップの代わりに垂直テロップを選択する
ことを特徴とする請求項５〜７のいずれか１項に記載の画像処理装置。
【請求項９】
前記第１補正手段、及び、前記第２補正手段は、水平テロップと垂直テロップの両方を含むブロックの動きベクトルを補正しない
ことを特徴とする請求項１〜８のいずれか１項に記載の画像処理装置。
【請求項１０】
入力された映像のフレーム間に補間フレームを挿入してフレームレートを変換する画像処理方法であって、
入力された映像を複数のブロックに分割し、ブロック毎の動きベクトルを検出する動きベクトル検出ステップと、
入力された映像から水平方向に移動する水平テロップ及び垂直方向に移動する垂直テロップを検出するテロップ検出ステップと、
前記複数のブロックのうち水平テロップを含むブロックの動きベクトルを補正する第１補正ステップと、
前記複数のブロックのうち垂直テロップを含むブロックの動きベクトルを補正する第２補正ステップと、
前記テロップ検出ステップでの検出結果に基づいて、前記第１補正ステップと前記第２補正ステップでの処理を制御する制御ステップと、
ブロック毎の動きベクトルを用いて補間フレームを生成する生成ステップと、
を有し、
前記制御ステップでは、前記テロップ検出ステップで水平テロップと垂直テロップの両方が検出された場合に、前記第１補正ステップと前記第２補正ステップのうち一方の補正ステップによる補正を行い、他方の補正ステップによる補正を省略するように、前記第１補正ステップと前記第２補正ステップでの処理を制御する
ことを特徴とする画像処理方法。
【請求項１１】
前記テロップ検出ステップで水平テロップと垂直テロップの両方が検出された場合に、速さが速い方のテロップを選択する選択ステップをさらに有し、
前記制御ステップでは、前記選択ステップで水平テロップが選択された場合に、前記第１補正ステップによる補正を行い、前記選択ステップで垂直テロップが選択された場合に、前記第２補正ステップによる補正を行うように、前記第１補正ステップと前記第２補正ステップでの処理を制御する
ことを特徴とする請求項１０に記載の画像処理方法。
【請求項１２】
前記テロップ検出ステップで水平テロップと垂直テロップの両方が検出された場合に、サイズが大きい方のテロップを選択する選択ステップをさらに有し、
前記制御ステップでは、前記選択ステップで水平テロップが選択された場合に、前記第１補正ステップによる補正を行い、前記選択ステップで垂直テロップが選択された場合に、前記第２補正ステップによる補正を行うように、前記第１補正ステップと前記第２補正ステップでの処理を制御する
ことを特徴とする請求項１０に記載の画像処理方法。
【請求項１３】
前記テロップ検出ステップで水平テロップと垂直テロップの両方が検出された場合に、輝度が高い方のテロップを選択する選択ステップをさらに有し、
前記制御ステップでは、前記選択ステップで水平テロップが選択された場合に、前記第１補正ステップによる補正を行い、前記選択ステップで垂直テロップが選択された場合に、前記第２補正ステップによる補正を行うように、前記第１補正ステップと前記第２補正ステップでの処理を制御する
ことを特徴とする請求項１０に記載の画像処理方法。
【請求項１４】
前記選択ステップでは、前記水平テロップの速さ、前記垂直テロップの速さをそれぞれ所定の閾値と比較して、それぞれのテロップが高速か低速かを判定し、
一方のテロップが高速と判定された場合には、該テロップを選択し、
両方のテロップの判定結果が同じ場合には、水平テロップを選択する
ことを特徴とする請求項１１に記載の画像処理方法。
【請求項１５】
前記選択ステップでは、前記水平テロップのサイズ、前記垂直テロップのサイズをそれぞれ所定の閾値と比較して、それぞれのテロップが大サイズか小サイズかを判定し、
一方のテロップが大サイズと判定された場合には、該テロップを選択し、
両方のテロップの判定結果が同じ場合には、水平テロップを選択する
ことを特徴とする請求項１２に記載の画像処理方法。
【請求項１６】
前記選択ステップでは、前記水平テロップの輝度、前記垂直テロップの輝度をそれぞれ所定の閾値と比較して、それぞれのテロップが高輝度か低輝度かを判定し、
一方のテロップが高輝度と判定された場合には、該テロップを選択し、
両方のテロップの判定結果が同じ場合には、水平テロップを選択する
ことを特徴とする請求項１３に記載の画像処理方法。
【請求項１７】
前記選択ステップでは、前記両方のテロップの判定結果が同じ場合であって、且つ、１つ前の補間フレームを生成するときに前記第２補正ステップによる補正が行われていた場合には、水平テロップの代わりに垂直テロップを選択する
ことを特徴とする請求項１４〜１６のいずれか１項に記載の画像処理方法。
【請求項１８】
前記第１補正ステップ、及び、前記第２補正ステップでは、水平テロップと垂直テロップの両方を含むブロックの動きベクトルを補正しない
ことを特徴とする請求項１０〜１７のいずれか１項に記載の画像処理方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００３６
【補正方法】変更
【補正の内容】
【００３６】
なお、各テロップのサイズは、配列Ｖｘ，Ｖｙを解析することにより求めればよい。例えば、配列Ｖｘにおいて０でない同じ値の要素が連続している数の最大値を水平テロップのサイズＳｘとすればよい。また、配列Ｖｙにおいて０でない同じ値の要素が連続している数の最大値を垂直テロップのサイズＳｙとすればよい。
なお、サイズは、この方法に限らない。例えば、文字認識などにより、より精密にテロップを検出し、該検出結果からテロップの１文字あたりのサイズを算出してもよい。その際、複数のサイズの文字が検出された場合には、最も大きいサイズをテロップのサイズとすることが好ましい（サイズの大きいテロップほど視覚的に目立つため）。テロップの大きさを把握することができれば、どのような値をサイズとしてもよい。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
輝度検出部は、ブロック毎の平均輝度を算出し、輝度情報としてテロップ検出部３に出力する。具体的には、ブロック毎に、そのブロックに含まれる画素の画素値をその画素の輝度値とみなし、ブロック内の画素値の平均値を平均輝度として算出する。
テロップ検出部３は、実施例１で述べた処理を行うと共に、検出したテロップの輝度を算出する。本実施例では、配列Ｖｘ，Ｖｙの他に、配列Ｌｘと配列Ｌｙを生成し、テロップ検出情報として配列Ｖｘ，Ｖｙ，Ｌｘ，Ｌｙを出力する（なお、配列Ｌｘ，Ｌｙは選択部４にのみ出力すればよい）。配列Ｌｘ，Ｌｙの各要素は、配列Ｖｘ，Ｖｙと同様に、複数のブロックの各行にそれぞれ対応する。
具体的には、テロップ検出部３は、速さのヒストグラムを生成する際に、速さ毎にその速さに対応するブロックの平均輝度の累積値を算出する。次に、検出したテロップの速さ（ヒストグラムにおいて度数が最大となる速さ）に対応するブロックの平均輝度の累積値を度数（ヒストグラムにおけるその速さの度数）で除算することにより、該テロップの輝度（平均輝度）を算出する。そして、水平テロップが存在しないとされた行に対して０、水平テロップが存在するとされた行に対して該水平テロップの輝度を要素とする配列Ｌｘを生成する。また、垂直テロップが存在しないとされた行に対して０、垂直テロップが存在するとされた行に対して該垂直テロップの輝度を要素とする配列Ｌｙを生成する。
【手続補正４】
【補正対象書類名】図面
【補正対象項目名】図１
【補正方法】変更
【補正の内容】
【図１】
2011103511.tif 000001