(57)【要約】【課題】スクリーニング表示時のフレームレートを高める際に、補間画像を精度良く生成することができ、且つ、短い遅延で画像表示を行うことができる技術を提供する。【解決手段】本発明の画像出力装置は、フレーム毎に抽出領域を決定する第１決定手段と、フレーム毎に、現フレームから次フレームにかけての抽出領域の移動速度に基づいて、元画像の領域のうち、現フレームと前記次フレームの間の補間フレームの画像を生成するために必要となる領域を、付加領域として決定する第２決定手段と、フレーム毎に、現フレームに対して決定された抽出領域における元画像である部分画像、現フレームから次フレームにかけての抽出領域の移動速度を表す速度情報、及び、現フレームに対して決定された付加領域における元画像である付加画像を、画像処理装置に出力する出力手段と、を有する。【選択図】図１
2015201718.tif 000002
【特許請求の範囲】
【請求項１】
入力画像のフレーム間に補間フレームを挿入することにより前記入力画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置に、元画像から抽出領域の画像を抽出して出力する処理を、前記抽出領域を移動させながら所定のフレームレートで繰り返し実行可能な画像出力装置であって、
フレーム毎に抽出領域を決定する第１決定手段と、
前記フレーム毎に、そのフレームである現フレームから前記現フレームの次のフレームである次フレームにかけての抽出領域の移動速度に基づいて、前記元画像の領域のうち、前記現フレームと前記次フレームの間の補間フレームの画像を生成するために必要となる領域を、付加領域として決定する第２決定手段と、
前記フレーム毎に、前記現フレームに対して決定された抽出領域における元画像である部分画像、前記現フレームから前記次フレームにかけての抽出領域の移動速度を表す速度情報、及び、前記現フレームに対して決定された付加領域における元画像である付加画像を、前記画像処理装置に出力する出力手段と、
を有することを特徴とする画像出力装置。
【請求項２】
前記第２決定手段は、前記現フレームに対して決定された抽出領域に対し、前記現フレームから前記次フレームにかけての抽出領域の移動方向に隣接する隣接領域を、前記現フレームに対する付加領域として決定する
ことを特徴とする請求項１に記載の画像出力装置。
【請求項３】
前記画像処理装置で前記入力画像のフレームレートをｎ倍（ｎは２以上の整数）のフレームレートに高めるフレームレート変換処理が行われる場合、前記第２決定手段は、前記現フレームから前記次フレームにかけての抽出領域の移動方向における画素数が、前記現フレームから前記次フレームにかけての抽出領域の移動速度の大きさに相当する画素数に１−（１／ｎ）を乗算した画素数である隣接領域を、前記現フレームに対する付加領域として決定する
ことを特徴とする請求項２に記載の画像出力装置。
【請求項４】
任意のタイミングで行われたユーザー操作に応じて、フレーム間における抽出領域の移動速度を決定する第３決定手段をさらに有し、
前記現フレームの速度情報と付加画像が出力された後に、前記現フレームから前記次フレームにかけての抽出領域の移動速度が変化した場合に、
前記第２決定手段は、変化後の移動速度に基づいて前記現フレームに対する付加領域を再決定し、
前記出力手段は、前記変化後の移動速度を表す速度情報と、前記現フレームに対して再決定された付加領域における元画像である付加画像と、を前記現フレームの速度情報と付加画像として再出力する
ことを特徴とする請求項１〜３のいずれか１項に記載の画像出力装置。
【請求項５】
前記現フレームの速度情報と付加画像が出力された後に、前記現フレームから前記次フレームにかけての抽出領域の移動速度が、大きさが０の速度に変化した場合に、
前記第２決定手段は、前記現フレームに対する付加領域を再決定する処理を省略し、
前記出力手段は、前記変化後の移動速度を表す速度情報を、前記現フレームの速度情報として再出力する
ことを特徴とする請求項４に記載の画像出力装置。
【請求項６】
前記フレーム毎に、前記現フレームから前記次フレームにかけての抽出領域の移動速度を決定する第３決定手段をさらに有し、
前記第３決定手段は、前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間だけ、前記現フレームと前記次フレームの間の補間フレームの画像を生成する生成タイミングよりも前のタイミングで前記現フレームに対する移動速度を決定する
ことを特徴とする請求項１〜３のいずれか１項に記載の画像出力装置。
【請求項７】
前記出力手段は、補間フレームを挿入する前の画像の同期信号である第１同期信号に同期して前記部分画像を出力し、
前記画像出力装置は、補間フレームを挿入した後の画像の同期信号である第２同期信号を取得する第１取得手段をさらに有し、
前記第３決定手段は、前記第１同期信号、前記第２同期信号、及び、前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間に基づいて、前記移動速度を決定するタイミングを判断する
ことを特徴とする請求項６に記載の画像出力装置。
【請求項８】
前記第３決定手段は、
前記第２同期信号から前記生成タイミングを判断し、
前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間を前記第１同期信号のタイミングと前記生成タイミングの間の時間から減算した時間だけ前記第１同期信号のタイミングよりも後のタイミングを、前記移動速度を決定するタイミングとして判断する
ことを特徴とする請求項７に記載の画像出力装置。
【請求項９】
前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間は、前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間の最大時間である
ことを特徴とする請求項６〜８のいずれか１項に記載の画像出力装置。
【請求項１０】
請求項１〜９のいずれか１項に記載の画像出力装置から出力された前記部分画像のフレーム間に補間フレームを挿入することにより前記部分画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置であって、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像を前記画像出力装置から取得する第２取得手段と、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像に基づいて、前記現フレームと前記次フレームの間の補間フレームの画像を生成する生成手段と、
を有することを特徴とする画像処理装置。
【請求項１１】
前記第２取得手段は、前記現フレームの速度情報と付加画像が前記画像出力装置から複数回出力された場合に、前記現フレームの速度情報と付加画像を複数回取得し、
前記生成手段は、前記現フレームの速度情報と付加画像が複数回取得されている場合には、前記現フレームの速度情報と付加画像のうち、前記最後に取得された速度情報と付加画像を用いて、前記現フレームと前記次フレームの間の補間フレームの画像を生成する
ことを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
入力画像のフレーム間に補間フレームを挿入することにより前記入力画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置に、元画像から抽出領域の画像を抽出して出力する処理を、前記抽出領域を移動させながら所定のフレームレートで繰り返し実行可能な画像出力装置の制御方法であって、
フレーム毎に抽出領域を決定する第１決定ステップと、
前記フレーム毎に、そのフレームである現フレームから前記現フレームの次のフレームである次フレームにかけての抽出領域の移動速度に基づいて、前記元画像の領域のうち、前記現フレームと前記次フレームの間の補間フレームの画像を生成するために必要となる領域を、付加領域として決定する第２決定ステップと、
前記フレーム毎に、前記現フレームに対して決定された抽出領域における元画像である部分画像、前記現フレームから前記次フレームにかけての抽出領域の移動速度を表す速度情報、及び、前記現フレームに対して決定された付加領域における元画像である付加画像を、前記画像処理装置に出力する出力ステップと、
を有することを特徴とする画像出力装置の制御方法。
【請求項１３】
前記第２決定ステップでは、前記現フレームに対して決定された抽出領域に対し、前記現フレームから前記次フレームにかけての抽出領域の移動方向に隣接する隣接領域を、前記現フレームに対する付加領域として決定する
ことを特徴とする請求項１２に記載の画像出力装置の制御方法。
【請求項１４】
前記画像処理装置で前記入力画像のフレームレートをｎ倍（ｎは２以上の整数）のフレームレートに高めるフレームレート変換処理が行われる場合、前記第２決定ステップでは、前記現フレームから前記次フレームにかけての抽出領域の移動方向における画素数が、前記現フレームから前記次フレームにかけての抽出領域の移動速度の大きさに相当する画素数に１−（１／ｎ）を乗算した画素数である隣接領域を、前記現フレームに対する付加領域として決定する
ことを特徴とする請求項１３に記載の画像出力装置の制御方法。
【請求項１５】
任意のタイミングで行われたユーザー操作に応じて、フレーム間における抽出領域の移動速度を決定する第３決定ステップをさらに有し、
前記現フレームの速度情報と付加画像が出力された後に、前記現フレームから前記次フレームにかけての抽出領域の移動速度が変化した場合に、
前記第２決定ステップでは、変化後の移動速度に基づいて前記現フレームに対する付加領域を再決定し、
前記出力ステップでは、前記変化後の移動速度を表す速度情報と、前記現フレームに対して再決定された付加領域における元画像である付加画像と、を前記現フレームの速度情報と付加画像として再出力する
ことを特徴とする請求項１２〜１４のいずれか１項に記載の画像出力装置の制御方法。
【請求項１６】
前記現フレームの速度情報と付加画像が出力された後に、前記現フレームから前記次フレームにかけての抽出領域の移動速度が、大きさが０の速度に変化した場合に、
前記第２決定ステップでは、前記現フレームに対する付加領域を再決定する処理を省略し、
前記出力ステップでは、前記変化後の移動速度を表す速度情報を、前記現フレームの速度情報として再出力する
ことを特徴とする請求項１５に記載の画像出力装置の制御方法。
【請求項１７】
前記フレーム毎に、前記現フレームから前記次フレームにかけての抽出領域の移動速度を決定する第３決定ステップをさらに有し、
前記第３決定ステップでは、前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間だけ、前記現フレームと前記次フレームの間の補間フレームの画像を生成する生成タイミングよりも前のタイミングで前記現フレームに対する移動速度を決定する
ことを特徴とする請求項１２〜１４のいずれか１項に記載の画像出力装置の制御方法。
【請求項１８】
前記出力ステップでは、補間フレームを挿入する前の画像の同期信号である第１同期信号に同期して前記部分画像を出力し、
前記画像出力装置は、補間フレームを挿入した後の画像の同期信号である第２同期信号を取得する第１取得ステップをさらに有し、
前記第３決定ステップでは、前記第１同期信号、前記第２同期信号、及び、前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間に基づいて、前記移動速度を決定するタイミングを判断する
ことを特徴とする請求項１７に記載の画像出力装置の制御方法。
【請求項１９】
前記第３決定ステップでは、
前記第２同期信号から前記生成タイミングを判断し、
前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間を前記第１同期信号のタイミングと前記生成タイミングの間の時間から減算した時間だけ前記第１同期信号のタイミングよりも後のタイミングを、前記移動速度を決定するタイミングとして判断する
ことを特徴とする請求項１８に記載の画像出力装置の制御方法。
【請求項２０】
前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間は、前記現フレームに対応する移動速度を決定してから前記現フレームの速度情報と付加画像を出力するまでに要する時間の最大時間である
ことを特徴とする請求項１７〜１９のいずれか１項に記載の画像出力装置の制御方法。
【請求項２１】
請求項１〜９のいずれか１項に記載の画像出力装置から出力された前記部分画像のフレーム間に補間フレームを挿入することにより前記部分画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置の制御方法であって、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像を前記画像出力装置から取得する第２取得ステップと、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像に基づいて、前記現フレームと前記次フレームの間の補間フレームの画像を生成する生成ステップと、
を有することを特徴とする画像処理装置の制御方法。
【請求項２２】
前記第２取得ステップでは、前記現フレームの速度情報と付加画像が前記画像出力装置から複数回出力された場合に、前記現フレームの速度情報と付加画像を複数回取得し、
前記生成ステップでは、前記現フレームの速度情報と付加画像が複数回取得されている場合には、前記現フレームの速度情報と付加画像のうち、前記最後に取得された速度情報と付加画像を用いて、前記現フレームと前記次フレームの間の補間フレームの画像を生成する
ことを特徴とする請求項２１に記載の画像処理装置の制御方法。
【請求項２３】
請求項１２〜２０のいずれか１項に記載の画像出力装置の制御方法の各ステップをコンピュータに実行させることを特徴とするプログラム。
【請求項２４】
請求項２１または２２に記載の画像処理装置の制御方法の各ステップをコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像出力装置及びその制御方法に関する。
【背景技術】
【０００２】
従来、顕微鏡を用いてプレパラートを観察する病理診断が行われてきた。しかし近年、イメージスキャナを用いてデジタル化した画像（病理画像）を用いた病理診断のニーズが増してきている。多くの病理画像は、１枚の画像が数十億個の画素で構成される。そのため、画像表示装置に表示された病理画像を観察（読影）する際に、画像表示装置の画面に病理画像全体を表示することはできない。一方で、病理医は限られた時間内で多くの病理画像を読影する必要がある。そのため、病理医が病理画像全体を見渡すための表示方法として、「スクリーニング表示」という表示方法を用いることにより、診断時間（読影時間）の短縮が図られている。スクリーニング表示は、１枚の元画像から抽出領域の画像を抽出して表示する処理を、元画像の領域全体を走査するように抽出領域を移動させながら繰り返し行う表示方法である。
【０００３】
また近年、動画ぼけを低減するための処理として、画像のフレームレートを高めるフレームレート変換（ＦＲＣ）を実行可能な画像表示装置が普及し始めている。ＦＲＣでは、画像のフレーム（オリジナルフレーム）間に補間フレームを挿入することにより、画像のフレームレートが高められる。補間フレームの画像（補間画像）の生成方法として、動きベクトルや抽出領域のスクロール情報を用いた方法が提案されている（例えば、特許文献１，２）。
【０００４】
しかしながら、複数のオリジナルフレームの画像（オリジナル画像）を用いて動きベクトルを検出し、検出した動きベクトルに基づいて補間画像を生成する場合、動きベクトルの誤検出が生じてしまうことがある。動きベクトルの誤検出が生じると、補間画像として破綻した画像が生成されてしまう。画像の破綻は誤診断につながる虞があるため、医療用の画像表示装置においては画像の破綻は許容されない。
【０００５】
スクロール情報（または正確な動きベクトル）を用いれば、補間画像として破綻の無い画像を生成することができる。しかしながら、画像表示に１フレーム以上の遅延が発生してしまう。例えば、オリジナルフレームＡと、オリジナルフレームＡの次のオリジナルフレームＢと、の間の補間フレームＣの画像として、破綻の無い画像を生成するためには、オリジナルフレームＡ，Ｂの画像を使用する必要がある。そのため、オリジナルフレームＢの画像の入力を待たなければならず、画像表示に１フレーム以上の遅延が発生してしまう。画像表示の遅延は、ユーザーに違和感を与えるため、極力小さいことが望ましい。病理医は限られた時間で病理画像を読影する必要があるため、医療用の画像表示装置において、上記遅延は特に小さいことが望ましい。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００９−１８２８６５号公報
【特許文献２】特開２０１０−１４１４３７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
そこで、本発明は、スクリーニング表示時のフレームレートを高める際に、補間画像を精度良く生成することができ、且つ、短い遅延で画像表示を行うことができる技術を提供
することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の第１の態様は、
入力画像のフレーム間に補間フレームを挿入することにより前記入力画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置に、元画像から抽出領域の画像を抽出して出力する処理を、前記抽出領域を移動させながら所定のフレームレートで繰り返し実行可能な画像出力装置であって、
フレーム毎に抽出領域を決定する第１決定手段と、
前記フレーム毎に、そのフレームである現フレームから前記現フレームの次のフレームである次フレームにかけての抽出領域の移動速度に基づいて、前記元画像の領域のうち、前記現フレームと前記次フレームの間の補間フレームの画像を生成するために必要となる領域を、付加領域として決定する第２決定手段と、
前記フレーム毎に、前記現フレームに対して決定された抽出領域における元画像である部分画像、前記現フレームから前記次フレームにかけての抽出領域の移動速度を表す速度情報、及び、前記現フレームに対して決定された付加領域における元画像である付加画像を、前記画像処理装置に出力する出力手段と、
を有することを特徴とする画像出力装置である。
【０００９】
本発明の第２の態様は、
上述した画像出力装置から出力された前記部分画像のフレーム間に補間フレームを挿入することにより前記部分画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置であって、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像を前記画像出力装置から取得する第２取得手段と、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像に基づいて、前記現フレームと前記次フレームの間の補間フレームの画像を生成する生成手段と、
を有することを特徴とする画像処理装置である。
【００１０】
本発明の第３の態様は、
入力画像のフレーム間に補間フレームを挿入することにより前記入力画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置に、元画像から抽出領域の画像を抽出して出力する処理を、前記抽出領域を移動させながら所定のフレームレートで繰り返し実行可能な画像出力装置の制御方法であって、
フレーム毎に抽出領域を決定する第１決定ステップと、
前記フレーム毎に、そのフレームである現フレームから前記現フレームの次のフレームである次フレームにかけての抽出領域の移動速度に基づいて、前記元画像の領域のうち、前記現フレームと前記次フレームの間の補間フレームの画像を生成するために必要となる領域を、付加領域として決定する第２決定ステップと、
前記フレーム毎に、前記現フレームに対して決定された抽出領域における元画像である部分画像、前記現フレームから前記次フレームにかけての抽出領域の移動速度を表す速度情報、及び、前記現フレームに対して決定された付加領域における元画像である付加画像を、前記画像処理装置に出力する出力ステップと、
を有することを特徴とする画像出力装置の制御方法である。
【００１１】
本発明の第４の態様は、
上述した画像出力装置から出力された前記部分画像のフレーム間に補間フレームを挿入することにより前記部分画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置の制御方法であって、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像を前記画像出力装置から取得する第２取得ステップと、
前記フレーム毎に、前記現フレームの前記部分画像、前記速度情報、及び、前記付加画像に基づいて、前記現フレームと前記次フレームの間の補間フレームの画像を生成する生成ステップと、
を有することを特徴とする画像処理装置の制御方法である。
【００１２】
本発明の第５の態様は、上述した画像出力装置の制御方法の各ステップをコンピュータに実行させることを特徴とするプログラムである。
本発明の第６の態様は、上述した画像処理装置の制御方法の各ステップをコンピュータに実行させることを特徴とするプログラムである。
【発明の効果】
【００１３】
本発明によれば、スクリーニング表示時のフレームレートを高める際に、補間画像を精度良く生成することができ、且つ、短い遅延で画像表示を行うことができる。
【図面の簡単な説明】
【００１４】
【図１】実施例１に係る画像表示システムの構成の一例を示すブロック図
【図２】スクリーニング表示の概要を示す図
【図３】実施例１に係る移動パターンの一例を示す図
【図４】実施例１に係る画像出力装置の動作の一例を示すフローチャート
【図５】実施例１に係る抽出領域と付加領域の一例を示す図
【図６】実施例１に係る速度情報と付加画像のデータ構造の一例を示す図
【図７】実施例１に係る補間画像の生成方法の一例を示す図
【図８】実施例１に係る抽出領域と付加領域の一例を示す図
【図９】実施例２に係る画像表示システムの構成の一例を示すブロック図
【図１０】実施例２に係るＧＵＩの一例を示す図
【図１１】実施例２に係る画像出力装置の動作の一例を示すフローチャート
【図１２】実施例３に係る画像表示システムの動作の一例を示す図
【図１３】実施例３に係る画像処理システムの構成の一例を示すブロック図
【図１４】実施例３に係る画像表示システムの動作の一例を示す図
【図１５】実施例３に係る移動速度決定処理の流れの一例を示すフローチャート
【発明を実施するための形態】
【００１５】
＜実施例１＞
以下、本発明の実施例１に係る画像表示システム及びその制御方法について説明する。本実施例に係る画像表示システムは、スクロール表示を実行可能なシステムである。「スクロール表示」は、１枚の元画像から抽出領域の画像を抽出して表示する処理を、元画像の領域全体を走査するように抽出領域を移動させながら繰り返し行う表示方法である。
なお、本実施例では、元画像が病理画像である場合の例を説明するが、元画像は病理画像（医療用の画像）に限らない。元画像は、イラスト、風景写真、等どのような画像であってもよい。
【００１６】
（画像表示システムの構成）
図１は、本実施例に係る画像表示システムの構成の一例を示すブロック図である。図１に示すように、本実施例に係る画像表示システムは、画像出力装置１０と画像表示装置１１を有する。画像出力装置１０は、有線または無線でデータを送受信可能に画像表示装置１１に接続されている。
【００１７】
画像出力装置１０は、元画像（元画像データ）から抽出領域の画像を抽出して画像表示
装置１１に出力する処理を、抽出領域を移動させながら所定のフレームレートで繰り返し実行可能な装置である。画像出力装置１０としては、パーソナルコンピュータ（ＰＣ）等を使用することができる。
【００１８】
画像表示装置１１は、入力画像のフレーム間に補間フレームを挿入することにより入力画像のフレームレートを高めるフレームレート変換処理を実行可能な画像処理装置を有する。画像表示装置１１は、フレームレート変換処理を実行することにより、入力画像を、フレームレートを高めて表示することができる。本実施例では、入力画像は、画像出力装置１０から出力された画像（後述する部分画像）である。画像表示装置１１としては、液晶表示装置、プラズマ表示装置、有機ＥＬ表示装置、等を使用することができる。
なお、フレームレート変換処理を実行可能な画像処理装置は、画像表示装置１１とは別体の装置であってもよい。
【００１９】
（画像出力装置の構成）
画像出力装置１０は、操作部１０１、移動パターン記憶部１０２、スクリーニング情報生成部１０３、画像記憶部１０４、スクリーニング制御部１０５、等を有する。
【００２０】
操作部１０１は、ユーザー操作を受け付け、ユーザー操作に応じた操作情報を出力する。本実施例では、スクリーニング表示を開始する前に、抽出領域の移動速度の大きさを入力するユーザー操作が行われる。抽出領域の移動速度の大きさを入力するユーザー操作が行われると、操作部１０１は、抽出領域の移動速度の大きさを表す操作情報を出力する。このように、本実施例では、ユーザー操作に応じて、抽出領域の移動速度の大きさが決定される。
なお、移動速度の大きさに相当する画素数が入力されてもよいし、移動速度の大きさとして画素数とは異なる単位の値が入力されてもよい。
【００２１】
移動パターン記憶部１０２は、スクリーニング表示時における抽出領域の移動経路（走査経路）を表す移動パターンが予め記録された記憶装置である。移動パターン記憶部１０２としては、磁気ディスク、光ディスク、半導体メモリ、等を使用することができる。
なお、移動パターン記憶部１０２には、１つの移動パターンが記録されていてもよいし、複数の移動パターンが記録されていてもよい。画像記憶部１０４に複数の移動パターンが記録されている場合には、複数の移動パターンのうちのいずれかを選択して使用すればよい。
【００２２】
スクリーニング情報生成部１０３は、操作部１０１で決定された移動速度の大きさと、移動パターン記憶部１０２が記憶する移動パターンと、に基づいて、抽出領域決定処理と速度決定処理を行う。抽出領域決定処理は、フレーム毎に抽出領域を決定する処理である（第１決定処理）。速度決定処理は、フレーム毎に、そのフレームである現フレームから、現フレームの次のフレームである次フレームにかけての、抽出領域の移動速度を決定する処理である。
また、スクリーニング情報生成部１０３は、付加領域決定処理を行う。付加領域決定処理は、フレーム毎に、現フレームから次フレームにかけての抽出領域の移動速度（速度決定処理の結果）に基づいて付加領域を決定する処理である（第２決定処理）。付加領域は、元画像の領域のうち、現フレームと次フレームの間の補間フレームの画像を生成するために必要となる領域である。
そして、スクリーニング情報生成部１０３は、フレーム毎に、そのフレームに対して決定された抽出領域、移動速度、及び、付加領域を表す情報をスクリーニング情報として出力する。
なお、抽出領域決定処理、速度決定処理、及び、付加領域決定処理の３つの処理のうち少なくともいずれかは、残り２つの処理と異なる機能部によって実行されてもよい。
【００２３】
画像記憶部１０４は、スクリーニング表示の対象である元画像が予め記録された記憶装置である。本実施例では、元画像として病理画像が記録されている。
なお、画像記憶部１０４には、１枚の画像が記録されていてもよいし、複数枚の画像が記録されていてもよい。画像記憶部１０４に複数枚の画像が記録されている場合には、複数枚の画像のうちのいずれかを元画像（スクリーニング表示の対象）として画像記憶部１０４から読み出せばよい。
なお、元画像は外部装置から取得されてもよい。
なお、移動パターン記憶部１０２と画像記憶部１０４は互いに異なる記憶装置であってもよいし、移動パターン記憶部１０２と画像記憶部１０４の両方を兼ねる記憶装置が使用されてもよい。
【００２４】
スクリーニング制御部１０５は、フレーム毎に、スクリーニング情報生成部１０３で生成されたスクリーニング情報と、画像記憶部１０４が記憶する元画像と、に基づいて、部分画像と制御情報を画像表示装置１１（画像処理装置）に出力する。部分画像は、スクリーニング情報が表す抽出領域における元画像であり、元画像から抽出領域の画像を抽出（切り出す）ことにより得られる。制御情報は、速度情報と付加画像を含む。速度情報は、スクリーニング情報が表す移動速度を表す情報であり、スクリーニング情報から得られる。付加画像は、スクリーニング情報が表す付加領域における元画像であり、元画像から付加領域の画像を抽出（切り出す）ことにより得られる。
なお、抽出領域のサイズは、メーカー等によって予め定められた固定値であってもよいし、ユーザーが変更可能な値であってもよい。
なお、本実施例では、部分画像と制御情報が個別に出力される例を説明するが、データの出力方法はこれに限らない。制御情報が部分画像（例えば、部分画像データのヘッダ部など）に付加され、制御情報が付加された部分画像が出力されてもよい。速度情報と付加画像は個別に出力されてもよい。速度情報と付加画像の一方が部分画像に付加されてもよい。部分画像と制御情報が互いに関連付けられて出力されてもよい。例えば、部分画像と制御情報の少なくとも一方に他方を表す対応情報が付加されていてもよい。部分画像と制御情報の両方に同じ対応情報（識別子など）が付加されていてもよい。
【００２５】
（画像表示装置の構成）
画像表示装置１１は、データ取得部１０６、補間画像生成部１０７、出力画像選択部１０８、表示パネル１０９、等を有する。
【００２６】
データ取得部１０６は、フレーム毎に、現フレームの部分画像と制御情報を画像出力装置１０から取得する（第２取得処理）。
なお、本実施例では、部分画像と制御情報が個別に取得される例を説明するが、データの取得方法はこれに限らない。制御情報が付加された部分画像が取得されてもよい。速度情報と付加画像は個別に取得されてもよい。速度情報と付加画像の一方が部分画像に付加されていてもよい。
【００２７】
補間画像生成部１０７は、フレーム毎に、現フレームの部分画像、速度情報、及び、付加画像に基づいて、現フレームと次フレームの間の補間フレームの画像（補間画像）を生成する。部分画像のフレームレートをｎ倍のフレームレート（変換後フレームレート）に高める場合には、現フレームと次フレームの間の補間画像として、ｎ−１枚の補間画像が生成される。ｎは２以上の整数である。補間画像生成部１０７は、生成した補間画像を出力画像選択部１０８に出力する。
【００２８】
出力画像選択部１０８は、画像出力装置１０から出力された部分画像と、補間画像生成部１０７で生成された補間画像と、のいずれかを選択して出力する処理を、変換後フレー
ムレートで繰り返し行う。具体的には、変換後フレームレートで画像が順次出力されるように、画像出力装置１０から出力された部分画像を出力し、補間画像生成部１０７で生成されたｎ−１枚の補間画像を順次出力する処理が、繰り返し行われる。
【００２９】
表示パネル１０９は、出力画像選択部１０８から出力された画像を画面に表示する。表示パネル１０９としては、液晶表示パネル、プラズマ表示パネル、有機ＥＬ表示パネル、等を使用することができる。
なお、フレームレート変換処理を実行可能な画像処理装置が画像表示装置１１と別体の装置ある場合には、表示パネル１０９は、画像処理装置ではなく、画像表示装置１１に設けられる。
【００３０】
（スクリーニング表示の概要）
スクリーニング表示の概要について図２を用いて説明する。図２において、符号２００は元画像である病理画像を示し、符号２０１は現フレームの抽出領域を示し、符号２０２は次フレームの抽出領域を示す。
スクリーニング表示では、１枚の病理画像２００から抽出領域の画像を切り出して表示する処理が、抽出領域を移動させながら繰り返される。
【００３１】
図２の例では、まず、病理画像２００の領域の左上隅の抽出領域２０１が設定される。そして、病理画像２００から抽出領域２０１の画像が切り出されて表示される。
次に、抽出領域２０１を水平方向右側にＸ画素だけシフトした抽出領域２０２が設定される。そして、病理画像２００から抽出領域２０２の画像が切り出されて表示される。Ｘは、移動速度の大きさ相当する画素数である。移動速度が速いほどＸの値は大きく、移動速度が遅いほどＸの値は小さい。
その後、病理画像２００の領域全体を走査するように、抽出領域をＸ画素ずつ移動させて、抽出領域の画像を切り出して表示する処理が繰り返される。
【００３２】
（画像出力装置の動作）
画像出力装置１０の動作について説明する。
以下では、操作部１０１によって、移動速度の大きさとしてＸ画素に相当する値が決定された場合の例を説明する。また以下では、移動パターン記憶部１０２に図３に示す移動パターンが記録されている場合の例を説明する。図３に示す矢印は、抽出領域の移動経路を表す。移動パターンは、抽出領域の始点位置、終点位置、及び、始点位置と終点位置の間の経路記憶を表す。図３において、符号２１０は、元画像である病理画像を示す。
図３に示す移動パターンを用いた場合、まず、画像出力装置１０は、元画像である病理画像２１０の領域の左上隅（始点位置）に抽出領域２１１を設定する。そして、画像出力装置１０は、病理画像２１０から抽出領域２１１における画像を部分画像として抽出し、抽出した部分画像を画像表示装置１１に出力する。その後、画像出力装置１０は、抽出領域を図３に示す矢印に従ってＸ画素ずつ移動させながら、抽出領域が終点位置に到達するまで、部分画像の抽出及び出力を繰り返し行う。
【００３３】
画像出力装置１０の動作について図４のフローチャートを用いて説明する。
まず、操作部１０１が、ユーザー操作に応じて、移動速度の大きさ（移動量）を決定する（Ｓ１０１）。操作部１０１は、決定した移動量を表す操作情報をスクリーニング情報生成部１０３に出力する。ここでは、移動速度の大きさに相当する画素数としてＸ画素が決定されたとする。
次に、スクリーニング情報生成部１０３が、移動パターン記憶部１０２から移動パターンを読み出す（Ｓ１０２）。ここでは、図３の移動パターンが読み出されたとする。
【００３４】
次に、スクリーニング情報生成部１０３が、Ｓ１０１で決定された移動量と、Ｓ１０２
で読み出された移動パターンと、に基づいて、抽出領域を決定する（Ｓ１０３）。１回目の処理では、移動パターンの始点位置に抽出領域が設定される。２回目以降の処理では、直前に設定された抽出領域を移動パターンが表す移動経路（図３の矢印）に従って移動量（Ｘ画素）だけシフトした抽出領域が設定される。
【００３５】
そして、スクリーニング情報生成部１０３が、Ｓ１０１で決定された移動量と、Ｓ１０２で読み出された移動パターンと、に基づいて、抽出領域の移動速度を決定する（Ｓ１０４）。Ｓ１０４では、Ｓ１０３で決定された抽出領域から移動パターンが表す移動経路（図３の矢印）に従った向きを有し、且つ、移動量（Ｘ画素）と同じ大きさを有する速度が、移動速度として決定される。
【００３６】
次に、スクリーニング情報生成部１０３が、Ｓ１０３で決定された抽出領域と、Ｓ１０４で決定された移動速度と、に基づいて、付加領域を決定する（Ｓ１０５）。本実施例では、現フレームに対して決定された抽出領域に対し、現フレームから次フレームにかけての抽出領域の移動方向に隣接する隣接領域が、現フレームに対する付加領域として決定される。また、本実施例では、現フレームから次フレームにかけての抽出領域の移動方向における隣接領域の画素数として、現フレームから次フレームにかけての抽出領域の移動速度の大きさに相当する画素数に１−（１／ｎ）を乗算した画素数が使用される。上述したように、“ｎ”は変換前フレームレートに対する変換後フレームレートの割合である。例えば、Ｓ１０３で、図５に示す抽出領域３０２が決定され、Ｓ１０４で、向きが右方向であり、且つ、大きさがＸ画素である移動速度が決定されたとする。そして、ｎ＝２であったとする。その場合には、図５に示すように、抽出領域３０２の右側に隣接し、且つ、水平方向の画素数がＸ／２画素である付加領域３０３が決定される。付加領域３０３の垂直方向の画素数と位置は、抽出領域３０２と同じである。
【００３７】
なお、付加領域の決定方法は上記方法に限らない。
例えば、抽出領域の移動方向における隣接領域の画素数は、上記値より大きくて小さくてもよい。抽出領域の移動方向における隣接領域の画素数が上記値より小さくても、付加画像を使用することにより、付加画像を使用しない従来技術よりも破綻度合いが小さい補間画像を生成することができる。また、抽出領域の移動方向における隣接領域の画素数が上記値以上であれば、破綻の無い補間画像を生成することができる。破綻の無い補間画像（破綻度合いが小さい補間画像）を生成できる理由については、後述する。
また、上記隣接領域と、抽出領域に対し抽出領域の移動方向以外の方向に隣接する領域と、を含む領域が付加領域として決定されてもよい。付加領域が上記隣接領域を含んでいれば、破綻の無い補間画像を生成することができる。
但し、付加領域のサイズが大きいほど付加画像のデータ量が増してしまうため、上記方法で付加領域が決定されることが好ましい。
【００３８】
Ｓ１０５の次に、スクリーニング情報生成部１０３が、スクリーニング情報を生成し、生成したスクリーニング情報をスクリーニング制御部１０５に出力する（Ｓ１０６）。具体的には、Ｓ１０３で決定された抽出領域、Ｓ１０４で決定された移動速度、及び、Ｓ１０５で決定された付加領域を表す情報が、スクリーニング情報として生成される。抽出領域と付加領域は、例えば、領域の各頂点の座標によって表すことができる。また、抽出領域と付加領域は、領域の位置とサイズによって表すこともできる。移動速度は、水平方向の速度と垂直方向の速度の組み合わせで表すことができる。また、移動速度は、速度ベクトルの始点座標と終点座標によって表すこともできる。
【００３９】
次に、スクリーニング情報生成部１０３が、Ｓ１０３で決定された抽出領域の位置が移動パターンの終点位置か否かを判断する（Ｓ１０７）。抽出領域の位置が終点位置である場合には、本フローが終了される。抽出領域が終点位置に到達していない場合には、Ｓ１
０３に処理が戻される。そして、抽出領域が終点位置に到達するまで、Ｓ１０３〜Ｓ１０７の処理が繰り返される。Ｓ１０３〜Ｓ１０７の処理は、フレームレート変換処理前のフレームレート（変換前フレームレート）で繰り返される。換言すれば、フレームレート変換処理前の垂直走査期間毎に、Ｓ１０３〜Ｓ１０７の処理が繰り返される。
【００４０】
Ｓ１０６の次に、スクリーニング制御部１０５は、スクリーニング情報生成部１０３で生成されたスクリーニング情報に基づいて部分画像と制御情報を生成し、生成した部分画像と制御情報を画像表示装置１１に出力する。具体的には、スクリーニング制御部１０５は、元画像から、スクリーニング情報が表す抽出領域（Ｓ１０３で決定された抽出領域）の画像を、部分画像として抽出し、抽出した部分画像を出力する。そして、スクリーニング制御部１０５は、スクリーニング情報に基づいて速度情報（スクロール情報）と付加画像を生成し、生成した速度情報と付加画像を含む制御情報を出力する。速度情報は、スクリーニング情報が表す移動速度（Ｓ１０４で決定された移動速度）を表す情報であり、スクリーニング情報から取得される。付加画像は、スクリーニング情報が表す付加領域（Ｓ１０５で決定された付加領域）の画像であり、元画像から抽出される。
【００４１】
なお、制御情報は、部分画像と同じケーブルを使用して、部分画像のブランキング期間に出力されてもよいし、部分画像とは異なるケーブル（例えば、ＵＳＢケーブル）を用いて出力されてもよい。
なお、スクリーニング情報と速度情報とで移動速度の記述方法が異なっていてもよい。
【００４２】
速度情報と付加画像のデータ構造を図６に示す。
図６の例では、速度情報は、水平方向の速度と垂直方向の速度の組み合わせによって移動速度を表している。図６の速度情報において、速度の大きさは、その大きさに相当する画素数で表されており、速度の向きは、符号＋／−で表されている。水平方向の速度“＋Ｘ”は、向きが左方向であり且つ大きさがＸ画素の速度を表し、水平方向の速度“−Ｘ”は、向きが右方向であり且つ大きさがＸ画素の速度を表す。垂直方向の速度“＋Ｘ”は、向きが上方向であり且つ大きさがＸ画素の速度を表し、垂直方向の速度“−Ｘ”は、向きが下方向であり且つ大きさがＸ画素の速度を表す。図５の例では、“水平方向：−Ｘ，垂直方向：０”という速度情報が生成される。
【００４３】
そして、図６の例では、付加画像のデータ領域が、部分画像に対して水平方向に隣接する付加画像が格納されるデータ領域１と、部分画像に対して垂直方向に隣接する付加画像が格納されるデータ領域２と、から構成されている。データ領域１，２に格納される付加画像のデータ量は、抽出領域の移動速度や変換後フレームレートによって変化する。具体的には、付加画像のデータ量は、移動速度が速いほど大きく、移動速度が遅いほど小さい。また、付加画像のデータ量は、変換後フレームレートが高いほど大きく、変換後フレームレートが低いほど小さい。図５の例では、付加領域３０３の画像である付加画像がデータ領域１に格納され、データ領域２にはデータは格納されない。
【００４４】
（画像表示装置の動作）
画像表示装置１１の動作について説明する。
ここでは、ｎ＝２の場合の例を説明する。具体的には、変換前フレームレートが６０Ｈｚであり、変換後フレームレートが１２０Ｈｚである場合の例を説明する。また、ここでは、図７に示すように、現フレームから次フレームにかけて画像が左方向にスクロールする場合の例を説明する。換言すれば、現フレームから次フレームにかけて抽出領域が右方向にスクロールする場合の例を説明する。図７において、符号４００は、現フレームの部分画像を示し、符号４０１は、次フレームの部分画像を示し、符号４１０は、現フレームの付加画像を示し、符号４１１は、次フレームの付加画像を示す。
なお、変換前フレームレートは６０Ｈｚより高くても低くてもよく、変換後フレームレ
ートは１２０Ｈｚより高くても低くてもよい。例えば、変換前フレームレートが１２０Ｈｚであり、変換後フレームレートが２４０Ｈｚであってもよい。
【００４５】
まず、データ取得部１０６が、現フレームの部分画像と制御情報を画像出力装置１０から取得する。ここでは、図７に示す部分画像４００、付加画像４１０、及び、速度情報が取得される。速度情報としては、“水平方向：−Ｘ，垂直方向：０”という情報が取得される。付加画像４１０は、部分画像４００の右側に隣接する付加領域における元画像である。付加領域の水平方向の画素数は、抽出領域の移動量に１−（１／ｎ）を乗算した画素数（Ｘ／２）である。上述したように、付加領域は、抽出領域の移動速度に基づいて決定される。
【００４６】
次に、補間画像生成部１０７が、現フレームの部分画像と制御情報に基づいて、現フレームと次フレームの間の補間画像４０２を生成する。
【００４７】
補間画像生成部１０７は、付加画像４１０が格納されているデータ領域から、付加画像４１０が部分画像４００に対し水平方向に隣接する画像であることを判断する。
【００４８】
また、補間画像生成部１０７は、現フレームの速度情報から、付加画像４１０が部分画像４００に対し右側に隣接する画像であることを判断する。具体的には、水平方向の速度の符号が“＋”である場合には、付加画像が部分画像に対し左側に隣接する画像であると判断され、水平方向の速度の符号が“−”である場合には、付加画像が部分画像に対し右側に隣接する画像であると判断される。
【００４９】
また、補間画像生成部１０７は、現フレームの速度情報から、現フレームから次フレームにかけて画像が左方向にＸ画素だけ移動することを判断する。画像の移動速度は、抽出領域の移動速度と向きが逆で大きさが同じ速度であるため、速度情報から判断することができる。
【００５０】
そして、補間画像生成部１０７は、現フレームから次フレームにかけての画像の移動速度と“ｎ＝２”とから、現フレームから補間フレーム（現フレームと次フレームの間の補間フレーム）にかけて画像が左方向にＸ／２画素だけ移動することを判断する。
【００５１】
補間画像生成部１０７は、以上４つの判断結果に従って、現フレームと次フレームの間の補間画像４０２を生成する。具体的には、部分画像４００の右側に付加画像４１０を付加し、部分画像４００の左端から水平方向Ｘ／２画素分の画像を除去することにより、破綻の無い補間画像４０２が生成される。図７において、補間画像４０２の領域のうち、領域４１２は、付加画像４１０に相当する領域であり、残りの領域は、部分画像４００から左端の画像を除去した画像である。部分画像４００の水平方向の画素数がＨ画素である場合、部分画像４００から左端の画像を除去した画像の水平方向の画素数はＨ−（Ｘ／２）画素となる。
【００５２】
このように、本実施例では、次フレームの部分画像４０１を使用せずに、補間画像４０２を生成することができる。その結果、次フレームの部分画像４０１の入力を待たずに、補間画像４０２を生成することができるため、１フレーム以上の遅延が生じることなく、補間画像４０２を生成することができる。
また、本実施例では、補間画像４０２に存在し、部分画像４００に存在しない領域の画像が元画像から抽出して使用されるため、補間画像４０２として破綻の無い（破綻度合いの小さい）画像を生成することができる。
なお、付加画像４１０の水平方向の画素数がＸ／２画素より多い場合には、部分画像４００の右側に、付加画像４１０の左端から水平方向Ｘ／２画素分の画像を付加すればよい
。
【００５３】
次に、出力画像選択部１０８が、画像出力装置１０から出力された部分画像と、補間画像生成部１０７で生成された補間画像と、を変換後フレームレートで交互に選択して出力する。それにより、表示パネル１０９の画面に、画像出力装置１０から出力された部分画像と、補間画像生成部１０７で生成された補間画像と、が変換後フレームレートで交互に表示される。具体的には、部分画像４００、補間画像４０２、部分画像４０１・・・がその順番で表示される。本実施例では、補間画像の生成には１フレーム以上の遅延が生じていないため、画像表示の遅延も１フレーム未満に抑えることができる。
【００５４】
以上述べたように、本実施例によれば、部分画像と移動情報だけでなく、補間フレームの画像を生成するために必要となる付加画像が、画像出力装置から出力される。そして、画像表示装置では、部分画像と移動情報だけでなく、付加画像を用いて補間画像が生成される。それにより、スクリーニング表示時のフレームレートを高める際に、補間画像を精度良く生成することができ、且つ、短い遅延で画像表示を行うことができる。また、スクリーニング表示時のフレームレートを高めることにより、部分画像の視認性を向上することができる。
【００５５】
なお、図７には、ｎ＝２の場合の例を示したが、ｎは２より大きくてもよい。例えば、ｎ＝３であってもよい。具体的には、変換前フレームレートが６０Ｈｚであり、変換後フレームレートが１８０Ｈｚであってもよい。その場合には、付加画像４１０として水平方向の画素数がＸ×（１−（１／ｎ））＝２Ｘ／３の画像を用い、部分画像４００と部分画像４０１の間の補間画像として、２枚の補間画像Ａ，Ｂを生成すればよい。具体的には、部分画像４００から部分画像４０１にかけての画像の移動速度と“ｎ＝３”とから、部分画像４００から補間画像Ａにかけて画像が左方向にＸ／ｎ＝Ｘ／３画素だけ移動することが判断される。そして、部分画像４００から補間画像Ｂにかけて画像が左方向に２Ｘ／ｎ＝２Ｘ／３画素だけ移動すること、が判断される。即ち、部分画像４００からｍ番目の補間画像Ｂにかけて画像が左方向にｍＸ／ｎ画素だけ移動することが判断される。そして、部分画像４００の右側に付加画像４１０の左端から水平方向ｍＸ／ｎ＝Ｘ／３画素分の画像を付加し、部分画像４００の左端から水平方向ｍＸ／ｎ＝Ｘ／３画素分の画像を除去することにより、破綻の無い補間画像Ａを生成することができる。また、部分画像４００の右側に付加画像４１０の左端から水平方向２Ｘ／３画素分の画像を付加し、部分画像４００の左端から水平方向２Ｘ／３画素分の画像を除去することにより、破綻の無い補間画像Ｂを生成することができる。
【００５６】
なお、ｎの値は、画像出力装置１０と画像表示装置１１（画像処理装置）の両方に予め設定されていてもよいし、画像出力装置１０と画像表示装置１１の一方に予め設定されていてもよい。画像出力装置１０と画像表示装置１１の一方にｎの値が設定されている場合には、一方の装置から他方の装置にｎの値が通知されればよい。ｎの値ではなく、変換前フレームレートと変換後フレームレートが予め設定されていてもよい。そして、変換前フレームレートと変換後フレームレートからｎの値が算出されてもよい。
また、ｎの値、変換前フレームレート、変換後フレームレート、等は、予め設定された固定値でなく、ユーザーによって変更可能な値であってもよい。
【００５７】
なお、図５には、抽出領域が水平方向右側にＸ画素ずつ移動する例を示したが、抽出領域の移動方向は右方向に限らない。抽出領域が左方向、垂直方向、斜め方向に移動する場合にも、上述した効果が得られる。
図８に抽出領域が斜め方向に移動する場合の例を示す。図８の例では、現フレームから次フレームにかけて抽出領域が右方向にＸ画素だけ移動し、現フレームから次フレームにかけて抽出領域が下方向にＹ画素だけ移動している。
この場合、画像出力装置１０からは、付加画像として、現フレームの部分画像３０５に対して右側に隣接する付加画像５０３と、現フレームの部分画像３０５に対して下側に隣接する付加画像５０４と、が出力される。付加画像５０３の水平方向の画素数はＸ／２であり、付加画像５０３の垂直方向の画素数と位置は部分画像３０５と同じである。付加画像５０４の垂直方向の画素数はＹ／２であり、付加画像５０４の水平方向の画素数と位置は、部分画像３０５と付加画像５０４からなる画像と同じである。また、画像出力装置１０からは、速度情報として“水平方向：−Ｘ，垂直方向：−Ｙ”が出力される。これらの付加画像と速度情報を用いて上述した処理を行うことにより、破綻の無い補間画像を生成することができる。
なお、垂直方向の速度の符号が“＋”である場合には、付加画像が部分画像に対し上側に隣接する画像であると判断することができる。垂直方向の速度の符号が“−”である場合には、付加画像が部分画像に対し下側に隣接する画像であると判断することができる。
【００５８】
なお、本実施例ではユーザー操作に応じて移動速度の大きさが決定される例を説明したが、移動速度の大きさの決定方法はこれに限らない。例えば、移動速度の大きさは、メーカー等によって予め定められた固定値であってもよい。また、ユーザーによって、元画像の領域全体を見渡すのに費やす時間（観察時間）が画像出力装置１０に入力されてもよい。観察時間は、元画像の領域全体を抽出領域が走査するのに要する時間ということもできる。そして、観察時間、変換前フレームレート、及び、元画像のサイズに基づいて、移動速度の大きさが決定されてもよい。具体的には、以下の式１を用いて移動速度の大きさを算出することができる。式１において、“Ｓ”は移動速度の大きさに相当する画素数であり、“Ｈ”は元画像の水平方向の画素数であり、“Ｖ”は元画像の垂直方向の画素数であり、“Ｆ”は変換前フレームレート（Ｈｚ）であり、“Ｔ”は観察時間（秒）である。“Ｆ×Ｔ”は、観察時間に表示（処理）されるフレーム数である。Ｈ＝１０００画素、Ｖ＝４８０画素、Ｆ＝６０Ｈｚ、及び、Ｔ＝２０秒の場合には、Ｓ＝２０画素となる。
Ｓ＝（（Ｈ×Ｖ）／（Ｆ×Ｔ））１／２  ・・・（式１）
なお、観察時間と移動速度の大きさとの対応関係を表すテーブルを用いて、観察時間から移動速度の大きさが決定されてもよい。
【００５９】
＜実施例２＞
以下、本発明の実施例２に係る画像表示システム及びその制御方法について説明する。実施例１では、所定の移動パターンに従って抽出領域が移動する例を説明した。また、実施例１では、抽出領域の移動速度の大きさが一定である例を説明した。本実施例では、フレーム間における抽出領域の移動速度をユーザーが自由に決定する例を説明する。具体的には、本実施例では、抽出領域の移動経路と移動速度が予め定められておらず、スクリーニング表示中に抽出領域の移動速度がユーザー操作に応じて変化し得る例を説明する。
なお、以下では、実施例１と異なる処理について詳しく説明し、実施例１と同じ処理については説明を省略する。
【００６０】
（画像表示システムの構成）
図９は、本実施例に係る画像表示システムの構成の一例を示すブロック図である。図９に示すように、本実施例に係る画像表示システムは、画像出力装置６０と画像表示装置７０を有する。
画像出力装置６０は、操作部６０１、スクリーニング情報生成部６０２、画像記憶部１０４、スクリーニング制御部６０３、等を有する。
画像表示装置７０は、データ取得部７０１、補間画像生成部７０２、出力画像選択部１０８、表示パネル１０９、等を有する。
なお、実施例１（図１）と同じ機能部には同じ符号を付し、その説明は省略する。
【００６１】
操作部６０１は、ユーザー操作を受け付け、ユーザー操作に応じた操作情報を出力する。本実施例では、スクリーニング表示中に、抽出領域の移動速度（向きと大きさを含む値）を入力するユーザー操作が行われる。抽出領域の移動速度を入力するユーザー操作が行われると、操作部６０１は、抽出領域の移動速度を表す操作情報を出力する。このように、本実施例では、任意のタイミングで行われたユーザー操作に応じて、フレーム間における抽出領域の移動速度が決定される。
なお、抽出領域の移動速度を表す操作情報と画像表示装置に出力する速度情報とで移動速度の記述方法が一致していてもよいし異なっていてもよい。
【００６２】
ユーザーが抽出領域の移動速度を入力する際に用いられるＧＵＩ８００の一例を図１０に示す。ＧＵＩ８００は、例えば、画像出力装置６０に設けられた表示部、画像表示装置７０、等に表示される。ユーザーは、例えば、画像出力装置６０に接続されたマウスやキーボードを用いて、ＧＵＩ８００を操作する。ＧＵＩ８００が表示された画面がタッチパネルとして機能する場合には、ユーザーが画面（ＧＵＩ８００が表示された画面）を操作することによってＧＵＩ８００が操作されてもよい。
【００６３】
ＧＵＩ８００は、抽出領域を移動させるために押下される方向キー８０１〜８０４と、抽出領域の移動速度の大きさ（移動量）が入力される移動量入力部８０５と、を有する。ユーザーが上キー８０１を押している間、移動量入力部８０５に入力された移動量に従って、抽出領域が上に移動する。即ち、ユーザーが上キー８０１を押している間、向きが上方向であり、且つ、大きさが移動量入力部８０５に入力された移動量である移動速度が決定される。同様に、ユーザーが右キー８０２を押している間、移動量入力部８０５に入力された移動量に従って、抽出領域が右に移動する。ユーザーが下キー８０３を押している間、移動量入力部８０５に入力された移動量に従って、抽出領域が下に移動する。ユーザーが左キー８０４を押している間、移動量入力部８０５に入力された移動量に従って、抽出領域が左に移動する。方向キー８０１〜８０４のいずれも押下されていない場合、抽出領域は停止する。即ち、方向キー８０１〜８０４のいずれも押下されていない場合、大きさ０の移動速度が決定される（第３決定処理）。
【００６４】
なお、本実施例では、ユーザーが方向キーを押している間だけ、その方向キーに応じた向きの移動速度が決定される例を説明するが、これに限らない。例えば、ユーザーが方向キーＡを押してから他の方向キーＢを押すまで、方向キーＡに応じた向きの移動速度が決定されてもよい。その場合、ＧＵＩ８００は、方向キーとして、抽出領域を停止するために操作される停止キーを有していてもよい。
なお、本実施例では、移動速度の大きさと向きの両方がユーザーによって変更可能である場合の例を説明するが、移動速度の大きさと向きの一方のみがユーザーによって変更可能であってもよい。例えば、実施例１のように抽出領域の移動経路が予め定められており、ユーザー操作によって任意のタイミングで移動量が変更されてもよい。また、移動量が予め定められており、ユーザー操作によって任意のタイミングで移動方向（移動速度の向き）が変更されてもよい。
なお、画像出力装置６０に物理的なボタンが設けられていてもよい。そして、画像出力装置６０に設けられた物理的なボタンをユーザーが操作することにより、抽出領域の移動速度が変更されてもよい。
【００６５】
スクリーニング情報生成部６０２は、操作部６０１で決定された移動速度に基づいて、抽出領域決定処理、移動速度決定処理、及び、付加領域決定処理を行う。本実施例では、移動速度決定処理は、操作部６０１から移動速度を表す操作情報を取得し、操作部６０１で決定された移動速度をその後の処理に反映する処理である。本実施例では、ユーザーが任意のタイミングで移動速度を変更することができる。そのため、現フレームの速度情報
と付加画像が画像出力装置６０から出力された後に、現フレームから次フレームにかけての抽出領域の移動速度が変化することがある。具体的には、現フレームに対する付加領域が決定された後に、現フレームから次フレームにかけての抽出領域の移動速度が変化することがある。その場合には、スクリーニング情報生成部６０２は、変化後の移動速度に基づいて現フレームに対する付加領域を再決定する。そして、スクリーニング情報生成部６０２は、変化後の移動速度を表す情報と、変化後の移動速度に基づいて現フレームに対して決定された付加領域を表す情報と、を出力する。
【００６６】
スクリーニング制御部６０３は、実施例１のスクリーニング制御部１０５と同様の機能を有する。但し、本実施例では、部分画像と制御情報が個別に出力される。また、上述したように、本実施例では、現フレームの速度情報と付加画像が出力された後に、現フレームから次フレームにかけての抽出領域の移動速度が変化することがある。その場合には、スクリーニング制御部６０３は、変化後の移動速度を表す速度情報と、現フレームに対して再決定された付加領域における元画像である付加画像と、現フレームの速度情報と付加画像として再出力する。
【００６７】
データ取得部７０１は、実施例１のデータ取得部１０６と同様の機能を有する。但し、本実施例では、画像出力装置６０から現フレームの制御情報が複数回出力されることがある。その場合には、データ取得部７０１は、現フレームの制御情報（速度情報と付加画像）を複数回取得する。
【００６８】
補間画像生成部７０２は、実施例１の補間画像生成部１０７と同様の機能を有する。但し、現フレームの制御情報が複数回取得されている場合には、補間画像生成部７０２は、現フレームの複数の制御情報のうち、最後に取得された制御情報を用いて、現フレームと次フレームの間の補間フレームの画像を生成する。
【００６９】
（画像出力装置の動作）
画像出力装置６０の動作について図１１のフローチャートを用いて説明する。
なお、以下では、スクリーニング表示を行う前に決定された移動量（抽出領域の移動速度の大きさ）で抽出領域の移動が行われる場合、即ちスクリーニング表示中に移動量が変更されない場合の例を説明するが、これに限らない。スクリーニング表示中に移動量が変更されてもよい。
【００７０】
まず、操作部６０１が、ユーザー操作に応じて、抽出領域の移動速度の大きさ（移動量）を決定する（Ｓ２０１）。本実施例では、図１０のＧＵＩ８００が有する移動量入力部８０５に入力された値が、移動量として決定される。
次に、操作部６０１が、ユーザー操作に応じて、抽出領域の初期位置が決定される（Ｓ２０２）。本実施例では、元画像全体が画像表示装置７０の画面に縮小表示される。そして、ユーザーが、画像出力装置６０に接続されたマウスやキーボードを用いて、画面に縮小表示された元画像内の任意の位置を選択することにより、ユーザーが選択した位置が、初期位置として決定される。
なお、縮小表示を行えば、スクリーニング表示を行わなくても元画像全体が観察可能となる。しかしながら、縮小表示では、元画像の詳細を把握することが困難であるため、病理画像を用いた病理診断を高精度に行うことはできない。
【００７１】
そして、操作部６０１が、ユーザー操作に応じて、抽出領域の移動速度の向き（移動方向）を決定する（Ｓ２０３）。本実施例では、図１０のＧＵＩ８００が有する方向キー８０１〜８０４の操作状態に応じて、移動方向が決定される。
次に、スクリーニング情報生成部６０２が、Ｓ２０１とＳ２０３で決定された移動速度に基づいて抽出領域を決定し、決定した抽出領域を表す情報をスクリーニング制御部６０
３に出力する（Ｓ２０４）。ここでは、例外として、Ｓ２０１とＳ２０３で決定された移動速度が、現フレームから次フレームにかけての抽出領域の移動速度としてではなく、前フレームから現フレームにかけての抽出領域の移動速度として使用される。前フレームは、現フレームの１つ前のフレームである。１回目の処理では、Ｓ２０２で決定された初期位置をＳ２０３で決定された移動方向にＳ２０１で決定された移動量だけシフトした位置に抽出領域が設定される。２回目以降の処理では、直前に設定された抽出領域をＳ２０３で決定された移動方向にＳ２０１で決定された移動量だけシフトした抽出領域が設定される。
【００７２】
そして、スクリーニング情報生成部６０２が、Ｓ２０１とＳ２０３で決定された移動速度を、現フレームから次フレームにかけての抽出領域の移動速度として決定する（Ｓ２０５）。そして、スクリーニング情報生成部６０２は、決定した移動速度を表す情報をスクリーニング制御部６０３に出力する。
次に、スクリーニング情報生成部６０２が、Ｓ２０４で決定された抽出領域と、Ｓ２０５で決定された移動速度と、に基づいて、付加領域を決定する（Ｓ２０６）。付加領域は、実施例１と同様の方法で決定される。そして、スクリーニング情報生成部６０２は、決定した付加領域を表す情報をスクリーニング制御部６０３に出力する。
【００７３】
次に、スクリーニング情報生成部６０２が、抽出領域の移動速度が変化したか否かを判断する（Ｓ２０７）。本実施例では、図１０のＧＵＩ８００が有する方向キー８０１〜８０４の操作状態に応じた現在の移動方向が、Ｓ２０３で決定された移動方向と異なるか否かが判断される。例えば、右キー８０２を押して抽出領域を右に移動した後に、右キー８０２を離して、抽出領域の移動を一時停止するときに、「移動方向に変化あり」と判断される。「移動方向に変化あり」と判断された場合には、Ｓ２０８に処理が進められ、「移動方向に変化なり」と判断された場合には、Ｓ２０３に処理が戻される。
【００７４】
Ｓ２０８では、スクリーニング情報生成部６０２が、変化後の移動速度の大きさ（移動量）が０か否かを判断する。変化後の移動量が０である場合には、Ｓ２０９に処理が進められ、変化後の移動量が０でない場合には、Ｓ２１０に処理が進められる。本実施例では、方向キー８０１〜８０４のいずれかが押されている状態から、方向キー８０１〜８０４のいずれも押されていない状態へ変化した場合に、Ｓ２０９に処理が進められる。方向キー８０１〜８０４が押されていない状態から、方向キー８０１〜８０４のいずれかが押された状態へ変化した場合に、Ｓ２１０に処理が進められる。また、押されている方向キーが変化した場合に、Ｓ２１０に処理が進められる。例えば、上キー８０１が押されている状態から左キー８０４が押されている状態へ変化した場合に、Ｓ２１０に処理が進められる。
【００７５】
Ｓ２０９では、スクリーニング情報生成部６０２が、現フレームから次フレームにかけての抽出領域の移動速度を、大きさが０の移動速度に更新する。そして、スクリーニング情報生成部６０２は、大きさが０の移動速度を表す情報をスクリーニング制御部６０３に出力する。その後、Ｓ２０３に処理が戻される。
Ｓ２１０では、スクリーニング情報生成部６０２が、現フレームから次フレームにかけての抽出領域の移動速度を、変化後の移動速度に更新する。そして、スクリーニング情報生成部６０２は、変化後の移動速度を表す情報をスクリーニング制御部６０３に出力する。そして、Ｓ２１１に処理が進められる。
Ｓ２１１では、スクリーニング情報生成部６０２が、変化後の移動速度と、Ｓ２０４で決定された抽出領域と、に基づいて、付加領域を決定する。そして、スクリーニング情報生成部６０２は、変化後の移動速度に基づく付加領域を表す情報をスクリーニング制御部６０３に出力する。その後、Ｓ２０３に処理が戻される。
Ｓ２０３〜Ｓ２１１の処理は、変換前フレームレートで繰り返される。
【００７６】
Ｓ２０６の次に、スクリーニング制御部６０３は、スクリーニング情報生成部１０３で生成されたスクリーニング情報に基づいて部分画像と制御情報を生成し、生成した部分画像と制御情報を画像表示装置７０に出力する。また、Ｓ２０９の次に、スクリーニング制御部６０３は、速度情報が変更後の移動速度を表す情報に更新された制御情報を出力する。また、Ｓ２１１の次に、スクリーニング制御部６０３は、速度情報が変更後の移動速度を表す情報に更新され、且つ、付加画像が変更後の速度情報に基づく付加領域における元画像に更新された制御情報を出力する。
【００７７】
なお、本実施例では、変更後の移動速度の大きさが０である場合には付加領域を再決定する処理が省略される例を説明したが、大きさ０の移動速度に基づいて付加領域が再決定されてもよい。また、付加領域を再決定しない場合には、制御情報が再出力されるのではなく、速度情報のみが再出力されてもよい。但し、付加領域を再決定する処理を省略すれば、処理負荷を低減することができる。
【００７８】
（本実施例の効果）
図１２は、本実施例に係る画像表示システムの動作の一例を示す図（タイミングチャート）である。
図１２において、「キー押フラグ」は方向キー８０１〜８０４の押下状態を示す。
「キー押検出１〜４」は、ユーザーが方向キー８０１〜８０４のいずれかを押した状態が検出され、検出結果が操作部６０１から出力されるタイミングを示す。ここでは、移動量としてＸ画素が入力されたとする。そして、キー押検出１とキー押検出２では、左キー８０４が押されていることが検出されたとする。即ち、キー押検出１とキー押検出２では、向きが左であり且つ大きさＸ画素の速度が、抽出領域の移動速度として決定される。キー押検出３では、いずれの方向キーも押されていないことが検出されたとする。即ち、キー押検出３では、大きさ０画素の速度が、抽出領域の移動速度として決定される。キー押検出４では、右キー８０２が押されていることが検出されたとする。即ち、キー押検出４では、向きが右であり且つ大きさＸ画素の速度が、抽出領域の移動速度として決定される。
「Ｖｓｙｎｃ」は、フレームレート変換処理前の部分画像の垂直同期信号を示す。換言すれば、画像出力装置６０は、Ｖｓｙｎｃに同期して部分画像を出力する。
「部分画像１」は、キー押検出１の結果が反映された部分画像であり、「部分画像２〜４」は、キー押検出２〜４の結果が反映された部分画像である。
「パネルＶｓｙｎｃ」は、フレームレート変換処理後の画像の垂直同期信号を示す。
「補間画像０」は、部分画像０と部分画像１の間の補間画像であり、「補間画像１」は、部分画像１と部分画像２の間の補間画像である。「補間画像２」は、部分画像２と部分画像３の間の補間画像であり、「補間画像３」は、部分画像３と部分画像４の間の補間画像である。
【００７９】
キー押検出１では、向きが左であり且つ大きさＸ画素の速度が、抽出領域の移動速度として決定される。そのため、Ｓ２０４〜Ｓ２０６の処理で生成されたスクリーニング情報に基づいて得られた部分画像１と制御情報１が、画像出力装置６０から画像表示装置７０に出力される。
【００８０】
同様に、キー押検出２では、向きが左であり且つ大きさＸ画素の速度が、抽出領域の移動速度として決定される。そのため、Ｓ２０４〜Ｓ２０６の処理で生成されたスクリーニング情報に基づいて得られた部分画像２と制御情報２が、画像出力装置６０から画像表示装置７０に出力される。
しかしながら、キー押検出３では、大きさ０画素の速度が、抽出領域の移動速度として決定され、キー押検出２からキー押検出３にかけて移動速度の変化が生じる。そのため、
Ｓ２０８とＳ２０９の処理が行われ、Ｓ２０９で決定された移動速度（大きさが０の移動速度）を表す速度情報に速度情報が更新された制御情報２’が、部分画像２の制御情報として、画像出力装置６０から再出力される。
【００８１】
その後、Ｓ２０４〜Ｓ２０６の処理で生成されたスクリーニング情報に基づいて得られた部分画像３と制御情報３が、画像出力装置６０から画像表示装置７０に出力される。部分画像３と制御情報３は、キー押検出３の検出結果に基づくデータである。制御情報３は、制御情報２’と同じ情報である。
しかしながら、キー押検出４では、向きが右であり且つ大きさＸ画素の速度が、抽出領域の移動速度として決定され、キー押検出３からキー押検出４にかけて移動速度の変化が生じる。そのため、Ｓ２０８、Ｓ２１０、及び、Ｓ２１１の処理が行われる。そして、Ｓ２１０で決定された移動速度を表す速度情報に速度情報が更新され、且つ、Ｓ２１１で決定された取得領域における元画像に付加画像が更新された制御情報３’が、部分画像３の制御情報として、画像出力装置６０から再出力される。
【００８２】
その後、Ｓ２０４〜Ｓ２０６の処理で生成されたスクリーニング情報に基づいて得られた部分画像４と制御情報４が、画像出力装置６０から画像表示装置７０に出力される。部分画像４と制御情報４は、キー押検出４の検出結果に基づくデータである。制御情報４は、制御情報３’と同じ情報である。
【００８３】
画像表示装置７０では、実施例１と同様に、部分画像０と制御情報０に基づいて補間画像０が生成され、部分画像１と制御情報１に基づいて補間画像１が生成される。しかしながら、補間画像２は、部分画像２と制御情報２ではなく、部分画像２と制御情報２’を使用して生成される。キー押検出３では大きさ０画素の移動速度が決定されるため、部分画像２から部分画像３にかけては画像の動きはない。それにも拘らず、キー押検出２の結果（向きが左であり且つ大きさＸ画素の移動速度）に基づく制御情報２を使用して補間画像２を生成すると、補間画像２と部分画像３の間で画像のちらつきが生じてしまう。本実施例では、キー押検出３の結果に基づく制御情報２’を使用して補間画像２が生成されるため、正確な補間画像を生成することができ、上記ちらつきの発生を抑制することができる。同様に、本実施例では、部分画像３と制御情報３’を使用して補間画像３が生成されるため、正確な補間画像を生成することができ、上記ちらつきの発生を抑制することができる。
【００８４】
以上述べたように、本実施例によれば、部分画像と移動情報だけでなく、補間フレームの画像を生成するために必要となる付加画像が、画像出力装置から出力される。そして、画像表示装置では、部分画像と移動情報だけでなく、付加画像を用いて補間画像が生成される。それにより、スクリーニング表示時のフレームレートを高める際に、補間画像を精度良く生成することができ、且つ、短い遅延で画像表示を行うことができる。また、スクリーニング表示時のフレームレートを高めることにより、部分画像の視認性を向上することができる。
さらに、本実施例によれば、ユーザーによる移動速度の変更に応じて、制御情報が適宜変更されて使用される。それにより、より高精度に補間画像を生成することができる。具体的には、ユーザー操作が高精度に反映された制御情報を使用することができ、現フレームと次フレームの間の補間画像から次フレームの部分画像へ切り替わる際の画像のちらつきの発生を抑制することができる。
【００８５】
＜実施例３＞
以下、本発明の実施例３に係る画像表示システム及びその制御方法について説明する。実施例２では、画像出力装置から現フレームの制御情報が複数回出力される例を説明した。具体的には、現フレームの制御情報が出力された後に、現フレームから次フレームにか
けての抽出領域の移動速度が変化した場合に、変化後の移動速度に基づく制御情報が、現フレームの制御情報として再出力される例を説明した。本実施例では、画像出力装置から現フレームの制御情報を１回だけ出力する構成であって、ユーザー操作が高精度に反映された制御情報を出力することができる構成について説明する。
【００８６】
（画像表示システムの構成）
図１３は、本実施例に係る画像処理システムの構成の一例を示すブロック図である。図１３に示すように、本実施例に係る画像表示システムは、画像出力装置９０と画像表示装置１００を有する。
画像出力装置６０は、操作部６０１、スクリーニング情報生成部９０１、画像記憶部１０４、スクリーニング制御部９０２、等を有する。
画像表示装置１００は、データ取得部１０６、補間画像生成部１０７、出力画像選択部１０８、表示パネル１０９、同期信号制御部１００１、等を有する。
なお、実施例１，２（図１，９）と同じ機能部には同じ符号を付し、その説明は省略する。
【００８７】
スクリーニング情報生成部９０１は、実施例２のスクリーニング情報生成部６０２と同様の機能を有する。但し、本実施例では、現フレームから次フレームにかけての抽出領域の移動速度を決定するタイミングが実施例２と異なる。実施例２では、現フレームから次フレームにかけての抽出領域の移動速度が変化した場合に、現フレームから次フレームにかけての抽出領域の移動速度が複数回決定された。本実施例では変換前フレームレートのフレーム毎に、現フレームから次フレームにかけての抽出領域の移動速度が決定する処理が１回だけ行われる（第３決定処理）。本実施例では、現フレームと次フレームの間の補間フレームの画像を生成する生成タイミングよりも処理時間Ｔｐだけ前のタイミングで現フレームに対する移動速度が決定される。処理時間Ｔｐは、現フレームに対応する移動速度を決定してから現フレームの速度情報と付加画像を出力するまでに要する時間である。
なお、現フレームから次フレームにかけての抽出領域の移動速度は、実施例２と異なる方法で決定されてもよい。例えば、現フレームから次フレームにかけての抽出領域の移動速度は、実施例１と同じ方法で決定されてもよい。
【００８８】
スクリーニング制御部９０２は、実施例１のスクリーニング制御部１０５と同様の機能を有する。但し、本実施例では、部分画像と制御情報が個別に出力される。スクリーニング制御部９０２は、変換前フレームレートの同期信号（垂直同期信号）である第１同期信号に同期して部分画像を出力する。第１同期信号は、補間フレームを挿入する前の画像の同期信号ということもできる。
【００８９】
同期信号制御部１００１は、画像出力装置９０（スクリーニング制御部９０２）から第１同期信号を取得し、変換後フレームレートの同期信号（垂直同期信号）である第２同期信号を生成する。第２同期信号は、補間フレームを挿入した後の画像の同期信号ということもできる。フレームレート変換処理により画像のフレームレートが２倍に高められる場合、第２同期信号の周期は、第１同期信号の周期の１／２となる。同期信号制御部１００１は、第２同期信号を画像出力装置９０（スクリーニング情報生成部９０１）と出力画像選択部１０８に出力する。出力画像選択部１０８では、第２同期信号に同期して画像の出力が繰り返し行われる。
【００９０】
本実施例では、スクリーニング情報生成部９０１は、画像表示装置１００から第２同期信号を取得し（第１取得処理）、第１同期信号、第２同期信号、及び、処理時間Ｔｐに基づいて、移動速度を決定するタイミングが判断される。具体的には、第２同期信号から生成タイミングが判断される。そして、第１同期信号のタイミングと生成タイミングの間の時間から処理時間Ｔｐを減算した時間だけ第１同期信号のタイミングよりも後のタイミン
グが、移動速度を決定するタイミングとして判断される。
【００９１】
なお、移動速度を決定するタイミングの判断方法は上記方法に限らない。例えば、第１同期信号、第２同期信号、及び、処理時間Ｔｐの組み合わせを入力値とし、移動速度を決定するタイミングを出力値とする関数やテーブルが使用されてもよい。それにより、生成タイミングを判断せずに、移動速度を決定するタイミングを判断することができる。また、処理時間Ｔｐとして、現フレームに対応する移動速度を決定してから現フレームの速度情報と付加画像を出力するまでに要する時間の最大時間Ｔｍａｘ（処理時間Ｔｐの取り得る値の最大値）が使用されてもよい。そして、第１同期信号と第２同期信号が予め定められていてもよい。その場合には、最大時間Ｔｍａｘを予め定めることができ、現フレームと次フレームの間の補間フレームの画像を生成する生成タイミングよりも最大時間Ｔｍａｘだけ前のタイミングを予め定めることもできる。そのため、メーカー等によって予め定められたタイミング（現フレームと次フレームの間の補間フレームの画像を生成する生成タイミングよりも最大時間Ｔｍａｘだけ前のタイミング）で移動速度を決定することができる。
なお、第２同期信号は、画像表示装置１００以外の装置内で生成されてもよい。第２同期信号は、画像出力装置９０内で生成されてもよい。
なお、第１取得処理は、スクリーニング情報生成部９０１以外の機能部で行われてもよい。例えば、画像出力装置９０が、第２同期信号を取得する取得部をさらに有していてもよい。
【００９２】
（本実施例の効果）
図１４は、本実施例に係る画像表示システムの動作の一例を示す図（タイミングチャート）である。
図１４のキー押検出１〜４は、図１２のキー押検出１〜４と同じである。
部分画像０〜４は、実施例２と同様のタイミングで生成され、画像表示装置１００に出力される。
【００９３】
本実施例では、制御情報を生成して出力するタイミングが実施例２と異なる。例えば、本実施例（図１４）では実施例２（図１２）よりも遅いタイミングで制御情報２が生成されて出力される。具体的には、実施例２ではキー押検出２の結果に基づいて得られた制御情報が制御情報２として出力されるが、本実施例ではキー押検出３の結果に基づいて得られた制御情報が制御情報３として出力される。それにより、実施例２（図１２）における制御情報２’と同じ情報を制御情報２として出力することができ、実施例２で述べたようなちらつきの発生を抑制することが可能となる。
【００９４】
本実施例では、図１５のフローチャートに従って、現フレームから次フレームにかけての抽出領域の移動速度を決定するタイミングが決定される。図１５のフローチャートは、変換前フレームレートのフレーム毎に実行される。
【００９５】
まず、スクリーニング情報生成部９０１は、第１同期信号のタイミングから第２同期信号のタイミングまでの時間（図１４の時間Ｔａ）を算出する（Ｓ３０１）。時間Ｔａは、第１同期信号と第２同期信号から算出することができる。時間Ｔａは、現フレームに対応する第１同期信号のタイミングから、現フレームと次フレームの間の補間フレームに対応する第２同期信号のタイミング（生成タイミング）までの時間ということもできる。
【００９６】
次に、スクリーニング情報生成部９０１が、時間Ｔｂを算出する。時間Ｔｂは、上述した処理時間Ｔｐと同様であり、出力する制御情報のデータ量に応じて決まる値である。制御情報のデータ量が大きいほど時間Ｔｂは大きい。なお、最大時間Ｔｍａｘを時間Ｔｂとして使用する場合には、最大時間Ｔｍａｘを予め定めることができるため、時間Ｔｂを算
出する処理を省略することができる。
【００９７】
そして、スクリーニング情報生成部９０１は、時間Ｔａから時間Ｔｂを減算した時間Ｔｃを算出する。
その後、スクリーニング情報生成部９０１は、現フレームに対応する第１同期信号のタイミングよりも時間Ｔｃだけ後のタイミングで、現フレームから次フレームにかけての抽出領域の移動速度を決定する。
【００９８】
以上述べたように、本実施例によれば、部分画像と移動情報だけでなく、補間フレームの画像を生成するために必要となる付加画像が、画像出力装置から出力される。そして、画像表示装置では、部分画像と移動情報だけでなく、付加画像を用いて補間画像が生成される。それにより、スクリーニング表示時のフレームレートを高める際に、補間画像を精度良く生成することができ、且つ、短い遅延で画像表示を行うことができる。また、スクリーニング表示時のフレームレートを高めることにより、部分画像の視認性を向上することができる。
さらに、本実施例によれば、現フレームと次フレームの間の補間フレームの画像を生成する生成タイミングよりも処理時間Ｔｐだけ前のタイミングで現フレームに対する移動速度が決定される。それにより、より正確な移動速度に基づいて得られた制御情報を使用することができ、より高精度に補間画像を生成することができる。例えば、ユーザー操作が高精度に反映された制御情報を使用することができ、現フレームと次フレームの間の補間画像から次フレームの部分画像へ切り替わる際の画像のちらつきの発生を抑制することができる。
【００９９】
＜その他の実施例＞
記憶装置に記録されたプログラムを読み込み実行することで前述した実施例の機能を実現するシステムや装置のコンピュータ（又はＣＰＵ、ＭＰＵ等のデバイス）によっても、本発明を実施することができる。また、例えば、記憶装置に記録されたプログラムを読み込み実行することで前述した実施例の機能を実現するシステムや装置のコンピュータによって実行されるステップからなる方法によっても、本発明を実施することができる。この目的のために、上記プログラムは、例えば、ネットワークを通じて、又は、上記記憶装置となり得る様々なタイプの記録媒体（つまり、非一時的にデータを保持するコンピュータ読取可能な記録媒体）から、上記コンピュータに提供される。したがって、上記コンピュータ（ＣＰＵ、ＭＰＵ等のデバイスを含む）、上記方法、上記プログラム（プログラムコード、プログラムプロダクトを含む）、上記プログラムを非一時的に保持するコンピュータ読取可能な記録媒体は、いずれも本発明の範疇に含まれる。
【符号の説明】
【０１００】
１０，６０，９０  画像出力装置
１１，７０，１００  画像表示装置
１０３，６０２，９０１  スクリーニング情報生成部
１０５，６０３，９０２  スクリーニング制御部
１０６，７０１  データ取得部
１０７，７０２  補間画像生成部
【図１】
2015201718.tif 000003
【図２】
2015201718.tif 000004
【図３】
2015201718.tif 000005
【図４】
2015201718.tif 000006
【図５】
2015201718.tif 000007
【図６】
2015201718.tif 000008
【図７】
2015201718.tif 000009
【図８】
2015201718.tif 000010
【図９】
2015201718.tif 000011
【図１０】
2015201718.tif 000012
【図１１】
2015201718.tif 000013
【図１２】
2015201718.tif 000014
【図１３】
2015201718.tif 000015
【図１４】
2015201718.tif 000016
【図１５】
2015201718.tif 000017