(57)【要約】【課題】移動通信システムの画像フレームのエラーを隠匿するとき、演算処理量を減少することで、実時間に処理し得る移動通信システムの画像ブロックエラー隠匿装置及びその方法を提供する。【解決手段】エラーの発生した画素／ブロックを、高速動き推定方法により以前及び次のフレームを順次検索することでエラー補正するエラー隠匿部１３０と、前記エラー隠匿部によりエラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの間に、人間の目に敏感に作用する差がある場合、垂直方向に適応加重和メディアンフィルタリングを実行することで、前記エラー補正された画素／ブロックを再補正するエラー再補正部１４０とを有して構成される。【選択図】図１
2005244943.tif 000002
【特許請求の範囲】
【請求項１】
エラーの発生した画素／ブロックを、高速動き推定方法により以前及び次のフレームを順次検索することでエラー補正するエラー隠匿（ｃｏｎｃｅａｌｉｎｇ）部と、
前記エラー隠匿部によりエラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの間に、人間の目に敏感に作用（ｗｏｒｋ）する差がある場合、垂直方向に適応加重和メディアンフィルタリング（ａｄａｐｔｉｖｅ  ｗｅｉｇｈｔ  ｓｕｍ  ｍｅｄｉａｎ  ｆｉｌｔｅｒｉｎｇ）を実行することで、前記エラー補正された画素／ブロックを再補正するエラー再補正部とを有して構成されることを特徴とする移動通信システムの画像ブロックエラー隠匿装置。
【請求項２】
前記エラー隠匿部は、以前のフレームを格納するための第１フレーム遅延部と、
次のフレームを格納するための第２フレーム遅延部と、
前記第１フレーム遅延部及び第２フレーム遅延部に対する高速動き推定を順次行って、エラー補正に利用される画素／ブロックの動きベクトルを生成する動き推定部と、
前記動きベクトルにより動き補償された画素／ブロックを利用して、前記エラーの発生した画素／ブロックを復元する画素／ブロック復元部と、
前記画素／ブロック復元部で復元された画素／ブロックとバイパス路により伝送された正常な画素／ブロックとによりフレームを復元する第１ソフトスイッチとを有して構成されることを特徴とする請求項１記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項３】
前記動き推定部は、前記第１フレーム遅延部を高速動き推定により検索し、前記第１フレーム遅延部から所望の画素／ブロックが検索されない場合、前記第２フレーム遅延部を高速動き推定により検索することを特徴とする請求項２記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項４】
前記高速動き推定は、３−ステップ動き推定方法及び５−ステップ動き推定方法中の何れか一つであることを特徴とする請求項２又は３に記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項５】
デコーディングされた画像フレームからエラーの発生した画素／ブロックを検出するエラー検出部と、
前記エラー検出部で検出された画素／ブロックにエラーがあるか否かを再確認するエラー確認部と、
前記エラー確認部から出力される正常な画素／ブロックをエラー補正なしにバイパスするための第２ソフトスイッチとを更に有することを特徴とする請求項１記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項６】
前記人間の目に敏感に作用する差は、前記エラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックの第１平均値の大きさと、前記エラー補正された画素／ブロックを含んだ垂直方向に隣接した各画素／ブロックの第２平均値の大きさとを比較して判断されることを特徴とする請求項１記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項７】
前記人間の目に敏感に作用する差の値が前記第２平均値より小さい場合、前記エラー再補正部は、適応加重和メディアンフィルタリングを行い、前記差の値が前記第２平均値より小さくない場合、前記エラー再補正部は、平均和メディアンフィルタリング（ａｖｅｒａｇｅ  ｓｕｍ  ｍｅｄｉａｎ  ｆｉｌｔｅｒｉｎｇ）を行うことを特徴とする請求項６記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項８】
前記適応加重和メディアンフィルタリングの加重値は、前記エラー補正された画素／ブロックに最も大きい加重値が割り当てられ、垂直方向の隣接程度に相応して隣接した各画素／ブロックに割り当てられる加重値の大きさが決定されることを特徴とする請求項７記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項９】
前記適応加重和メディアンフィルタリングは、下記の式の方法により行われることを特徴とする請求項７記載の移動通信システムの画像ブロックエラー隠匿装置。
（数１）
［｛２＾（ｎ−１）×Ｐ（ｉ，ｊ）｝＋
｛［２＾（ｎ−２）×Ｐ（ｉ，ｊ−１）］＋［２＾（ｎ−２）×Ｐ（ｉ，ｊ＋１）］｝＋
｛［２＾（ｎ−３）×Ｐ（ｉ，ｊ−２）］＋［２＾（ｎ−３）×Ｐ（ｉ，ｊ＋２）］｝＋
｛［２＾（ｎ−４）×Ｐ（ｉ，ｊ−３）］＋［２＾（ｎ−４）×Ｐ（ｉ，ｊ＋３）］｝＋
・・・（ｕｎｔｉｌ  ｎ−ｋ＝−１）］×１／（２ｎ＋１）
式中、Ｐ（ｉ，ｊ）は、前記エラー隠匿部によりエラー補正された画素を示す。
【請求項１０】
前記平均和メディアンフィルタリングは、前記エラー補正された画素／ブロックを含んだ垂直方向に隣接した全ての画素／ブロックに同じ加重値を加えた後、平均和メディアンフィルタリングを行うことを特徴とする請求項７記載の移動通信システムの画像ブロックエラー隠匿装置。
【請求項１１】
画素／ブロックにエラーが発生した場合、以前及び次のフレームを順次高速動き推定することで動きベクトルを生成する段階と、
動き補償された画素／ブロックを利用して、前記エラーの発生した画素／ブロックを復元する段階と、
前記エラーの発生した画素／ブロックを復元する段階で復元された画素／ブロックと垂直方向に隣接した各画素／ブロックの平均値との差の値に従って適応加重和メディアンフィルタリングを行うことで、前記復元された画素／ブロックを再補正する段階とを有することを特徴とする移動通信システムの画像ブロックエラー隠匿方法。
【請求項１２】
デコーディングされた画像フレームからエラーの発生した画素／ブロックを検出する段階と、
前記エラーの発生した画素／ブロックを検出する段階で検出された画素／ブロックが実際にエラーの発生した画素／ブロックであるか否かを再確認する段階とを更に有することを特徴とする請求項１１記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項１３】
前記再確認する段階は、前記検出された画素／ブロックと隣接した各画素／ブロックの平均値との間の差値が正常状態であると判断される許容範囲に属する場合、前記検出された画素／ブロックの右側の画素／ブロックが正常であるか否かを確認する段階と、
前記右側の画素／ブロックが正常である場合、前記検出された画素／ブロックは正常であると判断する段階と、
前記差値が正常状態であると判断される許容範囲に属しないか、又は、前記右側の画素／ブロックが正常でない場合、前記検出された画素／ブロックはエラー発生状態であると判断する段階とを有することを特徴とする請求項１２記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項１４】
前記検出された画素／ブロックがＰ（ｘ，ｙ）であるとき、前記隣接した各画素／ブロックの平均値は、下記の式により計算されることを特徴とする請求項１３記載の移動通信システムの画像ブロックエラー隠匿方法。
（数２）
｛Ｐ（ｘ−１，ｙ−１）＋Ｐ（ｘ，ｙ−１）＋Ｐ（ｘ＋１，ｙ−１）｝／３＋
｛Ｐ（ｘ−１，ｙ）＋Ｐ（ｘ＋１，ｙ）｝／２＋
｛Ｐ（ｘ−１，ｙ＋１）＋Ｐ（ｘ，ｙ＋１）＋Ｐ（ｘ＋１，ｙ＋１）｝／３
【請求項１５】
前記動きベクトルを生成する段階は、以前のフレームに対して高速動き推定を行う段階と、
以前のフレームから所望の画素／ブロックが検索されないとき、次のフレームに対して高速動き推定を行う段階とを有することを特徴とする請求項１１記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項１６】
前記高速動き推定は、３−ステップ動き推定及び５−ステップ動き推定中の何れか一つであることを特徴とする請求項１５記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項１７】
前記復元された画素／ブロックを再補正する段階は、垂直方向に隣接した各画素／ブロックの第１平均値と前記復元された画素／ブロックとの差値が、前記復元された画素／ブロックと隣接した各画素／ブロックとの第２平均値より小さい場合、適応加重和メディアンフィルタリングを行う段階と、
前記適応加重和メディアンフィルタリングにより得られた値を利用して再補正を行う段階と、
前記差値が前記第２平均値より小さくない場合、平均和メディアンフィルタリングを行う段階と、
前記平均和メディアンフィルタリングにより得られた値を利用して再補正を行う段階とを有することを特徴とする請求項１１記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項１８】
前記適応加重和メディアンフィルタリングは、下記の式により行われることを特徴とする請求項１７記載の移動通信システムの画像ブロックエラー隠匿方法。
（数３）
［｛２＾（ｎ−１）×Ｐ（ｉ，ｊ）｝＋
｛［２＾（ｎ−２）×Ｐ（ｉ，ｊ−１）］＋［２＾（ｎ−２）×Ｐ（ｉ，ｊ＋１）］｝＋
｛［２＾（ｎ−３）×Ｐ（ｉ，ｊ−２）］＋［２＾（ｎ−３）×Ｐ（ｉ，ｊ＋２）］｝＋
｛［２＾（ｎ−４）×Ｐ（ｉ，ｊ−３）］＋［２＾（ｎ−４）×Ｐ（ｉ，ｊ＋３）］｝＋
・・・（ｕｎｔｉｌ  ｎ−ｋ＝−１）］×１／（２ｎ＋１）
式中、ｎは、垂直方向に隣接した各画素／ブロックの個数の１／２値を示す。
【請求項１９】
前記平均和メディアンフィルタリングは、メディアンフィルタのタップ係数の全てに同じ加重値を割り当てることを特徴とする請求項１７記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項２０】
移動通信端末機の画像フレームのブロックエラー補正において、
エラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの差が人間の目に敏感に作用するほど大きい場合、適応加重和メディアンフィルタリングを行うことで、前記エラー補正された画素／ブロックを再補正することを特徴とする移動通信システムの画像ブロックエラー隠匿方法。
【請求項２１】
前記エラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの差が、前記エラー補正された画素／ブロックと隣接した各画素／ブロックとの平均値より小さい場合、前記エラー補正された画素／ブロックには最も大きい加重値を、隣接した各画素／ブロックには隣接程度に相応する加重値をそれぞれ割り当てて適応加重和メディアンフィルタリングを行い、フィルタリングにより得られた値を利用して前記エラー補正された画素／ブロックを再補正することを特徴とする請求項２０記載の移動通信システムの画像ブロックエラー隠匿方法。
【請求項２２】
前記エラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの差が、前記平均値より小さくない場合、前記各画素／ブロックに同じ加重値を割り当てて平均和メディアンフィルタリングを行い、フィルタリングにより得られた値を利用して前記エラー補正された画素／ブロックを再補正することを特徴とする請求項２１記載の移動通信システムの画像ブロックエラー隠匿方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、マルチメディアサービスを提供する移動通信システムに係るもので、詳しくは、移動通信システムの画像ブロックエラー隠匿装置及びその方法に関するものである。
【背景技術】
【０００２】
現在、移動通信は、新しい主要通信メディアとして世界的に需要が急増している。移動通信の発展は、確実に“通信の個人化”を加速させ、全ての使用者にサービスの携帯性を提供し得る個人移動通信社会を実現する。更に、通信の個人化は、音声通信の領域だけでなく、データ及び画像情報をも統合的に取扱うマルチメディア無線アクセス携帯端末機の需要を加速させている。
【０００３】
従って、移動通信端末機を通して映画、音楽、アニメーション及びゲームなどのマルチメディアコンテンツの伝送が可能になり、移動通信システムは、マルチメディアサービスを提供するようになってきている。
【０００４】
図７は従来の移動通信システムの画像復号装置を示したブロック図である。図に示すように、従来の移動通信システムの画像復号装置は、画像フレームをデコーディングするビデオコーデックデコーダ１０と、デコーディングされた画像フレームをディスプレイフォーマットに変換するディスプレイインターフェース部２０と、ディスプレイインターフェース部２０から出力される画像フレームをディスプレイするディスプレイ部３０とを有して構成されている。
【０００５】
以下、従来の移動通信システムの画像復号装置の動作を説明すると、ビデオコーデックデコーダ１０は画像フレームをデコーディングし、ディスプレイインターフェース部２０はデコーディングされた画像フレームをディスプレイフォーマットに変換し、ディスプレイ部３０は変換された画像フレームをディスプレイすることで、移動通信端末機のＬＣＤに画像がディスプレイされる（例えば、特許文献１、２、３、４参照）。
【０００６】
【特許文献１】韓国特許第０３４９０５８号明細書
【特許文献２】韓国特許第０３５７０９３号明細書
【特許文献３】特開２０００−０４１２５２号公報
【特許文献４】米国特許第６０７８６１６号明細書
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来の移動通信システムの画像復号装置においては、マルチメディアをサービスするとき、画像フレームのブロックエラーが発生すると、画質の劣化が発生することで、小さなブロックエラーによっても使用者の視覚に敏感に反応するため、サービスの品質の信頼性を弱化させるという問題点があった。
【０００８】
つまり、移動通信システムに容易に適用されるように、エラー補正演算処理量を減少することで、実時間に処理し、且つ画質を改善し得る画像フレームのブロックエラー補正方法が要求されている。
【０００９】
そこで、本発明は上記従来の移動通信システムの画像ブロックエラー隠匿装置及びその方法における問題点に鑑みてなされたものであって、本発明の目的は、移動通信システムの画像フレームのエラーを隠匿するとき、演算処理量を減少することで、実時間に処理し得る移動通信システムの画像ブロックエラー隠匿装置及びその方法を提供することにある。
【００１０】
又、本発明の他の目的は、動き推定及び動き補償を利用することで、エラー隠匿次元を越えて画像フレームのブロックエラーを補正し、エラー補正された値と垂直方向に隣接する各値との差値によって可変的に適応加重和メディアンフィルタリングを行い、自然なイメージに作ることで、画質を改善し得る移動通信システムの画像ブロックエラー隠匿装置及びその方法を提供することにある。
【課題を解決するための手段】
【００１１】
上記目的を達成するためになされた本発明による移動通信システムの画像ブロックエラー隠匿装置は、エラーの発生した画素／ブロックを、高速動き推定方法により以前及び次のフレームを順次検索することでエラー補正するエラー隠匿（ｃｏｎｃｅａｌｉｎｇ）部と、前記エラー隠匿部によりエラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの間に、人間の目に敏感に作用（ｗｏｒｋ）する差がある場合、垂直方向に適応加重和メディアンフィルタリング（ａｄａｐｔｉｖｅ  ｗｅｉｇｈｔ  ｓｕｍ  ｍｅｄｉａｎ  ｆｉｌｔｅｒｉｎｇ）を実行することで、前記エラー補正された画素／ブロックを再補正するエラー再補正部とを有して構成されることを特徴とする。
【００１２】
上記目的を達成するためになされた本発明による移動通信システムの画像ブロックエラー隠匿方法は、画素／ブロックにエラーが発生した場合、以前及び次のフレームを順次高速動き推定することで動きベクトルを生成する段階と、動き補償された画素／ブロックを利用して、前記エラーの発生した画素／ブロックを復元する段階と、前記エラーの発生した画素／ブロックを復元する段階で復元された画素／ブロックと垂直方向に隣接した各画素／ブロックの平均値との差の値に従って適応加重和メディアンフィルタリングを行うことで、前記復元された画素／ブロックを再補正する段階とを有することを特徴とする。
【００１３】
又、上記目的を達成するためになされた本発明による移動通信システムの画像ブロックエラー隠匿方法は、移動通信端末機の画像フレームのブロックエラー補正において、エラー補正された画素／ブロックと垂直方向に隣接した各画素／ブロックとの差が人間の目に敏感に作用するほど大きい場合、適応加重和メディアンフィルタリングを行うことで、前記エラー補正された画素／ブロックを再補正することを特徴とする。
【発明の効果】
【００１４】
本発明に係る移動通信システムの画像ブロックエラー隠匿装置及びその方法によれば、エラーの発生した画素／ブロックを、動き推定及び動き補償を利用してエラー補正するとき、以前及び次のフレームを同時に検索せずに以前のフレームを検索し、以前のフレームから所望の画素／ブロックを探し得なかった場合、次のフレームを検索し、且つ、全体検索（ｆｕｌｌ  ｓｅａｒｃｈｉｎｇ）方法でなく、３−ステップ又は５−ステップ動き推定方法により検索することで、演算処理量を減少して実時間に処理し得るという効果がある。
【００１５】
又、動き推定及び動き補償を利用することで、画素／ブロックのエラーの隠匿次元を越えて補正し得るという効果がある。
又、エラー補正された画素／ブロックの値と、垂直方向に隣接する各画素／ブロック値間の差値によって可変的に適応加重和メディアンフィルタリングを行って、前記エラー補正された画素／ブロックを再補正することで、元の画像に近い自然な画像を復元し得るという効果がある。
【発明を実施するための最良の形態】
【００１６】
次に、本発明に係る移動通信システムの画像ブロックエラー隠匿装置及びその方法を実施するための最良の形態の具体例を図面を参照しながら説明する。
【実施例】
【００１７】
図１は本発明に係る移動通信システムの画像ブロックエラー隠匿装置を示したブロック図である。
図に示すように、本発明に係る移動通信システムの画像ブロックエラー隠匿装置は、画像フレームをデコーディングするビデオコーデックデコーダ１０と、デコーディングされた画像フレームからエラーの発生した画素／ブロックを検出するエラー検出部１００と、検出された画素／ブロックにエラーがあるか否かを再確認するエラー確認部１１０と、確認情報によって、エラー確認部１１０から出力される画素／ブロックをエラー補正経路及びバイパス経路中何れか一方に出力する第１ソフトスイッチ１２０と、エラー補正経路１２４を通して伝送される画素／ブロックを、以前及び次のフレームの順次検索により、動き推定及び動き補正を利用してエラー補正し、バイパス経路１２２を通して伝送される画素／ブロック及びエラー補正された画素／ブロックにフレームを復元するエラー隠匿部１３０と、エラー補正された画素／ブロックと垂直方向に隣接した画素／ブロック間の差値によって可変的に適応加重和メディアンフィルタリングを行って、自然なイメージを作るエラー再補正部１４０と、エラー再補正部１４０から出力される画像フレームをディスプレイフォーマットに変換するディスプレイインターフェース部２０と、変換された画像フレームをディスプレイするディスプレイ部３０とを含んで構成されている。
【００１８】
又、エラー隠匿部１３０は、以前のフレームを格納するための第１フレーム遅延部１３１と、次のフレームを格納するための第２フレーム遅延部１３２と、それら第１フレーム遅延部１３１及び第２フレーム遅延部１３２に対する動き推定を順次行って、エラー補正に利用される画素／ブロックの動きベクトルを生成する動き推定部１３３と、動きベクトルにより動き補償された画素／ブロックを利用して、エラーの発生した画素／ブロックを復元する画素／ブロック復元部１３４と、画素／ブロック復元部１３４で復元された画素／ブロック及びバイパス経路１２２を通して伝送される画素／ブロックを利用してフレームを復元する第２ソフトスイッチ１３５とから構成される。
【００１９】
以下、上記のように構成された本発明に係る移動通信システムの画像ブロックエラー隠匿装置の動作を図１、図２、及び図３を参照して説明する。
【００２０】
図２は、本発明に係る移動通信システムの画像ブロックエラー隠匿方法を示したフローチャートである。
図に示すように、本発明に係る移動通信システムの画像ブロックエラー隠匿方法は、デコーディングされた画像フレームからエラーの発生した画素／ブロックを検出し（ステップＳ１０）、検出された画素／ブロックにエラーがあるか否かを再確認し（ステップＳ２０）、エラーの発生した画素／ブロックである場合、以前及び次のフレームを順次３−ステップ動き推定することで動きベクトルを生成し（ステップＳ３０）、動き補償された画素／ブロックを利用して、エラーの発生した画素／ブロックを復元し（ステップＳ４０）、復元された画素／ブロックと、垂直方向に隣接した各画素／ブロックの平均値との差値によって、適応加重和メディアンフィルタリングを行う（ステップＳ５０）。
【００２１】
例えば、移動通信端末機の画像フレームのブロックエラー隠匿方法を説明すると、まず、移動通信端末機のエラー検出部１００は、ビデオコーデックデコーダ１０からデコーディングされた画像フレーム中、エラーの発生した画素又はブロックを検出する。ここで、エラーの発生した画素を復元する場合を説明すると、エラーの発生した画素は“２５５”の値を有して黒色にディスプレイされ、エラー検出部１００は“２５５”の値を有する画素を検出する（ステップＳ１０）。
【００２２】
次いで、エラー確認部１１０は、検出された画素が実際にエラーの発生された画素であるか否かを確認する（ステップＳ２０）。
【００２３】
図３は、検出された画素のエラー再確認方法を示したフローチャートで、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））に隣接した各画素の平均値（Ｐｓ（ｘ，ｙ））を以下の式のように計算する（ステップＳ２１）。
【００２４】
（数４）
Ｐｓ（ｘ，ｙ）＝｛Ｐ（ｘ−１，ｙ−１）＋Ｐ（ｘ，ｙ−１）＋Ｐ（ｘ＋１，ｙ−１）｝／３＋｛Ｐ（ｘ−１，ｙ）＋Ｐ（ｘ＋１，ｙ）｝／２＋｛Ｐ（ｘ−１，ｙ＋１）＋Ｐ（ｘ，ｙ＋１）＋Ｐ（ｘ＋１，ｙ＋１）｝／３
【００２５】
その後、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））と平均値（Ｐｓ（ｘ，ｙ））との差値の絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）を計算し、正常な画素であると判断するためのしきい値と絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）とを比較する（ステップＳ２２）。
【００２６】
上記比較の結果、絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）がしきい値より小さいと（ステップＳ２３）、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））の右側の画素（Ｐ（ｘ＋１，ｙ））の値をチェックする（ステップＳ２４）。且つ、右側の画素（Ｐ（ｘ＋１，ｙ））の値がエラー値を有すると、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））がエラーの発生した画素であると判断する（ステップＳ２５）。
【００２７】
しかし、ステップＳ２３で絶対値（ａｂｓ［Ｐ（ｘ，ｙ）−Ｐｓ（ｘ，ｙ）］）がしきい値より小さくないか、又は、ステップＳ２４で右側の画素（Ｐ（ｘ＋１，ｙ））の値がエラー値でない場合、エラー確認部１１０は、検出された画素（Ｐ（ｘ，ｙ））が正常な画素であると判断する（ステップＳ２６）。
【００２８】
次に、第１ソフトスイッチ１２０は、エラー確認部１１０の確認情報によって、エラーの発生した画素を動き推定部１３３に伝送し、正常な画素をバイパスする。このように正常な画素は、エラー補正経路を経ずにバイパスするため、本発明は、エラー補正性能（ｔｈｒｏｕｇｈｐｕｔ）を向上することができる。
【００２９】
エラー隠匿部１３０の動き推定部１３３は、まず、現在のフレームに対して以前のフレームが格納された第１フレーム遅延部１３１を３−ステップ動き推定により検索する。このとき、全体検索を利用すると、演算処理量が多くなるだけでなく、実時間に処理することが困難であるため、動き推定部１３３は、３−ステップ又は５−ステップ動き推定を利用する。
【００３０】
図４は、３−ステップ動き推定方法を示した図であり、以前のフレームから現在のフレームのエラー補正されるブロックと同様なブロックが検索されると、動き推定部１３３は、検索されたブロック（又は画素）の動きベクトルを生成する。しかし、以前のフレームから同様なブロックが検索されないと、動き推定部１３３は、現在のフレームに対して次のフレームが格納された第２フレーム遅延部１３２の検索を開始し、次のフレームからエラー補正されたブロックと同様なブロックを検索する。このように、第１フレーム遅延部１３１及び第２フレーム遅延部１３２を同時に検索せずに、第１フレーム遅延部１３１を３−ステップ又は５−ステップに検索した後、所望のブロックの画素を検索し得ない場合、第２フレーム遅延部１３２を検索するため、本発明は、エラーを補正するための演算処理量及び所要時間を減少し、且つ、実時間に処理することができる（ステップＳ３０）。
【００３１】
次いで、動き推定部１３３により動きベクトルが生成されると、画素／ブロック復元部１３４は、動きベクトルを利用して動き補償されたブロックの画素値を求め、求められた画素値を利用してエラー画素を復元する（ステップＳ４０）。
次いで、第２ソフトスイッチ１３５は、復元された画素及びバイパス経路１２２を通して伝送された正常な画素を利用してフレームを復元する。
次いで、エラー再補正部１４０は、第２ソフトスイッチ１３５から出力されるフレーム中、復元された該当の画素に対し適応加重和メディアンフィルタリングすることで、自然な画像フレームを生成する（ステップＳ５０）。
【００３２】
図５は、エラー再補正部１４０の適応加重和メディアンフィルタリング方法を示したフローチャートであり、エラー再補正部１４０は、エラー隠匿部１３０でエラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））の垂直方向に隣接した所定個数の画素の平均値（Ｐａｖ（ｉ，ｊ））を以下の式のように計算する。
【００３３】
（数５）
Ｐａｖ（ｉ，ｊ）＝｛ＳＵＭ（Ｐ（ｉ，ｊ＋ｋ）（ｆｒｏｍ  ｋ＝−ｎ  ｔｏ  ｎ，ｅｘｃｅｐｔ  ０））｝１／２ｎ
【００３４】
例えば、適応加重和メディアンフィルタが９タップである場合、ｎは４になる。又、平均値（Ｐａｖ（ｉ，ｊ））は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を除いた２ｎ個の画素の平均値である。
その後、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））と平均値（Ｐａｖ（ｉ，ｊ））との差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）を以下の式のように計算する（ステップＳ５１）。
【００３５】
（数６）
Ｐｐｉｘｅｌ＿ｄｉｆｆ＝Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ）−Ｐａｖ（ｉ，ｊ）
【００３６】
次いで、エラー再補正部１４０は、差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）と平均値（Ｐａｖ（ｉ，ｊ））とを比較し（ステップＳ５２）、このとき、差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）が平均値（Ｐａｖ（ｉ，ｊ））より小さいと、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））の値を、以下の式のような適応加重和メディアンフィルタリングにより増加させる。
【００３７】
（数７）
Ｐｐｉｘｅｌ＿ｒｅｆｉｎｅ＝［｛２＾（ｎ−１）×Ｐ（ｉ，ｊ）｝＋
｛［２＾（ｎ−２）×Ｐ（ｉ，ｊ−１）］＋［２＾（ｎ−２）×Ｐ（ｉ，ｊ＋１）］｝＋
｛［２＾（ｎ−３）×Ｐ（ｉ，ｊ−２）］＋［２＾（ｎ−３）×Ｐ（ｉ，ｊ＋２）］｝＋
｛［２＾（ｎ−４）×Ｐ（ｉ，ｊ−３）］＋［２＾（ｎ−４）×Ｐ（ｉ，ｊ＋３）］｝＋
・・・（ｕｎｔｉｌ  ｎ−ｋ＝−１）］×１／（２ｎ＋１）
【００３８】
即ち、図６の（ａ）に示すように、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））との垂直方向の隣接程度に相応する加重値を隣接した各画素に割り当てる。即ち、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））に最も大きい加重値を乗算し、垂直方向に直に隣接した２個の画素（Ｐ（ｉ，ｊ−１），Ｐ（ｉ，ｊ＋１））にその次に大きい加重値を乗算する方式により、適応加重和メディアンフィルタリングを行う。
【００３９】
図６の（ａ）は、適応加重和９タップメディアンフィルタ（Ａｄａｐｔｉｖｅ  Ｗｅｉｇｈｔ  Ｓｕｍ  ９−ｔａｐ  Ｍｅｄｉａｎ  Ｆｉｌｔｅｒ）を例示した図であり、このとき、（数７）の式のｎは４になる。次いで、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を、適応加重和メディアンフィルタリングにより生成された画素（Ｐｐｉｘｅｄ＿ｒｅｆｉｎｅ）の値を利用して再補正する（ステップＳ５３）。
【００４０】
ただし、ステップＳ５２で、差（Ｐｐｉｘｅｌ＿ｄｉｆｆ）が平均値（Ｐａｖ（ｉ，ｊ））より小さくない場合、エラー再補正部１４０は、以下の式のような平均和メディアンフィルタリングによりエラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を再補正する。
【００４１】
（数８）
Ｐｐｉｘｅｌ＿ｒｅｆｉｎｅ＝｛ＳＵＭ（Ｐ（ｉ，ｊ＋ｋ）（ｆｒｏｍ  ｋ＝−ｎ  ｔｏ  ｎ））｝×１／（２ｎ＋１）
【００４２】
即ち、図６の（ｂ）に示すように、エラー再補正部１４０は、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））及び垂直方向に隣接された各画素に同様な加重値を乗算することで、平均和メディアンフィルタリングを行う。次いで、エラー再補正部１４０は、平均和メディアンフィルタリングにより生成された画素（Ｐｐｉｘｅｌ＿ｒｅｆｉｎｅ）の値を利用して、エラー補正された画素（Ｐｃａｎｄｉｄａｔｅ（ｉ，ｊ））を再補正する（ステップＳ５４）。
【００４３】
上述したように、本発明は、動き推定及び動き補償によりエラー補正された画素と、垂直方向に隣接された各画素間に、人間の目に敏感に作用する差があると、エラー補正された画素の垂直方向に適応加重和メディアンフィルタリングを行うことで、エラー補正された画素を再補正し、元の画像に近い自然なイメージを復元することができる。
【００４４】
尚、本発明は、上述の実施例に限られるものではない。本発明の技術的範囲から逸脱しない範囲内で多様に変更実施することが可能である。
【図面の簡単な説明】
【００４５】
【図１】本発明に係る移動通信システムの画像ブロックエラー隠匿装置を示したブロック図である。
【図２】本発明に係る移動通信システムの画像ブロックエラー隠匿方法を示したフローチャートである。
【図３】エラー状態であるとして検出された画素のエラーを再確認する方法を示したフローチャートである。
【図４】３−ステップ動き推定方法を示した図である。
【図５】適応加重和メディアンフィルタリングを利用して、エラー補正された画素を再補正する方法を示したフローチャートである。
【図６】（ａ）は加重和を利用したメディアンフィルタリングを例示した図であり、（ｂ）は平均和を利用したメディアンフィルタリングを例示した図である。
【図７】従来の移動通信システムの画像復号装置を示したブロック図である。
【符号の説明】
【００４６】
１０        ビデオコーデックデコーダ
２０        ディスプレイインターフェース部
３０        ディスプレイ部
１００      エラー検出部
１１０      エラー確認部
１２０      第１ソフトスイッチ
１２２      バイパス経路
１２４      エラー補正経路
１３０      エラー隠匿部
１３１      第１フレーム遅延部
１３２      第２フレーム遅延部
１３３      動き推定部
１３４      画素／ブロック復元部
１３５      第２ソフトスイッチ
１４０      エラー再補正部
【図１】
2005244943.tif 000003
【図２】
2005244943.tif 000004
【図３】
2005244943.tif 000005
【図４】
2005244943.tif 000006
【図５】
2005244943.tif 000007
【図６】
2005244943.tif 000008
【図７】
2005244943.tif 000009