(57)【要約】  【課題】  ホワイトボードの映像信号を鮮明な映像信号に補正することができる映像信号処理装置を提供することを目的とする。  【解決手段】  映像信号処理装置は、被写体の映像を撮影する撮像素子と、前記撮像素子にて得られた映像信号を信号処理する映像信号処理部とを備える。映像信号処理部は、被写体がホワイトボードであるか否かを判定し（Ｓ１２）、ホワイトボード判定部による判定結果に応じて処理内容を変更して、ガンマ補正処理（Ｓ１４）、キズ補正処理（Ｓ１６）、エッジ強調補正処理（Ｓ１８）を行う。【選択図】  図１
2007295154.tif 000002
【特許請求の範囲】
【請求項１】
被写体の映像を撮影する撮像素子と、
前記撮像素子にて得られた映像信号を信号処理する映像信号処理部と、
を備え、
前記映像信号処理部は、
前記被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、
前記ホワイトボード判定部にて判定された判定結果に応じて処理内容を変更するキズ補正処理部、エッジ強調処理部、およびガンマ補正処理部と、
を有することを特徴とする映像信号処理装置。
【請求項２】
被写体がホワイトボードであるか否かの選択を受け付ける選択受付部を備え、
前記ホワイトボード判定部は、前記選択受付部にて受け付けた選択に基づいて判定を行うことを特徴とする請求項１に記載の映像信号処理装置。
【請求項３】
前記ホワイトボード判定部は、撮影された映像において、白色の画素値を有する画素数に基づいて被写体がホワイトボードであるか否かを判定することを特徴とする請求項１に記載の映像信号処理装置。
【請求項４】
前記キズ補正処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、補正対象の画素値が所定の閾値より小さく、かつ補正対象の画素に隣接するすべての画素が白色の画素値を有すると判定されたときにキズ補正処理を行うことを特徴とする請求項１に記載の映像信号処理装置。
【請求項５】
前記エッジ強調処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部の検出に用いる輝度差の閾値として、被写体がホワイトボードでない場合より大きい値を用いることを特徴とする請求項１に記載の映像信号処理装置。
【請求項６】
前記エッジ強調処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部分を強調するためのゲイン設定値として、被写体がホワイトボードでない場合より大きい値を用いることを特徴とする請求項１に記載の映像信号処理装置。
【請求項７】
前記ガンマ補正処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、輝度を２値化する補正処理を行うことを特徴とする請求項１に記載の映像信号処理装置。
【請求項８】
被写体の映像を撮影する撮像素子と、
前記撮像素子にて得られた映像信号を信号処理する映像信号処理部と、
を備え、
前記映像信号処理部は、
被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、
前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、補正対象の画素値が所定の閾値より小さく、かつ補正対象の画素に隣接するすべての画素が白色の画素値を有すると判定されたときにキズ補正処理を行うキズ補正処理部と、
を有することを特徴とする映像信号処理装置。
【請求項９】
被写体の映像を撮影する撮像素子と、
前記撮像素子にて得られた映像信号を信号処理する映像信号処理部と、
を備え、
前記映像信号処理部は、
被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、
前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部の検出に用いる輝度差の閾値として、被写体がホワイトボードでない場合より大きい値を用いるエッジ強調処理部と、
を有することを特徴とする映像信号処理装置。
【請求項１０】
被写体の映像を撮影する撮像素子と、
前記撮像素子にて得られた映像信号を信号処理する映像信号処理部と、
を備え、
前記映像信号処理部は、
被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、
前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部分を強調するためのゲイン設定値として、被写体がホワイトボードでない場合より大きい値を用いるエッジ強調処理部と、
を有することを特徴とする映像信号処理装置。
【請求項１１】
被写体の映像を撮影する撮像素子と、
前記撮像素子にて得られた映像信号を信号処理する映像信号処理部と、
を備え、
前記映像信号処理部は、
被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、
前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、輝度を２値化する補正処理を行うガンマ補正処理部と、
を有することを特徴とする映像信号処理装置。
【請求項１２】
請求項１乃至１１のいずれかに記載の映像信号処理装置を備えたことを特徴とする携帯電話。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置にて取得した映像信号を処理する映像信号処理装置に関する。特に、撮像装置にてホワイトボードを撮影した画像を文字や画像を判別しやすい状態で記録可能とする映像信号処理装置に関する。
【背景技術】
【０００２】
従来から撮像素子を利用した撮像装置が知られている。撮像装置では、センサのキズなどの画素欠陥に起因する画像劣化を低減することを目的として、欠陥のある画素を周辺画素の画素値を用いて補正するキズ補正が行われる。
【０００３】
従来の撮像装置では、キズ補正を行うために、撮像装置を出荷する前の段階で、欠陥のある画素位置をあらかじめ検出し、その位置をメモリに記憶しておく。これにより、メモリを使用したキズ補正方式では、画素欠陥を確実に補正することができる。
【０００４】
ここ数年、撮像装置が搭載された携帯電話が普及している。最近では、１００万画素を超える撮像装置を搭載した携帯電話も増えてきている。携帯電話に搭載された撮像装置は、一般的な撮像装置と異なり、コスト低減などの理由により、メモリを使用しないキズ補正方式が採用されることが多い。
【０００５】
メモリを使用しないで画素欠陥を検出する装置が、特許文献１に記載されている。特許文献１に記載された画素欠陥検出装置は、検査対象となる画素の周辺の少なくとも１画素において符号化演算を行って、画素の欠陥を検知する。
【特許文献１】特開２００１−８６５１７（第２頁）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
携帯電話の撮像装置は、解像度の向上と常時携帯しているという手軽さにより、様々な場面で用いられるようになってきている。最近では、会議等で使用したホワイトボードを撮像するために携帯電話の撮像装置を使用することが多い。
【０００７】
しかし、メモリを使用しないキズ補正方式では、補正対象の画素と周辺にある同じ色の画素との画素値の違いによって画素欠陥か否かを判定するが、被写体がホワイトボードの場合には、適切な補正を行えない場合があった。例えば、ホワイトボードに、文字が記載されている場合に、意味のある濁点、句読点が画素欠陥と誤って判断され、周辺の画素値で補正され、撮影画面に表示されないという不具合が発生した。また、撮像装置は、ノイズを低減するために画像にフィルタリング処理を施しているが、フィルタリング処理が多くなると、ホワイトボードを撮影したときに鮮明さに欠けてしまい文字が読みづらくなってしまっていた。
【０００８】
そこで、本発明は、上記背景に鑑み、ホワイトボードを被写体とした映像を鮮明な映像に補正することができる映像信号処理装置およびこれを備えた携帯電話を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明の映像信号処理装置は、被写体の映像を撮影する撮像素子と、前記撮像素子にて得られた映像信号を信号処理する映像信号処理部とを備え、前記映像信号処理部は、前記被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、前記ホワイトボード判定部にて判定された判定結果に応じて処理内容を変更するキズ補正処理部、エッジ強調処理部、およびガンマ補正処理部とを有する。
【００１０】
この構成により、ホワイトボード判定部にて、被写体がホワイトボードであるか否かを判定し、被写体がホワイトボードであると判定された場合に、キズ補正処理部、エッジ強調処理部およびガンマ補正処理部がホワイトボードに合った補正処理を行うことにより、ホワイトボードを撮影した映像信号を鮮明な映像信号に補正処理することができる。
【００１１】
上記映像信号処理装置は、被写体がホワイトボードであるか否かの選択を受け付ける選択受付部を備え、前記ホワイトボード判定部は、前記選択受付部にて受け付けた選択に基づいて判定を行う構成を有する。
【００１２】
このように選択受付部にてユーザからの選択を受け付けることにより、被写体がホワイトボードであるか否かを確実に判定することができる。なお、選択受付部は、ハードウエアスイッチまたはソフトウエアスイッチのいずれによって構成してもよい。
【００１３】
上記映像信号処理装置において、前記ホワイトボード判定部は、撮影された映像において、白色の画素値を有する画素数に基づいて被写体がホワイトボードであるか否かを判定する構成を有する。
【００１４】
ホワイトボードを被写体とした場合には、白色の画素が多くなるので、白色の画素数に基づいて、被写体がホワイトボードであるか否かを適切に判定することができる。
【００１５】
上記映像信号処理装置において、前記キズ補正処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、補正対象の画素値が所定の閾値より小さく、かつ補正対象の画素に隣接するすべての画素が白色の画素値を有すると判定されたときにキズ補正処理を行う構成を有する。
【００１６】
このように補正対象の画素値が所定の閾値より小さく、かつ隣接する画素がすべて白色である場合には、補正対象の画素のみが黒に近いことからキズである可能性が高いので、キズ補正処理を行う。逆に、補正対象の画素に隣接して白以外の画素がある場合には、ホワイトボードに書かれた部分である可能性があるので、キズ補正処理を行わないこととする。これにより、ホワイトボードを被写体とした映像を適切にキズ補正できる。
【００１７】
上記映像信号処理装置において、前記エッジ強調処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部の検出に用いる輝度差の閾値として、被写体がホワイトボードでない場合より大きい値を用いる構成を有する。
【００１８】
被写体がホワイトボードの場合には、撮影される映像には白と黒が多く含まれているので、エッジ部の検出に用いる閾値として大きい値を用いることができる。これにより、ホワイトボードに書かれている部分とそうでない部分とのエッジを確実に検出することができる。
【００１９】
上記映像信号処理装置において、前記エッジ強調処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部分を強調するためのゲイン設定値として、被写体がホワイトボードでない場合より大きい値を用いる構成を有する。
【００２０】
この構成により、被写体がホワイトボードの場合に、エッジをいっそう強調することにより、ホワイトボードの映像を鮮明にすることができる。
【００２１】
上記映像信号処理装置において、前記ガンマ補正処理部は、前記ホワイトボード判定部にて被写体がホワイトボードであると判定した場合は、輝度を２値化する補正処理を行う構成を有する。
【００２２】
この構成により、画像の明るさに応じて輝度を２値化するので、ホワイトボードは明るく、ホワイトボードに書かれた文字等の部分は暗くなり、映像を鮮明にすることができる。
【００２３】
本発明の別の態様に係る映像信号処理装置は、被写体の映像を撮影する撮像素子と、前記撮像素子にて得られた映像信号を信号処理する映像信号処理部とを備え、前記映像信号処理部は、被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、補正対象の画素値が所定の閾値より小さく、かつ補正対象の画素に隣接するすべての画素が白色の画素値を有すると判定されたときにキズ補正処理を行うキズ補正処理部とを有する。
【００２４】
このように補正対象の画素値が所定の閾値より小さく、かつ隣接する画素がすべて白色である場合には、補正対象の画素のみが黒に近いことからキズである可能性が高いので、キズ補正処理を行う。逆に、補正対象の画素に隣接して白以外の画素がある場合には、ホワイトボードに書かれた部分である可能性があるので、キズ補正処理を行わないこととする。これにより、ホワイトボードを被写体とした映像を適切にキズ補正できる。
【００２５】
本発明の別の態様に係る映像信号処理装置は、被写体の映像を撮影する撮像素子と、前記撮像素子にて得られた映像信号を信号処理する映像信号処理部とを備え、前記映像信号処理部は、被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部の検出に用いる輝度差の閾値として、被写体がホワイトボードでない場合より大きい値を用いるエッジ強調処理部とを有する。
【００２６】
被写体がホワイトボードの場合には、撮影される映像には白と黒が多く含まれているので、エッジ部の検出に用いる閾値として大きい値を用いることができる。これにより、ホワイトボードに書かれている部分とそうでない部分とのエッジを確実に検出することができる。
【００２７】
本発明の別の態様に係る映像信号処理装置は、被写体の映像を撮影する撮像素子と、前記撮像素子にて得られた映像信号を信号処理する映像信号処理部とを備え、前記映像信号処理部は、被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、エッジ部分を強調するためのゲイン設定値として、被写体がホワイトボードでない場合より大きい値を用いるエッジ強調処理部とを有する。
【００２８】
この構成により、被写体がホワイトボードの場合に、エッジをいっそう強調することにより、ホワイトボードの映像を鮮明にすることができる。
【００２９】
本発明の別の態様に係る映像信号処理装置は、被写体の映像を撮影する撮像素子と、前記撮像素子にて得られた映像信号を信号処理する映像信号処理部とを備え、前記映像信号処理部は、被写体がホワイトボードであるか否かを判定するホワイトボード判定部と、前記ホワイトボード判定部にて被写体がホワイトボードであると判定された場合は、輝度を２値化する補正処理を行うガンマ補正処理部とを有する。
【００３０】
この構成により、画像の明るさに応じて出力データを２値化するので、ホワイトボードは明るく、ホワイトボードに書かれた文字等の部分は暗くなり、映像を鮮明にすることができる。
【００３１】
本発明の携帯電話は、上記した映像信号処理装置を搭載した構成を有する。
【００３２】
この構成により、上記した映像信号処理装置と同様に、被写体としてホワイトボードを撮影した映像を鮮明な映像に補正処理することができる。
【発明の効果】
【００３３】
本発明によれば、被写体がホワイトボードであると判定された場合に、キズ補正処理部、エッジ強調処理部およびガンマ補正処理部がホワイトボードに合った補正処理を行うことにより、ホワイトボードに記入された文字や絵を判別しやすい状態で表示または記録できるというすぐれた効果を有する。
【発明を実施するための最良の形態】
【００３４】
以下、本発明の実施の形態の携帯電話について説明する。本実施の形態の携帯電話は、映像信号処理装置を備えたカメラを搭載している。
【００３５】
図１は、本実施の形態のカメラによる映像信号の補正処理を示す図である。図１を参照して、本実施の形態の映像信号の補正処理について説明する前に、本実施の形態のカメラの構成について説明する。
【００３６】
図２は、本実施の形態の携帯電話に搭載されたカメラ１の構成を示す図である。カメラ１は、レンズ１０と、レンズ１０で取り込んだ光を画像信号に光電変換する固体撮像素子１２と、画像信号をＡ／Ｄ変換するＡ／Ｄ変換部１４と、Ａ／Ｄ変換部１４から出力されるデジタル信号を処理するデジタル信号処理部１６を備えている。カメラ１は、デジタル信号処理部１６に処理された信号に基づいて画像を表示する画像表示部１８と、画像信号を圧縮するＪＰＥＧ処理部２０と、ＪＰＥＧ処理部２０にて圧縮されたデータを記憶するメモリ２２とを備えている。
【００３７】
デジタル信号処理部１６は、被写体がホワイトボードであるか否か、すなわち、ホワイトボードを撮影しているか否かを判定する。デジタル信号処理部１６は、ホワイトボードを撮影していると判定された場合には、ホワイトボードに適した補正処理を行う。また、デジタル信号処理部１６は、ホワイトボードの補正処理を行うだけでなく、色分離などの処理も行う。このデジタル信号処理部１６が、本発明の映像信号処理装置に該当する。
【００３８】
図３は、デジタル信号処理部１６の詳細な構成を示す図である。デジタル信号処理部１６は、Ｙレベル取得処理部２４と、ガンマ補正処理部２６と、キズ補正処理部２８と、エッジ強調補正処理部３０を備えている。なお、図面においては、ガンマを「γ」と記載している。
【００３９】
Ｙレベル取得処理部２４は、各画素のＹデータを取得して、取得したＹデータを評価して、ホワイトボード撮影中か否かを判定する。ガンマ補正処理部２６は、Ｙの階調を補正するためのガンマ補正を行う。キズ補正処理部２８は、周辺データとの値が大きく異なる欠陥画素のデータを補正する。エッジ強調補正処理部３０は、輪郭を強調するエッジ強調処理を行う。本実施の形態においては、ガンマ補正処理部２６、キズ補正処理部２８、およびエッジ強調補正処理部３０は、Ｙレベル取得処理部２４にてホワイトボード撮影中と判定された場合には、ホワイトボード撮影用の補正処理を行う。
【００４０】
次に、本実施の形態のカメラ１による撮影処理について説明する。カメラ１は、レンズ１０を通じて入射した被写体からの光を固体撮像素子１２にて電気信号に変換する。固体撮像素子１２は、電気信号をＡ／Ｄ変換部１４に入力する。Ａ／Ｄ変換部１４は固体撮像素子１２から入力された電気信号をデジタル信号に変換し、変換されたデジタル信号をデジタル信号処理部１６に入力する。
【００４１】
デジタル信号処理部１６は、入力されたデジタル信号に基づいてデジタル信号処理を行う。デジタル信号処理部１６は、ホワイトボードを撮影中か否かを判定し、その判定結果に応じて補正処理を行う。デジタル信号処理部１６は、処理後の信号を画像表示部１８およびＪＰＥＧ処理部２０に入力する。画像表示部１８は、デジタル信号処理部１６から入力されたデジタル信号に基づいて画像を表示する。ＪＰＥＧ処理部２０は、デジタル信号処理部１６から入力されたデジタル信号を圧縮し、圧縮したデータをメモリ２２に記憶する。ここで、デジタル信号処理の動作について詳しく説明する。
【００４２】
図１を参照して、本実施の形態のカメラ１によるデジタル信号の補正処理の概略を示す図である。デジタル信号処理部１６は、Ａ／Ｄ変換部１４からデジタル信号を受信する（Ｓ１０）。デジタル信号処理部１６は、入力された電気信号に基づいて、ホワイトボード撮影中か否かを判定する（Ｓ１２）。
【００４３】
ホワイトボード撮影中か否かの判定後、デジタル信号処理部１６は、Ｙレベルを変換するガンマ補正処理を行い（Ｓ１４）、センサキズや付着ゴミによって周辺データとの値が大きく異なるデータを本来のデータと近いと想定できる周辺のデータに置き換えるキズ補正処理を行い（Ｓ１６）、エッジ部分の明暗を強調するためにエッジの暗い側のＹデータを下げ、明るい側のＹデータを上げるエッジ強調補正処理を行う（Ｓ１８）。デジタル信号処理部１６は、デジタル信号処理後のデータを出力する（Ｓ２０）。
【００４４】
次に、ホワイトボード撮影中か否かの判定処理（Ｓ１２）について、詳細に説明する。本実施の形態では、Ｙレベル取得処理部２４が、画像信号に基づいて、被写体がホワイトボードであるか否かを判定する。
【００４５】
図４は、Ｙレベル取得処理部２４にて、ホワイトボード撮影中か否かを判定する処理を示す図である。Ｙレベル取得処理部２４は、すべての画素のＹレベルを判定し、Ｙレベルに応じて３つに分類する。Ｙレベル取得処理部２４は、３つの分類のそれぞれに含まれる画素数をカウントする（Ｓ３０）。
【００４６】
図４では、画素を分類するために白画素判定閾値と黒画素判定閾値の２つの閾値を用いている。白画素判定閾値は、画素が白に近いか否かを判定する閾値である。画素のＹレベルが白画素判定閾値以上であれば、その画素は白に近いと判定される。黒画素判定閾値は画素が黒に近いか否かを判定する閾値である。画素のＹレベルが黒画素判定閾値未満であれば、その画素は黒に近いと判定される。Ｙレベル取得処理部２４は、白画素判定閾値以上のＹレベルを有する白画素数Ａ１、黒画素判定閾値未満のＹレベルを有する黒画素数Ａ２、白画素判定閾値未満でかつ黒画素判定閾値以上のＹレベルを有する中間画素数Ａ３をカウントする（Ｓ３２，Ｓ３４，Ｓ３６）。
【００４７】
Ｙレベル取得処理部２４は、１フレーム内のすべての画素をＹレベルに応じて分類し、それぞれの画素数をカウントした後に、白画素数Ａ１と中間画素数Ａ３を用いて、ホワイトボード撮影中か否かを判定する。
【００４８】
まず、Ｙレベル取得処理部２４は、中間画素数Ａ３が画素数判定閾値１より小さいか否かを判定する（Ｓ３８）。被写体がホワイトボードである場合には、基本的には、白または黒に近い画素が大部分を占めるので、白または黒ではない画素の中間画素数Ａ３は少なくなる。中間画素数Ａ３が画素数判定閾値１以上の場合には、ホワイトボード撮影中ではないと判定し（Ｓ３８でＮＯ）、ホワイトボード撮影中フラグを設定しないで処理を終了する。
【００４９】
次に、Ｙレベル取得処理部２４は、白画素数Ａ１が画素数判定閾値２より大きいか否かを判定する（Ｓ４０）。被写体がホワイトボードである場合には、基本的には、白い部分が多くなるので、白画素数Ａ１は画素数判定閾値２より大きくなる。白画素数Ａ１が画素数判定閾値２より大きい場合には、ホワイトボード撮影中のフラグを設定する（Ｓ４２）。なお、画素数判定閾値１および画素数判定閾値２には、実際にホワイトボードやその他の被写体を撮影した結果に基づいて適切な値を設定する。以上の処理により、Ｙレベル取得処理部２４は、ホワイトボード撮影中であるか否かを画像信号に基づいて判定する。
【００５０】
なお、本実施の形態では、画像信号に基づいて被写体がホワイトボードであるか否かを判定する例について説明したが、ユーザからの入力に基づいてホワイトボード撮影中か否かを判定することも可能である。図５は、ホワイトボード撮影中か否かを問い合わせる携帯電話の表示画面の例を示す図である。カメラ１は、画面４０の中に、撮影された画像を表示する画像表示部４２と、ホワイトボード撮影中か否かの選択を受け付けるメニュー画面４４とを表示する。メニュー画面４４にてホワイトボード撮影中のＯＮまたはＯＦＦにフォーカスをあて、図示しない決定ボタンを押すことによって、ホワイトボード撮影中か否かの選択を受け付ける。
【００５１】
図６は、ガンマ補正処理部２６がＹレベルを変換するガンマ補正処理（ステップＳ１４、図１参照）を示す図である。図６を参照して、デジタル信号処理部１６が行うガンマ補正処理について詳細に説明する。ガンマ補正処理部２６は、まず、ホワイトボード撮影中か否かを判定する（Ｓ５０）。ガンマ補正処理部２６は、ホワイトボード撮影中のフラグが設定されているか否かを見ることによってホワイトボード撮影中か否かを判定する。この判定の結果、ホワイトボード撮影中でないと判定された場合には、通常のガンマ補正処理を行い（Ｓ５２）、ホワイトボード撮影中と判定された場合には、ホワイトボード用のガンマ補正処理を行う（Ｓ５４）。
【００５２】
図７（ａ）は、通常のガンマ補正処理による入力データと出力データとの関係を示す図である。図７（ａ）に示すように、通常のガンマ補正処理では、入力されたＹレベルにほぼ等しい値を出力する。図７（ｂ）は、ホワイトボード用のガンマ補正処理による入力データと出力データとの関係を示す図である。ホワイトボード用のガンマ補正処理では、Ｙレベルを２値化する。ホワイトボードでは、ボードを表示する白と、マーカーペンの黒とで構成されるのでＹレベルを２値化することにより、明暗が明確になる。
【００５３】
図８は、キズ補正処理部２８がキズ補正処理（ステップＳ１６、図１参照）を示す図である。図８を参照して、デジタル信号処理部１６が行うキズ補正処理について詳細に説明する。キズ補正は、センサキズによって周辺データとの値が大きく異なるデータを本来のデータに近いデータに置き換える処理である。なお、本実施の形態では、隣接する画素より感度が低い、いわゆる「黒キズ」を補正することを想定している。
【００５４】
デジタル信号処理部１６は、まず、ホワイトボード撮影中か否かを判定する（Ｓ６０）。デジタル信号処理部１６は、ホワイトボード撮影中フラグが設定されているか否かを判定する。この判定の結果、ホワイトボード撮影中でないと判定された場合には、キズ補正処理を行い（Ｓ７０）、ホワイトボード撮影中と判定された場合には、ホワイトボード用のキズ補正処理を行う。以下、ホワイトボード用のキズ補正処理を行う。
【００５５】
キズ補正処理部２８は、まず、注目画素と注目画素に隣接する８画素のデータを取得する（Ｓ６２）。次に、キズ補正処理部２８は、注目画素の画素値が黒レベル判定閾値よりも小さいか判定を行う（Ｓ６４）。黒レベル判定閾値以上であれば（Ｓ６４でＮＯ）、注目画素はキズではないので処理を終了する。注目画素が黒レベル判定閾値よりも小さいときに（Ｓ６４でＹＥＳ）、注目画素がキズであるかホワイトボードに記載されたデータであるかを判定するために、周囲画素のデータの白レベルを判定する（Ｓ６８）。周囲の８画素についてこの判定を行うため、キズ補正処理部２８は、８回のループ処理を行う（Ｓ６６）。周辺画素に、白レベルでない画素が存在する場合には（Ｓ６８でＹＥＳ）、注目画素がホワイトボードに記載されたデータと判断されるため、キズ補正処理部２８は、キズ補正を行わないで処理を終了する。
【００５６】
８回のループ処理が終了した場合には（Ｓ６６でＹＥＳ）、周辺画素はいずれも白レベルであったので、注目画素はキズと判断される。キズ補正処理部２８は、注目画素の画素値を周囲の画素値を用いて置き換えるキズ補正を行う（Ｓ７０）。
【００５７】
図９は、エッジ強調補正処理部３０がエッジを強調するエッジ強調処理（ステップＳ１８、図１参照）を示す図である。図９を参照して、エッジ強調補正処理部３０が行うエッジ強調処理について詳細に説明する。エッジ強調処理は、エッジの暗い側のＹデータを下げ、明るい側のＹデータを上げて、エッジ部分の明暗を強調する処理である。
【００５８】
図１０を参照してエッジ強調処理の方法について説明する。図１０の縦方向は、入力画像のＹレベルを示す。エッジ部分において、明るい側と暗い側に閾値レベルを超える違いがある場合に、エッジ強調レベルの分だけ明るい側をさらに明るくし、エッジ強調レベルの分だけ暗い側をさらに暗くする。
【００５９】
エッジ強調補正処理部３０は、まず、ホワイトボード撮影中か否かを判定する（Ｓ８０）。エッジ強調補正処理部３０は、ホワイトボード撮影中フラグが設定されているか否かを判定する。この判定の結果、ホワイトボード撮影中でないと判定された場合には（Ｓ８０でＮＯ）、エッジ部の差を決定する閾値にエッジ検出閾値１を設定してエッジを検出し（Ｓ８２）、エッジ強調を行うレベルをエッジ強調レベル１に設定してエッジ強調を行う（Ｓ８４）。ホワイトボード撮影中と判定された場合には（Ｓ８０でＹＥＳ）、エッジ部の差を決定する閾値にエッジ検出閾値１より大きいエッジ検出閾値２を設定してエッジを検出し（Ｓ８６）、エッジ強調を行うレベルをエッジ強調レベル１より大きいエッジ強調レベル２に設定してエッジ強調を行う（Ｓ８８）。
以上、本実施の形態のデジタル信号処理部１６の動作について説明した。
【００６０】
本実施の形態の携帯電話は、デジタル信号処理部１６のＹレベル取得処理部２４にて、被写体がホワイトボードであるか否かを判定し、その判定結果に基づいて、ガンマ補正処理部２６、キズ補正処理部２８およびエッジ強調補正処理部３０の処理内容を変更する。これにより、被写体がホワイトボードであるときには、ホワイトボードに合った補正処理を行って、鮮明な映像を得ることができる。
【００６１】
本実施の形態の携帯電話において、キズ補正処理部２８は、注目画素に隣接する画素のうち１つでも白ではないことを示すある値よりも小さいデータが存在したらキズ補正を行わないようにする。これにより、以下のような問題を解決することができる。
【００６２】
従来のキズ補正では、補正対象の画素と同じ色の画素と比較して差が大きいとキズと判断して、周囲の画素データと置き換えるという処理を行っている。すなわち、補正対象の画素がＲ画素のときは周囲にあるＲ画素と、Ｂ画素のときは周囲にあるＢ画素と、Ｇ画素のときは周囲にあるＧ画素とを比較していた。このため、濁点、句読点が周辺データとの値が大きく異なり黒キズと判断されてデータの置き換えが行われてしまう可能性があった。
【００６３】
ホワイトボードでは何も書かれていない白い部分の画素は、Ｒ画素，Ｇ画素，Ｂ画素ともほぼ同じデータである値よりも大きいデータが出力される。また、黒ペンで書かれた部分を撮影した画素は、Ｒ画素，Ｇ画素，Ｂ画素ともほぼ同じデータである値よりも小さいデータが出力される。白と黒が混在する画素は、中間のデータを出力する。
【００６４】
本実施の形態のカメラ１では、被写体がホワイトボードの場合には、Ｒ画素，Ｇ画素，Ｂ画素ともほぼ同じデータと出力するという特徴を利用して、隣接する画素のうち１つでも注目画素と同じようなデータが存在したら、キズ補正を行わないようにする。すなわち、隣接画素との比較により、本実施の形態のキズ補正処理部２８は、ホワイトボードに黒ペン等で記載された部分とキズとを見分け、キズの場合に補正を行うこととしているので、濁点や句読点等が消えてしまう不都合を効果的に防止できる。
【００６５】
また、赤ペン、青ペン、緑ペンで書かれている場合は、使用されたペンと同じ色の画素が大きいデータとなり、その他の画素は小さいデータとなる。従って、この場合もホワイトボード撮影時には隣接する画素のうち１つでも白ではないことを示すある値よりも小さいデータが存在したらキズ補正を行わないようにすることにより、適切なキズ補正を行うことができる。
【００６６】
本実施の形態のエッジ強調補正処理部３０は、ホワイトボード撮影中のときは、エッジ部の差の閾値を大きくして、ホワイトボードに記述されたデータのみを強調し、それ以外の不確かなデータは強調しないようにする。これにより、ホワイトボード撮影中は、エッジ強調レベルを大きくすることで、ホワイトボードに記述されたデータをさらに強調することができる。
【００６７】
以上、本発明の映像信号処理装置およびこれを備えた携帯電話について、実施の形態を挙げて詳細に説明したが、本発明は上記した実施の形態に限定されない。
【００６８】
上記した実施の形態では、被写体がホワイトボードであると判定された場合には、ガンマ補正処理、キズ補正処理およびエッジ強調処理をホワイトボード用に変えて補正処理を行っているが、これらの補正処理をすべて行う必要はない。本発明の映像信号処理装置は、ガンマ補正処理、キズ補正処理またはエッジ強調処理のうちのいずれか一つの補正処理をホワイトボード用の処理内容に変えて行うこととしてもよい。
【産業上の利用可能性】
【００６９】
本発明の映像信号処理装置は、ホワイトボードに記入された文字や絵を判別しやすい状態で表示または記録できるというすぐれた効果を有し、ホワイトボードや名刺等の白黒のみの画像を撮影する用途に有用である。
【図面の簡単な説明】
【００７０】
【図１】実施の形態の補正処理の動作を示す図
【図２】実施の形態のカメラの構成を示す図
【図３】デジタル信号処理部の構成を示す図
【図４】ホワイトボード撮影中か否かの判定処理の動作を示す図
【図５】ホワイトボード撮影中か否かの判定を受け付ける画面例を示す図
【図６】ガンマ補正処理の動作を示す図
【図７】（ａ）通常のガンマ補正処理の動作を示す図（ｂ）ホワイトボード用のガンマ補正処理を示す図
【図８】キズ補正処理の動作を示す図
【図９】エッジ強調処理の動作を示す図
【図１０】エッジ強調処理について説明する図
【符号の説明】
【００７１】
１０  レンズ
１２  固体撮像素子
１４  Ａ／Ｄ変換部
１６  デジタル信号処理部
１８  画像表示部
２０  ＪＰＥＧ処理部
２２  メモリ
２４  Ｙレベル取得処理部
２６  ガンマ補正処理部
２８  キズ補正処理部
３０  エッジ強調補正処理部
【図１】
2007295154.tif 000003
【図２】
2007295154.tif 000004
【図３】
2007295154.tif 000005
【図４】
2007295154.tif 000006
【図５】
2007295154.tif 000007
【図６】
2007295154.tif 000008
【図７】
2007295154.tif 000009
【図８】
2007295154.tif 000010
【図９】
2007295154.tif 000011
【図１０】
2007295154.tif 000012