(57)【要約】【課題】  自分の顔映像、背景映像等、リアルな映像がそのまま相手に伝送されると支障がある部分について、支障の度合いを軽減することができ、一方、特定の機器のトラブルが発生した場合等、トラブル解決能力の高い高スキル者に、必要な部分について、トラブル状況を映像で詳細に伝えることができる映像通信方式を提供することを目的とするものである。【解決手段】  所定のリアル映像の一部をデフォルメしたデフォルメされた部分映像を、上記リアル映像に合成することによって、部分的デフォルメ映像を作る部分的デフォルメ映像合成手段と、上記部分的デフォルメ映像を相手に送信する送信手段とを有することを特徴とする映像通信方式である。【選択図】  図１
2006129087.tif 000002
【特許請求の範囲】
【請求項１】
所定のリアル映像の一部をデフォルメしたデフォルメされた部分映像を、上記リアル映像に合成することによって、部分的デフォルメ映像を作る部分的デフォルメ映像合成手段と；
上記部分的デフォルメ映像を相手に送信する送信手段と；
を有することを特徴とする映像通信方式。
【請求項２】
請求項１において、
上記部分的デフォルメ映像合成手段は、
デフォルメの対象となる領域またはデフォルメの対象から除外する領域を識別する識別ＩＤを格納するデフォルメ対象記憶部と；
上記所定のリアル映像から、デフォルメする映像とデフォルメしない部分映像とを切り分け、デフォルメする映像、デフォルメしない部分映像の少なくとも一方を出力するデフォルメ対象抽出部と；
上記デフォルメが施されたデフォルメされた部分映像を出力するデフォルメ映像生成部と；
上記デフォルメしない部分映像と上記デフォルメされた部分映像とを合成し、この合成された部分的デフォルメ映像を生成するデフォルメ映像合成部と；
を有する手段であることを特徴とする映像通信方式。
【請求項３】
請求項２において、
上記デフォルメすべき部分映像をデフォルメする方法を特定する情報を記憶しているデフォルメ方法特定情報記憶部を有し、
上記デフォルメ映像生成部は、上記デフォルメする方法に従って、上記デフォルメすべき部分映像にデフォルメを施し、上記デフォルメが施されたデフォルメされた部分映像を出力する生成部であることを特徴とする映像通信方式。
【請求項４】
請求項１において、
上記所定のリアル映像は、カメラから出力された映像であることを特徴とする映像通信方式。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像・音声の取得と提示とが可能な情報処理システムに関する。
【背景技術】
【０００２】
従来、ＩＰネットワークが高速・広帯域（ブロードバンド通信）になるのに伴い、ＩＰネットワーク上で、テレビ電話に代表される映像通信を提供するサービスが徐々に出始めている。このような映像通信において、相手の顔の表情や身振り等の非言語的な情報を、映像によって、ありのまま伝達することが可能であり、これによって、相手の状況を把握し易いので、安心感のあるコミュニケーションが可能である。
【０００３】
一方、映像の伝送は、顔や身振りのみでなく、たとえば、機器のトラブルが発生した場合等、トラブル解決能力の高い高スキル者に、トラブル状況を、有りのままの映像で伝えることによって、効率的な問題解決が図られる場合がある。
【０００４】
このように、今後、ブロードバンド通信の特質を活かして、通信相手との間で映像を効果的に利用できるサービスの普及が期待されている。
【０００５】
また、自然画像から輪郭線を抽出し、その輪郭線に沿ってデフォルメ画像を生成する方法が知られ（たとえば、特許文献１参照）、この場合、画面全体をデフォルメする。
【特許文献１】特開２０００−１３６１５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかし、従来のテレビ電話では、映像によって自らの状況を相手に伝え易いのはよいが、自分の顔映像、背景映像が、有りのままの映像で相手に伝達されるので、素顔を相手に見られるのが恥ずかしい、または、顔映像の背景として映し出される部屋の内部の様子を相手に見せると、防犯上の問題になる等、カメラの撮影範囲に入る全ての対象物をありのままのリアル映像で伝送することに支障がある場合がある。
【０００７】
一方、たとえば、特定の機器のトラブルが発生した場合、トラブル解決能力の高い高スキル者にトラブル状況を映像で詳細に伝えることができれば、効率的に問題解決できるというように、上記顔映像伝送時の課題とは相反する要請がある。
【０００８】
本発明は、自分の顔映像、背景映像等、リアルな映像がそのまま相手に伝送されると支障がある部分について、支障の度合いを軽減することができ、一方、特定の機器のトラブルが発生した場合等、トラブル解決能力の高い高スキル者に、必要な部分について、トラブル状況を映像で詳細に伝えることができる映像通信方式を提供することを目的とするものである。
【課題を解決するための手段】
【０００９】
請求項１記載の発明は、所定のリアル映像の一部をデフォルメしたデフォルメされた部分映像を、上記リアル映像に合成することによって、部分的デフォルメ映像を作る部分的デフォルメ映像合成手段と、上記部分的デフォルメ映像を相手に送信する送信手段とを有することを特徴とする映像通信方式である。
【００１０】
請求項２記載の発明は、上記部分的デフォルメ映像合成手段は、デフォルメの対象となる領域またはデフォルメの対象から除外する領域を識別する識別ＩＤを格納するデフォルメ対象記憶部と、上記所定のリアル映像から、デフォルメする映像とデフォルメしない部分映像とを切り分け、デフォルメする映像、デフォルメしない部分映像の少なくとも一方を出力するデフォルメ対象抽出部と、上記デフォルメが施されたデフォルメされた部分映像を出力するデフォルメ映像生成部と、上記デフォルメしない部分映像と上記デフォルメされた部分映像とを合成し、この合成された部分的デフォルメ映像を生成するデフォルメ映像合成部とを有する手段であることを特徴とする映像通信方式である。
【００１１】
請求項３記載の発明は、上記デフォルメすべき部分映像をデフォルメする方法を特定する情報を記憶しているデフォルメ方法特定情報記憶部を有し、上記デフォルメ映像生成部は、上記デフォルメする方法に従って、上記デフォルメすべき部分映像にデフォルメを施し、上記デフォルメが施されたデフォルメされた部分映像を出力する生成部であることを特徴とする映像通信方式である。
【００１２】
請求項４記載の発明は、上記所定のリアル映像は、カメラから出力された映像であることを特徴とする映像通信方式である。
【発明の効果】
【００１３】
本発明によれば、自分の顔映像、背景映像等、リアルな映像がそのまま相手に伝送されると支障がある部分について、映像にデフォルメを施すので、上記支障の度合いを軽減することができ、一方、特定の機器のトラブルが発生した場合等、トラブル解決能力の高い高スキル者に、必要な部分をリアル映像で送るので、トラブル状況を映像で詳細に伝えることができ、効率的な映像を送信することができるという効果を奏する。
【発明を実施するための最良の形態】
【００１４】
発明を実施するための最良の形態は、以下の実施例である。
【実施例１】
【００１５】
図１は、本発明の実施例１であるデフォルメ通信システム１００を示すブロック図である。
【００１６】
デフォルメ通信システム１００は、部分的デフォルメ映像合成手段１０と、入出力制御部２０と、通信制御部３０と、通信回線３１と、映像入力用のカメラＣＡ１と、表示装置ＤＰ１と、スピーカＳＰ１と、音声入力用のマイクＭＣ１とを有する。
【００１７】
部分的デフォルメ映像合成手段１０は、所定のリアル映像の一部をデフォルメした「デフォルメされた部分映像」を、上記リアル映像に合成することによって、部分的デフォルメ映像を作る手段であり、デフォルメ対象記憶部１１と、デフォルメ対象抽出部１２と、デフォルメ方法特定情報記憶部１３と、デフォルメ映像生成部１４と、デフォルメ映像合成部１５とを有する。
【００１８】
デフォルメ対象記憶部１１は、デフォルメする領域またはデフォルメしない領域を識別する識別ＩＤを格納する手段である。上記識別ＩＤは、三角形、四角形、星形、バーコード等で形成されているＩＤであり、たとえば、星形が識別ＩＤである場合、その星型の位置を中心とする所定半径の円を、デフォルメする領域またはデフォルメしない領域としてもよい。上記の場合、デフォルメする領域またはデフォルメしない領域として円を使用する代わりに、四角形等、他の形状を、デフォルメする領域またはデフォルメしない領域として使用するようにしてもよい。
【００１９】
デフォルメ対象抽出部１２は、カメラＣＡ１が撮影した映像等、所定のリアル映像から、デフォルメする映像とデフォルメしない部分映像とを切り分け、デフォルメする映像、デフォルメしない部分映像の少なくとも一方を出力する手段である。
【００２０】
デフォルメ方法特定情報記憶部１３は、デフォルメする方法を特定する情報を記憶している。上記「デフォルメする方法」は、たとえば、モザイクをかける方法、画像のエッジを抽出しこの抽出された複数のエッジによってデフォルメする方法、線画で近似することによってデフォルメする方法等である。
【００２１】
デフォルメ方法特定情報は、モザイクをかける方法、画像のエッジを抽出しこの抽出されたエッジによってデフォルメする方法、線画で近似することによってデフォルメする方法等の複数の方法のうちで、どの方法を使用するかを特定する情報である。実際にデフォルメする場合に必要になる関数は、部分的デフォルメ映像合成手段１０内の他の部分に設けられているメモリに記憶され、特定されたデフォルメ方法に対応する関数を呼び出し、デフォルメする。
【００２２】
なお、デフォルメ方法特定情報記憶部１３に、特定されたデフォルメ方法に対応する関数を記憶するようにしてもよい。
【００２３】
デフォルメ映像生成部１４は、デフォルメが施された「デフォルメされた部分映像」６２を出力する手段である。
【００２４】
デフォルメ映像合成部１５は、デフォルメしない部分映像５１と、デフォルメされた部分映像６２とを合成し、この合成された部分的デフォルメ映像７０を生成する手段である。
【００２５】
つまり、デフォルメ映像生成部１４は、リアル映像のうちで、デフォルすべき部分映像５２をデフォルメし、上記デフォルメが施された「デフォルメされた部分映像」６２を出力する手段である。
【００２６】
なお、上記リアル映像は、カメラから出力された映像であってもよく、また、所定のメモリに記憶されている映像であってもよい。
【００２７】
通信制御部３０は、部分的デフォルメ映像合成手段１０が作った部分的デフォルメ映像７０を相手に送信する送信手段である。
【００２８】
図２は、実施例１において、カメラＣＡ１から入力したリアル映像５０の例を示す図である。
【００２９】
カメラＣＡ１の入力映像５０は、全てリアル映像であり、その中に、デフォルメ対象外識別ＩＤ４１が含まれている。なお、デフォルメ対象を特定する場合、デフォルメ対象外識別ＩＤの位置を中心に所定半径の円等のように、デフォルメ対象外識別ＩＤの位置に基づいて、デフォルメ対象を特定する代わりに、デフォルメ対象外識別ＩＤ４１が表示されている映像について、画像認識することによって、デフォルメ対象を特定するようにしてもよい。つまり、デフォルメ対象外識別ＩＤ４１が表示されている映像について、たとえば、画像認識された物の輪郭の内部領域、ＰＣ画面の背景色（たとえば青色）の領域を、デフォルメ対象として特定するようにしてもよい。
【００３０】
図３は、実施例１において、リアル映像５０のうちで、デフォルメしない部分映像５１の例を示す図である。
【００３１】
図３には、リアル映像５０に、デフォルメしない部分映像５１と、デフォルメすべき部分映像５２とが示され、デフォルメすべき部分映像５２に斜線を付してある。
【００３２】
図４は、実施例１において、デフォルメされた部分映像６２と、デフォルメされた部分映像６２のうちの顔部分６２１との例を示す図である。
【００３３】
図４（１）は、デフォルメされた部分映像６２を示し、破線によって、デフォルメされた部分映像６２を示している。図４（２）は、デフォルメされた部分映像６２のうちの顔部分６２１を示す図である。
【００３４】
図５は、実施例１において、デフォルメされた部分映像６２とデフォルメしない部分映像５１とを合成する過程を示す図である。
【００３５】
図６は、実施例１において、デフォルメされた部分映像６２とデフォルメしない部分映像５１との合成が終った結果である部分的デフォルメ映像７０を示す図である。
【００３６】
次に、実施例１の動作について説明する。
【００３７】
デフォルメ対象記憶部１１には、デフォルメの対象となる領域（または、デフォルメの対象から除外する領域）を識別する識別ＩＤ（予め決めたマーク、バーコード、ＱＲコード等、識別できるもの）が、予め格納されている。また、デフォルメ方法特定情報記憶部１３には、デフォルメする方法が、予め格納されている。
【００３８】
図２に示すように、カメラＣＡ１から入力された映像（リアル映像）は、デフォルメ対象抽出部１２に一時蓄積される。これと同時に、デフォルメ対象抽出部１２は、デフォルメ対象記憶部１１から、デフォルメの対象外とすべき領域であることを示すデフォルメ対象外識別ＩＤ４１を検索し、一時蓄積されていたカメラＣＡ１からの入力映像と比較する。
【００３９】
このときに、入力映像（リアル映像５０）の中にデフォルメ対象外識別ＩＤ４１（たとえば、星印）４１が含まれていれば、デフォルメ対象外識別ＩＤ４１が含まれている閉領域（デフォルメしない部分映像５１）を切り出し、この切り出したデフォルメしない部分映像５１を、デフォルメ映像合成部１５に送信する。
【００４０】
デフォルメ映像合成部１５では、デフォルメ対象抽出部１２から送信されたデフォルメしない部分映像５１を一時蓄積する。
【００４１】
一方、デフォルメ対象抽出部１２は、デフォルメ対象外識別ＩＤ４１が含まれている閉領域（デフォルメしない部分映像５１）が切り出された残りのデフォルメすべき部分映像５２を、デフォルメ映像生成部１４に一時蓄積する。
【００４２】
デフォルメ映像生成部１４は、リアル映像５０のうちで、デフォルメすべき領域を、デフォルメ方法特定情報記憶部１３に記憶されているデフォル方法に応じて、デフォルメし、その結果である、リアル映像の一部分の映像であって、上記一部分の映像がデフォルメされた映像６２を、デフォルメ映像合成部１５に送信する。
【００４３】
デフォルメ映像合成部１５は、デフォルメ映像生成部１４が生成したデフォルメされた部分映像６２を一時蓄積する。
【００４４】
次に、デフォルメ映像合成部１５が、一時蓄積されていたデフォルメしない部分映像５１と、一時蓄積されているデフォルメされた部分映像６２とを、図５に示すように、合成し、リアル映像とデフォルメされた映像とが混在する部分的デフォルメ映像７０が生成され、部分的デフォルメ映像７０は、入出力制御部２０に送信される。
【００４５】
入出力制御部２０は、デフォルメ映像合成部１５が出力した部分的デフォルメ映像７０を、一時蓄積し、部分的デフォルメ映像７０を、表示装置ＤＰ１に表示し、また、通信制御部３０に送信する。
【００４６】
通信制御部３０は、入出力制御部２０が出力した部分的デフォルメ映像７０を一時蓄積し、通信回線３１を介して、部分的デフォルメ映像７０を相手端末に送信する。
【実施例２】
【００４７】
図７は、本発明の実施例２であるデフォルメ通信システム２００を示すブロック図である。
【００４８】
デフォルメ通信システム２００は、ユーザがマウス等を使って、デフォルメ対象を指定する実施例であり、基本的には、デフォルメ通信システム１００と同じであるが、デフォルメ通信システム１００において、デフォルメ対象記憶部１１の代わりに、デフォルメ対象指示部８０とポインティング入力装置ＰＤ１とが設けられている点のみが、デフォルメ通信システム１００とは異なる。
【００４９】
デフォルメ通信システム２００において、リアル画像５０のうちで、デフォルメしない部分映像５１を利用者が指定する場合に対応するシステムである。
【００５０】
デフォルメ通信システム２００では、リアル映像５０から、デフォルメすべき部分映像５２を抽出する場合、デフォルメ対象外識別ＩＤ４１を用いずに、ポインティング入力装置ＰＤ１を介して、デフォルメ対象外領域指定情報を利用者が入力し、この入力されたデフォルメ対象外領域指定情報に基づいて、デフォルメ対象指示部８０が、デフォルメ対象を抽出する。
【実施例３】
【００５１】
図８は、本発明の実施例３であるデフォルメ通信システム３００を示すブロック図である。
【００５２】
デフォルメ通信システム３００は、予め決めたマスクパターンによって、領域を指定する実施例であり、基本的には、デフォルメ通信システム１００と同じであるが、デフォルメ通信システム１００において、デフォルメ対象記憶部１１とデフォルメ映像合成部１５との代わりに、デフォルメマスク生成部９０が設けられている点のみが、デフォルメ通信システム１００とは異なる。
【００５３】
デフォルメ通信システム３００は、デフォルメ映像生成を、マスクパターンによって実現する実施例である。
【００５４】
また、デフォルメ映像を生成する場合、デフォルメ映像合成部１５がデフォルメ映像を生成せずに、図８に示すように、デフォルメ対象抽出部１２で特定された領域情報に基づいて、デフォルメマスク生成部９０が生成したデフォルメ映像生成用マスクパターン９１を、デフォルメ映像生成部１４に一時記憶し、デフォルメ映像生成用マスクパターン９１によって、部分的デフォルメ映像７０を生成する。つまり、マスクパターン９１に規定された領域に基づいて、デフォルメ対象領域を決める。
【００５５】
上記実施例によれば、たとえば、自分の顔映像、背景映像等、リアルな映像がそのまま相手に伝送されると支障がある部分について、映像にデフォルメを施すので、支障の度合いを軽減することができ、一方、特定の機器のトラブルが発生した場合等、トラブル解決能力の高い高スキル者に、必要な部分をリアル映像で送るので、トラブル状況を映像で詳細に伝えることができ、効率的な映像を送信することができる。
【図面の簡単な説明】
【００５６】
【図１】本発明の実施例１であるデフォルメ通信システム１００を示すブロック図である。
【図２】実施例１において、カメラＣＡ１から入力したリアル映像５０の例を示す図である。
【図３】実施例１において、リアル映像５０のうちで、デフォルメしない部分映像５１の例を示す図である。
【図４】実施例１において、デフォルメされた部分映像６２と、デフォルメされた部分映像６２のうちの顔部分６２１の例を示す図である。
【図５】実施例１において、デフォルメされた部分映像６２とデフォルメしない部分映像５１とを合成する過程を示す図である。
【図６】実施例１において、デフォルメされた部分映像６２とデフォルメしない部分映像５１との合成が終った結果である部分的デフォルメ映像７０を示す図である。
【図７】本発明の実施例２であるデフォルメ通信システム２００を示すブロック図である。
【図８】本発明の実施例３であるデフォルメ通信システム１００を示すブロック図である。
【符号の説明】
【００５７】
１１…デフォルメ対象記憶部、
１２…デフォルメ対象抽出部、
１３…デフォルメ方法特定情報記憶部、
１４…デフォルメ映像生成部、
１５…デフォルメ映像合成部、
ＣＡ１…カメラ、
ＤＰ１…表示装置、
ＳＰ１…スピーカ、
ＭＣ１…マイク、
２０…入出力制御部、
３０…通信制御部、
３１…通信回線、
４１…デフォルメ対象外識別ＩＤ、
５０…リアル映像、
５１…デフォルメしない部分映像、
５２…デフォルメすべき部分映像、
６２…デフォルメされた部分映像、
７０…部分的デフォルメ家象（合成映像）、
８０…デフォルメ対象指示部、
９０…デフォルメマスク生成部、
９１…デフォルメ映像生成用マスクパターン。
【図１】
2006129087.tif 000003
【図２】
2006129087.tif 000004
【図３】
2006129087.tif 000005
【図４】
2006129087.tif 000006
【図５】
2006129087.tif 000007
【図６】
2006129087.tif 000008
【図７】
2006129087.tif 000009
【図８】
2006129087.tif 000010