(57)【要約】【課題】利用者の意思や感情等の変化に応じ、利用者自身が音声や映像を加工・編集することを可能にする技術を提供すること。【解決手段】マルチメディアを用いたコミュニケーションを支援するコミュニケーション支援方法において、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、前記分類情報入力段階で入力された前記分類情報に基づいて、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、前記加工処理算出段階で算出された加工処理の候補を提示し、利用者に加工処理を選択させる提示・選択段階とを備えた。【選択図】      図１
2005327096.tif 000002
【特許請求の範囲】
【請求項１】
マルチメディアを用いたコミュニケーションを支援するコミュニケーション支援方法において、
相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、
前記分類情報入力段階で入力された前記分類情報に基づいて、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、
前記加工処理算出段階で算出された加工処理の候補を提示し、利用者に加工処理を選択させる提示・選択段階とを具備することを特徴とするコミュニケーション支援方法。
【請求項２】
マルチメディアを用いたコミュニケーションを支援するコミュニケーション支援方法において、
相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、
前記分類情報入力段階で入力された前記分類情報に基づいて、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、
前記加工処理算出段階で算出された加工処理の候補を提示し、利用者に加工処理を編集させる加工処理提示・編集段階とを具備することを特徴とするコミュニケーション支援方法。
【請求項３】
ネットワークを介して接続されたクライアント装置とサーバ装置を用いて、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援方法において、
該クライアント装置において、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、
前記入力情報変換段階により該サーバ装置が解する形式に変換した分類情報を、該クライアント装置から該サーバ装置に送信する分類情報送信段階と、
該サーバ装置が送信した加工処理候補を受信する加工処理候補受信段階と、
該クライアント装置において、前記加工処理候補受信段階により受信した加工処理の候補を利用者に提示し、加工処理の選択をさせる加工処理提示・選択段階とを具備することを特徴とするコミュニケーション支援方法。
【請求項４】
ネットワークを介して接続されたクライアント装置とサーバ装置を用いて、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援方法において、
該クライアント装置において、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、
前記入力情報変換段階により該サーバ装置が解する形式に変換した分類情報を、該クライアント装置から該サーバ装置に送信する分類情報送信段階と、
該サーバ装置が送信した加工処理候補を受信する加工処理候補受信段階と、
該クライアント装置において、前記加工処理候補受信段階により受信した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる加工処理提示・編集段階とを具備することを特徴とするコミュニケーション支援方法。
【請求項５】
ネットワークを介して接続されたクライアント装置とサーバ装置を用いて、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援方法において、
該サーバ装置が該クライアント装置から送信された分類情報を受信する分類情報受信段階と、
該サーバ装置において、前記分類情報受信段階で受信した分類情報を基に、あらかじめ登録している複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、
前記加工処理算出段階で算出された加工処理の候補を該サーバ装置から該クライアント装置に送信する加工処理候補送信段階とを具備することを特徴とするコミュニケーション支援方法。
【請求項６】
マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援装置において、
相手に示したい情報の分類を表す情報である分類情報を利用者に入力させる分類情報入力手段と、
前記分類情報入力手段で入力された分類情報を基に、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出手段と、
前記加工処理算出手段により算出した加工処理の候補を提示する加工処理候補提示手段とを具備することを特徴とするコミュニケーション支援装置。
【請求項７】
利用者がマルチメディアを用いたコミュニケーションに利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援装置において、
利用者に自分の分類を表す情報である分類情報を入力させる分類情報入力機能と、
分類情報入力機能により入力させた分類情報を基に、あらかじめ登録している複数の加工処理情報から加工処理の候補を算出する加工処理候補算出手段と、
前記加工処理算出手段で算出した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる加工処理提示・編集手段とを具備することを特徴とするコミュニケーション支援装置。
【請求項８】
ネットワークを介して接続されたクライアント装置とサーバ装置とを備え、利用者がマルチメディアを用いたコミュニケーションに利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援装置において、
前記クライアント装置が、
利用者に自分の分類を表す情報である分類情報を入力させる分類情報入力手段と、
前記分類情報入力手段で入力された分類情報を該サーバ装置に送信する分類情報送信手段と、
該サーバ装置から送信された加工処理候補を受信する加工処理候補受信手段と、
前記加工処理候補受信手段により受信した加工処理の候補を利用者に提示する加工処理候補提示手段とを具備することを特徴とするコミュニケーション支援装置。
【請求項９】
ネットワークを介して接続されたクライアント装置とサーバ装置とを備え、利用者がマルチメディアを用いたコミュニケーションに利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援装置において、
前記クライアント装置が、
利用者に自分の分類を表す情報である分類情報を入力させる分類情報入力手段と、
前記分類情報入力手段で入力された分類情報を該サーバ装置に送信する分類情報送信手段と、
該サーバ装置が送信した加工処理候補を受信する加工処理候補受信手段と、
前記加工処理候補受信手段により受信した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる加工処理提示・編集手段とを具備することを特徴とするコミュニケーション支援装置。
【請求項１０】
ネットワークを介して接続されたクライアント装置とサーバ装置を備え、利用者がマルチメディアを用いたコミュニケーションに利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援装置において、
前記サーバ装置が、
該クライアント装置から送信された分類情報を受信する分類情報受信手段と、
前記分類情報受信機能により受信した分類情報を基に、あらかじめ登録している複数の加工処理情報から加工処理の候補を算出する加工処理候補算出手段と、
前記加工処理算出手段で算出された加工処理の候補を該クライアント装置に送信する加工処理候補送信機能とを具備することを特徴とするコミュニケーション支援装置。
【請求項１１】
マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するためのプログラムにおいて、
相手に示したい情報の分類を表す情報である分類情報を利用者に入力させる分類情報入力機能と、
前記分類情報入力機能で入力された分類情報を基に、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出機能と、
前記加工処理算出機能により算出した加工処理の候補を提示する加工処理候補提示機能とを具備することを特徴とするプログラム。
【請求項１２】
マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するためのプログラムにおいて、
利用者に自分の分類を表す情報である分類情報を入力させる分類情報入力機能と、
分類情報入力機能により入力させた分類情報を基に、あらかじめ登録している複数の加工処理情報から加工処理の候補を算出する加工処理候補算出機能と、
前記加工処理算出機能で算出した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる加工処理提示・編集機能とを具備することを特徴とするプログラム。
【請求項１３】
ネットワークを介して接続されたクライアント装置とサーバ装置とを備えたプログラムに適用され、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するためのプログラムにおいて、
利用者に自分の分類を表す情報である分類情報を入力させる分類情報入力機能と、
前記分類情報入力機能で入力された分類情報を該サーバ装置に送信する分類情報送信機能と、
該サーバ装置から送信された加工処理候補を受信する加工処理候補受信機能と、
前記加工処理候補受信機能により受信した加工処理の候補を利用者に提示する加工処理候補提示機能とを具備することを特徴とするプログラム。
【請求項１４】
ネットワークを介して接続されたクライアント装置とサーバ装置とを備えたプログラムに適用され、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するためのプログラムにおいて、
利用者に自分の分類を表す情報である分類情報を入力させる分類情報入力機能と、
前記分類情報入力機能で入力された分類情報を該サーバ装置に送信する分類情報送信機能と、
該サーバ装置が送信した加工処理候補を受信する加工処理候補受信機能と、
前記加工処理候補受信機能により受信した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる加工処理提示・編集機能とを具備することを特徴とするプログラム。
【請求項１５】
ネットワークを介して接続されたクライアント装置とサーバ装置とを備えたプログラムに適用され、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するためのプログラムにおいて、
該クライアント装置から送信された分類情報を受信する分類情報受信機能と、
前記分類情報受信機能により受信した分類情報を基に、あらかじめ登録している複数の加工処理情報から加工処理の候補を算出する加工処理候補算出機能と、
前記加工処理算出機能で算出された加工処理の候補を該クライアント装置に送信する加工処理候補送信機能とを具備することを特徴とするプログラム。
【請求項１６】
コミュニケーション支援方法を実現するための請求項１１から請求項１５のいずれか１項に記載のプログラムが記録されたことを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、マルチメディアを用いネットワークを介した音声や映像などによるコミュニケーションに関わり、インターネット上のコミュニケーション、ＬＡＮ回線上のコミュニケーション、テレビ電話や携帯電話などの有線、無線電話回線上のコミュニケーションの支援に係る技術に関する。
【背景技術】
【０００２】
従来のコミュニケーション支援形態では、音声や映像を用いた会話を支援していたが、これらの支援形態では、利用者の意図や感情等（以下、「感情等」と称する）に合わせ、音声や映像を加工することは実現されていない。例えば、特許文献１では、画像・音声について、データ送信にかかる加工のみ、特許文献２では、利用者の都合に合わせ、画像の詳細情報を省くという加工形態のみに留まる。
【特許文献１】特開２００２−２５１４５４号公報
【特許文献２】特開平１１−０３２１４４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
上記、従来の技術においては、利用者が自分の感情等の相手に示したい情報を反映させるためには、会話中に自分の声音や表情を変化させるのみに留まり、音声や画像を加工することはできなかった。
【０００４】
本発明は、利用者の意思や感情等の変化に応じ、利用者自身が音声や映像を加工・編集することを可能にする技術を提供することを目的とする。
【課題を解決するための手段】
【０００５】
本発明の第１局面に係るコミュニケーション支援方法は、マルチメディアを用いたコミュニケーションを支援するコミュニケーション支援方法であって、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、前記分類情報入力段階で入力された前記分類情報に基づいて、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、前記加工処理算出段階で算出された加工処理の候補を提示し、利用者に加工処理を選択させる提示・選択段階とを具備することを特徴とする。
【０００６】
本発明の第２局面に係るコミュニケーション支援方法は、マルチメディアを用いたコミュニケーションを支援するコミュニケーション支援方法であって、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、前記分類情報入力段階で入力された前記分類情報に基づいて、あらかじめ登録されている複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、前記加工処理算出段階で算出された加工処理の候補を提示し、利用者に加工処理を編集させる加工処理提示・編集段階と、を具備することを特徴とする。
【０００７】
本発明の第３局面に係るコミュニケーション支援方法は、ネットワークを介して接続されたクライアント装置とサーバ装置を用いて、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援方法であって、該クライアント装置において、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、前記入力情報変換段階により該サーバ装置が解する形式に変換した分類情報を、該クライアント装置から該サーバ装置に送信する分類情報送信段階と、該サーバ装置が送信した加工処理候補を受信する加工処理候補受信段階と、該クライアント装置において、前記加工処理候補受信段階により受信した加工処理の候補を利用者に提示し、加工処理の選択をさせる加工処理提示・選択段階とを具備することを特徴とする。
【０００８】
本発明の第４局面に係るコミュニケーション支援方法は、ネットワークを介して接続されたクライアント装置とサーバ装置を用いて、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援方法であって、該クライアント装置において、相手に提示したい情報の分類を表す分類情報を利用者に入力させる分類情報入力段階と、前記入力情報変換段階により該サーバ装置が解する形式に変換した分類情報を、該クライアント装置から該サーバ装置に送信する分類情報送信段階と、該サーバ装置が送信した加工処理候補を受信する加工処理候補受信段階と、該クライアント装置において、前記加工処理候補受信段階により受信した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる加工処理提示・編集段階とを具備することを特徴とする。
【０００９】
本発明の第５局面に係るコミュニケーション支援方法は、ネットワークを介して接続されたクライアント装置とサーバ装置を用いて、マルチメディアを用いたコミュニケーションに対して利用者が相手に示したい情報を反映させることを支援するコミュニケーション支援方法において、該サーバ装置が該クライアント装置から送信された分類情報を受信する分類情報受信段階と、該サーバ装置において、前記分類情報受信段階で受信した分類情報を基に、あらかじめ登録している複数の加工処理情報から加工処理の候補を算出する加工処理候補算出段階と、前記加工処理算出段階で算出された加工処理の候補を該サーバ装置から該クライアント装置に送信する加工処理候補送信段階とを具備することを特徴とする。
【００１０】
上記の各局面において、  
（１）  前記分類情報は利用者の感情を表す感情情報や、擬音語や、擬態語を含むこと、や
（２）  前記加工処理情報は効果音及び効果画像を含むこと、  
が好ましい。
【００１１】
なお、上記のコミュニケーション支援方法は、該方法を実現するための装置やプログラムとして実現可能であることはもちろんのこと、該プログラムを記録した記録媒体としても成立しうる。
【００１２】
本発明では、通常、利用者に声音や表情を変化させることで感情等を伝えさせることに代え、感情等を表す言葉等を入力させ、利用者にその感情を表すようなメディア加工処理の候補を算出し、利用者の選択や、編集に従い加工処理をする。これにより、利用者は、自分の映像や音声について、コミュニケーションの相手に自分の感情を伝えるような加工処理を付加することができる。
【発明の効果】
【００１３】
本発明によれば、利用者は、ネットワークを介したコミュニケーションにおいて、自分の映像に対して、コミュニケーションの相手に自分の意思や感情等を伝えるような画像加工処理を付加することができる。
【発明を実施するための最良の形態】
【００１４】
図面を参照して本発明の実施の形態を説明する。
【００１５】
（第１の実施形態）  
図１は、第１の実施形態に係るコミュニケーション支援装置１０の構成を示す。
【００１６】
コミュニケーション支援装置１０は、分類情報入力部１と、入力情報変換部２と、加工処理候補算出部３と、加工処理候補提示・編集部４とを備えている。分類情報入力部１は、利用者が、例えば自分の感情を表す情報である感情情報を含む分類情報を入力する部分である。なお、本実施形態では、利用者が意図する表現を含むような分類情報として主に感情情報について主に説明するが、上記の感情情報以外の情報として、感情情報以外に擬態語や擬音語或いは、旅先指定情報やテーマ指定情報等のその他の情報が分類情報として含まれる。入力情報変換部２は、分類情報入力部１により利用者が入力した分類情報を加工処理候補算出部３が介する形式に変換する。加工処理候補算出部３は、入力情報変換部２により変換した分類情報に基づいて、あらかじめ登録している複数の効果音や効果画像から加工処理の候補を算出する。加工処理候補提示・編集部４は、加工処理候補算出部３により算出した加工処理の候補を提示し、利用者に加工処理の編集をさせる。
【００１７】
なお、図１において、入力情報変換部２を省略しても良い。この場合には、分類情報入力部１により利用者に入力させた分類情報を加工処理候補算出部３に直接入力し、加工処理候補算出部３は、分類情報入力部１により入力した分類情報を基に、加工処理の候補を算出する。また、加工処理候補提示・編集部４において、利用者による加工処理の編集を省いてもよく、この場合には、加工処理候補提示・編集部４では、加工処理候補算出部３により算出した加工処理の候補が提示され、利用者は加工処理の選択をすることになる。
【００１８】
図２を参照して、本第１の実施形態に係るコミュニケーション支援装置１０の動作例を説明する。図２は、第１の実施形態に係るコミュニケーション支援装置１０の動作の原理説明図である。
【００１９】
図２に示すように、分類情報入力部１が有する分類情報入力機能により、利用者に分類情報を入力させる（ステップ１０１）。利用者が入力した分類情報を基に、加工処理候補算出部３の加工処理候補算出機能により、加工処理の候補を算出する（ステップ１０２）。算出した加工処理の候補を加工処理候補提示・編集部４の加工処理提示・編集機能により、利用者に提示し編集させる（ステップ１０３）。
【００２０】
（第２の実施形態）  
図３は、第２の実施形態に係るコミュニケーション支援装置の概略構成を示す図である。図３において、コミュニケーション支援装置は、ネットワークを介して接続されたクライアント装置１００とサーバ装置２００とを備えている。
【００２１】
クライアント装置１００は、分類情報入力部１０１と、入力情報変換部１０２と、分類情報送信部１０３と、加工処理候補受信部１０４と、加工処理候補提示・編集部１０５とを備えている。分類情報入力部１０１は、第１の実施形態と同様に利用者に分類情報を入力させる。入力情報変換部１０２は、分類情報入力部１０１により利用者に入力させた分類情報をサーバ装置２００が解する形式に変換する。分類情報送信部１０３は、入力情報変換部１０２によりサーバ装置２００が解する形式に変換した分類情報を、ネットワークを介し接続されているサーバ装置２００に送信する。加工処理候補受信部１０４は、分類情報送信部１０３により送信した分類情報を基にサーバ装置２００が算出した、加工処理の候補を受信する。加工処理候補提示・編集部１０５は、加工処理候補受信部１０４により受信した加工処理の候補を利用者に提示し、利用者に加工処理の編集をさせる。
【００２２】
サーバ装置２００は、分類情報受信部２０１と、加工処理候補算出部２０２と、加工処理候補送信部２０３とを備えている。分類情報受信部２０１は、クライアント装置１００の分類情報送信部１０３により送信された分類情報を受信する。加工処理候補算出部２０２は、分類情報受信部２０１により受信した分類情報を基に、加工処理の候補を算出する。加工処理候補送信部２０３は、加工処理候補算出部２０２により算出した加工処理の候補をクライアント装置１００に送信する。
【００２３】
上記の構成において、入力情報変換部１０２を省略しても良い。この場合には、分類情報入力部１０１により利用者に入力させた分類情報を加工処理候補算出部２０２に直接入力し、加工処理候補算出部２０２は、分類情報入力部１０１により入力した分類情報を基に、加工処理の候補を算出する。また、加工処理候補提示・編集部１０５において、利用者による加工処理の編集を省いてもよい。
【００２４】
本第２の実施形態に係るコミュニケーション支援装置の動作例を説明する。図４は、第２の実施形態に係るコミュニケーション支援装置１０の動作の原理説明図である。
【００２５】
図４に示すように、クライアント装置１００は、分類情報入力部１０１の分類情報入力機能により、利用者に自分の感情を表す情報である分類情報を入力させる（ステップ２０１）。入力情報変換部１０２は、その入力情報変換機能により、入力された分類情報をサーバ装置２００が解する形式に変換する（ステップ２０２）。変換された分類情報は、分類情報送信部１０３の分類情報送信機能により、サーバ装置２００に送信される（ステップ２０３）。サーバ装置２００は、クライアント装置１００の分類情報送信部１０３によって送信された分類情報を分類情報受信部２０１の分類情報受信機能により受信する。加工処理候補算出部２０２は、その加工処理候補算出機能により、受信した分類情報を基に、加工処理の候補を算出する（ステップ２０４）。算出された加工処理の候補は、加工処理候補送信部２０３の加工処理候補送信機能によりクライアント装置１００に送信される（ステップ２０５）。クライアント装置１００内の加工処理候補受信部１０４は、その加工処理候補受信機能により、サーバ装置２００が加工処理候補送信部２０３の加工処理候補送信機能で送信した加工処理の候補を受信する。そして、受信した加工処理の候補が加工処理候補提示・編集部１０５の加工処理提示・編集機能で利用者に提示され、利用者は、加工処理候補提示・編集部１０５を用いて、加工処理候補を適宜取捨選択して適当な割合で表示方法を変えるといったような編集をする（ステップ２０６）。
【００２６】
上記のように構成された、第2の実施形態による、具体的な動作例を説明する。ここでは、図４の動作の流れに沿って説明するが、図２の場合にも同様に動作させることができることは言うまでもない。
【００２７】
ユーザが本実施形態のコミュニケーション支援装置によるコミュニケーション支援の開始を選択すると、クライアント装置１００は、分類情報入力部１０１により、利用者に感情情報を入力させる画面を表示する。なお、以下の具体例では、説明の便宜上、分類情報のうち感情情報について、取り上げることとする。
【００２８】
図５は、本実施形態のクライアント装置１００の分類情報入力部１０１により、利用者に提示する分類情報の１つである感情情報を入力させる画面である感情情報入力画面１２０を示す図である。なお、以下の説明において、例えば、感情情報入力画面１２０は加工処理候補提示・編集部１０５に装備されたディスプレイ等に表示される画面である。なお、詳細は後述する図６、図９、図１０、図１２、及び図１３にそれぞれに記載の感情情報入力画面１２０、加工処理候補提示画面１４０、加工処理編集画面１５０、加工処理候補提示画面１６０、及び加工処理編集画面１７０についても加工処理候補提示・編集部１０５に装備された同様にディスプレイ等に表示される画面である。
【００２９】
図５の感情情報入力画面１２０では、利用者は、感情情報入力画面１２０の感情情報選択部１２１により、自分の感情を表す言葉を入力する。感情情報入力画面１２０において、決定ボタン１２４をクリックすると、入力した情報は入力情報変換部１０２に送られ、キャンセルボタン１２５をクリックすると、入力した情報はキャンセルされる。
【００３０】
クライアント装置１００は、分類情報入力部１０１により、図５のような感情情報入力画面１２０で利用者に感情情報を入力させ、利用者に入力させた分類情報としての感情情報を入力情報変換部１０２によりサーバ装置２００が解する形式に変換する。
【００３１】
図６は、本第2の実施形態でのクライアント装置１００の入力情報変換部１０２において、分類情報入力部１０１が感情情報入力画面１２０上で利用者に入力させ感情情報をサーバ装置２００が解する形式に変換するデータ変換の例を示す。
【００３２】
感情情報入力画面１２０上の分類情報入力部１０１における入力情報は、Ｉｎｐｕｔ  Ｄａｔａと表し、「おこってる」、「しあわせ」、「びっくり」、「かなしい」、「うれしい」、「おかしい」、「ふしぎ」、「あせった」の各選択肢をＤａｔａ１、Ｄａｔａ２、Ｄａｔａ３、Ｄａｔａ４、Ｄａｔａ５、Ｄａｔａ６、Ｄａｔａ７、Ｄａｔａ８と変換し、Ｄａｔａ１かたＤａｔａ８のうち、Ｓｃｏｒｅに対して選択されたものには“１”、選択されなかったものには“０”を与える。
【００３３】
クライアント装置１００は、分類情報入力部１０１により、図６のように変換された感情情報を分類情報送信部１０３により、サーバ装置２００に送信する。
【００３４】
サーバ装置２００は、クライアント装置１００の分類情報送信部１０３が送信した感情情報を分類情報受信部２０１により受信し、受信した感情情報を基に、加工処理候補算出部２０２により、加工処理の候補を算出する。
【００３５】
図７は、本実施形態でのサーバ装置２００の加工処理候補算出部２０２の構成と加工処理候補算出部２０２におけるデータの流れを示す。加工処理候補算出部２０２は、加工処理データベース１３０と、処理候補算出処理部１３１とを備えている。
【００３６】
加工処理データベース１３０は、Ｉｎｐｕｔ  ＤａｔａにおけるＤａｔａ１、Ｄａｔａ２、Ｄａｔａ３、Ｄａｔａ４、Ｄａｔａ５、Ｄａｔａ６、Ｄａｔａ７、Ｄａｔａ８に関する複数の種類の加工処理を蓄積しており、各分類情報とそれに適合する加工処理とを結び付け、加工処理情報として管理している。
【００３７】
処理候補算出処理部１３１は、加工処理データベース１３０で管理する加工処理情報を基に、入力情報の条件を満たす加工処理の候補を算出する。処理候補算出処理部１３１は、感情情報と加工処理との相関関係を数量化して構築する。
【００３８】
図８は、本実施形態での加工処理候補算出部２０２の処理候補算出処理部１３１において加工処理の候補を算出する方法の例を示す。
【００３９】
図８では、処理候補算出処理部１３１において、図６に示した入力情報変換部１０２で変換された結果であるＩｎｐｕｔ  Ｄａｔａを入力情報としている。
【００４０】
Ｉｎｐｕｔ  ＤａｔａにおけるＤａｔａ１からＤａｔａ８に対するそれぞれの、ユーザによる実際の入力値は、“０”、“０”、“０”、“０”、“１”、“０”、“０”、“０”である。
【００４１】
処理候補算出処理部１３１は、加工処理データベース１３０内に蓄積された加工処理情報の加工処理のパターンの中で、Ｄａｔａ５の値が 、例えば、“１”以上のものをＧｒｏｕｐ１として抽出する。次に、Ｇｒｏｕｐ１として抽出された加工処理のうち、値が大きい順に並べる。この中で、同じ値のものについては、他のＤａｔａの値の合計値が小さい順に並べ、上位３枚を加工処理の候補として決定する（この動作を「加工処理候補の算出」と称する）。そして、図示しない次候補ボタンをクリックする度に、次の加工処理候補を３枚ずつ提示する。
【００４２】
上記の実施形態では、分類情報入力部１０１においてユーザが入力した感情情報を１つとしたが、利用者が２つ以上の感情情報を入力しても良く、その場合には、例えば該当するｄａｔａの値を加算（或いは、加工処理毎に重み付けなどをしておいても良い）し、その加算結果を用いて、上記と同様に、加工処理を値が大きい順に並べ、加工処理の候補を決定すれば良い。
【００４３】
図８は、上記の加工処理候補の算出結果として、Ｇｒｏｕｐ１から、加工処理１、８１、１０３が加工処理の候補として算出されたことを示している。
【００４４】
サーバ装置２００は、加工処理候補算出部２０２により、上記のような方法で算出した加工処理の候補を加工処理候補送信部２０３によりクライアント装置１００に送信する。
【００４５】
クライアント装置１００の加工処理候補受信部１０４は、サーバ装置２００の加工処理候補送信部２０３によって送信された加工処理の候補を受信する。加工処理候補提示・編集部１０５は、加工処理の候補を提示する画面により、受信された加工処理の候補を利用者に提示する。
【００４６】
図９は、本実施形態でのクライアント装置１００の加工処理候補提示・編集部１０５が、利用者に加工処理の候補を提示する加工処理候補提示画面１４０の表示例を示す図である。加工処理候補提示画面１４０には、加工処理候補算出部２０２で図８に示すような方法で算出された加工処理の候補をＧｒｏｕｐ１の上位３枚（１〜３）のうち、最上位のもの（１）から、加工処理候補表示部１４１に提示する。利用者が次候補ボタン１４２をクリックするに従い、順次、下位の加工処理を加工処理の候補として提示していく。また、利用者が前候補ボタン１４３をクリックするに従い、順次、上位の加工処理を加工処理の候補として提示していく。利用者が決定ボタン１４４をクリックすると、表示された加工処理の候補が選択されて、加工処理動作を終了する。また、利用者が編集ボタン１４５をクリックすると、図１０に示すような加工処理の候補を提示する画面になり、利用者による加工処理の編集が可能になる。なお、利用者がキャンセルボタン１４６をクリックすると、加工処理動作を中止する。
【００４７】
図１０は、本実施形態でのクライアント装置１００の加工処理候補提示・編集部１０５を用いて、利用者が加工処理の編集をする加工処理編集画面１５０を示す図である。図９に示す加工処理候補提示画面１４０において、編集ボタン１４５をクリックすることにより、加工処理編集画面１５０が表示される。この加工処理編集画面１５０により、利用者による加工処理の候補の編集が可能になる。加工処理表示部１５１には、利用者が選択した加工処理候補が提示されると共に、利用者による加工処理候補の編集の結果を反映したものが表示される。利用者が位置編集部１５２のボをクリックするに従い、加工処理を行う画像の位置が変化する。利用者が色編集部１５３のボタンをクリックするに従い、加工処理を行う画像の明暗が変化する。なお、この場合において、利用者が色編集部１５３のボタンをクリックするに従い、色彩等を変化させても良い、利用者がキャンセルボタン１５５をクリックすると、編集中の加工処理を行う画像を編集前の状態に戻す。利用者が決定ボタン１５４をクリックすると加工処理編集動作を終了する。
【００４８】
（第３の実施形態）  
第２の実施形態では、分類情報のうち加工処理候補として映像を取り上げたが、例えば、音声についても同様な取り扱い、すなわち、加工処理候補の算出から提示・編集まで、が可能である。本実施形態では、音声の場合について説明する。なお、この場合において、装置の構成は図３に示したものと同様であるので、図示及び説明は省略する。
【００４９】
図１１は、加工処理候補算出部２０２により図８に示した場合と同様に算出された結果を示す図であって、Ｇｒｏｕｐ１から、加工処理２５、４、１００が上位の３つの加工処理の候補として算出されていることを示している。
【００５０】
サーバ装置２００の加工処理候補算出部２０２により、算出された加工処理の候補が加工処理候補送信部２０３によりクライアント装置１００に送信される。
【００５１】
クライアント装置１００の加工処理候補受信部１０４により、サーバ装置２００の加工処理候補送信部２０３から送信された加工処理の候補が受信される。そして、受信した加工処理の候補が、加工処理候補提示・編集部１０５の加工処理の候補を提示する画面によって、利用者に提示される。
【００５２】
図１２は、本実施形態でのクライアント装置１００の加工処理候補提示・編集部１０５における、利用者に加工処理の候補を提示する加工処理候補提示画面１６０を示す図である。加工処理候補算出部２０２で算出された加工処理の候補のＧｒｏｕｐ１の上位３つ（１〜３）のうち、最上位のもの（２５）が、加工処理候補提示部１６１に提示及び再生される。利用者が次候補ボタン１６２をクリックするに従い、順次、下位の加工処理が加工処理の候補として提示及び再生されていく。また、利用者が前候補ボタン１６３をクリックするに従い、順次、上位の加工処理が加工処理の候補として提示及び再生されていく。利用者が決定ボタン１６４をクリックすると、加工処理動作が終了する。また、利用者が編集ボタン１６５をクリックすると、図１３に示すような加工処理の候補を提示する画面二なり、利用者による加工処理の編集が可能になる。なお、利用者がキャンセルボタン１６６をクリックすると、加工処理動作を中止する。
【００５３】
図１３は、本実施形態でのクライアント装置１００の加工処理候補提示・編集部１０５を用いて、利用者が加工処理の編集をする加工処理編集画面１７０を示す図である。図１２に示す加工処理候補提示画面１６０において、編集ボタン１６５をクリックすることにより、加工処理編集画面１７０が表示される。この加工処理編集画面１７０により、利用者による加工処理の候補が編集可能になる。加工処理表示部１７１には、利用者が選択した加工処理候補が画面提示及び再生されると共に、利用者による加工処理候補の編集の結果を反映したものが画面提示及び再生される。利用者が長さ編集部１７２のボタンをクリックするに従い、加工処理の長さ（再生時間）が変化する。利用者が高さ編集部１７３のボタンをクリックするに従い、加工処理の高さ（音程）が変化する。利用者が音量編集部１７４のボタンをクリックするに従い、加工処理の音量が変化する。利用者がキャンセルボタン１７５をクリックすると、編集中の加工処理を編集前の状態に戻す。利用者が決定ボタン１７６をクリックすると、加工処理編集動作が終了する。
【００５４】
なお、本実施形態では、利用者に対し、音声を画面（名称を表示）と再生との両方によって提示する例を示したが、いずれか一方のみを提示するとしても構わない。
【００５５】
上述のようなコミュニケーション支援装置によれば、利用者によって入力された自分の感情等を表す言葉に対する加工処理を分類情報と加工処理情報とを基に完成させることから、利用者が自分の映像について、相手に自分の感情等を伝える加工処理を付加することが可能となる。なお、本発明は、装置に限らず、上記の装置によって達成されるコミュニケーションの支援を実現するための方法の発明としても成立する。更に、本発明に係るコミュニケーションの支援は、コンピュータとプログラムによっても実現でき、当該プログラムを記録媒体に記録することも、更にネットワークを介して提供することも可能である。
【００５６】
本発明は、上記各実施の形態に限ることなく、その他、実施段階ではその要旨を逸脱しない範囲で種々の変形を実施し得ることが可能である。さらに、上記各実施形態には、種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組合せにより種々の発明が抽出され得る。
【００５７】
また、例えば各実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果で述べられている効果が得られる場合には、この構成要件が削除された構成が発明として抽出され得る。
【図面の簡単な説明】
【００５８】
【図１】本発明の第１の実施形態に係るコミュニケーション支援装置の概略構成図。
【図２】第１の実施形態に係るコミュニケーション支援装置の動作原理を説明するための図。
【図３】本発明の第２の実施形態に係るコミュニケーション支援装置の概略構成図。
【図４】第２の実施形態に係るコミュニケーション支援装置の動作原理を説明するための図。
【図５】第２の実施形態の感情情報入力部が利用者に表示する感情情報入力画面の例を示す図。
【図６】第２の実施形態の入力情報変換部におけるデータ変換の例を示す図。
【図７】第２の実施形態の加工処理候補算出部の構成とデータの流れを示す図。
【図８】第２の実施形態の加工処理候補算出部での加工知識データベースにおいて加工処理の候補を算出する方法の例を説明する図。
【図９】第２の実施形態の加工処理候補提示・編集部が利用者に表示する加工候補提示画面の例を示す図。
【図１０】第２の実施形態の加工処理候補提示・編集部が利用者に表示する加工処理編集画面の例を示す図。
【図１１】第３の実施形態の加工処理候補算出部での加工知識データベースにおいて加工処理の候補を算出する方法の例を説明する図。
【図１２】第３の実施形態の加工処理候補提示・編集部が利用者に表示する加工候補提示画面の例を示す図。
【図１３】第３の実施形態の加工処理候補提示・編集部が利用者に表示する加工処理編集画面の例を示す図。
【符号の説明】
【００５９】
１…分類情報入力部
２…入力情報変換部
３…加工処理候補算出部
４…加工処理候補提示・編集部
１０…コミュニケーション支援装置
１００…クライアント装置
１０１…分類情報入力部
１０２…入力情報変換部
１０３…分類情報送信部
１０４…加工処理候補受信部
１０５…加工処理候補提示・編集部
１２０…感情情報入力画面
１２１…感情情報選択部
１２４…決定ボタン
１２５…キャンセルボタン
１３０…加工処理データベース
１３１…処理候補算出処理部
１４０…加工処理候補提示画面
１４１…加工処理候補表示部
１４２…次候補ボタン
１４３…前候補ボタン
１４４…決定ボタン
１４５…編集ボタン
１４６…キャンセルボタン
１５０…加工処理編集画面
１５１…加工処理表示部
１５２…位置編集部
１５３…色編集部
１５４…決定ボタン
１５５…キャンセルボタン
１６０…加工処理候補提示画面
１６１…加工処理候補提示部
１６２…次候補ボタン
１６３…前候補ボタン
１６４…決定ボタン
１６５…編集ボタン
１６６…キャンセルボタン
１７０…加工処理編集画面
１７１…加工処理表示部
１７２…編集部
１７３…編集部
１７４…音量編集部
１７５…キャンセルボタン
１７６…決定ボタン
２００…サーバ装置
２０１…分類情報受信部
２０２…加工処理候補算出部
２０３…加工処理候補送信部
【図１】
2005327096.tif 000003
【図２】
2005327096.tif 000004
【図３】
2005327096.tif 000005
【図４】
2005327096.tif 000006
【図５】
2005327096.tif 000007
【図６】
2005327096.tif 000008
【図７】
2005327096.tif 000009
【図８】
2005327096.tif 000010
【図９】
2005327096.tif 000011
【図１０】
2005327096.tif 000012
【図１１】
2005327096.tif 000013
【図１２】
2005327096.tif 000014
【図１３】
2005327096.tif 000015