(57)【要約】【課題】メッセージを入力した際のユーザの状況をメッセージと併せて他のユーザに伝達することが可能な情報処理システムを提供する。【解決手段】複数のユーザがそれぞれ入力したメッセージを取得するメッセージ取得部と、撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得する関連情報取得部と、前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御する制御部と、を備える、情報処理システム。【選択図】図１
2016015009.tif 000002
【特許請求の範囲】
【請求項１】
複数のユーザがそれぞれ入力したメッセージを取得するメッセージ取得部と、
撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得する関連情報取得部と、
前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御する制御部と、
を備える、情報処理システム。
【請求項２】
前記関連情報取得部は、前記メッセージに関する入力操作に基づいて、自動的に前記ユーザに関連した情報を取得する、請求項１に記載の情報処理システム。
【請求項３】
前記制御部は、前記ユーザに関連した情報に基づいた画像である関連画像を前記メッセージと関連付けて配置した表示を生成して前記メッセージを伝達する、請求項１に記載の情報処理システム。
【請求項４】
前記関連画像は、前記撮像装置によって撮像された撮像画像である、請求項３に記載の情報処理システム。
【請求項５】
前記撮像画像は、さらにぼかし処理が施された画像である、請求項４に記載の情報処理システム。
【請求項６】
前記撮像装置は、フォーカス位置を像面位相差検出方式により検出し、
前記撮像画像は、前記撮像装置のデフォーカス処理によりぼかし処理が施された画像である、請求項５に記載の情報処理システム。
【請求項７】
前記関連情報取得部は、前記撮像装置および所定のセンサの少なくともいずれか一方を用いて、前記ユーザに関連した情報を取得し、
前記制御部は、前記ユーザに関連した情報に基づいて前記ユーザの状態を判断し、前記関連画像として、前記ユーザの状態に対応した画像を用いる、請求項３に記載の情報処理システム。
【請求項８】
前記制御部は、さらに前記メッセージに含まれる語句に基づいて前記ユーザの状態を判断する、請求項７に記載の情報処理システム。
【請求項９】
前記制御部は、前記ユーザの状態に対応した語句が前記メッセージに含まれる場合、前記語句を強調した表示を生成する、請求項７に記載の情報処理システム。
【請求項１０】
前記制御部は、前記関連画像を前記メッセージの背景に用いた表示を生成する、請求項３に記載の情報処理システム。
【請求項１１】
前記制御部は、前記関連画像の色情報に基づいて、前記メッセージを表示する色を制御する、請求項１０に記載の情報処理システム
【請求項１２】
前記関連情報取得部は、位置センサを用いて、前記ユーザに関連した情報として前記ユーザの位置情報を取得し、
前記制御部は、前記ユーザの位置情報からユーザ間の距離を判断し、前記ユーザ間の距離情報を前記メッセージと関連付けて配置した表示を生成して前記メッセージを伝達する、請求項１に記載の情報処理システム。
【請求項１３】
前記制御部は、前記ユーザの位置情報に基づいて、前記ユーザ同士の集合場所の候補地を判断し、前記候補地を複数含む表示を生成する、請求項１２に記載の情報処理システム。
【請求項１４】
前記制御部は、さらに前記候補地の優先度に基づいて、前記ユーザ同士の集合場所の候補地を判断する、請求項１３に記載の情報処理システム。
【請求項１５】
前記制御部は、前記ユーザからの入力によって、情報処理を制御する際に用いる前記ユーザに関連した情報を変更する、請求項１に記載の情報処理システム。
【請求項１６】
前記関連情報取得部は、前記ユーザに関連した情報として、前記撮像装置により取得された前記ユーザの特徴動作に関する情報を取得する、請求項１に記載の情報処理システム。
【請求項１７】
前記制御部は、前記ユーザの特徴動作に関する情報に基づいて、画像を変更した表示を生成して前記メッセージを伝達する、請求項１６に記載の情報処理システム。
【請求項１８】
前記制御部は、前記ユーザの特徴動作に関する情報に基づいて、前記ユーザに対する所定の機能の使用可否を判断する、請求項１６に記載の情報処理システム。
【請求項１９】
前記制御部は、前記ユーザの特徴動作の程度または回数を評価し、前記特徴動作の評価結果と、前記メッセージが伝達されたユーザとを紐付け、ユーザに紐付けられた前記特徴動作の評価結果に基づいて、前記メッセージを伝達するための情報処理を制御する、請求項１６に記載の情報処理システム。
【請求項２０】
前記制御部は、前記ユーザの特徴動作の程度または回数を数値にて評価して、前記メッセージが伝達されたユーザに対して評価した数値をポイントとして付与し、ユーザごとに付与されたポイントの累計値が所定の条件を満たしたか否かに基づいて、前記ユーザに対する所定の機能の使用可否を判断する、請求項１６に記載の情報処理システム。
【請求項２１】
ユーザが入力したメッセージを取得するメッセージ取得部と、
撮像装置を用いて、前記ユーザに関連した情報を取得する関連情報取得部と、
前記ユーザに関連した情報と、入力された前記メッセージとを紐付けて送信する制御部と、
を備える、情報処理端末。
【請求項２２】
複数のユーザがそれぞれ入力したメッセージを取得することと、
撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得することと、
前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御することと、
含む、情報処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、情報処理システム、情報処理端末、および情報処理方法に関する。
【背景技術】
【０００２】
近年、地理的に離れた場所にいる２人以上のユーザ間におけるコミュニケーション手段として、電子メール、ショートメッセージサービス（ＳＭＳ：ｓｈｏｒｔ  ｍｅｓｓａｇｅ  ｓｅｒｖｉｃｅ）およびチャットなどのメッセージングシステムが広く普及している。
【０００３】
ユーザは、このようなコミュニケーション手段を用いることによって、時間や場所を問わずにテキスト等のメッセージを送受信することができる。
【０００４】
ここで、特許文献１には、加速度センサやジャイロセンサ等に基づいてユーザの行動を認識し、認識した該ユーザの行動を表す行動情報と、ユーザの現在位置情報とを表示することによりユーザの状態を伝達する技術が開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００９−１１８５１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかし、特許文献１に開示された技術では、ユーザは、他のユーザの現在の位置や行動を確認することはできるものの、該ユーザの状態の変遷について知ることは困難であった。すなわち、特許文献１に開示された技術では、メッセージが送受信されるメッセージングシステムにおいて、メッセージが入力された際にユーザがどのような状況であったのかをメッセージごとに知ることは困難であった。
【０００７】
そこで、本開示では、メッセージが入力された際のユーザの状況に関する情報を該メッセージに付与することにより、メッセージと併せてユーザの状況を伝達することが可能な、新規かつ改良された情報処理システム、情報処理端末、および情報処理方法を提案する。
【課題を解決するための手段】
【０００８】
本開示によれば、複数のユーザがそれぞれ入力したメッセージを取得するメッセージ取得部と、撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得する関連情報取得部と、前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御する制御部と、を備える、情報処理システムが提供される。
【０００９】
また、本開示によれば、ユーザが入力したメッセージを取得するメッセージ取得部と、撮像装置を用いて、前記ユーザに関連した情報を取得する関連情報取得部と、前記ユーザに関連した情報と、入力された前記メッセージとを紐付けて送信する制御部と、を備える、情報処理端末が提供される。
【００１０】
また、本開示によれば、複数のユーザがそれぞれ入力したメッセージを取得することと、撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得することと、前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御することと、含む、情報処理方法が提供される。
【００１１】
本開示によれば、メッセージを入力したユーザに関連した情報を取得し、該ユーザに関連した情報に基づいて、メッセージを伝達するための情報処理を制御することができる。
【発明の効果】
【００１２】
以上説明したように本開示によれば、メッセージを入力した際のユーザの状況をメッセージと併せて他のユーザに伝達することができる。
【００１３】
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
【図面の簡単な説明】
【００１４】
【図１】本開示に係る情報処理システムの構成の一例を示した説明図である。
【図２】本開示の第１の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【図３Ａ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図３Ｂ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図４】同実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【図５】図３Ｂの表示の変形例を示す説明図である。
【図６】同実施形態に係る情報処理システムの動作の変形例を示したフローチャート図である。
【図７】本開示の第２の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【図８Ａ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図８Ｂ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図９】同実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【図１０】本開示の第３の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【図１１Ａ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図１１Ｂ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図１１Ｃ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図１２】同実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【図１３】第４の実施形態に係る情報処理システムが生成する表示の一例を示した説明図である。
【図１４】同実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【図１５】本開示の第５の実施形態に係る情報処理システムの概略を示した説明図である。
【図１６】同実施形態に係る情報処理システムの内部構成を示したブロック図である。
【図１７Ａ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図１７Ｂ】同実施形態に係る制御部が生成する表示の一例を示した説明図である。
【図１８】同実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【図１９】本開示の各実施形態に係る情報処理装置７のハードウェア構成を説明した説明図である。
【発明を実施するための形態】
【００１５】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１６】
なお、説明は以下の順序で行うものとする。
１．本開示に係る情報処理システムの概略構成
２．第１の実施形態
２．１．情報処理システムの構成例
２．２．情報処理システムの動作例
２．３．情報処理システムの動作の変形例
３．第２の実施形態
３．１．情報処理システムの構成例
３．２．情報処理システムの動作例
４．第３の実施形態
４．１．情報処理システムの構成例
４．２．情報処理システムの動作例
５．第４の実施形態
５．１．情報処理システムの動作例
６．第５の実施形態
６．１．情報処理システムの構成例
６．２．情報処理システムの動作例
７．ハードウェア構成例
【００１７】
＜１．本開示に係る情報処理システムの概略構成＞
まず、図１を参照して、本開示に係る情報処理システムの概略構成について説明する。図１は、本開示に係る情報処理システムの構成の一例を示した説明図である。
【００１８】
図１に示すように、本開示に係る情報処理システムは、ネットワーク３を介して接続された複数の情報処理端末１と、情報処理サーバ２とを備える。また、複数の情報処理端末１および情報処理サーバ２は、ネットワーク３を介して相互に通信している。
【００１９】
ここで、本開示に係る情報処理システムは、例えば、テキストメッセージを送受信することにより、地理的に離れた場所にいる２人以上のユーザ同士がコミュニケーションすることを可能にする情報処理システムである。具体的には、本開示に係る情報処理システムは、電子メール、ショートメッセージサービス、インスタントメッセンジャー、およびチャットなどのメッセージングシステムであってもよい。
【００２０】
本開示に係る情報処理システムは、ユーザによって情報処理端末１に入力されたメッセージを取得し、さらに情報処理端末１が備える撮像装置などの各種センサを用いて、メッセージを入力したユーザに関連した情報を取得する。また、本開示に係る情報処理システムは、取得した該ユーザに関連した情報に基づいて、メッセージを伝達するための情報処理を制御する。この構成によれば、本開示に係る情報処理システムは、メッセージと併せてメッセージが入力された際のユーザの状況についても伝達することが可能である。
【００２１】
情報処理端末１は、ユーザによってメッセージが入力される情報処理装置である。また、情報処理端末１は、撮像装置などの各種センサを備え、入力されたメッセージと、各種センサにより取得したユーザに関連した情報とを情報処理サーバ２に送信する。情報処理端末１は、例えば、携帯電話、スマートフォンまたはタブレット端末などの持ち運び可能な情報処理端末であってもよい。なお、本開示において、ネットワーク３に接続する情報処理端末１の個数は、複数であればよく、特に限定されるものではない。
【００２２】
情報処理サーバ２は、ユーザに関連した情報を情報処理端末１から受信し、該ユーザに関連した情報に基づいて、情報処理端末１に入力されたメッセージを伝達するための情報処理を制御する。具体的には、情報処理サーバ２は、情報処理端末１に入力されたメッセージと、該メッセージを入力したユーザに関連した情報とを取得し、ユーザに関連した情報に基づいてメッセージを伝達するための表示を生成し、各情報処理端末１へ送信する。ここで、情報処理サーバ２が実行する情報処理の詳細については、以下の第１〜第５の実施形態においてそれぞれ後述する。なお、情報処理サーバ２が実行する情報処理のうちの一部または全部は、各情報処理端末１にて実行されてもよい。
【００２３】
ネットワーク３は、各情報処理端末１と、情報処理サーバ２との間の通信を可能にする通信網である。ネットワーク３は、例えば、インターネット、衛星通信網、電話回線網などの公衆回線網、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、またはＷＡＮ（Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）などであってもよい。
【００２４】
以下では、上述した本開示に係る情報処理システムの具体的な構成について、第１〜第５の実施形態に分けて詳述する。
【００２５】
＜２．第１の実施形態＞
まず、図２〜図６を参照して、本開示の第１の実施形態に係る情報処理システムについて説明する。本開示の第１の実施形態に係る情報処理システムは、撮像装置を有する情報処理端末１Ａを備え、入力されたメッセージと、該撮像装置にて撮像された画像とを関連付けて配置した表示を生成する。これにより、本開示の第１の実施形態に係る情報処理システムは、メッセージが入力された際のユーザの状況をメッセージと併せて伝達することができる。
【００２６】
具体的には、情報処理システムは、ユーザがメッセージを入力、送信する際の所定の入力操作に基づいて、撮像装置にて撮像し、画像を取得する。また、情報処理システムは、入力されたメッセージと、撮像装置により取得された画像とを関連付けて配置した表示を生成し、情報処理端末１Ａに送信する。この情報処理システムによれば、メッセージを送信するユーザは、メッセージと併せて、メッセージを入力した際の周囲の様子を撮像画像にて伝達することができる。
【００２７】
なお、撮像装置により撮像された画像は、映り込んだ人のプライバシーを考慮して、メッセージを入力した際の周囲の雰囲気が伝達できる程度まで視認性を低下させるぼかし処理が施されてもよい。また、撮像装置が情報処理端末１の表示部と同一面側に備えられている場合、撮像装置が撮像する画像は、ユーザの顔を含んでもよい。一方、撮像装置が情報処理端末１の表示部と異なる面側に備えられている場合、撮像装置が撮像する画像は、ユーザの顔を含まなくてもよい。
【００２８】
［２．１．情報処理システムの構成例］
まず、図２を参照して、本開示の第１の実施形態に係る情報処理システムの具体的な構成について説明する。図２は、本開示の第１の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【００２９】
図２に示すように、本開示の第１の実施形態に係る情報処理システムは、情報処理端末１Ａと、情報処理サーバ２Ａとを備える。また、情報処理端末１Ａおよび情報処理サーバ２Ａは、ネットワーク３を介して接続されている。
【００３０】
また、情報処理端末１Ａは、端末通信部１０１と、入力部１０３と、表示部１０５と、撮像装置１０７と、ぼかし制御部１０９とを備え、情報処理サーバ２Ａは、サーバ通信部２０１と、メッセージ取得部２０３と、関連情報取得部２０５と、制御部２０７とを備える。なお、ネットワーク３については、図１にて説明したとおりであるので、ここでの説明は省略する。
【００３１】
（情報処理端末の構成）
端末通信部１０１は、情報処理サーバ２Ａとの通信を行う。具体的には、端末通信部１０１は、制御部２０７が生成した表示を情報処理サーバ２Ａから受信し、入力部１０３に入力されたメッセージ、撮像装置１０７が撮像した画像を情報処理サーバ２Ａに送信する。例えば、端末通信部１０１は、ネットワーク３に接続するための通信デバイス等で構成された通信インターフェースであってもよい。また、端末通信部１０１は、無線または有線により電話回線網に接続可能な通信装置であってもよく、有線ＬＡＮまたは無線ＬＡＮ対応通信装置であってもよいし、有線による通信を行うワイヤー通信装置であってもよい。
【００３２】
入力部１０３は、ユーザによりメッセージを入力することが可能な入力装置である。具体的には、入力部１０３は、キーボード、ボタン、およびマイクロフォンなどのユーザが文字情報を入力することが可能な入力機構と、ユーザの入力に基づいて入力信号を生成する入力制御回路などから構成される。また、入力部１０３は、ソフトウェアキーボードなどにより文字情報を入力することが可能な入力装置であってもよい。
【００３３】
表示部１０５は、情報処理端末１Ａまたは情報処理サーバ２Ａが生成した画像を表示する表示装置である。例えば、表示部１０５は、ＬＣＤ（ｌｉｑｕｉｄ  ｃｒｙｓｔａｌ  ｄｉｓｐｌａｙ）装置、ＯＬＥＤ（ｏｒｇａｎｉｃ  ｌｉｇｈｔ−ｅｍｉｔｔｉｎｇ  ｄｉｓｐｌａｙ）装置などであってもよい。
【００３４】
撮像装置１０７は、撮像レンズおよび撮像素子等を備え、被写体の画像を取得する。具体的には、撮像装置１０７は、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ−Ｏｘｉｄｅ−Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサまたはＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）イメージセンサなどで構成される撮像素子により、撮像レンズを介して入射する被写体からの光を光電変換し、画像信号に変換する。なお、撮像装置１０７は、情報処理端末１Ａにおいて表示部１０５と同一面に備えられていてもよく、表示部１０５と異なる面に備えられていてもよい。また、撮像装置１０７は、情報処理端末１Ａとは別の情報処理装置（例えば、メガネ型端末などのウェアラブル端末）に備えられ、情報処理端末１Ａと通信を行うことにより、本開示に係る情報処理システムの機能を実行するものであってもよい。
【００３５】
なお、撮像装置１０７は、デフォーカス処理によって後述するぼかし処理を施すためには、ピント位置を像面位相差検出方式により検出する撮像装置であることが好ましい。ここで、像面位相差検出方式は、撮像レンズから入射した光を２つに分けて専用センサへ導き、結像した２つの像の間隔からジャストフォーカスからのピント位置の方向およびずれ量を判断するフォーカス検出方式である。また、像面位相差検出方式は、入射した光が導かれる専用センサが撮像素子と同一面（像面）にあることを特徴とする。このような像面位相差検出方式では、被写体に対するジャストフォーカスからのピント位置の方向およびずれ量を検出することができる。そのため、撮像装置１０７は、ジャストフォーカスからのピント位置のずれ量を適切に制御することにより、適切なぼかし量のデフォーカス処理を施した画像を取得することができる。また、像面位相差検出方式は、他のフォーカス検出方式（例えば、コントラスト検出方式）に対して、より高速でのピント位置検出が可能である。そのため、撮像装置１０７は、高い即時性にて画像を撮像することができる。
【００３６】
ここで、撮像装置１０７は、ユーザによってメッセージが入力され、該メッセージの送信が指示された時点で自動的に撮像を行い、画像を取得してもよい。この構成によれば、情報処理端末１Ａは、ユーザに対して特別な操作を要求することなく自動的に撮像装置１０７にて撮像した画像を取得することができる。
【００３７】
また、撮像装置１０７は、ユーザによって所定の文字列が入力された時点で自動的に撮像を行い、画像を取得してもよい。この構成によれば、情報処理端末１Ａは、ユーザに対してメッセージを入力しながら撮像装置１０７に撮像の指示を出すことを可能にする。なお、ユーザが撮像を指示するための所定の文字列は、一般的なメッセージにおいて出現頻度が低い文字列であることが好ましく、例えば、「＃＃」、「＠＠＠」などであってもよい。また、撮像を指示する所定の文字列は、撮像終了後、メッセージ入力欄から自動的に削除されることが好ましい。
【００３８】
さらに、撮像装置１０７は、ユーザから撮像を指示された時点で撮像を行い、画像を取得してもよい。この構成によれば、情報処理端末１Ａは、ユーザに対して任意のタイミングで撮像することを可能にする。
【００３９】
ぼかし制御部１０９は、撮像装置１０７が撮像した画像に対して施されるぼかし処理を制御する。具体的には、ぼかし制御部１０９は、撮像装置１０７が撮像した画像に移りこんだ人のプライバシー保護のために、撮像された画像に対して視認性を低下させる画像処理を施す。例えば、ぼかし制御部１０９は、撮像装置１０７が撮像した画像に対して、低解像度化処理、低コントラスト化処理、または二値化処理などを施すことにより、視認性を低下させた画像を生成してもよい。なお、ぼかし制御部１０９が、撮像装置１０７によって撮像された画像に対して実行するぼかし処理は、画像の視認性を低下させる画像処理であれば、上記の処理に限定されず、公知の様々な画像処理であってもよい。
【００４０】
また、ぼかし制御部１０９は、撮像装置１０７に対してデフォーカス状態で撮像させることにより、撮像された画像に対してぼかし処理を施してもよい。具体的には、ぼかし制御部１０９は、撮像装置１０７の像面位相差検出方式によりジャストフォーカスからのピント位置のずれ量（デフォーカス量）が所定の量になるようにピント位置を調整し、デフォーカス状態にて撮像装置１０７に対して撮像させる。この構成によれば、ぼかし制御部１０９は、撮像された画像に対して画像処理をする必要がなくなるため、消費電力量を削減することができる。
【００４１】
なお、ぼかし制御部１０９によるぼかし処理の程度は、撮像された画像がぼけ過ぎず、鮮明過ぎず、ユーザがいる状況の雰囲気のみを伝えられる程度が好ましい。また、ぼかし制御部１０９によるぼかし処理の程度は、ユーザによって指定されたぼかし量であってもよい。
【００４２】
ここで、デフォーカス処理によるぼかし処理は、デフォーカス量が大きくなると急激に像の視認性が低下する。そのため、仮にデフォーカス量が大きすぎる場合、撮像装置１０７により得られた画像において、全く像が得られない可能性がある。したがって、撮像装置１０７は、ジャストフォーカスからのピント位置のずれ量および方向を検出可能であり、正確なピント位置の調整が可能な像面位相差検出方式のピント位置検出機能を備え、正確なピント位置調整を行うことが好ましい。なお、ぼかし制御部１０９が調整する撮像装置１０７のデフォーカス量は、ユーザによって指定されたぼかし量に対応するデフォーカス量であってもよいことは言うまでもない。
【００４３】
（情報処理サーバの構成）
サーバ通信部２０１は、情報処理端末１Ａと通信を行う。具体的には、サーバ通信部２０１は、入力部１０３に入力されたメッセージ、撮像装置１０７が撮像した画像を情報処理端末１Ａから受信し、制御部２０７が生成した表示を情報処理端末１Ａに送信する。例えば、サーバ通信部２０１は、ネットワーク３に接続するための通信デバイス等で構成された通信インターフェースであってもよい。また、サーバ通信部２０１は、無線または有線により電話回線網に接続可能な通信装置であってもよく、有線ＬＡＮまたは無線ＬＡＮ対応通信装置であってもよいし、有線による通信を行うワイヤー通信装置であってもよい。
【００４４】
メッセージ取得部２０３は、それぞれの情報処理端末１Ａにて入力されたメッセージを取得する。具体的には、メッセージ取得部２０３は、ネットワーク３を介して、それぞれの情報処理端末１Ａにて入力されたメッセージを取得する。
【００４５】
関連情報取得部２０５は、それぞれの情報処理端末１Ａにて取得されたユーザに関連した情報を取得する。具体的には、関連情報取得部２０５は、それぞれの情報処理端末１Ａから、メッセージが入力された際に撮像された画像を取得する。すなわち、本開示の第１の実施形態において、ユーザに関連した情報とは、撮像装置１０７にて撮像された画像を意味する。
【００４６】
制御部２０７は、関連情報取得部２０５が取得したユーザに関連した情報に基づいて、取得したメッセージを伝達するための情報処理を制御する。具体的には、制御部２０７は、関連情報取得部２０５が取得した撮像画像と、メッセージ取得部２０３が取得したメッセージとを関連付けて配置した表示を生成する。より具体的には、制御部２０７は、関連情報取得部２０５が取得した撮像画像をメッセージ取得部２０３が取得したメッセージの背景として用いた表示を生成する。
【００４７】
また、制御部２０７は、撮像画像をメッセージの背景として用いた表示を生成する場合、関連情報取得部２０５が取得した撮像画像の色情報に基づいて、メッセージを表示する色を変更してもよい。例えば、メッセージを表示する色の明度と、背景に用いた画像の色の明度との差が小さく、背景に対してメッセージの文字色のコントラストが低い場合、メッセージが視認しづらい場合がある。このような場合、制御部２０７は、撮像画像の全体またはメッセージを表示する領域における色の平均明度を算出し、算出した平均明度と、メッセージを表示する文字色の明度との差が拡大するように、メッセージを表示する文字色を変更してもよい。
【００４８】
［２．２．情報処理システムの動作例］
続いて、図３Ａ〜図５を参照して、本開示の第１の実施形態に係る情報処理システムの動作例について説明する。図３Ａおよび３Ｂは、制御部２０７が生成する表示の一例を示した説明図であり、図４は、本開示の第１の実施形態に係る情報処理システムの動作例を示したフローチャート図である。また、図５は、図３Ｂの表示の変形例を示す説明図である。
【００４９】
以下では、図３Ａおよび図３Ｂにて示す制御部２０７によって生成された表示を参照しながら、図４に示したフローチャートに沿って情報処理システムの動作を説明する。
【００５０】
図３Ａに示した表示４００には、第１のユーザによって送信された「今日どうする？」というメッセージ４０２が表示されている。これに対して、第２のユーザによりメッセージ入力欄４０４に「飯田橋に２０時待ち合わせでいい？」というメッセージが入力される（Ｓ１００）。続いて、第２のユーザにより送信ボタン４０５が押下された場合、撮像装置１０７は、画像を撮像する（Ｓ１０２）。次に、ぼかし制御部１０９は、撮像装置１０７により撮像された画像に対してぼかし処理を施す（Ｓ１０４）。
【００５１】
続いて、制御部２０７は、入力されたメッセージと、ぼかし処理が施された画像とが関連付けられて配置された表示を生成する（Ｓ１０４）。具体的には、制御部２０７は、図３Ｂに示した表示４１０を生成する。図３Ｂに示した表示４１０には、第２のユーザが入力した「飯田橋に２０時待ち合わせでいい？」というメッセージ４１６が、第１のユーザによる「今日どうする？」というメッセージ４１２の下に表示されている。また、第２のユーザによるメッセージ４１６は、撮像装置１０７により撮像され、ぼかし処理が施された画像が背景に用いられている。
【００５２】
なお、Ｓ１０２において、撮像装置１０７が画像を撮像するタイミングは、上記に限定されず、撮像を指示するボタンが押下された時や、所定の文字列が入力された時であってもよい。
【００５３】
したがって、本開示の第１の実施形態に係る情報処理システムは、入力されたメッセージと関連付けて、該メッセージが入力された際に撮像された画像を表示することができる。そのため、本開示の第１の実施形態に係る情報処理システムによれば、撮像画像を用いて、メッセージが入力された際のユーザの状況をメッセージと併せて伝達することができる。
【００５４】
また、制御部２０７は、図５に示した表示４１０Ａを生成してもよい。図４に示した表示４１０Ａには、「飯田橋に２０時待ち合わせでいい？」というメッセージ４１６Ａが、「今日どうする？」というメッセージ４１２Ａの下に表示されており、メッセージ４１６Ａの文字色は、背景に用いた画像の色情報に基づいて変更されている。ここで、背景に用いた画像の色情報とは、例えば、背景に用いた画像全体の色の平均明度である。制御部２０７は、メッセージ４１６Ａの文字色と、画像全体の色の平均明度との差が拡大するようにメッセージ４１６Ａの文字色を制御することにより、メッセージ４１６Ａの視認性を向上させることができる。
【００５５】
［２．３．情報処理システムの動作の変形例］
さらに、図６を参照して、本開示の第１の実施形態に係る情報処理システムの動作の変形例について説明する。図６は、本開示の第１の実施形態に係る情報処理システムの動作の変形例を示したフローチャート図である。かかる変形例は、情報処理端末１Ａが備える撮像装置１０７が像面位相差検出方式によりピント位置を検出し、ぼかし制御部１０９がデフォーカス処理により撮像画像に対してぼかし処理を施す場合における情報処理システムの動作例である。
【００５６】
図６に示すように、まず、第２のユーザによりメッセージが入力される（Ｓ１０８）。次に、第２のユーザにより送信ボタン４０５が押下された場合、撮像装置１０７は、像面位相差検出方式により撮像対象との位相差を検出し、ピント位置を検出する（Ｓ１１０）。続いて、ぼかし制御部１０９は、ジャストフォーカス位置から所定の量だけデフォーカスするように撮像装置１０７のピント位置を調整する（Ｓ１１２）。その後、撮像装置１０７は、デフォーカス状態で画像を撮像する（Ｓ１１４）。続いて、制御部２０７は、入力されたメッセージと、デフォーカスによりぼかし処理が施された画像とを関連付けて配置した表示を生成する（Ｓ１１６）。
【００５７】
この変形例の動作によれば、本開示の第１の実施形態に係る情報処理システムは、画像処理を用いずに撮像装置１０７によって撮像された画像に対してぼかし処理を施すことができる。そのため、本開示の第１の実施形態に係る情報処理システムは、画像処理にかかる電力消費を削減することができる。
【００５８】
以上説明したように、本開示の第１の実施形態に係る情報処理システムは、ユーザによりメッセージが入力された際に撮像装置１０７により撮像された画像を入力されたメッセージと関連付けて配置した表示を生成することができる。そのため、メッセージを入力したユーザは、撮像画像により、メッセージを入力した際の周囲の様子をメッセージと併せて伝達することができる。
【００５９】
＜３．第２の実施形態＞
次に、図７〜図９を参照して、本開示の第２の実施形態に係る情報処理システムについて説明する。本開示の第２の実施形態に係る情報処理システムは、各種センサを有する情報処理端末１Ｂを備え、入力されたメッセージと、各種センサからのユーザに関連した情報に基づいた画像とを関連付けて配置した表示を生成する。これにより、本開示の第２の実施形態に係る情報処理システムは、メッセージが入力された際のユーザの状況をメッセージと併せて伝達することができる。
【００６０】
具体的には、情報処理システムは、ユーザがメッセージを入力、送信する際の所定の入力操作に基づいて、各種センサを用いて、ユーザに関連した情報を取得する。また、情報処理システムは、取得したユーザに関連した情報からユーザの状態を判断し、該ユーザの状態に対応した画像を取得する。さらに、情報処理システムは、入力されたメッセージと、該ユーザの状態に対応した画像とを関連付けて配置した表示を生成し、情報処理端末１Ｂに送信する。この情報処理システムによれば、メッセージを送信するユーザは、メッセージと併せて、メッセージを入力した際の自身の状態を多様な形態にて伝達することができる。
【００６１】
［３．１．情報処理システムの構成例］
まず、図７を参照して、本開示の第２の実施形態に係る情報処理システムの具体的な構成について説明する。図７は、本開示の第２の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【００６２】
図７に示すように、本開示の第２の実施形態に係る情報処理システムは、情報処理端末１Ｂと、情報処理サーバ２Ｂとを備える。また、情報処理端末１Ｂおよび情報処理サーバ２Ｂは、ネットワーク３を介して接続されている。なお、ネットワーク３については、図１にて説明したとおりであるので、ここでの説明は省略する。
【００６３】
また、情報処理端末１Ｂは、端末通信部１１１と、入力部１１３と、表示部１１５と、センサ部１１７とを備え、情報処理サーバ２Ｂは、サーバ通信部２１１と、メッセージ取得部２１３と、関連情報取得部２１５と、制御部２１７と、画像記憶部２１９とを備える
【００６４】
（情報処理端末の構成）
端末通信部１１１、入力部１１３、および表示部１１５については、第１の実施形態にて説明した端末通信部１０１、入力部１０３、および表示部１０５と同様であるので、ここでの説明は省略する。
【００６５】
センサ部１１７は、各種センサを備え、ユーザに関連した情報を取得する。例えば、センサ部１１７は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）センサなどのユーザの位置情報を取得するセンサであってもよく、照度センサ、温度センサ、近接センサなどのユーザの周囲の環境に関する情報を取得するセンサであってもよい。また、各種センサは、心拍数センサ、血圧センサ等のユーザの身体に関する情報を取得するセンサであってもよい。さらに、センサ部１１７は、撮像装置を含んでもよい。
【００６６】
具体的には、センサ部１１７は、ＧＰＳセンサを備え、該ＧＰＳセンサによりユーザの位置情報を取得してもよい。また、センサ部１１７は、ネットワーク３との通信に用いられた基地局またはアクセスポイントの位置情報を取得するセンサを備えてもよく、該センサによりユーザの位置情報を取得してもよい。
【００６７】
また、例えば、センサ部１１７は、照度センサを備え、該照度センサによりユーザがいる環境の照度情報を取得してもよい。また、センサ部１１７は、温度センサを備え、該温度センサにより、ユーザがいる環境の温度情報を取得してもよい。さらに、センサ部１１７は、奥行きセンサ、近接センサ等を備え、該センサによりユーザの周囲の構造物に関する情報を取得してもよい。この構成によれば、ユーザがいる環境の照度情報、温度情報、および周囲の構造物に関する情報などを参照することにより、後述する制御部２１７は、ユーザがいる場所が屋内なのか、屋外なのか、地下なのか、地上なのかなど、位置情報からは判別できない詳細なユーザの環境について判断することが可能になる。
【００６８】
さらに、例えば、センサ部１１７は、心拍数センサ、血圧センサなどを備え、該センサによりユーザの身体に関する情報を取得してもよい。この構成によれば、ユーザの身体に関する情報を参照することにより、後述する制御部２１７は、ユーザが運動しているのか、走っているのか、座っているのかなど、ユーザの活動状況について判断することが可能になる。
【００６９】
なお、センサ部１１７は、上述した各種センサに限定されない。センサ部１１７は、公知の多様なセンサを備え、備えた多様なセンサにより多様な情報を取得してもよい。また、センサ部１１７は、情報処理端末１Ｂとは別の情報処理装置（例えば、メガネ型端末などのウェアラブル端末）に備えられていており、情報処理端末１Ｂと通信を行うことにより、本開示に係る情報処理システムの機能を実行するものであってもよい。
【００７０】
ここで、センサ部１１７がユーザに関連した情報を取得するタイミングは、第１の実施形態において撮像装置１０７が画像を取得するタイミングと同様であってもよい。具体的には、センサ部１１７は、ユーザによって入力されたメッセージの送信が指示された時に情報を取得してもよく、ユーザによって所定の文字列が入力された時に情報を取得してもよい。また、センサ部１１７は、ユーザから情報取得を指示された時に情報を取得してもよい。
【００７１】
（情報処理サーバの構成）
サーバ通信部２１１、およびメッセージ取得部２１３については、第１の実施形態にて説明したサーバ通信部２０１、およびメッセージ取得部２０３と同様であるので、ここでの説明は省略する。
【００７２】
関連情報取得部２１５は、それぞれの情報処理端末１Ｂにて取得されたユーザに関連した情報を取得する。具体的には、関連情報取得部２１５は、それぞれの情報処理端末１Ｂにてメッセージが入力された際に、センサ部１１７により取得されたユーザに関連する各種情報を取得する。すなわち、本開示の第２の実施形態において、ユーザに関連した情報とは、センサ部１１７により取得されたユーザに関連した各種情報を意味する。
【００７３】
制御部２１７は、関連情報取得部２１５が取得したユーザに関連した情報に基づいて、取得したメッセージを伝達するための情報処理を制御する。具体的には、制御部２１７は、関連情報取得部２１５が取得したユーザに関連した情報に基づいてユーザの状態を判断し、該ユーザの状態に対応した画像と、メッセージ取得部２１３が取得したメッセージとを関連付けて配置した表示を生成する。より具体的には、制御部２１７は、ユーザの状態に対応した画像をメッセージ取得部２１３が取得したメッセージの背景として用いた表示を生成する。
【００７４】
例えば、制御部２１７は、取得されたユーザの位置情報からユーザがいる場所を判断し、ユーザがいる場所に対応した画像をメッセージと関連付けて配置した表示を生成してもよい。また、制御部２１７は、所定の時間範囲におけるユーザの位置情報の変化からユーザの平均移動速度を算出し、ユーザの移動速度に対応した速度を表す画像をメッセージと関連付けて配置した表示を生成してもよい。また、制御部２１７は、ユーザがいる環境の照度情報、温度情報、および周囲の構造物に関する情報など（すなわち、ユーザの周囲の環境に関する情報）からユーザがいる場所を判断し、ユーザがいる場所に対応した画像をメッセージと関連付けて配置した表示を生成してもよい。さらに、制御部２１７は、ユーザの身体に関する情報からユーザの活動状況を判断し、ユーザの活動状況（すなわち、運動している、座っているなど）に対応した画像をメッセージと関連付けて配置した表示を生成してもよい。
【００７５】
また、制御部２１７は、さらにメッセージ取得部２１３が取得したメッセージに含まれる語句に基づいて、ユーザがいる位置、ユーザの活動状況などを判断してもよい。例えば、メッセージ取得部２１３が取得したメッセージに「図書館」などの建物を表す名詞、「飯田橋」などの地名を表す固有名詞が含まれる場合、制御部２１７は、これらの名詞が表す場所をユーザがいる位置と判断してもよい。
【００７６】
さらに、制御部２１７は、判断したユーザの状態に対応した語句がメッセージ取得部２１３により取得されたメッセージに含まれる場合、該ユーザの状態に対応した語句を強調した表示を生成してもよい。例えば、制御部２１７が位置情報からユーザのいる場所を「図書館」であると判断し、かつメッセージ取得部２１３により取得されたメッセージに「図書館」の語句が含まれる場合、制御部２１７は、「図書館」の語句を強調した表示を生成してもよい。
【００７７】
なお、制御部２１７は、第１の実施形態と同様に、ユーザの状態に対応した画像をメッセージの背景として用いた表示を生成する場合、ユーザの状態に対応した画像の色情報に基づいて、メッセージを表示する文字色を変更してもよい。
【００７８】
画像記憶部２１９は、制御部２１７メッセージと関連付けて配置するユーザの状態に対応した画像を記憶する。なお、図７に示す例では、画像記憶部２１９は、情報処理サーバ２Ｂに備えられるとしたが、本開示の技術はかかる例示に限定されない。例えば、画像記憶部２１９は、ネットワーク３に接続された他の情報処理装置が備えていてもよい。また、制御部２１７は、ネットワーク３に接続されたあらゆる記憶装置から検索して、ユーザの状態に対応した画像を取得してもよい。
【００７９】
［３．２．情報処理システムの動作例］
続いて、図８Ａ〜図９を参照して、本開示の第２の実施形態に係る情報処理システムの動作例について説明する。図８Ａおよび８Ｂは、制御部２１７が生成する表示の一例を示した説明図であり、図９は、本開示の第２の実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【００８０】
以下では、図８Ａおよび図８Ｂにて示す制御部２１７によって生成された表示を参照しながら、図９に示したフローチャートに沿って情報処理システムの動作を説明する。
【００８１】
図８Ａに示した表示４２０には、第１のユーザによって送信された「今日どうする？」というメッセージ４２２が表示され、第２のユーザによって送信された「飯田橋に２０時待ち合わせでいい？」というメッセージ４２６が表示されている。これに対して、第１のユーザによりメッセージ入力欄４２４に「いいよ。今、図書館。」というメッセージが入力される（Ｓ２００）。続いて、第１のユーザにより送信ボタン４２５が押下された場合、センサ部１１７は、ユーザに関連した情報を取得する（Ｓ２０２）。次に、制御部２１７は、ユーザに関連した情報からユーザの状態を判断し（Ｓ２０４）、判断されたユーザの状態に対応した画像を画像記憶部２１９から取得する（Ｓ２０６）。
【００８２】
続いて、制御部２１７は、入力されたメッセージと、取得したユーザの状態に対応した画像とが関連付けられて配置された表示を生成する（Ｓ２０８）。具体的には、制御部２１７は、図８Ｂに示した表示４３０を生成する。図８Ｂに示した表示４３０には、第１のユーザが入力した「いいよ。今、図書館。」というメッセージ４３８が、第２のユーザによる「飯田橋に２０時待ち合わせでいい？」というメッセージ４２６の下に表示されている。また、第１のユーザが入力した「いいよ。今、図書館。」というメッセージ４３８において、第１のユーザがいる場所に対応した図書館の画像が背景として用いられている。なお、制御部２１７は、「いいよ。今、図書館。」というメッセージ４３８において、「図書館」を強調するように文字の表示を変更してもよい。
【００８３】
なお、Ｓ２０２において、センサ部１１７がユーザに関連した情報を取得するタイミングは、第１の実施形態と同様に上記に限定されず、情報取得を指示するボタンが押下された時や、所定の文字列が入力された時であってもよい。
【００８４】
以上説明したように、本開示の第２の実施形態に係る情報処理システムは、入力されたメッセージと関連付けて、該メッセージが入力された際に取得した情報から判断したユーザの状態に対応する画像を表示することができる。そのため、本開示の第２の実施形態に係る情報処理システムによれば、メッセージが入力された際のユーザの状況を、ユーザの状態に対応する画像によってメッセージと併せて伝達することができる。
【００８５】
＜４．第３の実施形態＞
続いて、図１０〜図１２を参照して、本開示の第３の実施形態に係る情報処理システムについて説明する。本開示の第３の実施形態に係る情報処理システムは、位置センサを有する情報処理端末１Ｃを備え、入力されたメッセージと、位置センサにより取得された各ユーザの位置情報から判断したユーザ間の距離とを関連付けて配置した表示を生成する。これにより、本開示の第３の実施形態に係る情報処理システムは、メッセージが入力された際のユーザ間の距離をメッセージと併せて伝達することができる。
【００８６】
具体的には、情報処理システムは、ユーザがメッセージを入力、送信する際の所定の入力操作に基づいて、位置センサによりユーザの位置情報を取得する。また、情報処理システムは、各ユーザの位置情報からユーザ間の距離を算出し、入力されたメッセージと、算出したユーザ間の距離とを関連付けて配置した表示を生成し、情報処理端末１Ｃに送信する。この情報処理システムによれば、ユーザは、メッセージと併せて、メッセージが入力された際の互いの距離を伝達することができる。
【００８７】
また、本開示の第３の実施形態に係る情報処理システムは、位置センサにより取得したユーザの位置情報に基づいてユーザ同士が集合する際に適切な場所を判断し、適切であると判断した場所を複数カ所、集合場所の候補地として表示してもよい。これによれば、本開示の第３の実施形態に係る情報処理システムは、ユーザに対して集合場所に適した場所を提案することができる。
【００８８】
［４．１．情報処理システムの構成例］
まず、図１０を参照して、本開示の第３の実施形態に係る情報処理システムの具体的な構成について説明する。図１０は、本開示の第３の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【００８９】
図１０に示すように、本開示の第３の実施形態に係る情報処理システムは、情報処理端末１Ｃと、情報処理サーバ２Ｃとを備える。また、情報処理端末１Ｃおよび情報処理サーバ２Ｃは、ネットワーク３を介して接続されている。なお、ネットワーク３については、図１にて説明したとおりであるので、ここでの説明は省略する。
【００９０】
また、情報処理端末１Ｃは、端末通信部１２１と、入力部１２３と、表示部１２５と、位置センサ１２７とを備え、情報処理サーバ２Ｃは、サーバ通信部２２１と、メッセージ取得部２２３と、関連情報取得部２２５と、制御部２２７と、候補地記憶部２２９とを備える。
【００９１】
（情報処理端末の構成）
端末通信部１２１、入力部１２３、および表示部１２５については、第１の実施形態にて説明した端末通信部１０１、入力部１０３、および表示部１０５と同様であるので、ここでの説明は省略する。
【００９２】
位置センサ１２７は、ユーザの位置情報を取得するセンサである。具体的には、位置センサ１２７は、ＧＰＳによりユーザの位置情報を取得するＧＰＳセンサであってもよい。また、位置センサ１２７は、ネットワーク３との通信に用いられた基地局またはアクセスポイントの位置情報を取得するセンサであってもよく、基地局またはアクセスポイントの位置からユーザの位置情報を判断してもよい。
【００９３】
また、位置センサ１２７は、情報処理端末１Ｃとは別の情報処理装置（例えば、メガネ型端末などのウェアラブル端末）に備えられ、情報処理端末１Ｃと通信を行うことにより、本開示に係る情報処理システムの機能を実行するものであってもよい。
【００９４】
ここで、位置センサ１２７がユーザの位置情報を取得するタイミングは、第１の実施形態において撮像装置１０７が画像を取得するタイミングと同様であってもよい。具体的には、位置センサ１２７は、ユーザによって入力されたメッセージの送信が指示された時に位置情報を取得してもよく、ユーザによって所定の文字列が入力された時に位置情報を取得してもよい。また、位置センサ１２７は、ユーザから情報取得を指示された時に位置情報を取得してもよい。
【００９５】
（情報処理サーバの構成）
サーバ通信部２２１、およびメッセージ取得部２２３については、第１の実施形態にて説明したサーバ通信部２０１、およびメッセージ取得部２０３と同様であるので、ここでの説明は省略する。
【００９６】
関連情報取得部２２５は、それぞれの情報処理端末１Ｃにて取得されたユーザに関連した情報を取得する。具体的には、関連情報取得部２２５は、それぞれの情報処理端末１Ｃにてメッセージが入力された際に、位置センサ１２７により取得されたユーザの位置情報を取得する。すなわち、本開示の第２の実施形態において、ユーザに関連した情報とは、位置センサ１２７により取得されたユーザの位置情報を意味する。
【００９７】
制御部２２７は、関連情報取得部２２５が取得したユーザに関連した情報に基づいて、取得したメッセージを伝達するための情報処理を制御する。具体的には、制御部２２７は、関連情報取得部２２５が取得した各ユーザの位置情報に基づいてユーザ間の距離を算出し、該ユーザ間の距離情報と、メッセージ取得部２２３が取得したメッセージとを関連付けて配置した表示を生成する。
【００９８】
また、制御部２２７は、各ユーザの位置情報に基づいてユーザが集合する際に適切な場所を判断し、適切であると判断した場所を複数カ所、集合場所の候補地として示す表示を生成してもよい。例えば、制御部２２７は、各ユーザの位置の中間点に相当する場所を適切な集合場所であると判断し、集合場所の候補地として示す表示を生成してもよい。また、制御部２２７は、いずれかのユーザがいる場所を適切な集合場所であると判断し、集合場所の候補地として示す表示を生成してもよい。さらに、制御部２２７は、交通手段（例えば、鉄道、バスなどの公共交通網、道路等の交通経路など）を考慮し、いずれのユーザも容易に到達可能な場所を適切な集合場所であると判断し、集合場所の候補地として示す表示を生成してもよい。
【００９９】
さらに、制御部２２７は、集合場所となり得る場所に対して、あらかじめ優先度を設定して候補地記憶部２２９に記憶させておき、該優先度に基づいて、ユーザが集合する際に適切な場所を判断してもよい。具体的には、制御部２２７は、高い優先度が設定された場所を優先的に、集合に適切な場所であると判断し、集合場所の候補地として示す表示を生成してもよい。また、制御部２２７は、集合場所の候補地を複数表示する場合、高い優先度が設定された場所を強調する表示を生成してもよく、高い優先度が設定された場所を先頭などの目立つ位置に配置した表示を生成してもよい。この構成によれば、制御部２２７は、ユーザを誘導したい集合場所を優先的に提案する表示を生成することができる。
【０１００】
なお、集合場所となり得る場所に設定される優先度は、例えば、広告料を支払っている店舗等が高くなるように設定されてもよい。また、優先度は、例えば、知名度が高く目印になりやすい建造物が高くなるように設定されていてもよく、公共交通が集中する主要な駅等が高くなるように設定されていてもよい。
【０１０１】
候補地記憶部２２９は、集合場所の候補地を記憶する。制御部２２７は、候補地記憶部２２９に記憶された集合場所の候補地の中から、各ユーザの位置情報に基づいてユーザが集合する際に適切な場所を判断する。また、候補地記憶部２２９は、集合場所の候補地それぞれについて、上述した優先度を記憶してもよい。
【０１０２】
［４．２．情報処理システムの動作例］
次に、図１１Ａ〜図１２を参照して、本開示の第３の実施形態に係る情報処理システムの動作例について説明する。図１１Ａ〜１１Ｃは、制御部２２７が生成する表示の一例を示した説明図であり、図１２は、本開示の第３の実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【０１０３】
以下では、図１１Ａ〜１１Ｃにて示す制御部２２７によって生成された表示を参照しながら、図１２に示したフローチャートに沿って情報処理システムの動作を説明する。
【０１０４】
図１１Ａに示した表示４４０には、第１のユーザによって送信された「東海道線が遅れている。。」というメッセージ４４２が表示され、第２のユーザによって送信された「車で迎えに行くよ！」というメッセージ４４６が表示されている。これに対して、第１のユーザによりメッセージ入力欄４４４に「待ち合わせはどこにする？」というメッセージが入力される（Ｓ３００）。続いて、第１のユーザにより送信ボタン４４５が押下された場合、位置センサ１２７は、ユーザの位置情報を取得する（Ｓ３０２）。
【０１０５】
次に、制御部２２７は、各ユーザの位置情報からユーザ間の距離を算出し（Ｓ３０４）、入力されたメッセージと、算出したユーザ間の距離情報とが関連付けられて配置された表示を生成する（Ｓ３０６）。具体的には、制御部２２７は、図１１Ｂに示した表示４５０を生成する。図１１Ｂに示した表示４３０には、第１のユーザが入力した「待ち合わせはどこにする？」というメッセージ４５８が、第２のユーザによる「車で迎えに行くよ！」というメッセージ４５６の下に表示されている。また、第１のユーザが入力した「待ち合わせはどこにする？」というメッセージ４５８の下には、制御部２２７が算出した第１のユーザと第２のユーザとの距離である「距離：７ｋｍ」の距離表示４５９が表示されている。
【０１０６】
なお、Ｓ３０２において、位置センサ１２７がユーザの位置情報を取得するタイミングは、第１の実施形態と同様に上記に限定されず、位置情報の取得を指示するボタンが押下された時や、所定の文字列が入力された時であってもよい。
【０１０７】
続いて、制御部２２７は、第１のユーザおよび第２のユーザの位置情報に基づいて、候補地記憶部２２９に記憶された集合場所となり得る場所から、第１のユーザおよび第２のユーザが集合する際に適切な場所を判断する（Ｓ３０８）。
【０１０８】
次に、制御部２２７は、集合場所として適切であると判断した場所を複数カ所、集合場所の候補地として示す表示を生成する（Ｓ３１０）。具体的には、制御部２２７は、図１１Ｃに示した表示４６０を生成する。図１１Ｃに示した表示４６０には、第１のユーザおよび第２のユーザの集合場所の候補地として、「カフェ新橋店」、「銀座ソニービル」、「東京駅」の３カ所が示されており、また、取得したユーザの位置情報が示す位置からの距離も併せて示されている。このうち、「カフェ新橋店」、「東京駅」はいずれかのユーザのいる場所であるため、集合場所として適切な場所であると制御部２２７に判断されている。また、「銀座ソニービル」は、それぞれのユーザがいる位置の中間点であるため、集合場所として適切な場所であると制御部２２７に判断されている。なお、制御部２２７は、集合場所の候補地の優先度に基づいて、「カフェ新橋店」、「銀座ソニービル」、「東京駅」の集合場所の候補地を示す表示の順序等を制御してもよい。
【０１０９】
以上説明したように、本開示の第３の実施形態に係る情報処理システムは、入力されたメッセージと関連付けて、該メッセージが入力された際に取得したユーザの位置情報から算出したユーザ間の距離情報を表示することができる。そのため、本開示の第３の実施形態に係る情報処理システムによれば、ユーザは、メッセージが入力された際のユーザ間の位置関係をメッセージと併せて伝達することができる。
【０１１０】
また、本開示の第３の実施形態に係る情報処理システムによれば、位置センサにより取得したユーザの位置情報に基づいて、ユーザ同士が集合する際に適切な場所を判断し、ユーザに対して集合場所の候補地を提案することもできる。
【０１１１】
＜５．第４の実施形態＞
次に、図１３および１４を参照して、本開示の第４の実施形態に係る情報処理システムについて説明する。本開示の第４の実施形態に係る情報処理システムは、複数のセンサを有する情報処理端末を備え、メッセージの入力、送信の際に取得される情報をユーザによって選択することが可能な情報処理システムである。
【０１１２】
具体的には、情報処理システムは、ユーザがメッセージを入力、送信する際に、いかなる情報を取得し、送信するのかをユーザに選択させる。また、情報処理システムは、ユーザによって選択された情報を取得し、入力されたメッセージと、該情報とを関連付けて配置した表示を生成し、情報処理端末に送信する。この情報処理システムによれば、ユーザは、メッセージと併せて、任意の情報によりメッセージが入力された際の自身の状態を伝達することができる。
【０１１３】
なお、第４の実施形態に係る情報処理システムの具体的な構成については、第１〜第３の実施形態に係る情報処理システム、またはその組み合わせと同様であるので、ここでの説明は省略する。
【０１１４】
［５．１．情報処理システムの動作例］
続いて、図１３および１４を参照して、第４の実施形態に係る情報処理システムの動作例について説明する。図１３は、第４の実施形態に係る情報処理システムが生成する表示の一例を示した説明図であり、図１４は、本開示の第４の実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【０１１５】
以下では、図１３にて示す情報処理システムによって生成された表示を参照しながら、図１４に示したフローチャートに沿って情報処理システムの動作を説明する。
【０１１６】
図１３に示した表示４７０には、第１のユーザによって送信された「今日はどうする？」というメッセージ４７２が表示されている。これに対して、第２のユーザによりメッセージ入力欄４７４に「飯田橋に２０時待ち合わせでいい？」というメッセージが入力される（Ｓ４００）。続いて、第２のユーザにより送信ボタン４７５が押下された場合、情報処理システムは、取得する情報の選択表示４７３を生成する。ここで、選択表示４７３に対する第２のユーザの入力操作によって、メッセージと併せて送信する情報が選択され（Ｓ４０２）、情報処理システムは、ユーザにより選択されたユーザに関連した情報を取得する（Ｓ４０４）。さらに、情報処理システムは、取得したユーザに関連した情報と、入力されたメッセージとを関連付けて配置された表示を生成し、情報処理端末に表示させる。
【０１１７】
例えば、図１３に示す選択表示４７３において、「メインカメラ」または「フロントカメラ」が選択された場合、情報処理システムは、第１の実施形態に係る情報処理システムの動作を実行してもよい。なお、「メインカメラ」とは、例えば、情報処理端末１Ａにおいて表示部１０５と異なる面側に備えられた撮像装置１０７であり、「フロントカメラ」とは、情報処理端末１Ａにおいて表示部１０５と同一面側に備えられた撮像装置１０７である。
【０１１８】
また、図１３に示す選択表示４７３において、「照度」、「温度」、「現在位置」、または「心拍数」が選択された場合、情報処理システムは、第２の実施形態に係る情報処理システムの動作を実行してもよい。
【０１１９】
さらに、図１３に示す選択表示４７３において、「距離」が選択された場合、情報処理システムは、第３の実施形態に係る情報処理システムの動作を実行してもよい。
【０１２０】
加えて、図１３に示す選択表示４７３において、「オート」が選択された場合、情報処理システムは、ユーザに関連した情報のうち無作為に選択した情報を取得し、メッセージと併せて送信してもよい。
【０１２１】
以上説明したように、本開示の第４の実施形態に係る情報処理システムは、ユーザがメッセージを入力、送信する際に、ユーザに関連した情報のうち、いずれの情報を取得し、送信するのかをユーザが選択することができる。そのため、本開示の第４の実施形態に係る情報処理システムによれば、ユーザは状況に応じて自身の状況を伝達するために適切な情報を選択し、メッセージと併せて伝達することができる。
【０１２２】
＜６．第５の実施形態＞
次に、図１５〜図１８を参照して、本開示の第５の実施形態に係る情報処理システムについて説明する。
【０１２３】
まず、図１５を参照して、本開示の第５の実施形態に係る情報処理システムの概略について説明する。図１５は、本開示の第５の実施形態に係る情報処理システムの概略を示した説明図である。
【０１２４】
図１５に示すように、本開示の第５の実施形態に係る情報処理システムは、撮像装置を有する情報処理端末１Ｄを備え、該撮像装置によりユーザ５の特徴動作に関する情報を取得する。具体的には、本開示の第５の実施形態に係る情報処理システムは、ユーザ５がメッセージを入力、送信する際の特徴動作を撮像装置により検出し、ユーザ５が所定の特徴動作を行ったか否かに基づいて、入力されたメッセージを伝達するための情報処理を制御するものである。
【０１２５】
ここで、ユーザの特徴動作とは、例えば、ユーザの表情、動作などである。情報処理システムは、例えば、ユーザ５が笑顔か否か、ユーザ５が悲しみの表情か否か、ユーザ５が怒りの表情か否か等のユーザ５の表情に基づいて、入力されたメッセージを伝達するための情報処理を制御してもよい。また、情報処理システムは、ユーザ５が所定の動作（例えば、ピースサインなど）をしているか否かに基づいて、入力されたメッセージを伝達するための情報処理を制御してもよい。
【０１２６】
このような情報処理システムは、撮像装置により、メッセージを入力、送信する際のユーザの気分や感情が反映された特徴動作を認識することができるため、認識した特徴動作に基づいてメッセージを伝達するための情報処理を制御することができる。そのため、本開示の第５の実施形態に係る情報処理システムは、メッセージを入力、送信する際のユーザの気分や感情をより反映させてメッセージを伝達することができる。
【０１２７】
［６．１．情報処理システムの構成例］
まず、図１６を参照して、本開示の第５の実施形態に係る情報処理システムの具体的な構成について説明する。図１６は、本開示の第５の実施形態に係る情報処理システムの内部構成を示したブロック図である。
【０１２８】
図１６に示すように、本開示の第５の実施形態に係る情報処理システムは、情報処理端末１Ｄと、情報処理サーバ２Ｄとを備える。また、情報処理端末１Ｄおよび情報処理サーバ２Ｄは、ネットワーク３を介して接続されている。なお、ネットワーク３については、図１にて説明したとおりであるので、ここでの説明は省略する。
【０１２９】
また、情報処理端末１Ｄは、端末通信部１３１と、入力部１３３と、表示部１３５と、撮像装置１３７と、特徴検出部１３９とを備え、情報処理サーバ２Ｄは、サーバ通信部２３１と、メッセージ取得部２３３と、関連情報取得部２３５と、制御部２３７と、特徴ポイント記憶部２３９とを備える。
【０１３０】
（情報処理端末の構成）
端末通信部１３１、入力部１３３、および表示部１３５については、第１の実施形態にて説明した端末通信部１０１、入力部１０３、および表示部１０５と同様であるので、ここでの説明は省略する。
【０１３１】
撮像装置１３７は、撮像レンズおよび撮像素子等を備え、被写体の画像を取得する。具体的には、撮像装置１３７は、ＣＭＯＳイメージセンサまたはＣＣＤイメージセンサなどで構成される撮像素子により、撮像レンズを介して入射する被写体からの光を光電変換し、画像信号に変換する。なお、撮像装置１３７は、メッセージを入力するユーザの特徴動作を検出するための画像を取得することができるように、情報処理端末１Ｄにおいて表示部１３５と同一面側に備えられることが好ましい。
【０１３２】
特徴検出部１３９は、撮像装置１３７が取得したユーザの画像に基づいて、ユーザが特徴動作をしているか否かを検出する。具体的には、特徴検出部１３９は、撮像装置１３７が取得したユーザの画像と、あらかじめ設定された表情または動作などの特徴動作とを照らし合わせ、ユーザが特徴動作をしているか否かを判断する。
【０１３３】
また、特徴検出部１３９は、ユーザが特徴動作をしていると判断した場合に、さらにユーザがしている特徴動作の程度または回数を評価してもよい。具体的には、特徴検出部１３９は、検出した特徴動作が笑顔等の表情である場合、ユーザの笑顔がどの程度の喜びを表しているかを評価してもよい。また、特徴検出部１３９は、検出した特徴動作が動作等である場合、ユーザが実行している動作があらかじめ設定された動作とどの程度一致しているかを評価してもよい。さらに、特徴検出部１３９は、検出した特徴動作が所定の特徴動作と一致した回数を評価してもよい。なお、特徴検出部１３９は、上記の特徴動作の程度を、例えば、１００点を満点とする数値にて評価してもよいし、複数の段階を有するランク分けにて評価してもよい。
【０１３４】
なお、特徴検出部１３９は、図１６では、情報処理端末１Ｄに備えられているとして説明したが、本開示に係る技術は、上記に限定されない。例えば、特徴検出部１３９は、情報処理サーバ２Ｄに備えられてもよい。
【０１３５】
ここで、特徴検出部１３９は、撮像装置１３７により取得されたユーザの画像からユーザが特徴動作をしているか否かを常時、判断していてもよい。また、特徴検出部１３９は、メッセージングシステムが実行されている間のみ、撮像装置１３７によりユーザの画像を取得し、ユーザが特徴動作をしているか否かを判断してもよい。さらに、特徴検出部１３９は、ユーザがメッセージを入力している間のみ、撮像装置１３７によりユーザの画像を取得し、ユーザが特徴動作をしているか否かを判断してもよい。ただし、特徴動作の誤検出を防ぐため、および情報処理にて消費する電力を削減するために、特徴検出部１３９は、ユーザがメッセージを入力している間のみ、撮像装置１３７によりユーザの画像を取得し、ユーザが特徴動作をしているか否かを判断することが好ましい。
【０１３６】
（情報処理サーバの構成）
サーバ通信部２３１、およびメッセージ取得部２３３については、第１の実施形態にて説明したサーバ通信部２３１、およびメッセージ取得部２３３と同様であるので、ここでの説明は省略する。
【０１３７】
関連情報取得部２３５は、情報処理端末１Ｄにて取得されたユーザに関連した情報を取得する。具体的には、関連情報取得部２２５は、情報処理端末１Ｄにてメッセージが入力、送信された際のユーザの特徴動作に関する情報を取得する。すなわち、本開示の第５の実施形態において、ユーザに関連した情報とは、特徴検出部１３９により検出されたユーザが特徴動作をしている否かを示す情報を意味する。また、上記のユーザに関連した情報は、ユーザがしている特徴動作の評価結果をさらに含んでもよい。
【０１３８】
制御部２３７は、関連情報取得部２３５が取得したユーザの特徴動作に関する情報に基づいて、メッセージを伝達するための情報処理を制御する。具体的には、制御部２３７は、ユーザが所定の特徴動作をしている場合、特定の操作を入力することが可能なボタン等の表示を新たに生成してもよい。また、制御部２３７は、ユーザが所定の特徴動作をしている場合、表示されている画像を別の画像を変更した表示を生成してもよい。
【０１３９】
より具体的には、制御部２３７は、ユーザが笑顔であることを検出した場合、笑顔であることを示す情報をメッセージと併せて送信することを指示する「ｓｍｉｌｅ送信ボタン」の表示を生成してもよい。なお、「ｓｍｉｌｅ送信ボタン」の表示は、メッセージのみを送信することを指示する「通常送信ボタン」の表示の替わりに生成されてもよく、「通常送信ボタン」の表示と並行して生成されてもよい。また、制御部２３７は、ユーザが笑顔であることを検出している間のみ「ｓｍｉｌｅ送信ボタン」の表示を生成してもよく、ユーザが笑顔であることを検出してからメッセージが送信されるまでの間、「ｓｍｉｌｅ送信ボタン」の表示を生成してもよい。
【０１４０】
また、ユーザにより「ｓｍｉｌｅ送信ボタン」を用いてメッセージが送信された場合、制御部２３７は、メッセージを送信したユーザを表す表示（すなわち、ユーザを表すアイコン）を「ｓｍｉｌｅ送信」専用の他の表示に変更してもよい。例えば、制御部２３７は、「ｓｍｉｌｅ送信ボタン」を用いてメッセージが送信された場合、メッセージを送信したユーザを表す表示（アイコン）を該ユーザの笑顔の画像に変更してもよい。
【０１４１】
さらに、ユーザにより「ｓｍｉｌｅ送信ボタン」を用いてメッセージが送信された場合、制御部２３７は、送信されたメッセージを含む表示の全体の背景を「ｓｍｉｌｅ送信」専用の背景に変更してもよい。また、ユーザにより「ｓｍｉｌｅ送信ボタン」を用いてメッセージが送信された場合、制御部２３７は、送信されたメッセージの背景を「ｓｍｉｌｅ送信」専用の背景に変更してもよい。
【０１４２】
また、制御部２３７は、ユーザが所定の特徴動作をしているか否かに基づいて、ユーザが使用可能な機能を制御してもよい。具体的には、制御部２３７は、ユーザが所定の特徴動作をしていることを検出した場合に、ユーザに対して所定の機能を使用可能にしてもよい。また、逆に、制御部２３７は、ユーザが所定の特徴動作をしていることを検出した場合に、ユーザに対して所定の機能を使用不可にしてもよい。より具体的には、制御部２３７は、ユーザが笑顔であることを検出した場合に、ユーザに対して動画添付機能などを使用可能にしてもよい。また、制御部２３７は、ユーザが怒りの表情であることを検出した場合に、ユーザに対してメッセージ送信機能などを使用不可にしてもよい。
【０１４３】
ここで、制御部２３７は、ユーザの特徴動作に対する程度または回数の評価結果をユーザと紐付け、該ユーザに紐付けられた評価結果が所定の条件を満たす場合に、メッセージを伝達するための情報処理を変更してもよい。なお、制御部２３７がユーザの特徴動作に対する程度の評価結果を紐付けるユーザは、メッセージが送信されたユーザ（すなわち、特徴動作をしたユーザとコミュニケーションしているユーザ）である。ただし、制御部２３７は、メッセージを送信したユーザ（すなわち、特徴動作をしたユーザ）に対して、ユーザの特徴動作に対する評価結果を紐付けてもよい。
【０１４４】
例えば、ユーザの特徴動作に対する程度または回数が数値にて評価されている場合、制御部２３７は、メッセージが送信されたユーザに対して、該評価結果の数値をポイントとして付与してもよい。また、制御部２３７は、ユーザに付与されたポイントの累積値が閾値を超えた場合、該ユーザに対して新たなサービスや新たなコンテンツを提供してもよい。さらに、制御部２３７は、ユーザに付与されたポイントの累計値から所定の値を差し引くことと引き換えに、該ユーザに対して新たなサービスや新たなコンテンツを提供してもよい。
【０１４５】
特徴ポイント記憶部２３９は、ユーザの特徴動作に対する程度または回数の評価結果と、ユーザとの紐付け関係を記憶する。具体的には、特徴ポイント記憶部２３９は、ユーザの特徴動作に対する評価結果と、メッセージが送信されたユーザ（すなわち、特徴動作をしたユーザとコミュニケーションしているユーザ）とを紐付けて記憶する。例えば、特徴ポイント記憶部２３９は、ユーザの特徴動作に対する評価が数値にて表現される場合、メッセージが伝達されたユーザに対して紐付けられた該評価結果の数値を付与されたポイントとして記憶する。また、特徴ポイント記憶部２３９は、ユーザに付与されたポイントを積算し、ユーザごとに付与されたポイントの累計値を記憶してもよい。
【０１４６】
［６．２．情報処理システムの動作例］
次に、図１７Ａ〜図１８を参照して、本開示の第５の実施形態に係る情報処理システムの動作例について説明する。図１７Ａおよび図１７Ｂは、制御部２３７が生成する表示の一例を示した説明図であり、図１８は、本開示の第５の実施形態に係る情報処理システムの動作例を示したフローチャート図である。
【０１４７】
以下では、図１７Ａおよび１７Ｂにて示す制御部２２７によって生成された表示を参照しながら、図１８に示したフローチャートに沿って情報処理システムの動作を説明する。なお、図１７Ａ〜図１８で示す本開示の第５の実施形態に係る情報処理システムの動作例は、ユーザの笑顔を検出し、ユーザが笑顔である場合にメッセージを伝達する情報処理を変更する動作例である。
【０１４８】
図１７Ａに示した表示４８０には、第１のユーザによって送信された「今日どうする？」というメッセージ４８２が表示され、第２のユーザによって送信された「飯田橋に２０時待ち合わせでいい？」というメッセージ４８６が表示されている。これに対して、第１のユーザによりメッセージ入力欄４８４に「いいよ。今、図書館。」というメッセージが入力される（Ｓ５００）。ここで、撮像装置１３７は、随時、第１のユーザの撮像画像を取得し（Ｓ５０２）、特徴検出部１３９は、撮像装置１３７が取得したユーザの画像からユーザが笑顔であるか否か（すなわち、所定の特徴動作をしているか否か）を判断する（Ｓ５０４）。
【０１４９】
特徴検出部１３９によりユーザが笑顔ではないと判断された場合（Ｓ５０６／Ｎｏ）、制御部２３７は、通常送信ボタン４８５の表示を生成する（Ｓ５０６）。具体的には、制御部２３７は、図１７Ａに示した表示４８０から「ｓｍｉｌｅ」送信ボタン４８５Ａを除いた表示を生成する。さらに、該通常送信ボタン４８５が押下された場合、制御部２３７は、入力されたメッセージと、第１のユーザを表す通常のアイコン４９２Ａとを関連付けて配置した表示を生成する。
【０１５０】
一方、特徴検出部１３９によりユーザが笑顔であると判断された場合（Ｓ５０６／Ｙｅｓ）、制御部２３７は、通常送信ボタン４８５に加えて、「ｓｍｉｌｅ」送信ボタン４８５Ａを含む表示を生成する（Ｓ５１０）。
【０１５１】
ここで、制御部２３７は、「ｓｍｉｌｅ」送信ボタン４８５Ａが押下されたか否かを判断する（Ｓ５１２）。ユーザにより「ｓｍｉｌｅ」送信ボタン４８５Ａが押下された場合（Ｓ５１２／Ｙｅｓ）、制御部２３７は、第１のユーザを表す笑顔アイコン４９８Ａと、入力されたメッセージとを関連付けて配置した表示を生成する。具体的には、制御部２３７は、図１７Ｂに示した表示４９０を生成する。図１７Ｂに示した表示４９０には、第１のユーザが入力した「いいよ。今、図書館。」というメッセージ４９８が、第２のユーザによる「飯田橋に２０時待ち合わせでいい？」というメッセージ４９６の下に表示されている。また、「いいよ。今、図書館。」というメッセージ４９８は、第１のユーザを表す笑顔アイコン４９８Ａからの吹き出しにて表示されている。この表示によれば、第１のユーザは、ユーザを表すアイコンの違いによって、笑顔にてメッセージを入力、送信したことをメッセージと併せて伝達することができる。
【０１５２】
また、ユーザによりｓｍｉｌｅ送信ボタン４８５Ａが押下されなかった場合（Ｓ５１２／Ｎｏ）、制御部２３７は、該通常送信ボタン４８５が押下された場合と同様に、入力されたメッセージと、第１のユーザを表すアイコン４９２Ａとを関連付けて配置した表示を生成する（Ｓ５０８）。
【０１５３】
なお、制御部２３７は、ユーザが笑顔の時のみ、ｓｍｉｌｅ送信ボタン４８５Ａを表示してもよいし、一度でも笑顔を検出すれば、該メッセージを送信するまではｓｍｉｌｅ送信ボタン４８５Ａを表示し続けてもよい。
【０１５４】
以上説明したように、本開示の第５の実施形態に係る情報処理システムは、撮像装置１３７により取得した画像に基づいて、ユーザが所定の特徴動作をしているか否かを検出することができる。また、本開示の第５の実施形態に係る情報処理システムは、ユーザが所定の特徴動作を行ったか否かに基づいて、入力されたメッセージを伝達する際の情報処理を制御する。このため、本開示の第５の実施形態に係る情報処理システムによれば、ユーザは、メッセージを入力、送信する際のユーザの気分や感情をメッセージと併せて伝達することができる。
【０１５５】
＜７．ハードウェア構成＞
以下では、図１９を参照して、本開示の各実施形態に係る情報処理端末１および情報処理サーバ２を実現する情報処理装置７のハードウェア構成について説明を行う。図１９は、本開示の各実施形態に係る情報処理装置７のハードウェア構成を説明した説明図である。なお、情報処理装置７による情報処理は、ソフトウェアとハードウェアとの協働によって実現される。
【０１５６】
図１９に示すように、情報処理装置７は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）７００と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）７０２と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）７０４と、ブリッジ７０８と、内部バス７０６および７１０と、インターフェース７１２と、入力装置７１４と、出力装置７１６と、ストレージ装置７１８と、ドライブ７２０と、接続ポート７２２と、通信装置７２４と、を備える。
【０１５７】
ＣＰＵ７００は、演算処理装置および制御装置として機能し、各種プログラムに従って、情報処理装置７内の動作全般を制御する。ＲＯＭ７０２は、ＣＰＵ７００が使用するプログラム、演算パラメータを記憶し、ＲＡＭ７０４は、ＣＰＵ７００の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。ＣＰＵ７００は、例えば、ぼかし制御部１０９、特徴検出部１３９、メッセージ取得部２０３、２１３、２２３、２３３、関連情報取得部２０５、２１５、２２５、２３５、および制御部２０７、２１７、２２７、２３７の機能を実行する。
【０１５８】
これらＣＰＵ７００、ＲＯＭ７０２およびＲＡＭ７０４は、ブリッジ７０８、内部バス７０６および７１０等により相互に接続されている。また、ＣＰＵ７００、ＲＯＭ７０２およびＲＡＭ７０４は、インターフェース７１２を介して入力装置７１４、出力装置７１６、ストレージ装置７１８、ドライブ７２０、接続ポート７２２、および通信装置７２４とも接続されている。
【０１５９】
入力装置７１４は、タッチパネルなどのユーザが情報を入力するための装置、およびセンサ等の外部からの情報が入力されるための装置を含み、また、入力された情報に基づいて入力信号を生成し、ＣＰＵ７００に出力するための入力制御回路なども含む。入力装置７１４は、例えば、撮像装置１０７、１３７、センサ部１１７、位置センサ１２７、および入力部１０３、１１３、１２３、１３３の機能を実行する。
【０１６０】
出力装置７１６は、例えば、ＬＣＤ装置、ＯＬＥＤ装置、プラズマディスプレイ装置、ＣＲＴ装置およびランプなどの表示装置を含む。さらに、出力装置７１６は、スピーカおよびヘッドホンなどの音声出力装置を含んでもよい。例えば、表示装置は、生成された画像を表示する。一方、音声出力装置は、音声データ等を音声に変換して出力する。出力装置７１６は、例えば、表示部１０５、１１５、１２５、１３５の機能を実行する。
【０１６１】
ストレージ装置７１８は、情報処理装置７の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置７１８は、記憶媒体、記憶媒体にデータを記憶する記憶装置、記憶媒体からデータを読み出す読み出し装置、および記憶されたデータを削除する削除装置を含んでもよい。ストレージ装置７１８は、例えば、画像記憶部２１９、候補地記憶部２２９、特徴ポイント記憶部２３９の機能を実行する。
【０１６２】
ドライブ７２０は、記憶媒体用リードライタであり、情報処理装置７に内蔵、または外付けされる。ドライブ７２０は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体に記憶されている情報を読み出して、ＲＡＭ７０４に出力する。また、ドライブ７２０は、リムーバブル記憶媒体に情報を書き込むこともできる。
【０１６３】
接続ポート７２２は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）ポート、光オーディオ端子等のような外部接続機器を接続するための接続ポートで構成された接続インターフェースである。
【０１６４】
通信装置７２４は、例えば、ネットワーク３に接続するための通信デバイス等で構成された通信インターフェースである。また、通信装置７２４は、無線ＬＡＮ対応通信装置であっても、有線によるケーブル通信を行うケーブル通信装置であってもよい。通信装置７２４は、例えば、端末通信部１０１、１１１、１２１、１３１、およびサーバ通信部２０１、２１１、２２１、２３１の機能を実行する。
【０１６５】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１６６】
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
【０１６７】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
複数のユーザがそれぞれ入力したメッセージを取得するメッセージ取得部と、
撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得する関連情報取得部と、
前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御する制御部と、
を備える、情報処理システム。
（２）
前記関連情報取得部は、前記メッセージに関する入力操作に基づいて、自動的に前記ユーザに関連した情報を取得する、前記（１）に記載の情報処理システム。
（３）
前記制御部は、前記ユーザに関連した情報に基づいた画像である関連画像を前記メッセージと関連付けて配置した表示を生成して前記メッセージを伝達する、前記（１）または（２）に記載の情報処理システム。
（４）
前記関連画像は、前記撮像装置によって撮像された撮像画像である、前記（３）に記載の情報処理システム。
（５）
前記撮像画像は、さらにぼかし処理が施された画像である、前記（４）に記載の情報処理システム。
（６）
前記撮像装置は、フォーカス位置を像面位相差検出方式により検出し、
前記撮像画像は、前記撮像装置のデフォーカス処理によりぼかし処理が施された画像である、前記（５）に記載の情報処理システム。
（７）
前記関連情報取得部は、前記撮像装置および所定のセンサの少なくともいずれか一方を用いて、前記ユーザに関連した情報を取得し、
前記制御部は、前記ユーザに関連した情報に基づいて前記ユーザの状態を判断し、前記関連画像として、前記ユーザの状態に対応した画像を用いる、前記（３）に記載の情報処理システム。
（８）
前記制御部は、さらに前記メッセージに含まれる語句に基づいて前記ユーザの状態を判断する、前記（７）に記載の情報処理システム。
（９）
前記制御部は、前記ユーザの状態に対応した語句が前記メッセージに含まれる場合、前記語句を強調した表示を生成する、前記（７）または（８）に記載の情報処理システム。
（１０）
前記制御部は、前記関連画像を前記メッセージの背景に用いた表示を生成する、前記（３）〜（９）のいずれか一項に記載の情報処理システム。
（１１）
前記制御部は、前記関連画像の色情報に基づいて、前記メッセージを表示する色を制御する、前記（１０）に記載の情報処理システム
（１２）
前記関連情報取得部は、位置センサを用いて、前記ユーザに関連した情報として前記ユーザの位置情報を取得し、
前記制御部は、前記ユーザの位置情報からユーザ間の距離を判断し、前記ユーザ間の距離情報を前記メッセージと関連付けて配置した表示を生成して前記メッセージを伝達する、前記（１）に記載の情報処理システム。
（１３）
前記制御部は、前記ユーザの位置情報に基づいて、前記ユーザ同士の集合場所の候補地を判断し、前記候補地を複数含む表示を生成する、前記（１２）に記載の情報処理システム。
（１４）
前記制御部は、さらに前記候補地の優先度に基づいて、前記ユーザ同士の集合場所の候補地を判断する、前記（１３）に記載の情報処理システム。
（１５）
前記制御部は、前記ユーザからの入力によって、情報処理を制御する際に用いる前記ユーザに関連した情報を変更する、前記（１）〜（１４）のいずれか一項に記載の情報処理システム。
（１６）
前記関連情報取得部は、前記ユーザに関連した情報として、前記撮像装置により取得された前記ユーザの特徴動作に関する情報を取得する、前記（１）に記載の情報処理システム。
（１７）
前記制御部は、前記ユーザの特徴動作に関する情報に基づいて、画像を変更した表示を生成して前記メッセージを伝達する、前記（１６）に記載の情報処理システム。
（１８）
前記制御部は、前記ユーザの特徴動作に関する情報に基づいて、前記ユーザに対する所定の機能の使用可否を判断する、前記（１６）または（１７）に記載の情報処理システム。
（１９）
前記制御部は、前記ユーザの特徴動作の程度または回数を評価し、前記特徴動作の評価結果と、前記メッセージが伝達されたユーザとを紐付け、ユーザに紐付けられた前記特徴動作の評価結果に基づいて、前記メッセージを伝達するための情報処理を制御する、前記（１６）〜（１８）のいずれか一項に記載の情報処理システム。
（２０）
前記制御部は、前記ユーザの特徴動作の程度または回数を数値にて評価して、前記メッセージが伝達されたユーザに対して評価した数値をポイントとして付与し、ユーザごとに付与されたポイントの累計値が所定の条件を満たしたか否かに基づいて、前記ユーザに対する所定の機能の使用可否を判断する、前記（１６）〜（１９）のいずれか一項に記載の情報処理システム。
（２１）
ユーザが入力したメッセージを取得するメッセージ取得部と、
撮像装置を用いて、前記ユーザに関連した情報を取得する関連情報取得部と、
前記ユーザに関連した情報と、入力された前記メッセージとを紐付けて送信する制御部と、
を備える、情報処理端末。
（２２）
複数のユーザがそれぞれ入力したメッセージを取得することと、
撮像装置を用いて、前記メッセージを入力したユーザに関連した情報を取得することと、
前記ユーザに関連した情報に基づいて、入力された前記メッセージを伝達するための情報処理を制御することと、
含む、情報処理方法。
【符号の説明】
【０１６８】
１        情報処理端末
２        情報処理サーバ
３        ネットワーク
１０１、１１１、１２１、１３１    端末通信部
１０３、１１３、１２３、１３３    入力部
１０５、１１５、１２５、１３５    表示部
１０７、１３７    撮像装置
１０９    ぼかし制御部
１１７    センサ部
１２７    位置センサ
１３９    特徴検出部
２０１、２１１、２２１、２３１    サーバ通信部
２０３、２１３、２２３、２３３    メッセージ取得部
２０５、２１５、２２５、２３５    関連情報取得部
２０７、２１７、２２７、２３７    制御部
２１９    画像記憶部
２２９    候補地記憶部
２３９    特徴ポイント記憶部
【図１】
2016015009.tif 000003
【図２】
2016015009.tif 000004
【図３Ａ】
2016015009.tif 000005
【図３Ｂ】
2016015009.tif 000006
【図４】
2016015009.tif 000007
【図５】
2016015009.tif 000008
【図６】
2016015009.tif 000009
【図７】
2016015009.tif 000010
【図８Ａ】
2016015009.tif 000011
【図８Ｂ】
2016015009.tif 000012
【図９】
2016015009.tif 000013
【図１０】
2016015009.tif 000014
【図１１Ａ】
2016015009.tif 000015
【図１１Ｂ】
2016015009.tif 000016
【図１１Ｃ】
2016015009.tif 000017
【図１２】
2016015009.tif 000018
【図１３】
2016015009.tif 000019
【図１４】
2016015009.tif 000020
【図１５】
2016015009.tif 000021
【図１６】
2016015009.tif 000022
【図１７Ａ】
2016015009.tif 000023
【図１７Ｂ】
2016015009.tif 000024
【図１８】
2016015009.tif 000025
【図１９】
2016015009.tif 000026