【手続補正書】
【提出日】平成27年10月15日(2015.10.15)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像装置を備える携帯情報端末と、前記携帯情報端末と通信可能に接続されるサーバとを含む情報処理システムであって、
前記携帯情報端末は、
前記撮像装置で撮像された撮像画像を取得する撮像画像取得手段と、
前記携帯情報端末の表示言語として設定されているユーザ言語情報を取得する言語情報取得手段と、
前記サーバに、前記撮像画像取得手段により取得された撮像画像と、前記言語情報取得手段により取得されたユーザ言語情報とを送信する撮像画像送信手段と
を備え、
前記サーバは、
画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段と、
前記撮像画像送信手段で送信された撮像画像とユーザ言語情報とを受信する撮像画像受信手段と、
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信手段で受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定手段と、
前記類似画像判定手段で存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得手段と、
前記関連情報取得手段で取得した関連情報を、前記携帯情報端末に送信する関連情報送信手段と
を備え、
前記携帯情報端末は、
前記関連情報送信手段で送信された関連情報を受信し表示する関連情報表示手段
を更に備えることを特徴とする情報処理システム。
【請求項２】
前記サーバは、
前記類似画像判定手段で存在しないと判定した場合に、前記撮像画像に対して文字認識処理を行う文字認識手段と、
前記文字認識手段による文字認識処理が行われることで生成されたテキスト情報を前記携帯情報端末に送信するテキスト情報送信手段と
を更に備えることを特徴とする請求項１に記載の情報処理システム。
【請求項３】
前記携帯情報端末の位置情報を取得する位置情報取得手段と、
前記文字認識手段による文字認識処理が行われることで生成された文字認識結果テキスト情報を、前記位置情報取得手段で取得された位置情報により特定される地域で使用される言語に翻訳する翻訳手段と
を更に備えることを特徴とする請求項２に記載の情報処理システム。
【請求項４】
前記関連情報記憶手段には、前記画像データの特徴量データが記憶されており、
前記撮像画像受信手段で受信した撮像画像の特徴量データを算出する算出手段と更に備え、
前記類似画像判定手段は、特徴量データを用いて、前記撮像画像と類似する画像データが存在するかを判定すること
を特徴とする請求項１乃至３のいずれか１項に記載の情報処理システム。
【請求項５】
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像と類似する画像データが存在するかの判定に用いる類似度を設定する類似度設定手段を更に備え、
前記類似画像判定手段は、前記撮像画像との類似度が前記類似度設定手段で設定された類似度以上か否かによって、前記記憶手段に、前記撮像画像と類似する画像データが存在するかを判定すること
を特徴とする請求項１乃至４のいずれか１項に記載の情報処理システム。
【請求項６】
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像と類似する画像データが複数存在する場合には、前記関連情報送信手段は、前記撮像画像と最も類似する画像データの関連情報を、前記携帯情報端末に送信すること
を特徴とする請求項１乃至５のいずれか１項に記載の情報処理システム。
【請求項７】
前記関連情報送信手段は更に、前記撮像画像と最も類似する画像データ以外の関連情報を取得させるための情報を前記携帯情報端末に送信すること
を特徴とする請求項６に記載の情報処理システム。
【請求項８】
撮像装置を備える携帯情報端末と通信可能に接続されるサーバであって、
画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段と、
前記携帯情報端末から、前記撮像装置で撮像された撮像画像と前記携帯情報端末の表示言語として設定されているユーザ言語情報とを受信する撮像画像受信手段と、
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信手段で受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定手段と、
前記類似画像判定手段で存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得手段と、
前記関連情報取得手段で取得した関連情報を、前記携帯情報端末に送信する関連情報送信手段と
を備えることを特徴とするサーバ。
【請求項９】
撮像装置を備える携帯情報端末と、前記携帯情報端末と通信可能に接続され、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段を備えるサーバとを含む情報処理システムにおける処理方法であって、
前記携帯情報端末が、
前記撮像装置で撮像された撮像画像を取得する撮像画像取得ステップと、
前記携帯情報端末の表示言語として設定されているユーザ言語情報を取得する言語情報取得ステップと、
前記サーバに、前記撮像画像取得ステップにより取得された撮像画像と、前記言語情報取得ステップにより取得されたユーザ言語情報とを送信する撮像画像送信ステップと
を実行し、
前記サーバが、
前記撮像画像送信ステップで送信された撮像画像とユーザ言語情報とを受信する撮像画像受信ステップと、
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信ステップで受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定ステップと、
前記類似画像判定ステップで存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得ステップと、
前記関連情報取得ステップで取得した関連情報を、前記携帯情報端末に送信する関連情報送信ステップと
を実行し、
前記携帯情報端末は、
前記関連情報送信ステップで送信された関連情報を受信し表示する関連情報表示ステップ
を実行することを特徴とする処理方法。
【請求項１０】
撮像装置を備える携帯情報端末と通信可能に接続され、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段を備えるサーバにおける処理方法であって、
前記サーバが、
前記携帯情報端末から、前記撮像装置で撮像された撮像画像と前記携帯情報端末の表示言語として設定されているユーザ言語情報とを受信する撮像画像受信ステップと、
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信ステップで受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定ステップと、
前記類似画像判定ステップで存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得ステップと、
前記関連情報取得ステップで取得した関連情報を、前記携帯情報端末に送信する関連情報送信ステップと
を実行することを特徴とする処理方法。
【請求項１１】
撮像装置を備える携帯情報端末と、前記携帯情報端末と通信可能に接続され、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段を備えるサーバとを含む情報処理システムで実行可能なプログラムであって、
前記携帯情報端末を、
前記撮像装置で撮像された撮像画像を取得する撮像画像取得手段と、
前記携帯情報端末の表示言語として設定されているユーザ言語情報を取得する言語情報取得手段と、
前記サーバに、前記撮像画像取得手段により取得された撮像画像と、前記言語情報取得手段により取得されたユーザ言語情報とを送信する撮像画像送信手段
として機能させ、
前記サーバを、
前記撮像画像送信手段で送信された撮像画像とユーザ言語情報とを受信する撮像画像受信手段と、
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信手段で受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定手段と、
前記類似画像判定手段で存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得手段と、
前記関連情報取得手段で取得した関連情報を、前記携帯情報端末に送信する関連情報送信手段
として機能させ、
前記携帯情報端末を、
前記関連情報送信手段で送信された関連情報を受信し表示する関連情報表示手段
として機能させることを特徴とするプログラム。
【請求項１２】
撮像装置を備える携帯情報端末と通信可能に接続され、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段を備えるサーバで実行可能なプログラムであって、
前記サーバを、
前記携帯情報端末から、前記撮像装置で撮像された撮像画像と前記携帯情報端末の表示言語として設定されているユーザ言語情報とを受信する撮像画像受信手段と、
前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信手段で受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定手段と、
前記類似画像判定手段で存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得手段と、
前記関連情報取得手段で取得した関連情報を、前記携帯情報端末に送信する関連情報送信手段
として機能させることを特徴とするプログラム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
そこで、本発明は、撮像された画像と類似する画像の検索を行い、ユーザの言語に対応する情報を提供することを可能とする技術を提供することを目的とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
上記した目的を達成するために、本発明の情報処理システムは、撮像装置を備える携帯情報端末と、前記携帯情報端末と通信可能に接続されるサーバとを含む情報処理システムであって、前記携帯情報端末は、前記撮像装置で撮像された撮像画像を取得する撮像画像取得手段と、前記携帯情報端末の表示言語として設定されているユーザ言語情報を取得する言語情報取得手段と、前記サーバに、前記撮像画像取得手段により取得された撮像画像と、前記言語情報取得手段により取得されたユーザ言語情報とを送信する撮像画像送信手段とを備え、前記サーバは、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段と、前記撮像画像送信手段で送信された撮像画像とユーザ言語情報とを受信する撮像画像受信手段と、前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信手段で受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定手段と、前記類似画像判定手段で存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得手段と、
前記関連情報取得手段で取得した関連情報を、前記携帯情報端末に送信する関連情報送信手段とを備え、前記携帯情報端末は、 前記関連情報送信手段で送信された関連情報を受信し表示する関連情報表示手段を更に備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】変更
【補正の内容】
【００１０】
上記した目的を達成するために、本発明の処理方法は、撮像装置を備える携帯情報端末と、前記携帯情報端末と通信可能に接続され、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段を備えるサーバとを含む情報処理システムにおける処理方法であって、前記携帯情報端末が、前記撮像装置で撮像された撮像画像を取得する撮像画像取得ステップと、前記携帯情報端末の表示言語として設定されているユーザ言語情報を取得する言語情報取得ステップと、前記サーバに、前記撮像画像取得ステップにより取得された撮像画像と、前記言語情報取得ステップにより取得されたユーザ言語情報とを送信する撮像画像送信ステップとを実行し、前記サーバが、前記撮像画像送信ステップで送信された撮像画像とユーザ言語情報とを受信する撮像画像受信ステップと、前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信ステップで受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定ステップと、前記類似画像判定ステップで存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得ステップと、前記関連情報取得ステップで取得した関連情報を、前記携帯情報端末に送信する関連情報送信ステップとを実行し、前記携帯情報端末は、前記関連情報送信ステップで送信された関連情報を受信し表示する関連情報表示ステップを実行することを特徴とする。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
上記した目的を達成するために、本発明のプログラムは、撮像装置を備える携帯情報端末と、前記携帯情報端末と通信可能に接続され、画像データと、当該画像データに対応付けた複数の言語ごとに関連情報とを記憶する関連情報記憶手段を備えるサーバとを含む情報処理システムで実行可能なプログラムであって、前記携帯情報端末を、前記撮像装置で撮像された撮像画像を取得する撮像画像取得手段と、前記携帯情報端末の表示言語として設定されているユーザ言語情報を取得する言語情報取得手段と、前記サーバに、前記撮像画像取得手段により取得された撮像画像と、前記言語情報取得手段により取得されたユーザ言語情報とを送信する撮像画像送信手段として機能させ、前記サーバを、前記撮像画像送信手段で送信された撮像画像とユーザ言語情報とを受信する撮像画像受信手段と、前記関連情報記憶手段に記憶されている画像データに、前記撮像画像受信手段で受信した撮像画像と類似する画像データが存在するかを判定する類似画像判定手段と、前記類似画像判定手段で存在すると判定した場合に、当該類似すると判定した前記関連情報記憶手段に記憶されている画像データに対応する関連情報のうち、前記ユーザの言語情報から特定される言語に対応する関連情報を取得する関連情報取得手段と、前記関連情報取得手段で取得した関連情報を、前記携帯情報端末に送信する関連情報送信手段として機能させ、前記携帯情報端末を、前記関連情報送信手段で送信された関連情報を受信し表示する関連情報表示手段として機能させることを特徴とする。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】変更
【補正の内容】
【００１２】
本発明によれば、撮像された画像と類似する画像の検索を行い、ユーザの言語に対応する情報を提供することが可能となる。