(57)【要約】      （修正有）【課題】店舗などで買い物をする際、買う予定をしていた商品を買い忘れていることを容易に通知する。【解決手段】携帯端末１００の記憶部１０４に音声入力部あるいは文字入力部により購入予定品名を登録する。店舗などで買物をする場合、品名抽出部１０６が、撮影部１０５が撮影した画像から品名を抽出し、比較部１０７が、品名抽出部１０６が抽出した品名である購入済み品名と、記憶部１０４に記憶された購入予定品名とを比較し、表示部１０８が、比較の結果を表示する。【選択図】図１
2012168779.tif 000002
【特許請求の範囲】
【請求項１】
撮影部と、
購入予定品名を記憶する記憶部と、
前記撮影部を用いて撮影された画像から品名を抽出する品名抽出部と、
前記記憶部に記憶された購入予定品名と、前記品名抽出部にて抽出された品名である購入済み品名とを比較する比較部と、
前記比較部における比較の結果を表示する表示部とを有する携帯端末。
【請求項２】
請求項１に記載の携帯端末において、
前記表示部は、前記比較部における比較の結果、前記購入予定品名のうち、前記購入済み品名に含まれていない購入予定品名を表示することを特徴とする携帯端末。
【請求項３】
請求項１または請求項２に記載の携帯端末において、
当該携帯端末の外部から音声を入力する音声入力部を有し、
前記記憶部は、前記音声入力部が入力した前記購入予定品名を記憶することを特徴とする携帯端末。
【請求項４】
請求項１乃至３のいずれか１項に記載の携帯端末において、
当該携帯端末の外部から文字を入力する文字入力部を有し、
前記記憶部は、前記文字入力部が入力した前記購入予定品名を記憶することを特徴とする携帯端末。
【請求項５】
請求項１乃至４のいずれか１項に記載の携帯端末において、
当該携帯端末と接続された通信装置との間で通信を行う通信部を有し、
前記記憶部は、前記通信装置から送信された前記購入予定品名を前記通信部が受信した場合、該受信した前記購入予定品名を記憶することを特徴とする携帯端末。
【請求項６】
請求項１乃至５のいずれか１項に記載の携帯端末において、
前記記憶部は、前記品名抽出部にて抽出された品名を前記購入予定品名として記憶することを特徴とする携帯端末。
【請求項７】
請求項１乃至６のいずれか１項に記載の携帯端末において、
前記記憶部は、前記購入予定品名とその購入予定数量とを記憶し、
前記品名抽出部は、前記撮影部を用いて撮影された画像から数量を抽出し、
前記比較部は、前記記憶部に記憶された購入予定数量と、前記品名抽出部にて抽出された数量とを比較することを特徴とする携帯端末。
【請求項８】
携帯端末における情報通知方法であって、
前記携帯端末の外部の画像を撮影する処理と、
購入予定品名を記憶する処理と、
前記撮影された画像から品名を抽出する処理と、
前記記憶された購入予定品名と、前記抽出された品名である購入済み品名とを比較する処理と、
前記比較の結果を表示する処理とを行う情報通知方法。
【請求項９】
携帯端末に、
前記携帯端末の外部の画像を撮影する手順と、
購入予定品名を記憶する手順と、
前記撮影された画像から品名を抽出する手順と、
前記記憶された購入予定品名と、前記抽出された品名である購入済み品名とを比較する手順と、
前記比較の結果を表示する手順とを実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報を利用者へ通知する携帯端末、情報通知方法およびプログラムに関する。
【背景技術】
【０００２】
店舗などで買い物をする際、買う予定をしていた商品を買い忘れてしまうケースがある。
【０００３】
このような買い物忘れを防止するために、購入予定商品リストを携帯端末から店舗に具備されたサーバへ送信しておき、ショッピングカートで購入済みの商品を認識し、精算前にサーバにて、購入予定商品リストと認識された購入済みの商品とを比較する技術が考えられている（例えば、特許文献１参照。）。
【０００４】
また、購入予定の商品の商品コードと購入した商品の商品コードとを比較し、購入予定の商品がすべてそろったかどうかを確認できる技術が考えられている（例えば、特許文献２参照。）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−１７３８４２号公報
【特許文献２】特開２００９−１１０３４５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載された技術については、特別なサーバ等の装置を設ける必要があり、コストや管理工数が増大してしまうという問題点がある。
【０００７】
また、特許文献２に記載された技術においては、商品コードを入力しなければならなく、その手間がかかってしまうという問題点がある。また、商品コードを読み取る専用の手段が必要となってしまうという問題点がある。
【０００８】
本発明の目的は、上述した課題を解決する携帯端末、情報通知方法およびプログラムを提供することである。
【課題を解決するための手段】
【０００９】
本発明の携帯端末は、
撮影部と、
購入予定品名を記憶する記憶部と、
前記撮影部を用いて撮影された画像から品名を抽出する品名抽出部と、
前記記憶部に記憶された購入予定品名と、前記品名抽出部にて抽出された品名である購入済み品名とを比較する比較部と、
前記比較部における比較の結果を表示する表示部とを有する。
【００１０】
また、本発明の情報通知方法は、
携帯端末における情報通知方法であって、
前記携帯端末の外部の画像を撮影する処理と、
購入予定品名を記憶する処理と、
前記撮影された画像から品名を抽出する処理と、
前記記憶された購入予定品名と、前記抽出された品名である購入済み品名とを比較する処理と、
前記比較の結果を表示する処理とを行う。
【００１１】
また、本発明のプログラムは、
携帯端末に実行させるためのプログラムであって、
前記携帯端末の外部の画像を撮影する手順と、
購入予定品名を記憶する手順と、
前記撮影された画像から品名を抽出する手順と、
前記記憶された購入予定品名と、前記抽出された品名である購入済み品名とを比較する手順と、
前記比較の結果を表示する手順とを実行させる。
【発明の効果】
【００１２】
以上説明したように、本発明においては、買い物忘れを容易に通知することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の携帯端末に実施の一形態を示す図である。
【図２】図１に示した記憶部に記憶されている購入予定品名の一例を示す図である。
【図３】図１に示した携帯端末の詳細な一形態を示す図である。
【図４】本形態における情報通知方法のうち、購入予定品名を登録する処理を説明するためのフローチャートである。
【図５】図１に示した表示部に表示された購入予定品名リストの一例を示す図である。
【図６】ステップＳ３〜Ｓ５の処理が５回行われた後の表示部に表示された購入予定品名リストの一例を示す図である。
【図７】本形態における情報通知方法のうち、比較結果を表示する処理を説明するためのフローチャートである。
【図８】ステップＳ１８にて表示部に表示された画面の一例を示す図である。
【発明を実施するための形態】
【００１４】
以下に、本発明の実施の形態について図面を参照して説明する。
【００１５】
図１は、本発明の携帯端末に実施の一形態を示す図である。
【００１６】
本形態における携帯端末１００には図１に示すように、記憶部１０４と、撮影部１０５と、表示部１０８と、これらを制御する制御部１１０とが設けられている。また、制御部１１０には、品名抽出部１０６と、比較部１０７とが設けられている。なお、図１には携帯端末１００が具備する構成要素のうち、本発明に関わる構成要素のみを示した。
【００１７】
制御部１１０は、文字データ（購入予定品名）を記憶部１０４に書き込む。
【００１８】
記憶部１０４は、購入予定品名をあらかじめ記憶する。なお、この購入予定品名は、制御部１１０によって書き込まれたものである。また、記憶部１０４は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等のメモリデバイスで構成されている。
【００１９】
図２は、図１に示した記憶部１０４に記憶されている購入予定品名の一例を示す図である。
【００２０】
図１に示した記憶部１０４には図２に示すように、購入予定品名が一覧となって記憶されている。
【００２１】
例えば図２に示すように、購入予定品名として「バナナ」、「リンゴ」、「牛乳」、「小麦粉」および「ご飯」が記憶されている。これは、「バナナ」、「リンゴ」、「牛乳」、「小麦粉」および「ご飯」を購入する予定であることを示している。なお、これらの購入予定品名ごとに、その購入予定品の購入予定数量が記憶されているものであっても良い。
【００２２】
撮影部１０５は、携帯端末１００の外部の画像を撮影する。撮影部１０５は、一般的な携帯端末に具備されているカメラであっても良い。
【００２３】
品名抽出部１０６は、撮影部１０５を用いて撮影された画像から品名を抽出する。具体的には、携帯端末１００にて本発明の機能を起動した場合、撮影部１０５を用いて撮影された画像（商品購入レシートやレジの表示部等）の中から品名を示す情報を抽出する。これには、画像から文字を検出して抽出する一般的な機能を用いる。また、品名抽出部１０６は、抽出した品名を文字データへ変換し、購入済み品名として比較部１０７へ出力する。また、品名抽出部１０６は、抽出した品名を購入予定品名として記憶部１０４に書き込むものであっても良い。
【００２４】
比較部１０７は、記憶部１０４に記憶されている購入予定品名と、品名抽出部１０６から出力されてきた購入済み品名とを比較する。このとき、品名抽出部１０６から出力されてきた購入済み品名を一時的に記憶部１０４に記憶しておくものであっても良い。また、比較部１０７は、比較の結果に基づいた表示を行うように表示部１０８へ通知する。
【００２５】
表示部１０８は、比較部１０７における比較の結果を表示する。
【００２６】
具体的には、表示部１０８は、比較の結果が、購入予定品名と購入済み品名とが一致しない場合、買い物忘れが発生した旨を表示する。そのとき、表示部１０８は、購入予定品名のうち、購入済み品名に含まれていない購入予定品名を表示する。また、表示部１０８は、比較の結果が、購入予定品名と購入済み品名とが一致した場合は、買い物忘れがなかった旨を表示する。
【００２７】
なお、表示部１０８は、一般的な携帯端末に具備されている液晶ディスプレイ等であっても良い。また、表示部１０８は、一般的な携帯端末と同様に、撮影部１０５で撮影された画像を表示する。
【００２８】
以下、制御部１１０が記憶部１０４に書き込む文字データ（購入予定品名）をどのように取得するのかについて説明する。
【００２９】
図３は、図１に示した携帯端末１００の詳細な一形態を示す図である。
【００３０】
図１に示した携帯端末１００には図３に示すように、図１に示した構成要素に加えて、音声入力部１０１と、文字入力部１０２と、通信部１０３とが設けられている。
【００３１】
音声入力部１０１は、携帯端末１００の外部から音声を入力する。音声入力部１０１は、例えば、通話で使用するマイク等の音声入力機器であっても良い。
【００３２】
文字入力部１０２は、携帯端末１００の外部から文字を入力する。文字入力部１０２は、文字を入力することができるものであれば良く、例えば、一般的な携帯端末に設けられているボタンキーやタッチパネル等であっても良い。
【００３３】
通信部１０３は、携帯端末１００と接続された通信装置との間で通信を行う。
【００３４】
これにより、制御部１１０は、音声入力部１０１が入力した音声信号を文字データへ変換し、当該文字データ（購入予定品名）を記憶部１０４に書き込む。また、制御部１１０は、文字入力部１０２が入力した文字データ（購入予定品名）を記憶部１０４に書き込む。また、制御部１１０は、通信装置から送信されてきた購入予定品名を通信部１０３が受信した場合、当該購入予定品名を記憶部１０４に書き込む。
【００３５】
以下に、本形態における情報通知方法について説明する。
【００３６】
図４は、本形態における情報通知方法のうち、購入予定品名を登録する処理を説明するためのフローチャートである。
【００３７】
まず、登録操作が行われたかどうかが、制御部１１０にて判定される（ステップＳ１）。この登録操作は、購入予定品名を登録する機能を起動するために外部から行われる操作であり、例えば、ボタンキーを用いるもの（「＃」キーの長押し等）や、表示部１０８に表示されたメニューの中から、当該機能が選択されるものであっても良い。
【００３８】
登録操作が行われたと判定された場合、表示部１０８に購入予定品名リストが表示される（ステップＳ２）。
【００３９】
図５は、図１に示した表示部１０８に表示された購入予定品名リストの一例を示す図である。図５に示した例では、購入予定品名がまだ１つも登録されていない購入予定品名リストを示す。
【００４０】
図１に示した表示部１０８には図５に示すように、購入予定の商品名が一覧となって表示される。ここでは、購入予定品名がまだ１つも登録されていないため、商品名の欄は空欄となっている。また、購入予定品名リストの下部に「終了」のキーが表示される。この「終了キー」が選択されると、商品名の入力が完了したと判定され、それまでに入力された商品名が一覧となった購入予定品名リストが記憶部１０４に登録される。また、商品名ごとに、その商品名の数量が表示されるものであっても良い。
【００４１】
その後、カーソルの位置が、終了キーにあるか、リスト内にあるかが、制御部１１０において判定される（ステップＳ３）。
【００４２】
カーソルの位置がリスト内にあると判定された場合、音声入力部１０１に音声入力があるかどうかが制御部１１０において判定される（ステップＳ４）。
【００４３】
音声入力があると判定された場合、音声入力部１０１に入力された音声信号が制御部１１０において文字データへ変換され、リスト内の該当する項目へ追加される（ステップＳ５）。このとき変換される文字データには、購入予定品名（商品名）が含まれるが、その数量が含まれるものであっても良い。
【００４４】
その後、さらにステップＳ３の処理が行われる。
【００４５】
ステップＳ３にて、さらに入力する商品名があるため、カーソルの位置がリスト内にあると判定された場合、ステップＳ４、Ｓ５の処理が行われる。
【００４６】
図６は、ステップＳ３〜Ｓ５の処理が５回行われた後の表示部１０８に表示された購入予定品名リストの一例を示す図である。
【００４７】
図６に示すように、図５で空欄となっていた商品名の欄に、「バナナ」、「リンゴ」、「牛乳」、「小麦粉」および「ご飯」が表示される。また、商品名ごとに、その商品名の数量が表示されるものであっても良い。
【００４８】
その後、さらにステップＳ３が行われ、カーソルの位置が終了キーにあると制御部１１０において判定された場合、表示部１０８に表示されている商品名が一覧となった購入予定品名リストが、制御部１１０によって記憶部１０４に登録される（ステップＳ６）。このように書き込まれた際の記憶部１０４に記憶された購入予定品名リストは図２に示したようなものになる。
【００４９】
なお、ステップＳ４の処理は、音声入力部１０１を用いた音声入力の代わりに、文字入力部１０２を用いた文字入力であっても良い。
【００５０】
また、通信部１０３にて他の通信装置から購入予定品名リストが送信されてきた場合、その購入予定品名リストが記憶部１０４に登録されるものであっても良い。
【００５１】
また、紙ベースの購入予定品名リストが撮影部１０５を用いて撮影され、撮影された購入予定品名リストが記憶部１０４に登録されるものであっても良い。
【００５２】
図７は、本形態における情報通知方法のうち、比較結果を表示する処理を説明するためのフローチャートである。このとき、記憶部１０４には、購入予定品名リストが記憶されている。
【００５３】
まず、撮影開始の操作があったかどうかが、制御部１１０において判定される（ステップＳ１１）。この撮影開始操作は、撮影部１０５を起動するために外部から行われる操作であり、例えば、ボタンキーを用いるもの（「＃」キーの長押し等）や、表示部１０８に表示されたメニューの中から、当該機能が選択されるものであっても良い。
【００５４】
撮影開始の操作があったと制御部１１０において判定された場合、撮影部１０５が起動し（ステップＳ１２）、撮影部１０５において撮影されている画像が表示部１０８に表示される（ステップＳ１３）。
【００５５】
このステップＳ１１〜Ｓ１３の処理は、一般的な携帯端末における撮影処理と同じものでも良い。
【００５６】
その後、所定の読み取りの操作があったかどうかが、制御部１１０において判定される（ステップＳ１４）。読み取り操作は、具体的には規定しないが、例えば、撮影部１０５が画像を取得するために押下されるシャッターボタンとして機能するボタンキーを半押しする操作であっても良い。
【００５７】
所定の読み取りの操作があったと制御部１１０において判定された場合、撮影部１０５を用いて撮影されている画像の読み取りが開始される（ステップＳ１５）。ここで、画像としては、購入した商品の品名が表示されているものであれば良く、例えば、商品購入レシートであっても良いし、レジの表示部における表示であっても良い。
【００５８】
すると、読み取られた画像から購入した品名が、購入済み品名として品名抽出部１０６によって抽出される（ステップＳ１６）。抽出された購入済み品名は、記憶部１０４に書き込まれて記憶されても良い。また、読み取られた画像から購入した品名の数量が、購入済み数量として品名抽出部１０６によって抽出され、記憶部１０４に書き込まれて記憶されても良い。
【００５９】
続いて、記憶部１０４に記憶されている購入予定品名と、品名抽出部１０６によって抽出された購入済み品名とが、比較部１０７によって比較される（ステップＳ１７）。このとき、上述した数量が登録されている場合は、その数量についての比較（購入予定数量と購入済み数量との比較）が比較部１０７によって行われるものであっても良い。
【００６０】
記憶部１０４に記憶されている購入予定品名と、品名抽出部１０６によって抽出された購入済み品名とが一致しない場合、購入予定品名のうち購入済み品名に含まれていない購入予定品名を表示するように、比較部１０７から表示部１０８へ通知され、当該表示が表示部１０８に表示される（ステップＳ１８）。そのとき、買い物忘れがある旨が表示部１０８に表示される。また、数量についての比較が比較部１０７において行われた場合、購入した数量が購入予定の数量よりも少ないときに、同様の表示が表示部１０８に表示されるものであっても良い。
【００６１】
図８は、ステップＳ１８にて表示部１０８に表示された画面の一例を示す図である。
【００６２】
図８に示すように、撮影部１０５を用いて撮影されている商品購入レシートと重ねて、買い物忘れがあった旨を示す情報および購入予定品名のうち購入済み品名に含まれていない購入予定品名が表示部１０８に表示される。上述したように数量の比較が行われるものであれば、例えば、「リンゴ」の購入予定数量が３つであるにもかかわらず、撮影部１０５を用いて撮影されている商品購入レシートに記載されたように「リンゴ」の数量が２つである場合、その旨が表示部１０８に表示されるものであっても良い。
【００６３】
一方、ステップＳ１７にて、記憶部１０４に記憶されている購入予定品名と、品名抽出部１０６によって抽出された購入済み品名とが一致した場合、買い物忘れがない旨を表示するように、比較部１０７から表示部１０８へ通知され、当該表示が表示部１０８に表示される（ステップＳ１９）。
【００６４】
なお、商品の代金の支払い前に、レジにて表示されたものを利用者が撮影部１０５を用いて撮影し、比較部１０７が同様の処理で購入予定品名リストと比較して、買い物忘れがあった場合、利用者が不足の商品をその場で追加するものであっても良い。この場合、利用者が、代金の支払いを一度で行うことができる。
【００６５】
このように、一般的な携帯端末に具備されているカメラ機能を用いて、レジでの会計後、商品購入レシートをモニタすると同時にモニタ上に忘れもののあったかどうかを表示部１０８が表示する。それにより、買い物忘れがあった旨を携帯端末１００が利用者へすぐ知らせることができる。また、本願発明は、サーバを経由してデータを取得するものと比べて、費用工数のかかることなく、コストメリットもある。
【００６６】
また、上述した店舗における使用以外であっても、倉庫での搬出物品管理を行う上で、本発明を適用することができる。例えば、顧客から購入商品の一覧（購入予定品名リスト）を受け取り、その一覧を記憶部１０４に記憶しておき、倉庫の商品を取り出して照合（比較）することで、適用することが可能である。
【００６７】
なお、本発明の携帯端末は、携帯電話機、ノートＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）等、携帯可能な装置に適用することが可能である。
【００６８】
上述した携帯端末１００に設けられた各構成要素が行う処理は、目的に応じてそれぞれ作製された論理回路で行うようにしても良い。また、処理内容を手順として記述したコンピュータプログラム（以下、プログラムと称する）を携帯端末１００にて読取可能な記録媒体に記録し、この記録媒体に記録されたプログラムを携帯端末１００に読み込ませ、実行するものであっても良い。携帯端末１００にて読取可能な記録媒体とは、フロッピー（登録商標）ディスク、光磁気ディスク、ＤＶＤ、ＣＤなどの移設可能な記録媒体の他、携帯端末１００に内蔵されたＲＯＭ、ＲＡＭ等のメモリやＨＤＤ等を指す。この記録媒体に記録されたプログラムは、携帯端末１００に設けられたＣＰＵ（不図示）にて読み込まれ、ＣＰＵの制御にしたがって、上述したものと同様の処理が行われる。ここで、ＣＰＵは、プログラムが記録された記録媒体から読み込まれたプログラムを実行するコンピュータとして動作するものである。
【符号の説明】
【００６９】
１００    携帯端末
１０１    音声入力部
１０２    文字入力部
１０３    通信部
１０４    記憶部
１０５    撮影部
１０６    品名抽出部
１０７    比較部
１０８    表示部
１１０    制御部
【図１】
2012168779.tif 000003
【図２】
2012168779.tif 000004
【図３】
2012168779.tif 000005
【図４】
2012168779.tif 000006
【図５】
2012168779.tif 000007
【図６】
2012168779.tif 000008
【図７】
2012168779.tif 000009
【図８】
2012168779.tif 000010