(57)【要約】【課題】画像の撮影時刻以外の条件で検索された画像の一覧の中の１の画像から、その１の画像の撮影時刻の前後に撮影された画像を時系列に表示させることができる画像処理装置、画像処理方法、プログラムおよび記録媒体を提供する。【解決手段】本発明の画像処理装置、画像処理方法、プログラムおよび記録媒体において、検索条件は、画像群の中から、撮影時刻以外の条件により画像を検索するための条件であり、画像指定部が、表示部に表示された検索画像の中から、ユーザからの指示に応じて選択された１の検索画像を指定検索画像として指定し、画像表示部が、指定検索画像が指定された場合に、指定検索画像のみを表示部に表示させた後、ユーザからの指示に応じて、指定検索画像と、画像群に含まれる、指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、を時系列画像として時系列により表示部に表示させる。【選択図】図２
2020135658.tif 000002
【特許請求の範囲】
【請求項１】
ユーザから入力された指示を取得する指示取得部と、
画像群の中から、前記ユーザからの指示に応じて入力された検索条件に一致する画像を検索画像として検索する画像検索部と、
前記画像群に含まれる画像を表示部に表示させる画像表示部と、
前記表示部に表示された画像の中から、前記ユーザからの指示に応じて選択された１の画像を指定する画像指定部と、を備え、
前記検索条件は、前記画像群の中から、撮影時刻以外の条件により画像を検索するための条件であり、
前記画像指定部は、前記表示部に表示された検索画像の中から、前記ユーザからの指示に応じて選択された１の検索画像を指定検索画像として指定し、
前記画像表示部は、前記指定検索画像が指定された場合に、前記指定検索画像のみを前記表示部に表示させた後、前記ユーザからの指示に応じて、前記指定検索画像と、前記画像群に含まれる、前記指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、を時系列画像として時系列により前記表示部に表示させる、画像処理装置。
【請求項２】
前記画像表示部は、前記指定検索画像のみを前記表示部に表示させた後、前記ユーザからの指示が入力される毎に、前記検索画像の中から、前記指定検索画像の撮影時刻よりも前または後に撮影された１の検索画像のみを、前記指定検索画像の撮影時刻から時系列に撮影された検索画像の順に順次前記表示部に表示させる、請求項１に記載の画像処理装置。
【請求項３】
前記画像指定部は、前記表示部に表示された時系列画像の中から、前記ユーザからの指示に応じて選択された１の時系列画像を指定時系列画像として指定し、
前記画像表示部は、前記指定時系列画像が指定された場合に、前記指定時系列画像のみを前記表示部に表示させた後、前記ユーザからの指示が入力される毎に、前記画像群の中から、前記指定時系列画像の撮影時刻よりも前または後に撮影された１の画像のみを、前記指定時系列画像の撮影時刻から時系列に撮影された画像の順に順次前記表示部に表示させる、請求項１または２に記載の画像処理装置。
【請求項４】
前記画像検索部は、
前記画像群に含まれる画像に付与されたタグ情報を前記表示部に表示させるタグ情報表示部と、
前記表示部に表示されたタグ情報の中から、前記ユーザからの指示に応じて選択されたタグ情報を選択タグ情報として指定するタグ情報指定部と、
前記画像群の中から、前記選択タグ情報が付与された画像を前記検索画像として抽出する画像抽出部と、を備え、
前記タグ情報表示部は、前記画像群に含まれる全ての画像に付与された全てのタグ情報の少なくとも一部を前記表示部に表示させ、
前記タグ情報指定部は、前記表示部に表示されたタグ情報の中から、前記ユーザからの指示に応じて選択された１つ目のタグ情報を第１選択タグ情報として指定し、
前記画像抽出部は、前記画像群の中から、前記第１選択タグ情報が付与された画像を第１検索画像として抽出し、
前記画像表示部は、全ての前記第１検索画像の少なくとも一部を前記表示部に表示させ、
前記タグ情報表示部は、前記全ての第１検索画像に付与された全てのタグ情報の少なくとも一部を前記表示部に表示させる、請求項１ないし３のいずれか一項に記載の画像処理装置。
【請求項５】
前記タグ情報指定部は、前記第１選択タグ情報に加えて、前記表示部に表示されたタグ情報の中から、前記ユーザからの指示に応じて選択された２つ目のタグ情報を第２選択タグ情報として同時に指定し、
前記画像抽出部は、前記第１検索画像の中から、前記第２選択タグ情報が付与された第１検索画像を第２検索画像として抽出し、
前記画像表示部は、全ての前記第２検索画像の少なくとも一部を前記表示部に表示させ、
前記タグ情報表示部は、前記全ての第２検索画像に付与された全てのタグ情報の少なくとも一部を前記表示部に表示させる、請求項４に記載の画像処理装置。
【請求項６】
前記タグ情報指定部は、前記表示部に表示されたタグ情報の中から、前記ユーザからの指示に応じて選択された２以上の前記タグ情報を前記選択タグ情報として同時に指定し、
前記画像抽出部は、前記画像群の中から、前記２以上の選択タグ情報の全てが付与された画像を前記検索画像として抽出し、
前記画像表示部は、全ての前記検索画像の少なくとも一部を前記表示部に表示させ、
前記タグ情報表示部は、前記全ての検索画像に付与された全てのタグ情報の少なくとも一部を前記表示部に表示させる、請求項４または５に記載の画像処理装置。
【請求項７】
指示取得部が、ユーザから入力された指示を取得するステップと、
画像検索部が、画像群の中から、前記ユーザからの指示に応じて入力された検索条件に一致する画像を検索画像として検索するステップと、
画像表示部が、前記画像群に含まれる画像を表示部に表示させるステップと、
画像指定部が、前記表示部に表示された画像の中から、前記ユーザからの指示に応じて選択された１の画像を指定するステップと、を含み、
前記検索条件は、前記画像群の中から、撮影時刻以外の条件により画像を検索するための条件であり、
前記表示部に表示された検索画像の中から、前記ユーザからの指示に応じて選択された１の検索画像を指定検索画像として指定し、
前記指定検索画像が指定された場合に、前記指定検索画像のみを前記表示部に表示させた後、前記ユーザからの指示に応じて、前記指定検索画像と、前記画像群に含まれる、前記指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、を時系列画像として時系列により前記表示部に表示させる、画像処理方法。
【請求項８】
請求項７に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラム。
【請求項９】
請求項７に記載の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像群の中から、検索条件に基づいて画像を検索し、その検索の結果の画像を表示部に表示させる画像処理装置、画像処理方法、プログラムおよび記録媒体に関する。
【背景技術】
【０００２】
例えば、スマートフォンに保持されている画像群の中から、ユーザが所望する画像を探す場合、ユーザは、画像群に含まれる画像の一覧（サムネイル画像）を表示部に時系列に表示させ、画像の一覧を時系列に遡りながら所望の画像を探すという方法が用いられる。また、画像群の中から画像を検索するためのキーワードを入力し、タグ情報等の画像の付加情報を利用して、キーワードに一致する画像を検索する方法が知られている。
【０００３】
しかし、画像の一覧を表示させて遡るという方法では、画像群に含まれる大量の画像の中から、所望の画像を探すことは非常に困難である。また、キーワードを入力して画像を検索する方法では、どのようなキーワードを使用すればよいのかが明確な場合には、所望の画像を適切に検索することができるかもしれないが、キーワードが明確ではない場合には、所望の画像を適切に検索することは非常に困難である。
【０００４】
ここで、本発明に関連性のある先行技術文献として、特許文献１、２がある。
【０００５】
特許文献１には、画像データに付与された付加情報に基づいて文字列検索を行うことにより、画像データの検索を行うことが記載されている。例えば、検索したいExifの文字列と、検索したい付箋の文字列と、のＡＮＤ／ＯＲのいずれかの検索を行うことにより、入力された文字列に一致する付加情報を有する画像データを検索し、検索結果に該当する画像データを表示することが記載されている。
【０００６】
特許文献２には、デジタル画像に関連する複数の属性及び属性値をラベルにおいて表示し、ユーザが、ラベルにおいて表示される属性値の一を選択することにより画像の他の集合等を選択することが記載されている。また、選択された画像の集合を閲覧している際に、ユーザが、特定の人間の画像全てを検索し、それらの画像を時系列的に表示し、それらの関連するラベルを表示することが記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００９−１２４２７０号公報
【特許文献２】特許第５２１６５９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
特許文献１には、複数の付加情報の文字列のＡＮＤ検索を行うことなどが記載されているが、ユーザが検索したい文字列を入力する必要があり、直感的に画像を検索することができない。
また、特許文献２には、１枚のデジタル画像の属性値の一を選択することにより、他の画像の集合を閲覧することなどが記載されているが、一の属性値のみに対応する画像の集合を閲覧できるのみであり、例えば複数の属性値により画像を絞り込むことはできない。
【０００９】
また、従来のオンラインフォトサービスには、画像の閲覧を促す通知をユーザに送信し、ユーザが所有する過去の画像を閲覧するのを促す機能を有するものがある。
【００１０】
画像の閲覧を促す通知がユーザに送信された後、ユーザにより、この通知が開封されると、図２０に示すように、例えばユーザが所有する「2015/01/10」の画像群の中から選択された数枚の画像を用いて作成されたコラージュ画像が表示部に表示される。
【００１１】
続いて、ユーザにより、コラージュ画像の下側に表示されている「その他の写真を表示」というボタンが押されると、図２１に示すように、コラージュ画像で用いられている画像と同じ撮影日の「2015年1月10日（土）」の画像群が、画像の撮影時刻の降順に表示部に表示される。
【００１２】
また、ユーザは、表示部に表示された画像群を上方向または下方向へ移動させることにより、その前後の撮影日に撮影された画像群を、画像の撮影時刻の順に、順次表示させることができる。
例えば、表示部に表示された画像群が上方向へ移動されると、「2015年1月10日（土）」よりも前の直近の撮影日である、例えば「2015年1月9日（金）」の画像群が表示部に表示される。一方、表示部に表示された画像群が下方向へ移動されると、「2015年1月10日（土）」よりも後の直近の撮影日である、例えば「2015年1月18日（日）」の画像群が表示部に表示される。
【００１３】
このように、従来のオンラインフォトサービスには、コラージュ画像から、「その他の写真を表示」のボタンを辿っていくことにより、このコラージュ画像で用いられている画像と同じ撮影日の画像群を時系列に表示させる機能がある。
【００１４】
画像の閲覧を促す通知に含まれるコラージュ画像は、「2015年1月10日（土）」という画像の撮影時刻に関する検索条件で検索され、撮影日が「2015年1月10日（土）」の画像群の中から選択された数枚の画像を用いて作成されたものである。従って、コラージュ画像から、このコラージュ画像で用いられている画像の撮影時刻の前後に撮影された、撮影日が「2015年1月10日（土）」の画像群を時系列に表示させることができる。
しかし、従来のオンラインフォトサービスには、画像の撮影時刻以外の任意の条件で検索された画像の中から、その中の１枚の画像の撮影時刻の前後に撮影された画像を時系列に表示させる機能は備えられていない。
【００１５】
また、従来のオンラインフォトサービスにおいて、画像群の中から、キーワードに該当する画像を検索する場合、そのキーワードに該当する画像群が、撮影日毎に、画像の撮影時刻の降順に表示部に表示される。
画像群の中から、例えば「サッカー」というキーワードに該当する画像を検索すると、図２２に示すように、「2015年12月5日（土）」の画像群の中から、サッカーに該当する９枚の画像がヒットする。
【００１６】
ここで、「2015年12月5日（土）」の表示の右側に表示された「下向き矢印」のボタンが押されると、サッカーとは関係のない画像も含めて、「2015年12月5日（土）」の画像群に含まれる全ての画像が表示され、「下向き矢印」のボタンは、「上向き矢印」のボタンに変更される。「上向き矢印」のボタンが押されると、再びサッカーに該当する９枚の画像が表示され、「下向き矢印」のボタンに戻る。
【００１７】
図２２に示すように、「サッカー」のキーワードで検索した場合、「サッカー」に該当する画像がヒットした「2015年12月5日（土）」よりも前において、「サッカー」に該当する画像がヒットした撮影年月日は、「2015年11月28日」である。
【００１８】
ここで、画像群に含まれる全ての画像が撮影時刻の順に表示される時系列画像の一覧画面に戻り、「2015年12月5日（土）」の画像群を見た場合に、時系列画像の一覧において、「2015年12月5日（土）」の次の画像の撮影年月日は、「2015年12月6日（日）」であり、「2015年12月5日（土）」の前の画像の撮影年月日は、「2015年12月4日（金）」であったとする。
【００１９】
このように、従来のオンラインフォトサービスには、画像群から、「サッカー」のキーワードで画像の検索を行った場合に、「サッカー」に該当する画像がある撮影日の画像を、その撮影日毎に表示する機能がある。
【００２０】
しかし、従来のオンラインフォトサービスには、例えばボタンを押すというワンアクションで、ヒットした撮影日の画像の一覧から、その中の１枚の画像の撮影時刻の前後に撮影された画像を時系列に表示させる機能は備えられていない。言い換えると、時系列画像の一覧において表示させたい撮影日をユーザが記憶しておき、時系列画像の一覧を表示させて、表示させたい撮影日へユーザが移動させなければならない。
【００２１】
本発明の目的は、画像の撮影時刻以外の条件で検索された画像の一覧の中の１の画像から、その１の画像の撮影時刻の前後に撮影された画像を時系列に表示させることができる画像処理装置、画像処理方法、プログラムおよび記録媒体を提供することにある。
【課題を解決するための手段】
【００２２】
上記目的を達成するために、本発明は、ユーザから入力された指示を取得する指示取得部と、
画像群の中から、ユーザからの指示に応じて入力された検索条件に一致する画像を検索画像として検索する画像検索部と、
画像群に含まれる画像を表示部に表示させる画像表示部と、
表示部に表示された画像の中から、ユーザからの指示に応じて選択された１の画像を指定する画像指定部と、を備え、
検索条件は、画像群の中から、撮影時刻以外の条件により画像を検索するための条件であり、
画像指定部は、表示部に表示された検索画像の中から、ユーザからの指示に応じて選択された１の検索画像を指定検索画像として指定し、
画像表示部は、指定検索画像が指定された場合に、指定検索画像のみを表示部に表示させた後、ユーザからの指示に応じて、指定検索画像と、画像群に含まれる、指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、を時系列画像として時系列により表示部に表示させる、画像処理装置を提供する。
【００２３】
ここで、画像表示部は、指定検索画像のみを表示部に表示させた後、ユーザからの指示が入力される毎に、検索画像の中から、指定検索画像の撮影時刻よりも前または後に撮影された１の検索画像のみを、指定検索画像の撮影時刻から時系列に撮影された検索画像の順に順次表示部に表示させることが好ましい。
【００２４】
また、画像指定部は、表示部に表示された時系列画像の中から、ユーザからの指示に応じて選択された１の時系列画像を指定時系列画像として指定し、
画像表示部は、指定時系列画像が指定された場合に、指定時系列画像のみを表示部に表示させた後、ユーザからの指示が入力される毎に、画像群の中から、指定時系列画像の撮影時刻よりも前または後に撮影された１の画像のみを、指定時系列画像の撮影時刻から時系列に撮影された画像の順に順次表示部に表示させることが好ましい。
【００２５】
また、画像検索部は、
画像群に含まれる画像に付与されたタグ情報を表示部に表示させるタグ情報表示部と、
表示部に表示されたタグ情報の中から、ユーザからの指示に応じて選択されたタグ情報を選択タグ情報として指定するタグ情報指定部と、
画像群の中から、選択タグ情報が付与された画像を検索画像として抽出する画像抽出部と、を備え、
タグ情報表示部は、画像群に含まれる全ての画像に付与された全てのタグ情報の少なくとも一部を表示部に表示させ、
タグ情報指定部は、表示部に表示されたタグ情報の中から、ユーザからの指示に応じて選択された１つ目のタグ情報を第１選択タグ情報として指定し、
画像抽出部は、画像群の中から、第１選択タグ情報が付与された画像を第１検索画像として抽出し、
画像表示部は、全ての第１検索画像の少なくとも一部を表示部に表示させ、
タグ情報表示部は、全ての第１検索画像に付与された全てのタグ情報の少なくとも一部を表示部に表示させることが好ましい。
【００２６】
また、タグ情報指定部は、第１選択タグ情報に加えて、表示部に表示されたタグ情報の中から、ユーザからの指示に応じて選択された２つ目のタグ情報を第２選択タグ情報として同時に指定し、
画像抽出部は、第１検索画像の中から、第２選択タグ情報が付与された第１検索画像を第２検索画像として抽出し、
画像表示部は、全ての第２検索画像の少なくとも一部を表示部に表示させ、
タグ情報表示部は、全ての第２検索画像に付与された全てのタグ情報の少なくとも一部を表示部に表示させることが好ましい。
【００２７】
また、タグ情報指定部は、表示部に表示されたタグ情報の中から、ユーザからの指示に応じて選択された２以上のタグ情報を選択タグ情報として同時に指定し、
画像抽出部は、画像群の中から、２以上の選択タグ情報の全てが付与された画像を検索画像として抽出し、
画像表示部は、全ての検索画像の少なくとも一部を表示部に表示させ、
タグ情報表示部は、全ての検索画像に付与された全てのタグ情報の少なくとも一部を表示部に表示させることが好ましい。
【００２８】
また、本発明は、指示取得部が、ユーザから入力された指示を取得するステップと、
画像検索部が、画像群の中から、ユーザからの指示に応じて入力された検索条件に一致する画像を検索画像として検索するステップと、
画像表示部が、画像群に含まれる画像を表示部に表示させるステップと、
画像指定部が、表示部に表示された画像の中から、ユーザからの指示に応じて選択された１の画像を指定するステップと、を含み、
検索条件は、画像群の中から、撮影時刻以外の条件により画像を検索するための条件であり、
表示部に表示された検索画像の中から、ユーザからの指示に応じて選択された１の検索画像を指定検索画像として指定し、
指定検索画像が指定された場合に、指定検索画像のみを表示部に表示させた後、ユーザからの指示に応じて、指定検索画像と、画像群に含まれる、指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、を時系列画像として時系列により表示部に表示させる、画像処理方法を提供する。
【００２９】
また、本発明は、上記の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムを提供する。
【００３０】
また、本発明は、上記の画像処理方法の各々のステップをコンピュータに実行させるためのプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【００３１】
また、本発明は、ユーザから入力された指示を取得する指示取得部と、
画像群の中から、ユーザからの指示に応じて入力された検索条件に一致する画像を検索画像として検索する画像検索部と、
画像群に含まれる画像を表示部に表示させる画像表示部と、
表示部に表示された画像の中から、ユーザからの指示に応じて選択された１の画像を指定する画像指定部と、を備え、
指示取得部、画像検索部、画像表示部および画像指定部は、ハードウェア、または、プログラムを実行するプロセッサであり、
検索条件は、画像群の中から、撮影時刻以外の条件により画像を検索するための条件であり、
画像指定部は、表示部に表示された検索画像の中から、ユーザからの指示に応じて選択された１の検索画像を指定検索画像として指定し、
画像表示部は、指定検索画像が指定された場合に、指定検索画像のみを表示部に表示させた後、ユーザからの指示に応じて、指定検索画像と、画像群に含まれる、指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、を時系列画像として時系列により表示部に表示させる、画像処理装置を提供する。
【００３２】
ここで、画像検索部は、
画像群に含まれる画像に付与されたタグ情報を表示部に表示させるタグ情報表示部と、
表示部に表示されたタグ情報の中から、ユーザからの指示に応じて選択されたタグ情報を選択タグ情報として指定するタグ情報指定部と、
画像群の中から、選択タグ情報が付与された画像を検索画像として抽出する画像抽出部と、を備え、
タグ情報表示部、タグ情報指定部および画像抽出部は、ハードウェア、または、プログラムを実行するプロセッサであり、
タグ情報表示部は、画像群に含まれる全ての画像に付与された全てのタグ情報の少なくとも一部を表示部に表示させ、
タグ情報指定部は、表示部に表示されたタグ情報の中から、ユーザからの指示に応じて選択された１つ目のタグ情報を第１選択タグ情報として指定し、
画像抽出部は、画像群の中から、第１選択タグ情報が付与された画像を第１検索画像として抽出し、
画像表示部は、全ての第１検索画像の少なくとも一部を表示部に表示させ、
タグ情報表示部は、全ての第１検索画像に付与された全てのタグ情報の少なくとも一部を表示部に表示させることが好ましい。
【発明の効果】
【００３３】
本発明によれば、ユーザは、１の検索画像の撮影時刻の前後に撮影された画像を表示させるために、一旦、画像の一覧画面に戻る必要はなく、ユーザからの指示に応じて、指定検索画像の撮影時刻の前後に撮影された画像を時系列に表示させて閲覧することができる。
【図面の簡単な説明】
【００３４】
【図１】本発明に係る画像処理システムの構成を表す一実施形態のブロック図である。
【図２】クライアントの構成を表す一実施形態のブロック図である。
【図３】クライアントの動作を表す一実施形態のフローチャートである。
【図４】クライアントの表示部に表示されたアプリのホーム画面を表す一実施形態の概念図である。
【図５】指定画像の閲覧画面を表す一実施形態の概念図である。
【図６】指定画像の情報の閲覧画面を表す一実施形態の概念図である。
【図７】指定画像の情報の編集画面を表す一実施形態の概念図である。
【図８】新規なタグ情報の入力画面を表す一実施形態の概念図である。
【図９】タグ情報の選択画面を表す一実施形態の概念図である。
【図１０】タグ情報の選択画面において、１つ目のタグ情報が選択された様子を表す一実施形態の概念図である。
【図１１】タグ情報の選択画面において、１つ目のタグ情報に応じてタグ情報の内容が更新された様子を表す一実施形態の概念図である。
【図１２】タグ情報の選択画面において、２つ目のタグ情報が選択された様子を表す一実施形態の概念図である。
【図１３】画像の一覧画面を表す一実施形態の概念図である。
【図１４】画像の一覧画面において、１の検索画像が選択された様子を表す一実施形態の概念図である。
【図１５】指定検索画像の閲覧画面を表す一実施形態の概念図である。
【図１６】時系列画像の一覧画面を表す一実施形態の概念図である。
【図１７】タグ情報の選択画面において、「タグを検索」のボタンがタップされた様子を表す一実施形態の概念図である。
【図１８】タグ情報の検索画面を表す一実施形態の概念図である。
【図１９】タグ情報の選択画面を表す一実施形態の概念図である。
【図２０】ユーザが所有する「2015/01/10」の画像群の中から選択された数枚の画像を用いて作成されたコラージュ画像を表す一例の概念図である。
【図２１】コラージュ画像で用いられている画像と同じ撮影日の「2015年1月10日（土）」の画像群を表す一例の概念図である。
【図２２】「サッカー」というキーワードに該当する画像を表す一例の概念図である。
【発明を実施するための形態】
【００３５】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像処理装置、画像処理方法、プログラムおよび記録媒体を詳細に説明する。
【００３６】
図１は、本発明に係る画像処理システムの構成を表す一実施形態のブロック図である。図１に示す画像処理システム１０は、サーバ１２と、ネットワーク１６を介して各々サーバ１２に接続された複数のクライアント１４と、を備えている。
【００３７】
サーバ１２は、画像処理システム１０を利用する複数のユーザの各々が所有する画像群を取得し、各々のユーザが所有する画像群に含まれる各々の画像を保持し、その画像を各々のユーザによって指定された共有相手のみと共有する機能等を有する。
サーバ１２は、１台に限らず、複数台であってもよく、制御装置、記憶装置および通信装置等を有する、ワークステーション等によって構成される。
【００３８】
クライアント１４は、本発明の画像処理装置であり、ユーザが所有する画像群の中から、検索条件に基づいて、より詳しくは画像に付与されたタグ情報を画像の検索条件として使用して画像を検索し、その検索の結果の画像を表示部に表示する機能等を有する。
クライアント１４は、制御装置、入力装置、記憶装置、通信装置およびディスプレイ等を有する、デスクトップPC（パーソナルコンピュータ）、ノートPC、タブレットPC、あるいは、携帯電話およびスマートフォン等の携帯端末等によって構成される。
以下、クライアント１４がスマートフォンの場合を例に挙げて説明する。
【００３９】
図２は、クライアントの構成を表す一実施形態のブロック図である。図２に示すクライアント１４は、指示取得部１８と、画像保持部２０と、画像解析部２２と、評価値付与部２４と、タグ情報付与部２６と、重み付け設定部２８と、タグ情報表示部３０と、タグ情報指定部３２と、画像抽出部３４と、タグ情報検索部３６と、画像表示部３８と、画像指定部４０と、画像情報表示部４２と、画像情報編集部４４と、表示部４６と、を備えている。
【００４０】
クライアント１４において、まず、指示取得部１８は、クライアント１４のユーザから入力された指示を取得する。
【００４１】
ユーザは、スマートフォンのタッチパネルをタッチ操作することにより各種の指示を入力することができる。なお、タッチパネルに限らず、マウス、キーボードおよびトラックパッド等の入力装置を利用して指示を入力することもできる。
ユーザからの指示には、詳細は後述するが、タグ情報を選択する指示、画像を選択する指示、画像に付与するタグ情報を入力する指示、タグ情報の検索条件（キーワード）を入力する指示、画像を表示部４６に表示させる指示等が含まれる。
【００４２】
続いて、画像保持部２０は、半導体メモリ等の記憶装置であり、画像群を保持する。
【００４３】
画像群は、ユーザによりスマートフォンのカメラを用いて撮影されたものであり、スマートフォンの内部に保持されている。なお、画像群は特に限定されず、例えば外部からスマートフォンの内部に取り込まれた画像群、および、SNS（Social Network System：ソーシャル・ネットワーク・システム）およびオンラインストレージ等に保持されたオンラインの画像群、およびこれらの画像群の組み合わせ等でもよい。
【００４４】
例えば、スマートフォンのカメラで撮影された画像は、スマートフォンからサーバ１２へ自動的にアップロードされるように設定することができる。サーバ１２へアップロードされた画像は、サーバ１２の記憶装置内における各々のユーザの記憶領域に保持される。サーバ１２へアップロードされた画像は、スマートフォンの画像保持部２０に残すように設定することもできるし、消去するように設定することもできる。
また、例えばデジタルカメラで撮影された画像、PC、ノートPC、タブレットPC等に保持されている画像、および写真プリント等からスキャンされた画像（デジタル画像データ）等は、スマートフォンの内部に取り込むことができる。外部からスマートフォンの内部に取り込まれた画像は、画像保持部２０に保持され、同様に画像群の一部として取り扱われる。
【００４５】
続いて、画像解析部２２は、画像群に含まれる各々の画像を解析する。
【００４６】
画像の解析項目は特に限定されないが、例えば画像に写っている被写体の検出（人物検出およびオブジェクト検出）、人物の顔の検出、人物の表情の検出、人物の行動の検出、シーンの検出（夜景、海、砂浜、空、…）、イベントの検出（運動会、結婚式、卒業式、…）およびユーザの嗜好（趣味）の検出等の画像内容の解析、画像の明るさ、色合い、コントラストおよびボケブレの程度等の画像の画質の解析、Exif（Exchangeable Image File Format）などの画像の付加情報に含まれる時間情報（撮影時刻）および位置情報（撮影場所）等の解析等を含む。
【００４７】
続いて、評価値付与部２４は、各々の画像の解析の結果に基づいて、各々の画像に評価値を付与する。
【００４８】
評価値付与部２４が画像に評価値を付与する方法は特に限定されないが、例えば画像の各々の解析の結果にスコアを付け、複数の解析の結果のスコアの総合スコアを算出し、この総合スコアを、その画像の評価値として付与することができる。
例えば、人物が笑顔である画像は、泣いている顔および怒っている顔等よりも高いスコアを付ける。また、明るさが適切な画像は、明るすぎる画像、および、暗すぎる画像よりも高いスコアを付ける。
また、評価値付与部２４は、後述するタグ情報の重み付けの設定に応じて、時間的に、より前に選択されたタグ情報が付与された画像よりも、より後に選択されたタグ情報が付与された画像の評価値を高く設定する。
【００４９】
続いて、タグ情報付与部２６は、各々の画像の解析の結果に基づいて、各々の画像にタグ情報を付与する。
【００５０】
タグ情報は、画像に関する各種の情報であり、例えば画像の撮影年月日および撮影場所、画像に写っている被写体の名称、被写体の行動の名称、画像から読み取られるシーン、イベント、人物の感情等を表す名称、および、ユーザの嗜好の名称等を例示することができる。タグ情報はテキスト情報であり、キーワードによってタグ情報を検索することが可能である。
タグ情報は、複数の下位概念のタグ情報を有する上位概念のタグ情報を含んでいてもよい。例えば、「モンブラン」および「いちごのショートケーキ」という２つの下位概念のタグ情報を有する「スイーツ」という上位概念のタグ情報を含んでいてもよい。
また、タグ情報は、タグ情報の信頼度を表す信頼度の情報を有していてもよい。自動で付与されたタグ情報の内容は正確ではない場合もあるが、信頼度の情報に基づいて、タグ情報の内容の正確さを判断することが可能になる。
タグ情報付与部２６は必須の構成要素ではないが、画像に予め付与されているタグ情報にさらにタグ情報を付与してもよいし、タグ情報が付与されていない画像に新たにタグ情報を付与してもよい。
【００５１】
続いて、重み付け設定部２８は、タグ情報に対して重み付けの設定をする。
【００５２】
重み付け設定部２８が、タグ情報に対して重み付けの設定を行う方法は特に限定されないが、ユーザが２以上のタグ情報を用いて画像を検索する場合、時間的に、より前に選択されたタグ情報よりも、より後に選択されたタグ情報の方が重要である可能性が高いと考えられる。これに応じて、重み付け設定部２８は、表示部４６に表示されたタグ情報の中から、ユーザからの指示に応じて同時に選択された２以上のタグ情報のうち、時間的に、より前に選択されたタグ情報よりも、より後に選択されたタグ情報の重み付けの設定を重く設定することができる。
【００５３】
続いて、タグ情報表示部３０は、画像群に含まれる画像に付与されたタグ情報を表示部４６に表示させる。
【００５４】
タグ情報表示部３０が、タグ情報を表示させる方法は特に限定されないが、例えば表示部４６に表示されたタグ情報を複数のカテゴリに分類して表示させることができる。これにより、タグ情報の種類毎に、タグ情報を分類して表示させることができるため、ユーザは、表示部４６に表示されたタグ情報の中から、画像の検索条件として使用したいタグ情報を容易に見つけることができる。
【００５５】
この場合、タグ情報表示部３０は、複数のカテゴリの少なくとも１つに含まれるタグ情報を、タグ情報が付与された画像の枚数が多い順に並べて表示させることができる。これにより、多くの画像に付与されたタグ情報を優先的に表示させることができる。なお、画像の撮影年月日等のように、連続する数字で表されるタグ情報は、数字の降順または昇順に並べて表示させてもよい。
【００５６】
また、タグ情報表示部３０は、複数のカテゴリの少なくとも１つに含まれるタグ情報を、画像を検索するためのキーワードとして使用された回数が多い順に並べて表示させてもよいし、タグ情報が、その信頼度の情報を有する場合、複数のカテゴリの少なくとも１つに含まれるタグ情報を、タグ情報が有する信頼度の情報に基づいて、タグ情報の信頼度が高い順に並べて表示させてもよい。
【００５７】
また、タグ情報表示部３０は、ユーザからの指示に応じて上位概念のタグ情報が選択された場合に、上位概念のタグ情報に含まれる複数の下位概念のタグ情報を表示部４６に表示させることができる。
また、タグ情報表示部３０は、タグ情報をボタン（リンク）として表示部（タッチパネル）４６に表示させることができる。これにより、ユーザは、タグ情報を容易に選択することができる。
【００５８】
続いて、タグ情報指定部３２は、表示部４６に表示されたタグ情報の中から、ユーザからの指示に応じて選択されたタグ情報を選択タグ情報として指定する。
また、タグ情報指定部３２は、表示部４６に表示された検索タグ情報の中から、ユーザからの指示に応じて選択された検索タグ情報を選択タグ情報として指定する。
【００５９】
続いて、画像抽出部３４は、画像群の中から、タグ情報指定部３２によって指定された選択タグ情報が付与された画像を検索画像として抽出する。
【００６０】
ここで、タグ情報表示部３０、タグ情報指定部３２および画像抽出部３４は、画像群の中から、ユーザからの指示に応じて入力された検索条件に一致する画像を検索画像として検索する本発明の画像検索部を構成する。
【００６１】
続いて、タグ情報検索部３６は、画像群に含まれる全ての画像に付与された全てのタグ情報の中から、ユーザからの指示に応じて入力されたキーワードと少なくとも一部が一致するタグ情報を検索タグ情報として検索する。
【００６２】
続いて、画像表示部３８は、画像群に含まれる画像を表示部４６に表示させる。
【００６３】
画像表示部３８は、例えば画像群に含まれる各々の画像、画像群に含まれる画像の一覧（サムネイル画像）、検索画像の一覧（サムネイル画像）等を表示する。
画像表示部３８は、画像の一覧または検索画像の一覧を表示部４６に表示させる場合、画像を、その撮影時刻の順に時系列に表示させることができる。また、画像群に含まれる各々の画像が、画像の評価値の情報を有する場合、画像表示部３８は、画像を、画像の評価値が高い順に表示部４６に表示させることもできる。
【００６４】
続いて、画像指定部４０は、表示部４６に表示された画像の中から、ユーザからの指示に応じて選択された１の画像を指定する。
【００６５】
ユーザは、表示部４６に表示された画像の一覧の中から、閲覧したい１の画像を選択することができる。１の画像が選択された場合、画像表示部３８により、この選択された１の画像のみが表示部４６に表示される。
【００６６】
続いて、画像情報表示部４２は、画像指定部４０によって指定された１の画像、つまり、ユーザからの指示に応じて選択された１の画像の情報を表示部４６に表示させる。
【００６７】
画像の情報には、その画像に関する各種の情報が含まれる。本実施形態の場合、画像の撮影時刻および画像に付与されたタグ情報が含まれる。なお、これに限定されず、画像のファイル名、画像のサイズ、解像度、撮影場所の情報等を含んでいてもよい。
【００６８】
続いて、画像情報編集部４４は、ユーザからの指示に応じて、画像情報表示部４２によって表示部４６に表示された１の画像の情報を編集する。
【００６９】
ユーザは、画像に付与されたタグ情報等を編集することができる。タグ情報付与部２６によって自動で付与されたタグ情報の中には正確ではないタグ情報が含まれる可能性もある。ユーザは、正確ではないと考えられるタグ情報を修正したり、削除したりすることができる。
また、ユーザは、画像に対して新規なタグ情報を付与することもできる。この場合、画像情報編集部４４は、ユーザからの指示に応じて入力された新規なタグ情報を、表示部４６に表示された１の画像の情報として１の画像に付与する。
【００７０】
続いて、表示部４６は、各種の情報を表示する。
【００７１】
表示部４６には、画像、画像の情報、画像の一覧、タグ情報の一覧等が表示される。表示部４６は、液晶パネル、有機ＥＬ（Electro Luminescence：エレクトロルミネッセンス）パネル等であり、本実施形態の場合、タッチパネルである。
【００７２】
次に、図３に示すフローチャートを参照しながら、クライアント１４において、検索条件として、画像に付与されたタグ情報を使用して、画像群の中から所望の画像を検索する場合の動作を説明する。
【００７３】
まず、１つ目のタグ情報が選択される場合の動作を説明する。
この場合、まず、タグ情報表示部３０により、画像群に含まれる全ての画像に付与された全てのタグ情報の少なくとも一部が表示部４６に表示される（ステップS1）。
タグ情報が表示部４６に表示されると、続いて、タグ情報指定部３２により、表示部４６に表示されたタグ情報の中から、ユーザからの指示に応じて選択された１つ目のタグ情報が第１選択タグ情報（選択タグ情報）として指定される（ステップS2）。
第１選択タグ情報が指定されると、続いて、画像抽出部３４により、画像群の中から、第１選択タグ情報が付与された画像が第１検索画像（検索画像）として抽出される（ステップS3）。
第１検索画像が抽出されると、続いて、画像表示部３８により、全ての第１検索画像の少なくとも一部が表示部４６に表示される（ステップS4）。
続いて、タグ情報表示部３０により、全ての第１検索画像に付与された全てのタグ情報の少なくとも一部が表示部４６に表示される（ステップS5）。
【００７４】
次に、１つ目のタグ情報に加えて、２つ目のタグ情報が同時に選択される場合の動作を説明する。
この場合、続いて、タグ情報指定部３２により、第１選択タグ情報に加えて、表示部４６に表示されたタグ情報の中から、ユーザからの指示に応じて選択された２つ目のタグ情報が第２選択タグ情報（選択タグ情報）として同時に指定される（ステップS6）。
続いて、画像抽出部３４により、第１検索画像の中から、第２選択タグ情報が付与された第１検索画像が第２検索画像（検索画像）として抽出される（ステップS7）。
続いて、画像表示部３８により、全ての第２検索画像の少なくとも一部が表示部４６に表示される（ステップS8）。
続いて、タグ情報表示部３０により、全ての第２検索画像に付与された全てのタグ情報の少なくとも一部が表示部４６に表示される（ステップS9）。
【００７５】
なお、３以上のタグ情報が同時に選択される場合の動作も同様である。つまり、２以上のタグ情報が同時に選択される場合の動作は以下の通りである。
まず、タグ情報指定部３２により、表示部４６に表示されたタグ情報の中から、ユーザからの指示に応じて選択された２以上のタグ情報が選択タグ情報として同時に指定される。
続いて、画像抽出部３４により、画像群の中から、２以上の選択タグ情報の全てが付与された画像が検索画像として抽出される。
続いて、画像表示部３８により、全ての検索画像の少なくとも一部が表示部４６に表示される。
続いて、タグ情報表示部３０により、全ての検索画像に付与された全てのタグ情報の少なくとも一部が表示部４６に表示される。
【００７６】
以下、本発明の画像処理装置について、クライアント１４がスマートフォン上で動作するアプリケーションプログラム（以下、単にアプリともいう）によって実現されている場合を例に挙げて説明する。
【００７７】
図４は、クライアントの表示部に表示されたアプリのホーム画面を表す一実施形態の概念図である。図４に示すスマートフォンの表示部４６はタッチパネルで構成されており、ユーザは、タッチパネルをタッチ操作することにより、表示部（タッチパネル）４６を、各種の情報を表示するだけでなく、ユーザから入力された各種の指示を取得する指示取得部１８としても使用することができる。
【００７８】
ホーム画面内の上部には、通知およびステータス領域５０が表示され、その下側には、メニュー領域５２が表示されている。また、ホーム画面内の下部には、ナビゲーション領域５４が表示されている。
【００７９】
ナビゲーション領域５４内には、左側から右側へ向かって順に、「さがす」、「まとめる」、「ホーム」、「共有する」および「いろいろ」の各ボタンが表示されている。
「さがす」のボタンがタップ（押下）されると、タグ情報の選択画面が表示部４６に表示される。
また、「まとめる」のボタンがタップされると、画像群に含まれる画像を用いてフォトアルバム等の合成画像が自動で作成される。
「ホーム」のボタンがタップされると、ホーム画面、つまり、画像群に含まれる画像の一覧が表示部４６に表示される。画像の一覧において、画像は、例えば撮影時刻の順序（降順または昇順）で並べて表示される。
「共有する」のボタンがタップされると、ユーザからの指示に応じて選択された画像が他のユーザと共有される。
「いろいろ」のボタンがタップされると、ナビゲーション領域には表示されていない、その他の各種の機能を選択して実行することができる。
【００８０】
メニュー領域５２とナビゲーション領域５４との間の領域には、画像の一覧が表示されている。画像の検索前に、検索条件としてタグ情報が何も選択されていない状態において、画像の一覧画面には、画像の一覧、例えば画像群に含まれる全ての画像の少なくとも一部が、画像の撮影時刻の順に、本実施形態の場合には撮影時刻の降順に、画像の一覧画面の上側から下側へ向かって時系列に表示されている。
【００８１】
ユーザは、図４に指印５６で示すように、画像の一覧画面に表示された画像の中から閲覧したい１の画像をタップすることにより、このタップされた１の画像のみを表示部４６に表示させて閲覧することができる。
【００８２】
この場合、画像指定部４０により、表示部４６に表示された画像の一覧の中から、ユーザからの指示に応じて選択された１の画像が指定画像として指定され、画像表示部３８により、指定画像のみが表示部４６に表示される。
【００８３】
図５は、指定画像の閲覧画面を表す一実施形態の概念図である。指定画像の閲覧画面は、表示部４６の全面に表示される。図５に示すように、指定画像の閲覧画面の左上部には、「×」のボタン５８が表示され、右下部には、「情報」のボタン６０が表示されている。指定画像の閲覧画面の下部には、「ゴミ箱」のボタン６２および「共有」のボタン６４等が表示されている。
【００８４】
例えば、ユーザは、「×」のボタン５８をタップすることにより、指定画像の閲覧画面を閉じて、画像の一覧画面（ホーム画面）に戻ることができる。また、ユーザは、「ゴミ箱」のボタン６２をタップして指定画像を削除したり、「共有」のボタン６４をタップして指定画像を他のユーザと共有したりすることができる。さらに、ユーザは、図５に指印５６で示すように、「情報」のボタン６０をタップすることにより、指定画像が裏返されて、指定画像の情報を閲覧することができる。
【００８５】
図６は、指定画像の情報の閲覧画面を表す一実施形態の概念図である。指定画像の情報の閲覧画面の左上部には、「×」のボタン６６が表示され、右上部には、「編集」のボタン６８が表示されている。また、指定画像の情報の閲覧画面の上部には、指定画像のサムネイル画像が表示され、その下側には、指定画像の撮影時刻、自動で付いたタグ、自分で付けたタグ、および、「タグを追加」のボタン７０がこの順序で表示されている。
【００８６】
自動で付いたタグは、カレンダー、人物、撮影場所、自動付与タグ、サービスタグの各カテゴリに分類され、自分で付けたタグは、手動付与タグのカテゴリに分類されている。
カレンダーのカテゴリには、指定画像の撮影年および撮影月として、「２０１８」および「１２月」のタグ情報のボタンが含まれている。
人物のカテゴリには、「たろう」のタグ情報のボタンが含まれている。
撮影場所のカテゴリには、「公園」、「港区」および「お台場海浜公園」のタグ情報のボタンが含まれている。
自動付与タグのカテゴリには、「屋外」、「男の子」および「晴れ」のタグ情報のボタンが含まれている。
スキャンタグのカテゴリには、「スキャンサービス」のタグ情報のボタンが含まれている。
手動付与タグのカテゴリには、「キッズコーデ」のタグ情報のボタンが含まれている。
【００８７】
例えば、ユーザは、「×」のボタン６６をタップすることにより、指定画像の情報の閲覧画面を閉じて、指定画像の閲覧画面に戻ることができる。また、ユーザは、指印５６で示すように、「編集」のボタン６８をタップすることにより、指定画像の情報を編集することができる。
【００８８】
図７は、指定画像の情報の編集画面を表す一実施形態の概念図である。図７に示す指定画像の情報の編集画面の左上部には、「キャンセル」のボタン７２が表示され、右上部には、「保存」のボタン７４が表示されている。
【００８９】
指定画像の情報の閲覧画面において、「編集」のボタン６８がタップされた場合、指定画像の情報の編集画面において、削除可能なタグ情報のボタン内には、「×」のボタンが表示される。ユーザによりタグ情報のボタン内の「×」のボタンがタップされた場合、画像情報編集部４４により、そのタグ情報のボタンは削除される。また、図７に指印５６で示すように、ユーザにより「タグを追加」のボタン７０がタップされた場合、新規なタグ情報の入力画面が表示される。
【００９０】
指定画像の情報の編集画面において、「キャンセル」のボタン７２がタップされた場合、指定画像の情報に対する編集内容が破棄され、指定画像の情報の閲覧画面に戻る。「保存」のボタン７４がタップされた場合、指定画像の情報に対する編集内容が保存される。
【００９１】
図８は、新規なタグ情報の入力画面を表す一実施形態の概念図である。図８に示す新規なタグ情報の入力画面の上部には、指定画像のサムネイル画像が表示され、その下側には、新規なタグ情報の入力欄７６が表示されている。新規なタグ情報の入力欄７６には、新規なタグ情報の入力を促すための「タグを追加」というメッセージが表示されている。新規なタグ情報の入力欄７６の右側には、「キャンセル」のボタン７８が表示されている。
【００９２】
ユーザにより、新規なタグ情報の入力欄７６がタップされた場合、新規なタグ情報の入力欄７６の下側には、最近付与した新規なタグ情報の履歴が表示され、新規なタグ情報の入力画面の下部には、ソフトウェアキーボードが表示される。ユーザは、ソフトウェアキーボードを使用して、新規なタグ情報の入力欄７６に、新規なタグ情報の名称を入力することができる。
【００９３】
この場合、ユーザが新規なタグ情報の入力欄７６に文字を入力する毎に、部分一致検索が行われ、画像群に含まれる全ての画像に付与された全てのタグ情報の中から、新規なタグ情報の入力欄７６に入力された文字に部分一致するタグ情報が検索されて新規なタグ情報の入力画面内に表示される。ユーザは、新規なタグ情報の入力画面内に表示されたタグ情報の一覧の中から、新規なタグ情報を選択することもできる。
【００９４】
ユーザにより、「キャンセル」のボタン７８がタップされた場合、新規なタグ情報の入力画面が閉じられ、指定画像の情報の編集画面に戻る。
【００９５】
続いて、タグ情報の選択画面について説明する。
前述の通り、「さがす」のボタンがタップされると、タグ情報の選択画面が表示部４６に表示される。
【００９６】
図９は、タグ情報の選択画面を表す一実施形態の概念図である。タグ情報の選択画面は、画像の一覧画面内の上側の一部の領域以外の領域の上層に重ねて下層の画像の一覧が一定の透過率で透過して見えるように表示されている。タグ情報が選択されていない状態において、タグ情報の選択画面には、画像群に含まれる全ての画像に付与された全てのタグ情報の一部が複数のカテゴリに分類されて表示されている。それぞれのタグ情報は、ボタンとしてタグ情報の選択画面内に表示されている。また、タグ情報の選択画面内の下部には、「タグを検索」のボタン８０が表示されている。
【００９７】
複数のカテゴリには、カレンダー、人物、撮影場所、自動付与タグ、手動付与タグ、サービスタグの各カテゴリが含まれている。
カレンダーのカテゴリには、画像の撮影年および撮影月のタグ情報のボタンが含まれる。
人物のカテゴリには、画像に写っている人物の名称のタグ情報のボタンが含まれる。
撮影場所のカテゴリには、画像が撮影された場所のタグ情報のボタンが含まれる。
自動付与タグのカテゴリには、タグ情報付与部２６によって自動で付与されたタグ情報のボタンが含まれる。
手動付与タグのカテゴリには、ユーザによって手動で付与されたタグ情報のボタン、つまり、画像情報編集部４４によって付与されたタグ情報のボタンが含まれる。
サービスタグのカテゴリには、例えばプリントをスキャンしてデジタル画像データを作成するなどのように、本発明に係る画像処理システム１０によって提供されるサービスに関連するタグ情報のボタンが含まれる。
【００９８】
タグ情報の選択画面において、カレンダーのカテゴリには、画像の撮影年として、「２０１８」、「２０１７」および「２０１６」のタグ情報のボタンがこの順序で左側から右側へ向かって表示され、画像の撮影月として、「１２月」、「１１月」、「１０月」および「９月」のタグ情報のボタンがこの順序で左側から右側へ向かって表示されている。
人物のカテゴリには、人物の名称として、「たかし」、「あきら」および「富士花子」のタグ情報のボタンがこの順序で左側から右側へ向かって表示されている。
撮影場所のカテゴリには、タグ情報が含まれていない。
自動付与タグのカテゴリには、「自転車」、「ラーメン」および「飲み会」のタグ情報のボタンがこの順序で左側から右側へ向かって表示されている。
手動付与タグのカテゴリには、「サークル」、「今日のランチ」および「絶景」のタグ情報のボタンがこの順序で左側から右側へ向かって表示されている。
サービスタグのカテゴリには、「スキャン画像」のタグ情報のボタンが表示されている。
【００９９】
カレンダーのカテゴリ以外の他の各カテゴリに含まれるタグ情報のボタンは、横一列に並べて表示されている。カレンダーのカテゴリには、画像の撮影年および撮影月のタグ情報のボタンがそれぞれ横一列に並べて、撮影年および撮影月の数字の降順に表示されている。その他の各カテゴリに含まれるタグ情報のボタンは、各々のタグ情報が付与された画像の枚数が多い順に表示されている。
【０１００】
なお、各々のカテゴリにおいて、左右方向に全てを表示できない数のタグ情報が含まれている場合、ユーザは、各々のカテゴリに含まれるタグ情報のボタンをタップした状態で左方向または右方向にスワイプすることにより、タグ情報の選択画面に表示されたタグ情報のボタンを外側へ押し出し、かつタグ情報の選択画面に表示されていないタグ情報のボタンをタグ情報の選択画面内へ移動して表示させることができる。
【０１０１】
ユーザは、画像を検索するために、キーワードをタイプして入力する必要はなく、表示部４６に表示されているタグ情報の中から、検索したい所望の画像に対応するタグ情報をタップして選択することができるため、直感的に検索を行うことができる。
【０１０２】
ここで、ユーザにより、検索条件としてタグ情報が何も選択されていない状態において、図１０に指印５６で示すように、タグ情報の選択画面に表示されたタグ情報のボタンの中から１つ目のタグ情報として、「自転車」のタグ情報のボタンがタップされたとする。
【０１０３】
この場合、タグ情報指定部３２により、ユーザからの指示に応じて選択された「自転車」のタグ情報のボタンに対応する「自転車」のタグ情報が第１選択タグ情報として指定される。また、タグ情報表示部３０により、「自転車」のタグ情報のボタンの色が変更され、かつ、タグ情報の選択画面によって覆われていない画像の一覧画面の上部の領域内の左側に「自転車」と表示される。
【０１０４】
続いて、画像抽出部３４により、画像群の中から、第１選択タグ情報である「自転車」のタグ情報が付与された画像が第１検索画像として抽出され、画像表示部３８により、全ての第１検索画像の少なくとも一部が画像の一覧画面に表示される。
【０１０５】
また、図１１に示すように、タグ情報表示部３０により、全ての第１検索画像に付与された全てのタグ情報の少なくとも一部がタグ情報の選択画面に表示される。つまり、タグ情報の選択画面に表示されたタグ情報の内容が更新される。
【０１０６】
本実施形態の場合、カレンダーのカテゴリは、画像の撮影年として、「２０１８」、「２０１７」および「２０１６」から「２０１８」および「２０１７」のタグ情報のボタンに変更される。
また、人物のカテゴリは、「たかし」、「あきら」および「富士花子」から「たかし」、「あきら」および「山田さん」のタグ情報のボタンに変更される。
自動付与タグのカテゴリは、「自転車」、「ラーメン」および「飲み会」から「自転車」、「山」および「ガードレール」のタグ情報のボタンに変更される。
手動付与タグのカテゴリは、「サークル」、「今日のランチ」および「絶景」から「サークル」、「絶景」および「チャリ旅」のタグ情報のボタンに変更される。
【０１０７】
つまり、タグ情報の選択画面に表示されたタグ情報のボタンの中から、「自転車」のタグ情報のボタンのみが選択された場合、画像群の中から、「自転車」のタグ情報が付与された検索画像のみに絞り込まれ、かつ、画像群に含まれる全ての画像に付与された全てのタグ情報の中から、「自転車」のタグ情報が付与された全ての検索画像に付与された全てのタグ情報のみに絞り込まれる。
【０１０８】
続いて、図１２に指印５６で示すように、ユーザにより、タグ情報の選択画面に表示されたタグ情報のボタンの中から、１つ目の「自転車」のタグ情報のボタンに加えて、２つ目のタグ情報として、「チャリ旅」のタグ情報のボタンがタップされたとする。つまり、「自転車」のタグ情報のボタンが選択された状態において、さらに「チャリ旅」のタグ情報のボタンが追加で選択され、同時に２つのタグ情報が選択されたとする。
【０１０９】
この場合、タグ情報指定部３２により、１つ目の「自転車」のタグ情報に加えて、ユーザからの指示に応じて選択された「チャリ旅」のタグ情報のボタンに対応する２つ目の「チャリ旅」のタグ情報が第２選択タグ情報として指定される。つまり、「自転車」および「チャリ旅」のタグ情報の両方が選択タグ情報として同時に指定される。また、タグ情報表示部３０により、「自転車」のタグ情報のボタンに加えて、「チャリ旅」のタグ情報のボタンの色が変更され、かつ、タグ情報の選択画面によって覆われていない画像の一覧画面の上部の領域内に表示された「自転車」の右側に「チャリ旅」と表示される。
【０１１０】
続いて、画像抽出部３４により、「自転車」のタグ情報が付与された第１検索画像の中から、「チャリ旅」のタグ情報が付与された第１検索画像が第２検索画像として抽出され、図１３に示すように、画像表示部３８により、第２検索画像の少なくとも一部が画像の一覧画面に表示される。
また、図示省略するが、タグ情報表示部３０により、全ての第２検索画像に付与された全てのタグ情報の少なくとも一部がタグ情報の選択画面に表示される。
【０１１１】
つまり、「自転車」および「チャリ旅」の両方のタグ情報のボタンが同時に選択された場合、画像群の中から、「自転車」および「チャリ旅」の両方のタグ情報が付与された検索画像のみに絞り込まれ、かつ、画像群に含まれる全ての画像に付与された全てのタグ情報の中から、「自転車」および「チャリ旅」の両方のタグ情報が付与された全ての検索画像に付与された全てのタグ情報のみに絞り込まれる。
【０１１２】
ユーザは、タグ情報の選択画面の上部に表示された下向きの矢印９２を下方向へスワイプすることにより、いつでもタグ情報の選択画面を閉じることができる。タグ情報の選択画面が閉じられた場合、図１３に示すように、タグ情報の選択画面によって覆われていた領域の画像の一覧画面が表示される。これにより、ユーザは、検索画像の一覧を閲覧することができる。
【０１１３】
画像の一覧画面において、全てを表示できない数の検索画像が含まれている場合、ユーザは、画像の一覧画面に表示された検索画像を上下方向にスワイプして検索画像を上下方向へ移動させることにより、画像の一覧画面に表示された検索画像の一部を外側へ押し出し、かつ画像の一覧画面に表示されていない検索画像の一部を画像の一覧画面内へ移動して表示させることができる。
【０１１４】
また、タグ情報の選択画面が閉じられた場合、図１３に示すように、タグ情報の選択画面の上部には、上向きの矢印９４が表示される。ユーザは、この上向きの矢印９４を上方向へスワイプすることにより、いつでもタグ情報の選択画面を開くことができる。タグ情報の選択画面は、本実施形態の場合、図９〜１２に示す全開状態、図１３に示す全閉状態、およびその中間位置の３段階に切り替えることができる。なお、タグ情報の選択画面を３段階以上の多段階に切り替えてもよい。
【０１１５】
また、ユーザは、画像の一覧画面が表示された状態で、「さがす」のボタンをタップすることにより、いつでもタグ情報の選択画面を表示させることができる。あるいは、ユーザは、「自転車」および「チャリ旅」の２つのタグ情報が選択された状態において、さらに他のタグ情報のボタンを追加で選択して、さらにタグ情報を絞り込むことにより、さらに画像を絞り込むこともできる。
【０１１６】
選択タグ情報として指定された「自転車」および「チャリ旅」の２つのタグ情報は、タグ情報指定部３２により、ユーザからの指示に応じて、選択タグ情報としての指定が解除されるまで、選択タグ情報としての指定が維持される。
例えば、タグ情報の選択画面において「解除」のボタンを設けておき、ユーザが「解除」のボタンをタップすることにより、選択タグ情報として指定された「自転車」および「チャリ旅」の２つのタグ情報の選択を一括で解除できるようにしてもよい。
【０１１７】
また、ユーザは、タグ情報のボタンをタップする毎に、そのタグ情報の選択タグ情報としての選択と解除とを切り替えることができる。
この場合、タグ情報指定部３２により、ユーザからの指示に応じて、ボタンが押下される毎に、ボタンに対応するタグ情報の選択タグ情報としての指定と、ボタンに対応するタグ情報の選択タグ情報としての指定の解除と、が切り替えられる。
【０１１８】
言い換えると、タグ情報の選択は、解除されるまで維持されるため、タグ情報の選択が維持された状態で、つまり、選択されたタグ情報を用いて画像の検索が行われた後、他の表示画面へ切り替えられ、再びタグ情報の選択画面に切り替えられて戻ってきた場合、選択されたタグ情報を用いて検索された結果である検索画像をいつでも閲覧することができる。
【０１１９】
また、ユーザは、タグ情報がボタンとして表示部４６に表示された状態において、１のタグ情報のボタンを長押し（ロングタップ）することにより、長押しされた１のボタンのタグ情報の上位概念のタグ情報を選択することができる。
【０１２０】
この場合、表示部４６に表示されたタグ情報のボタンの中から、ユーザからの指示に応じて選択された１のタグ情報のボタンが一定時間以上押下された場合に、タグ情報指定部３２により、押下された１のタグ情報のボタンに対応するタグ情報の上位概念のタグ情報に含まれる全ての下位概念のタグ情報が選択タグ情報として指定される。
例えば、「モンブラン」のタグ情報のボタンが長押しされた場合、「モンブラン」の上位概念である全ての「スイーツ」のタグ情報が選択される。
【０１２１】
あるいは、タグ情報指定部３２により、表示部４６に表示されたタグ情報の中から、ユーザからの指示に応じて１のタグ情報が選択された場合に、既に指定されている他のタグ情報の指定を解除し、選択された１のタグ情報のみを選択タグ情報として指定してもよい。
【０１２２】
続いて、ユーザは、図１４に指印５６で示すように、画像の一覧画面に表示された検索画像の中から閲覧したい１の検索画像をタップすることにより、このタップされた１の検索画像のみを表示部４６に表示させて閲覧することができる。
【０１２３】
この場合、画像指定部４０により、表示部４６に表示された検索画像の中から、ユーザからの指示に応じて選択された１の検索画像が指定検索画像として指定され、画像表示部３８により、指定検索画像のみが表示部４６に表示される。
【０１２４】
図１５は、指定検索画像の閲覧画面を表す一実施形態の概念図である。指定検索画像の閲覧画面は、表示部４６の全面に表示される。図１５に示す指定検索画像の閲覧画面の左上部には、「×」のボタン５８が表示され、左下部には、「カレンダー」のボタン８２が表示され、右下部には、「情報」のボタン６０が表示されている。指定検索画像の閲覧画面の下部には、「ゴミ箱」のボタン６２、「共有」のボタン６４および「その他」のボタン８４が表示されている。
指定検索画像の閲覧画面は、その左下部に、「カレンダー」のボタン８２が表示されていること以外、指定画像の閲覧画面と同じ構成である。
【０１２５】
例えば、ユーザは、「×」のボタン５８をタップすることにより、指定検索画像の閲覧画面を閉じて、検索画像の一覧画面に戻ることができる。また、ユーザは、「ゴミ箱」のボタン６２をタップして指定検索画像を削除したり、「共有」のボタン６４をタップして指定検索画像を他のユーザと共有したり、「その他」のボタン８４をタップしてその他の機能を実行したりすることができる。さらに、ユーザは、「情報」のボタン６０をタップすることにより、指定検索画像の情報を閲覧することができる。
【０１２６】
また、ユーザは、検索画像を１枚ずつ順次表示させて閲覧することができる。
この場合、指定検索画像のみが表示部４６に表示された後、画像表示部３８により、ユーザからの指示が入力される毎に、全ての検索画像の中から、指定検索画像の撮影時刻よりも前または後に撮影された１の検索画像のみが、指定検索画像の撮影時刻から時系列に撮影された検索画像の順に順次表示部４６に表示される。
【０１２７】
例えば、ユーザにより、指定検索画像が右側へスワイプされた場合、全ての検索画像の中から、指定検索画像よりも１つ前の撮影時刻に撮影された１の検索画像のみが表示される。これ以後、ユーザの指示に応じて検索画像が右側へスワイプされる毎に、指定検索画像の撮影時刻から時系列に撮影された検索画像の順に、１つずつ前の１の検索画像のみが順次表示される。
【０１２８】
一方、ユーザにより、指定検索画像が左側へスワイプされた場合、全ての検索画像の中から、指定検索画像よりも１つ後の撮影時刻に撮影された１の検索画像のみが表示される。これ以後、ユーザの指示に応じて検索画像が左側へスワイプされる毎に、指定検索画像の撮影時刻から時系列に撮影された検索画像の順に、１つずつ後の１の検索画像のみが順次表示される。
【０１２９】
また、ユーザは、図１５に示すように、検索画像の閲覧画面に表示された「カレンダー」のボタン８２をタップすることにより、画像群の中から、指定検索画像の撮影時刻の前後に撮影された画像を表示部４６に表示させて閲覧することができる。
この場合、指定検索画像が指定された場合に、指定検索画像のみが表示部４６に表示された後、画像表示部３８により、ユーザからの指示に応じて、指定検索画像と、画像群に含まれる、指定検索画像の撮影時刻の前後に撮影された画像の少なくとも一部と、が時系列画像として時系列により表示部４６に表示される。
【０１３０】
このように、ユーザは、１の検索画像の撮影時刻の前後に撮影された画像を表示させるために、一旦、ホーム画面等の画像の一覧画面に戻る必要はなく、ユーザからの指示に応じて、本実施形態の場合には、「カレンダー」のボタン８２をタップするというワンアクションで、指定検索画像の撮影時刻の前後に撮影された画像を時系列に表示させて閲覧することができる。
【０１３１】
ここで、ユーザからの指示に応じて、例えばホーム画面等の画像の一覧画面に戻って、指定検索画像の撮影時刻の前後に撮影された画像を時系列に表示させれば同じことができる。しかし、このような操作方法では、スマートフォンに数年分という大量の画像群が保存されている場合、ホーム画面等の画像の一覧画面において、所望の画像の撮影日まで何年分もの画像群の間を移動することをユーザに強いることになる。
【０１３２】
これに対し、本実施形態の画像処理装置を使用することにより、「カレンダー」のボタン８２をタップするというワンアクションで、指定検索画像の撮影時刻の前後に撮影された画像を時系列に表示させて閲覧することが可能となり、従来の技術を使用して、前述のように、ホーム画面等の画像の一覧画面に戻って、指定検索画像の撮影時刻の前後に撮影された画像を時系列に表示させる場合と比較して大変便利である。
【０１３３】
図１６は、時系列画像の一覧画面を表す一実施形態の概念図である。時系列画像の一覧画面は、メニュー領域５２とナビゲーション領域５４との間の領域に表示される。
【０１３４】
同様に、ユーザは、時系列画像の一覧画面に表示された時系列画像の中から閲覧したい１の時系列画像をタップすることにより、このタップされた１の時系列画像のみを表示部４６に表示させて閲覧することができる。
この場合、画像指定部４０により、表示部４６に表示された時系列画像の中から、ユーザからの指示に応じて選択された１の時系列画像が指定時系列画像として指定され、画像表示部３８により、指定時系列画像のみが表示部４６に表示される。
【０１３５】
また、指定時系列画像が指定された場合に、指定時系列画像のみが表示部４６に表示された後、画像表示部３８により、ユーザからの指示が入力される毎に、画像群の中から、指定時系列画像の撮影時刻よりも前または後に撮影された１の画像のみが、指定時系列画像の撮影時刻から時系列に撮影された画像の順に順次表示部４６に表示される。
指定時系列画像が右側または左側へスワイプされた場合の動作は、指定検索画像が右側または左側へスワイプされる場合の動作と同様である。
【０１３６】
なお、「カレンダー」のボタン８２を設ける代わりに、特定のタッチ操作により「カレンダー」のボタン８２と同等の機能が果たせるようにしてもよい。
【０１３７】
ユーザは、時系列画像の一覧画面において、「ホーム」のボタンをタップすることにより、検索画像の一覧画面に戻ることができる。
前述の通り、タグ情報の選択は、解除されるまで維持されるため、検索画像の一覧画面に戻ってきた場合、選択されたタグ情報を用いて検索された結果である検索画像の一覧が検索画像の一覧画面に表示される。
【０１３８】
なお、時系列画像を表示部４６に表示させる前において、画像群の中から画像を検索するための検索条件は、画像群の中から、画像の撮影時刻以外の条件により画像を検索するための条件であれば特に限定されない。
画像の撮影時刻の条件とは、画像の撮影時刻だけでなく、画像の撮影年、撮影月、撮影週、撮影日および撮影時刻等のように、画像の撮影時刻に関する各種の条件を含み、画像の撮影時刻以外の条件は、画像の撮影時刻に関する条件以外のあらゆる条件を含む。
検索条件としては、画像解析部２２による画像の解析内容、および、タグ情報付与部２６により付与されたタグ情報の名称等を使用することができ、画像に写っている被写体の名称（人物名およびオブジェクト名）、人物の表情の名称、人物の行動の名称、人物の感情の名称、シーン名、イベント名、ユーザの嗜好の名称、撮影場所名等を例示することができる。
【０１３９】
また、ユーザは、タグ情報の選択画面において、検索条件として使用したいタグ情報のボタンを見るけることができない場合、図１７に指印５６で示すように、「タグを検索」のボタン８０をタップすることにより、キーワードを入力してタグ情報を検索することができる。
【０１４０】
「タグを検索」のボタン８０がタップされた場合、図１８に示すように、タグ情報の検索画面が表示部４６に表示される。
【０１４１】
タグ情報の検索画面は、画像の一覧画面の上側の一部の領域以外の領域の上層に重ねて下層の検索画像の一覧が一定の透過率で透過して見えるように表示される。タグ情報の検索画面の上部には、キーワードの入力欄８６が表示されている。キーワードの入力欄８６には、キーワードの入力を促すための「タグを検索」というメッセージが表示されている。キーワードの入力欄８６内の右端部には、「×」のボタン８８が表示され、キーワードの入力欄８６の右側には、「キャンセル」のボタン９０が表示されている。
【０１４２】
続いて、ユーザにより、キーワードの入力欄８６にキーワードが入力されたとする。
【０１４３】
この場合、タグ情報検索部３６により、画像群に含まれる全ての画像に付与された全てのタグ情報の中から、ユーザの中からの指示に応じて入力されたキーワードと少なくとも一部が一致するタグ情報が検索タグ情報として検索される。
続いて、タグ情報表示部３０により、検索タグ情報の少なくとも一部が表示部４６に表示される。
続いて、タグ情報指定部３２により、表示部４６に表示された検索タグ情報の中から、ユーザからの指示に応じて選択された１の検索タグ情報が指定される。
続いて、画像抽出部３４により、画像群の中から、１の検索タグ情報が付与された画像が検索画像として抽出される。
続いて、画像表示部３８により、全ての検索画像の少なくとも一部が表示部４６に表示される。
続いて、タグ情報表示部３０により、全ての検索画像に付与された全てのタグ情報の少なくとも一部が表示部４６に表示される。
【０１４４】
例えば、図１８に示すように、「アイスクリーム」のタグ情報を検索するために、キーワードの入力欄８６に「あ」が入力された場合、部分一致検索が行われ、画像群に含まれる全ての画像に付与された全てのタグ情報の中から、「あ」に部分一致するタグ情報が検索タグ情報として検索される。
【０１４５】
続いて、検索タグ情報の候補として、図１８に示すように、タグ情報の検索画面において、例えば「あいちゃん」、「あーちゃん」、「あまおう」および「アイスクリーム」のタグ情報のボタンがこの順序で上側から下側へ向かって表示される。
【０１４６】
タグ情報の検索画面において、全てを表示できない数の検索タグ情報が含まれている場合、ユーザは、タグ情報の検索画面に表示された検索タグ情報を上下方向にスワイプして検索タグ情報の候補の一覧を上下方向へ移動させることにより、タグ情報の検索画面に表示された検索タグ情報の一部を外側へ押し出し、かつタグ情報の検索画面に表示されていない検索タグ情報の一部をタグ情報の検索画面内へ移動して表示させることができる。
【０１４７】
また、ユーザは、「×」のボタン８８をタップすることにより、入力欄８６に入力されたキーワードを一括で削除することができる。また、「キャンセル」のボタン９０をタップすることにより、タグ情報の検索画面を閉じてタグ情報の選択画面へ戻ることができる。さらに、ユーザは、タグ情報の検索画面の上部に表示された下向きの矢印９６をスワイプすることにより、いつでもタグ情報の検索画面を閉じることができる。
【０１４８】
続いて、ユーザにより、図１８に指印５６で示すように、タグ情報の検索画面に表示された検索タグ情報の候補のボタンの中から、例えば「アイスクリーム」のタグ情報のボタンがタップされたとする。
【０１４９】
この場合、図１９に示すように、タグ情報の選択画面が表示部４６に表示される。これ以降の動作は、タグ情報が何も選択されていない状態において、「自転車」のタグ情報のボタンが選択された後の状態の場合と同様である。
【０１５０】
つまり、「アイスクリーム」のタグ情報が選択タグ情報として指定され、図１９に示すように、タグ情報の選択画面によって覆われていない画像の一覧画面の上部の領域の左側に「アイスクリーム」と表示される。
続いて、画像群の中から、選択タグ情報である「アイスクリーム」のタグ情報が付与された画像が検索画像として抽出され、検索画像が画像の一覧画面に表示される。
また、選択タグ情報である「アイスクリーム」のタグ情報が付与された検索画像に付与された全てのタグ情報がタグ情報の選択画面に表示される。
【０１５１】
これ以降の動作は、「自転車」のタグ情報のボタンが選択された状態において、さらに「チャリ旅」のタグ情報のボタンが追加でタップされる場合と同様であり、ユーザは、検索条件として使用したいタグ情報のボタンを追加で選択することができる。
【０１５２】
なお、ユーザにより、新たな画像が撮影されたり、画像に新たなタグ情報が付与されたり、あるいは、画像に既に付与されているタグ情報が削除されたりした場合、これらの新たな画像、新たなタグ情報、削除されたタグ情報等に基づいて、例えばAI（Artificial Intelligence：人工知能）等を利用した機械学習により、タグ情報の信頼度を向上させるようにしてもよい。
【０１５３】
また、例えば画像の解析、評価値の付与、タグ情報の付与、重み付けの設定、画像の抽出およびタグ情報の検索等のようなクライアント１４が備える機能の少なくとも一部をサーバ１２が備え、サーバ１２が少なくとも一部の機能を実行するようにしてもよい。
【０１５４】
本発明の装置において、例えば指示取得部１８、画像解析部２２、評価値付与部２４、タグ情報付与部２６、重み付け設定部２８、タグ情報表示部３０、タグ情報指定部３２、画像抽出部３４、タグ情報検索部３６、画像表示部３８、画像指定部４０、画像情報表示部４２および画像情報編集部４４等の各種の処理を実行する処理部（Processing Unit）のハードウェア的な構成は、専用のハードウェアであってもよいし、プログラムを実行する各種のプロセッサまたはコンピュータであってもよい。
【０１５５】
各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理をさせるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
【０１５６】
１つの処理部を、これら各種のプロセッサのうちの１つで構成してもよいし、同種または異種の２つ以上のプロセッサの組み合わせ、例えば、複数のＦＰＧＡの組み合わせ、または、ＦＰＧＡおよびＣＰＵの組み合わせ等によって構成してもよい。また、複数の処理部を、各種のプロセッサのうちの１つで構成してもよいし、複数の処理部のうちの２以上をまとめて１つのプロセッサを用いて構成してもよい。
【０１５７】
例えば、サーバおよびクライアント等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。また、システムオンチップ（System on Chip：ＳｏＣ）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。
【０１５８】
さらに、これらの各種のプロセッサのハードウェア的な構成は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（Circuitry）である。
【０１５９】
また、本発明の方法は、例えば、その各々のステップをコンピュータに実行させるためのプログラムにより実施することができる。また、このプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供することもできる。
【０１６０】
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０１６１】
１０  画像処理システム
１２  サーバ
１４  クライアント
１６  ネットワーク
１８  指示取得部
２０  画像保持部
２２  画像解析部
２４  評価値付与部
２６  タグ情報付与部
２８  重み付け設定部
３０  タグ情報表示部
３２  タグ情報指定部
３４  画像抽出部
３６  タグ情報検索部
３８  画像表示部
４０  画像指定部
４２  画像情報表示部
４４  画像情報編集部
４６  表示部
５０  通知およびステータス領域
５２  メニュー領域
５４  ナビゲーション領域
５６  指印
５８、６６、８８  「×」のボタン
６０  「情報」のボタン
６２  「ゴミ箱」のボタン
６４  「共有」のボタン
６８  「編集」のボタン
７０  「タグを追加」のボタン
７２、７８、９０  「キャンセル」のボタン
７４  「保存」のボタン
７６  新規なタグ情報の入力欄
８０  「タグを検索」のボタン
８２  「カレンダー」のボタン
８４  「その他」のボタン
８６  キーワードの入力欄
９２、９４、９６  矢印
【図１】
2020135658.tif 000003
【図２】
2020135658.tif 000004
【図３】
2020135658.tif 000005
【図４】
2020135658.tif 000006
【図５】
2020135658.tif 000007
【図６】
2020135658.tif 000008
【図７】
2020135658.tif 000009
【図８】
2020135658.tif 000010
【図９】
2020135658.tif 000011
【図１０】
2020135658.tif 000012
【図１１】
2020135658.tif 000013
【図１２】
2020135658.tif 000014
【図１３】
2020135658.tif 000015
【図１４】
2020135658.tif 000016
【図１５】
2020135658.tif 000017
【図１６】
2020135658.tif 000018
【図１７】
2020135658.tif 000019
【図１８】
2020135658.tif 000020
【図１９】
2020135658.tif 000021
【図２０】
2020135658.tif 000022
【図２１】
2020135658.tif 000023
【図２２】
2020135658.tif 000024