(57)【要約】【課題】従来技術では、情報処理システムの使用前後又は複数回の使用における評価の変化に基づいて、その情報処理システムの使用性を客観的に評価することができなかった。【解決手段】評価対象となる情報処理システムを使用するユーザから評価パラメータを取得する工程であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する工程ＳＴ１０，ＳＴ３０、第１の評価パラメータと第２の評価パラメータとの変化量に基づいて、使用性を示す情報を求める工程ＳＴ４０、その使用性を示す情報を、評価対象となった情報処理システムに対する使用性に関する情報として表示する工程ＳＴ５０を行う。【選択図】　　　　図２
2004021863.tif 000002
【特許請求の範囲】
【請求項１】
情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価方法であって、
評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する工程であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する工程と、
前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、使用性を示す情報を求める工程と、
前記使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する工程と、
を含む処理を行うことを特徴とする情報処理システム評価方法。
【請求項２】
情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価方法であって、
評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する工程であって、前記評価対象となる情報処理システムの操作前に第１の評価パラメータを取得し、前記評価対象となる情報処理システムの操作後に第２の評価パラメータを取得する工程と、
前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、使用性を示す情報を求める工程と、
前記使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する工程と、
を含む処理を行うことを特徴とする情報処理システム評価方法。
【請求項３】
請求項１又は２に記載の情報処理システム評価方法において、前記評価パラメータは、ユーザの主観的評価、ユーザの生体情報又はユーザの操作履歴の少なくとも１つであることを特徴とする情報処理システム評価方法。
【請求項４】
情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価装置であって、
評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する手段であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する手段と、
前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、前記使用性を示す情報を求める手段と、
使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する手段と、
を含むことを特徴とする情報処理システム評価装置。
【請求項５】
情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価プログラムであって、
コンピュータに、
評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する工程であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する工程と、
前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、使用性を示す情報を求める工程と、
前記使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する工程と、
を含む処理を実行させることを特徴とする情報処理システム評価プログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、情報処理システムの有効さ、効率又は満足度等の使用性に関する評価を提示する情報処理システム評価装置、情報処理システム評価方法及び情報処理システム評価プログラムに関する。
【０００２】
【従来技術】
情報処理技術の発達に伴って、様々な種類のアプリケーションソフトウェアが開発されている。また、近年のインターネット等の情報伝達技術の発達に伴って、ネットワークを介したウェブ上での様々な情報処理が行われるようになっている。
【０００３】
このように、多様化したアプリケーションやウェブが氾濫する状況において、ユーザは、自己の目的に合致し、より使い易い情報処理システムを選択したいと考えている。そのため、情報処理システムを操作するユーザから得られる主観的な評価、生体情報又は操作履歴等の情報から、その情報処理システムの有効さ、効率又は満足度等の使用性（ユーザビリティ）に関する評価を提示できる手段が必要とされている。
【０００４】
例えば、ＩＳＯ９２４１−１１（Ｅｒｇｏｎｏｍｉｃ　ｒｅｑｕｉｒｅｍｅｎｔｓ　ｆｏｒ　ｏｆｆｉｃｅ　ｗｏｒｋ　ｗｉｔｈ　ｖｉｓｕａｌ　ｄｉｓｐｌａｙ　ｔｅｒｍｉｎａｌ−Ｐａｒｔ１１：Ｇｕｉｄａｎｃｅ　ｏｎ　ｕｓａｂｉｌｉｔｙ）及びＪＩＳ　Ｚ　８５２１（Ｊａｐａｎｅｓｅ　Ｉｎｄｕｓｔｒｉａｌ　Ｓｔａｎｄａｒｄ　Ｚ　８５２１）では、情報処理システムの有効さ、効率及び満足度の３つの指標によりシステムのユーザビリティを規格化し、このユーザビリティによってシステムの評価を行うことを推奨している。
【０００５】
一方、情報処理システムを提供する側においても、ユーザにより高い満足感を与えるサービスを提供するために、情報処理システムのユーザビリティを、ユーザからの情報に基づいて客観的に評価できる手段を必要としている。
【０００６】
このような要求に対して、従来の情報処理システム評価手段では、情報処理システムを実際に操作する前のユーザの主観的評価に関する情報や操作した後の情報の各々に基づいて、ユーザビリティの評価を行っている。
【０００７】
【発明が解決しようとする課題】
しかしながら、上記従来技術では、情報処理システムを使用する前と実際に使用した後とのユーザの評価の変化や、情報処理システムを複数回繰り返し使用したユーザの評価の変化に基づいて、情報処理システムを評価することができなかった。
【０００８】
例えば、特定のアプリケーションやウェブサイトを使用する際に、実際に使用する前にはユーザは「画面が整理されていて、とても使い易そうなウェブサイトだ」と評価していたが、実際に使用してみると「画面切り替えの処理が遅く、使いにくかった」と評価が悪くなることがある。このような場合、ユーザは予想に反する悪い印象を受け、そのウェブサイトを再利用する可能性は低くなる。反対に、使用前に対して、実際に使用した後の評価が高くなった場合、ユーザは信頼の回復を感じ、そのアプリケーションやウェブサイトを再利用する可能性が高くなる。
【０００９】
従来技術では、このような評価の時間的変化やギャップを情報処理システムの評価に利用していないため、ユーザの再利用の可能性などの重要な使用性の評価を客観的に得ることができなかった。
【００１０】
本発明は、上記従来技術の実情を鑑みて、情報処理システムを操作するユーザから得られる情報に基づいて、その情報処理システムの使用性に関する情報を提示する情報処理システム評価装置、情報処理システム評価方法及び情報処理システム評価プログラムを提供することを目的とする。
【００１１】
【課題を解決するための手段】
上記課題を解決するための本発明は、情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価方法であって、評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する工程であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する工程と、前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、使用性を示す情報を求める工程と、前記使用性を示す情報を前記評価対象となった情報処理システムに対する使用性に関する情報として表示する工程とを含む処理を行うことを特徴とする。
【００１２】
また、上記課題を解決するための本発明の別の形態は、情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価方法であって、評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する工程であって、前記評価対象となる情報処理システムの操作前に第１の評価パラメータを取得し、前記評価対象となる情報処理システムの操作後に第２の評価パラメータを取得する工程と、前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、使用性を示す情報を求める工程と、前記使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する工程とを含む処理を行うことを特徴とする。
【００１３】
さらに、上記情報処理システム評価方法において、前記評価パラメータは、ユーザの主観的評価、ユーザの生体情報又はユーザの操作履歴の少なくとも１つであることを特徴とする情報処理システム評価方法。
【００１４】
上記課題を解決するための本発明は、情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価装置であって、評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する手段であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する手段と、前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて、前記使用性を示す情報を求める手段と、前記使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する手段とを含むことを特徴とする。
【００１５】
上記課題を解決するための本発明は、情報処理システムの使用性の評価に関する情報を提示する情報処理システム評価プログラムであって、コンピュータに、評価対象となる情報処理システムを操作するユーザから評価パラメータを取得する工程であって、異なる時刻において第１の評価パラメータと第２の評価パラメータとを取得する工程と、前記第１の評価パラメータと前記第２の評価パラメータとの変化量に基づいて使用性を示す情報を求める工程と、前記使用性を示す情報を、前記評価対象となった情報処理システムに対する使用性に関する情報として表示する工程とを含む処理を実行させることを特徴とする。
【００１６】
【発明の実施の形態】
以下に、本発明における実施の形態について、図を参照して詳細に説明する。
【００１７】
本発明の実施の形態における情報処理システム評価装置１００は、図１のように、制御部１０、記憶部１２、出力部１４、標準入力部１６、生体情報測定部１８及びバス２０から基本的に構成される。制御部１０、記憶部１２、出力部１４、標準入力部１６及び生体情報測定部１８は、バス２０を介して、相互に情報（データ）伝達可能に接続される。
【００１８】
また、情報処理システム評価装置１００は、インターフェース部２２を含むことも好適である。インターフェース部２２は、情報処理システム評価装置１００外部のネットワーク２４に接続される。情報処理システム評価装置１００はインターフェース部２２を用いることによって、ネットワーク２４を介して、ウェブサーバ等の他の情報処理システム（図示しない）から情報を取得し、ウェブ上での情報処理を行い、そのシステムを評価することも可能である。
【００１９】
制御部１０は、標準入力部１６からのコマンドを受けて、記憶部１２に記憶されている情報処理システム評価プログラムを実行し、対象となる情報処理システムの評価を求める。具体的には、標準入力部１６から入力されるユーザの主観的評価及び操作履歴、生体情報測定部１８から入力されるユーザの生体情報に関する評価パラメータを受けて、その情報処理システムの評価を行う。評価結果は、出力部１４へ出力される。制御部１０には、一般的なコンピュータのＣＰＵを用いることができる。
【００２０】
記憶部１２は、制御部１０で実行される情報処理システム評価プログラム、処理されるデータ、評価パラメータ及び評価結果を格納及び保持する。記憶部１２に保持されたプログラム等は、バス２０を介して、制御部１０や出力部１４から適宜参照される。記憶部１２には、半導体メモリ、ハードディスク、フレキシブルディスク、光磁気ディスクなどの一般的な記憶装置を適宜選択して用いることができる。
【００２１】
出力部１４は、制御部１０から処理結果を受けて、その処理結果をユーザが確認可能な態様で表示する。また、標準入力部１６からコマンドを受け付ける際のユーザインターフェースを表示する。出力部１４には、ディスプレイ、タッチパネル又はプリンタなどの一般的な表示装置を適宜選択して用いることができる。
【００２２】
標準入力部１６は、処理を制御するためのコマンドを受け付けるために用いられる。また、評価対象の情報処理システムに対するユーザの主観的評価を評価パラメータとして取得する。標準入力部１６には、キーボードやタッチパネル又はマウス等のポインティングデバイスなどの一般的な入力装置を適宜選択して用いることができる。
【００２３】
ここで、主観的評価とは、例えば、ユーザが情報処理システムを使用する際の「視認性」「操作性」「デザイン性」「面白さ」及び「全体印象」に関する印象を意味する。但し、これらに限られるものではなく、情報処理システムに対してユーザが感じる主観的な評価に関する情報であれば良い。
【００２４】
さらに、標準入力部１６では、評価対象の情報処理システムにおいて情報を処理する際の入力回数、ポインティングデバイス操作回数、ポインティングデバイス移動量等の操作履歴を評価パラメータとして取得する。但し、これらに限られるものではなく、情報処理システムを使用する際のユーザの操作に関する履歴であれば良い。
【００２５】
生体情報測定部１８は、情報処理システムにより情報処理を行う際のユーザの生体情報を評価パラメータとして取得する。生体情報測定部１８としては、既存の生体情報測定装置を用いることができる。生体情報とは、例えば、情報処理中のユーザの視線移動量、表示された情報を注視する時間、ユーザの瞳孔の開き具合及びユーザの脳波等のユーザの生体の情報である。但し、これらに限られるものではなく、情報処理システムを使用する際のユーザの生体情報であれば良い。
【００２６】
上記の各種評価パラメータは、記憶部１２に格納及び保持される。
【００２７】
以下に、上記情報処理システム評価装置１００を用いた情報処理システムの評価方法を、図２を参照して詳細に説明する。
【００２８】
評価の対象となる情報処理システムで処理される情報は、例えば、ワードプロセッサシステムにおいて、ユーザが１つの文書を完成させるまでのような一連の処理を全て含むものであっても良いし、文書を完成するまでの文字入力、編集又はファイル操作などの個々の処理であっても良い。また、さらに細かいカット＆ペースト等の処理であっても良い。
【００２９】
さらに、ネットワーク２４を介したウェブ上での情報処理であっても良い。この場合も、例えば、ウェブ上でのチケット予約を行う一連の処理であっても良いし、チケット予約を完了するまでのウェブページ切替やユーザ情報入力等の個々の処理であっても良い。
【００３０】
また、評価の対象となる処理は、情報処理システム評価装置１００とは全く別個の情報処理システムで行っても良いし、情報処理システム評価装置１００を併用しても良い。
【００３１】
図２に示す情報処理システム評価方法の各工程は、コンピュータで実行可能な情報処理システム評価プログラムとしてコーディングすることができる。情報処理システム評価プログラムを記憶部１２に保持し、そのプログラムを制御部１０で実行することによって、以下の処理を行うことができる。
【００３２】
ユーザが標準入力部１６から評価処理の開始コマンドを入力することによって、その開始コマンドを受けた制御部１０は、記憶部１２に保持された情報処理システム評価プログラムを実行開始する。その結果、処理は直ちにステップＳ１０に移行する。
【００３３】
ステップＳ１０では、評価対象の情報処理システムを用いて情報を処理する前の評価パラメータを取得する。すなわち、評価対象の情報処理システムを使用する前のユーザの主観的評価やユーザの生体情報が取得される。取得された主観的評価や生体情報は、それぞれ評価パラメータとして記憶部１２に格納及び保持される。
【００３４】
ユーザの主観的評価は、図３に例示するように、ユーザの主観的な評価をアンケート形式で入力してもらうことにより取得することができる。この場合、出力部１４を用いてアンケートをユーザに提示し、標準入力部１６からユーザの評価を選択させることが好適である。ユーザは、情報処理システムにおける情報処理前の表示画像やウェブページを確認した印象、又は、情報処理システムに対する前評判などに基づいて主観的評価を入力する。
【００３５】
例えば、ウェブ上での処理を行う場合に、処理開始時のウェブページの画像データをネットワーク２４を介して記憶部１２に読み込み、出力部１４においてその画面を表示してユーザに確認させた後に、続いて図３に示すアンケートを出力部１４に表示し、標準入力部１６を用いてユーザの主観的評価を入力させても良い。
【００３６】
ユーザの主観的評価は、図４に例示するように、数値データである評価パラメータとして取得される。
【００３７】
ユーザの生体情報は、既存の生体情報測定装置からなる生体情報測定部１８によって取得される。例えば、既存の視線追尾装置を用いて、ユーザが情報処理前に表示される画像を見たときの視線の軌跡を評価パラメータとして取得する。同様に、既存の瞳孔拡散測定装置や脳波測定装置によって、情報処理前のユーザの瞳孔の開き具合や脳波を評価パラメータとして取得する。
【００３８】
例えば、主観的評価に関する評価パラメータの取得と同様に、出力部１４でウェブページの画像を表示している間に、ユーザの生体情報に関する評価パラメータを取得しても良い。
【００３９】
ユーザの生体情報は、図５に例示するように、数値データである評価パラメータとして取得される。
【００４０】
ステップＳ２０では、評価対象となる情報処理システムを用いて情報の処理を実行する。情報処理は、上記のように、ワードプロセッサによる文書作成やウェブ上でのチケット予約などの一連の処理の組合せであっても良いし、文字入力、画像切替などの個々の処理であっても良い。ユーザは、評価対象となる情報処理システムを操作することによって、操作前とは異なる印象などをもつこととなる。
【００４１】
ステップＳ３０では、評価対象の情報処理システムによって処理を行った後の評価パラメータを取得する。すなわち、ユーザの主観的評価、ユーザの生体情報及びユーザの操作履歴が取得される。取得された主観的評価、生体情報及び操作履歴は、それぞれ評価パラメータとして記憶部１２に格納及び保持される。
【００４２】
ユーザの主観的評価は、ステップＳ１０と同様に、ステップＳ２０での処理が終了した後に、出力部１２でアンケートをユーザに提示し、標準入力部１６からユーザの主観的な評価を入力してもらうことによって、取得することができる。
【００４３】
ユーザの生体情報は、ステップＳ１０と同様に、生体情報測定部１８によって取得することができる。視線移動量のように時間的な蓄積が必要な評価パラメータは、ステップＳ２０での処理中のユーザの生体情報を蓄積しておき、処理後にその蓄積値を評価パラメータとして取得することが好適である。また、瞳孔の開き具合、脳波、発汗等は、ステップＳ２０での処理が終了した直後に評価パラメータとして取得すること好適である。ユーザの主観的評価及び生体情報は、図６及び図７に例示するように、それぞれ数値データである評価パラメータとして取得される。
【００４４】
また、ユーザの操作履歴は、ステップＳ２０における情報処理中のユーザの操作を蓄積しておくことによって、取得することができる。操作履歴は、標準入力部１６において一時的に蓄積しておいても良いし、操作の度に記憶部１２に格納及び保持しておいても良い。
【００４５】
ステップＳ４０では、情報処理前と後での情報処理システムの評価パラメータの変化が求められる。具体的には、記憶部１２に保持された処理前後の評価パラメータの数値データの差が算出される。図８及び図９に、情報処理前後のユーザの主観的評価及び生体情報についての評価パラメータの差を算出した結果を示す。
【００４６】
さらに、これらの評価パラメータの変化に基づいて、情報処理システムのユーザビリティ等の評価を求める。本実施の形態では、例として、ユーザビリティを有効さ（ｅｆｆｅｃｔｉｖｅｎｅｓｓ）、効率（ｅｆｆｉｃｉｅｎｃｙ）及び満足度（ｓａｔｉｓｆａｃｔｉｏｎ）の３種類の要素であるものとした。但し、これらに限定されるものではない。
【００４７】
例えば、ユーザが情報処理システムに満足している場合には、主観的評価における視認性、操作性、全体印象等の評価パラメータは情報処理前よりも情報処理後で高くなり、ユーザの生体情報における瞳孔の開き具合、脳波（α波）等は情報処理前よりも情報処理後で高くなると考えられる。従って、情報処理前後のこれらの評価パラメータの変化から、情報処理システムの満足度についての評価を求めることができる。
【００４８】
より具体的には、情報処理システムのユーザビリティＦは評価パラメータＡの変化ΔＡ及び評価パラメータＢの変化ΔＢを用いて、数式（１）にように求めることができる。
【００４９】
【数１】
Ｆ＝ｆ（ΔＡ，ΔＢ）　　　　　　　　　　（１）
ΔＡ＝情報処理後の評価パラメータＡ−情報処理後の評価パラメータＡ
ΔＢ＝情報処理後の評価パラメータＢ−情報処理後の評価パラメータＢ
数式（１）は、２種類の評価パラメータの時間的変化量に基づいてユーザビリティを求めるものであるが、さらに多種類の評価パラメータの変化量を用いてユーザビリティを求めても良い。図１０に、情報処理システムのユーザビリティと、それを求めるために用いられる評価パラメータとの対応付けの例を示す。
【００５０】
さらに、情報処理システムのユーザビリティは、情報処理中のユーザの操作履歴によって補正することも好適である。例えば、情報処理中のマウスのクリック回数が多い場合に、その情報処理システムの効率は悪いと考えられ、効率のユーザビリティの値を低くするように補正することが好適である。評価パラメータの差及び評価結果は出力部１４へ出力される。
【００５１】
ステップＳ５０では、評価結果を出力する。具体的には、制御部１０からの処理結果を受けて、出力部１４においてユーザが確認可能な態様で評価パラメータの差やユーザビリティが表示される。図１１に、処理結果の表示例を示す。
【００５２】
以上のように、本実施の形態によれば、情報処理システムにおける情報処理前後の評価パラメータの変化に基づいて、その情報処理システムの評価を行うことができる。その結果、従来技術では不可能であったユーザの評価の時間的なギャップを考慮し、よりユーザの感覚に近いシステムの評価を提示することができる。
【００５３】
本実施の形態では情報処理前後における評価パラメータの変化に基づいて、情報処理システムの評価を行ったが、同一の情報処理を繰り返し行った場合の評価パラメータの変化に基づいて情報処理システムの評価を行うことも可能である。例えば、同一のワードプロセッサで繰り返し文書作成を行った場合に、それぞれの文書作成後において評価パラメータを取得し、その評価パラメータの変化に基づいてシステムを評価することもできる。すなわち、情報処理システムに慣れていないユーザによる評価と、情報処理システムに慣れているユーザによる評価の相違を明確に提示することができる。
【００５４】
また、情報処理システムの処理やデザインを改善した場合に、改善前と改善後の情報処理システムを使用したユーザから評価パラメータを取得し、その評価パラメータ間の変化量に基づいてシステムを評価することもできる。すなわち、情報処理システムの改善前後のユーザによる評価の相違を明確に提示し、情報処理システムに対する改善の効果を知ることができる。
【００５５】
【発明の効果】
本発明によれば、評価対象となる情報処理システムを使用するユーザから得られる評価パラメータの変化量に基づいて、情報処理システムの使用性に関する評価を提示することができる。これにより、情報処理システムの使用前後の評価のギャップや、ユーザの慣れに対する評価、システムデザインの変更に対する評価を提示することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態における情報処理システム評価装置の構成のブロック図である。
【図２】本発明の実施の形態における情報処理システム評価方法のフローチャートを示す図である。
【図３】本発明の実施の形態における主観的評価の入力に用いられるアンケート形式の例である。
【図４】情報処理前におけるユーザの主観的な評価パラメータの例を示す。
【図５】情報処理前におけるユーザの生体情報の評価パラメータの例を示す。
【図６】情報処理後におけるユーザの主観的な評価パラメータの例を示す。
【図７】情報処理後におけるユーザの生体情報の評価パラメータの例を示す。
【図８】情報処理前後の主観的な評価パラメータの変化の例を示す。
【図９】情報処理前後の生体情報の評価パラメータの変化の例を示す。
【図１０】情報処理システムのユーザビリティと各評価パラメータの変化との対応付けの例を示す。
【図１１】本発明の実施の形態における情報処理システムの評価結果の表示例を示す。
【符号の説明】
１０　制御部、１２　記憶部、１４　出力部、１６　標準入力部、１８　生体情報測定部、２０　バス、２２　インターフェース部、２４　ネットワーク。
【図１】
2004021863.tif 000003
【図２】
2004021863.tif 000004
【図３】
2004021863.tif 000005
【図４】
2004021863.tif 000006
【図５】
2004021863.tif 000007
【図６】
2004021863.tif 000008
【図７】
2004021863.tif 000009
【図８】
2004021863.tif 000010
【図９】
2004021863.tif 000011
【図１０】
2004021863.tif 000012
【図１１】
2004021863.tif 000013