2016年 第三者評価機関テスト ‐Top3プロテクション
78回の独立テストに参加
55回のトップ評価

100%

80%60%40%

トップ3にランクインした割合

70回 (90%) のトップ3の評価

Kaspersky Lab

Symantec

ESET

Avira

Bitdefender

VIPRE
SophosQuick Heal
Avast

G DATA
BullGuard

Trend Micro

AVG

20%
F-SecureIntel Security (McAfee)
Microsoft注）・ 2016年に実施された、法人、個人、モバイル向け製品の第三者評価機関テスト結果を、Kaspersky Labが独自に集計したものです。
・ 第三者評価機関には、AV-Comparatives、AV-Test、SELabs、
MRG Effitas、Virus Bulletin、ICSA Labsが含まれます。
・ 各テストは、既知および未知の脅威、ならびに高度な攻撃に対する防御性能を対象にしています。
・ 35 % 以上のテストに参加したベンダーの結果のみをグラフ化しています。

円の直径は最高評価の回数0%2030405060

テスト・レビューの参加回数
1Copyright © 2017 Kaspersky Lab. All rights reserved.

708090（回）2016年 第三者評価機関テスト ‐Top3プロテクション 集計詳細
TOP3プロテクションは、2016年に実施された、法人、個人、モバイル向け製品の第三者評価機関テスト結果を、Kaspersky Labが独自に集計したものです。
・TOP3プロテクションには、Avast、AVG、Avira、Bitdefender、BullGuard、ESET、F-Secure、G DATA、Intel Security (McAfee)、Kaspersky Lab、Microsoft、Panda、Sophos、Symantec、Trend Micro、Quick Healを始めとする主要ベンダーが含まれます。7ページに全対象企業リストを掲載しています。
・35%以上のテストに参加したベンダーの結果のみをグラフ化しています。
・各ベンダーがいずれかの第三者評価機関テストに参加すると、「トップ3受賞数」と「テスト参加数」に反映されます。
1. ベンダーが各テストで3位以内に入賞・受賞すると「トップ3受賞数」に加点されます。1つのテストで複数のベンダーが同じ順位になった場合、後続するベンダーの順位を「上位ベンダーの数+1」として計算します。例えば、順位が「1、2、2、4」となることはあっても、「1、2、2、3」となることはありません。順位が「1、2、2、4」の場合、「トップ3受賞数」ではトッ
プから順に3社のみが加点されます。ただし、最終結果で「レベル」を獲得するタイプのテス
トは、複数のベンダーが「レベル1」、「レベル2」などを獲得することがあるため例外であり、トップのレベルを獲得したベンダー3社が「トップ3受賞数」として加点されます。1社のベンダーの複数の製品が入賞した場合、製品ごとに「トップ3受賞数」に加点されます。
2. 「テスト参加数」は、ベンダーの製品がテスト/レビュー/総合評価に参加するたびに加点されます。
・トップ3受賞率は、ベンダーの「トップ3受賞数」を「テスト参加数」で割ってパーセント値に変換する方法で算出しています。
・2016年のTop3プロテクションは、2017年2月1日時点のデータを集計したものであり、それ以降はテストやレビューは含まれていません。

2Copyright © 2017 Kaspersky Lab. All rights reserved.

テスト参加数

トップ3
受賞数

トップ3
受賞率

トップ１
受賞数

Kaspersky Lab

78

7090%

55

Symantec

54

3667%

20

Bitdefender

56

3664%

31

ESET

49

2755%

20

Avira

41

2254%

17Sophos

36

1953%

13

Trend Micro

60

1830%

13

AVG

54

1630%

14

VIPRE

27

1659%

10

Avast

45

1533%

11G Data

38

1129%

11

Quick Heal

32

1134%

10

BullGuard

27

933%

9Intel Security(McAfee)

53

713%

7F-Secure

32

516%

5Microsoft51

48%4第三者評価機関テストの説明
これらのテストは、高度な脅威や誤検知を含む様々なタイプのマルウェアに対して実施されました。
脅威別テストランサムウェア
• MRG-Effitas. 360 Degree Assessment & Certification• MRG-Effitas. In-the-wild Ransomware Protection
Comparative Analysis• SELabs. Enterprise Anti-Virus Protection Test
• SELabs. Home Anti-Virus Protection Test
• SELabs. Small Business Anti-Virus Protection Test

金融系マルウェア• MRG-Effitas. Online Banking/Browser Security certification• AV-Comparatives. Online File Detection Test

APT• ICSA. Advanced Threat Detection Certification
フィッシング• AV-Comparatives. Anti-Phishing Test

Copyright © 2017 Kaspersky Lab. All rights reserved.

• SELabs. Enterprise Anti-Virus Protection Test

• SELabs. Small Business Anti-Virus Protection Test

• AV-Comparatives. Mobile Security Test & Review• AV-Test. Android Mobile Security Products Test

• AV-Comparatives. Mac Security Test & Review• AV-Test. Mac Detection & Performance test
マルウェア除去/修復テスト

3• AV-Test. Bi-Monthly Certification Consumer and BusinessAndroidテスト• SELabs. Small Business Anti-Virus Protection Test
• Av-Comparatives. Business Security Test

• AV-Comparatives. Whole Product Dynamic ”Real-World”
Protection Test

• SELabs. Home Anti-Virus Protection Test

MAC テスト• SELabs. Home Anti-Virus Protection Test

「実利用環境」テスト

専用テスト

エクスプロイト• SELabs. Enterprise Anti-Virus Protection Test

AV-Comparatives. Comparison of Anti-Malware Software forStorage• MRG-Effitas. 360 Degree Assessment & Certification• AV-Test. Bi-Monthly Certification Consumer and Business• AV-Comparatives. Whole Product Dynamic ”Real-World”

ストレージ保護• AV-Comparatives. Malware Removal Test

静的なテスト• AV-Comparatives. Online File Detection Test
• Virus Bulletin. VB100 Comparative Review and Certification

誤検知テスト• All the tests mentioned above include FP measurements.

第三者評価機関テストの説明
Top3プロテクションの指標算出の対象となった2016年に実施されたテストは以下の通りです。
AV-COMPARATIVES• 年間最優秀製品賞（Product of the Year）
この賞は、アンチウイルステストで高得点を挙げた製品を取り上げ、その合計得点に基づいて最優秀製品を決定します。FDT（Online File Detection Test：オンラインファイル検知テスト）、WPDT（Whole Product Dynamic Test：製品全体のダイナミックテスト）、マルウェア駆除テスト、パフォーマンステストが含まれます。2社以上のベンダーが同じ最高スコアを獲得した場合、AV-Comparativesの規則に従い、過去に受賞したことのないベンダーに授与されます。いずれのベンダーにも受賞歴がある場合は受賞時期が古いベンダーに授与されます。受賞した場合、TOP3プロテクションの第1位とみなされます。
「Product of the Year」の受賞を逃したものの、候補に選ばれたベンダーについては、「Outstanding Product」（優秀製品）の認定を受け、TOP3プロテクションの第2位としてカウントされます。
テスト全体で90点以上を獲得したベンダーは、「Top Rated」（最高評価）の認定を受け、TOP3プロテクションでは3位としてカウントされます。いずれのテストでも点数を獲得できなかったベンダーは除外されます。
年末の時点で、FDT、WPDT、パフォーマンステスト、マルウェア駆除テストで最も優秀な成績を収めたベンダーには、結果に応じて金、銀、銅の各賞が授与されます。この賞はTOP3プロテクションには影響を与えません。
AV-Comparativesのテストに関しては、2015年より、年間最優秀製品賞、優秀製品賞、最高評価のみがTop3プロテクションの加点対象となっています。
. オンラインファイル検知テスト
このテストには、検知率と誤検知の2つが含まれます。テスト結果に応じて、製品に「Advanced+」、「Advanced」、「Standard」、「Tested」のいずれかの賞が授与されます。
「Advanced+」を受賞した場合のみ、Top3プロテクションに加点されます。

4

Copyright © 2017 Kaspersky Lab. All rights reserved.

• WPDT（Whole Product Dynamic ”Real-World” Protection
Test：製品全体の「実利用環境における」ダイナミック保護テスト）
このテストは、主に現在活動中で、重大なリスクを及ぼすことが明白な悪意あるウェブサイトやマルウェアを使い、5カ月間にわたって実施します。製品のあらゆるコンポーネントが全体的な保護機能を大きく左右することから、このテスト結果に基づき、実際の利用環境を想定したマルウェア対策製品の効率性を評価することができます。
テスト結果に応じて、「Advanced+」、「Advanced」、「Standard」、「Tested」のいずれかの賞が授与されます。
「Advanced+」を獲得した場合のみ、Top3プロテクションに加点されます。
• フィッシング対策テスト
このテストは、ユーザーがセキュリティ製品のフィッシング対策機能を利用しながらウェブを閲覧するという、一般的な状況を再現して実施されます。認定を獲得した場合のみ、Top3プロテクションに加点されます。
• モバイルセキュリティテストおよびレビュー
このレビューでは、マルウェア保護テストと他の機能（盗難対策、バッテリー消費など）の総合評価を実施します。保護率と誤検知で3位以内に入賞した場合、Top3プロテクションに加点されます。
• Macセキュリティテストおよびレビュー
このレビューでは、各種Mac向けセキュリティ対策製品を製品機能リストに照らし合わせて評価し、Mac、Windows別のマルウェ
アの検知率と誤検知度などに基づいて保護レベルを測定します。
保護率で3位以内に入賞した場合、Top3プロテクションに加点されます。

• マルウェア駆除テスト
このテストは、セキュリティ製品のマルウェア駆除/除去性能を8か月にわたって調査するテストです。システムから問題なくマルウェアを駆除できるか、つまり、すでに感染したもしくは侵入されたシステムから、マルウェアとその痕跡を除去できるかどうかが評価されます。テスト結果に応じて、製品に「Advanced+」、「Advanced」、「Standard」、「Tested」のいずれかの賞が授与されます。「Advanced+」を獲得した場合のみ、Top3プロテクションに加点されます。
• ビジネスセキュリティテスト
このテストでは、各種法人向けセキュリティ製品やいわゆる「次世代」ソリューションと呼ばれる製品を対象に、様々なマルウェ
ア、ウェブサイト、エクスプロイトの検知率や誤検知度に基づいて保護の効率性を評価します。認定を獲得した場合のみ、Top3プロテクションに加点されます。
• ストレージ用マルウェア対策ソフトウェアの比較
これは、ネットワーク上にあるストレージ機器とそのデータを保護するためのソリューションを対象に、マルウェアに対する保護レベルとパフォーマンスを測定するためのテストです。オンラインファイル検知テストと同時に実施して、検知率をそのテスト結果と比較し、同じ方法で評価します。検知率で「Advanced+」を獲得した場合のみ、Top3プロテクションに加点されます。
• RTTL認定テスト
このテストでは、マルウェアサンプルのRTTL（Real-Time Threat
List：リアルタイム脅威リスト）に照らし合わせて各種セキュリティ対策製品を評価し、システムをリアルタイムで保護する性能を検証します。
認定を獲得した場合のみ、Top3プロテクションに加点されます。

第三者評価機関テストの説明
AV-Test• ベストプロテクション賞
この賞は、保護カテゴリで隔月で認定し、1年を通じて完璧な成績を収めた製品に対し、個人向けと法人向けに分けて授与されます。
受賞した場合のみ、Top3プロテクションに加点されます。

.
• ベスト Androidセキュリティ賞
この賞は、1年を通じてAndroid向けセキュリティテストで完璧な成績を収めた製品に対して授与されます。
受賞した場合のみ、Top3プロテクションに加点されます。
.

• イノベーション賞
この賞は、情報セキュリティ分野における革新的なプログラムや、その発展に貢献した製品に贈られます。
受賞した場合のみ、Top3プロテクションに加点されます。

• 個人向け製品と法人向け製品の隔月認定• ベストパフォーマンス賞
この賞は、パフォーマンスカテゴリで隔月で認定し、1年を通じて完璧な成績を収めた製品に対し、個人向け製品と法人向け製品に分けて授与されます。
受賞した場合のみ、Top3プロテクションに加点されます。

このテストは、製品を個人向けと法人向けに分け、2カ月間のテストをそれぞれ6回、1年間にわたって実施します。テストに参加する全製品が評価され、保護、パフォーマンス、ユーザビリティの各カテゴリでポイントを獲得します。その合計ポイントを総合スコアとして、3位以内に入賞した場合、Top3プロテクションに加点されます。

• ビジネスセキュリティテスト
このテストでは、各種法人向けセキュリティ製品やいわゆる「次世代」ソリューションと呼ばれる製品を対象に、様々なマルウェア、ウェブサイト、エクスプロイトの検知率や誤検知度に基づいて保護の効率性を評価します。
認定を獲得した場合のみ、Top3プロテクションに加点されます。

• Androidモバイル向けセキュリティ製品テスト• ベストユーザビリティ賞
この賞は、ユーザビリティカテゴリで隔月で認定し、1年を通じて完璧な成績を収めた製品に対し、個人向け製品と法人向け製品に分けて授与されます。
受賞した場合のみ、Top3プロテクションに加点されます。.

• Mac向け検知およびパフォーマンステスト
1年間にわたるこの連続認定では、2カ月間のテストを6回実施します。すべての参加製品が評価され、保護、ユーザビリティ（性能と誤検知の総合評価）、機能の各カテゴリでポイントを獲得します。
その合計ポイントを総合スコアとして、3位以内に入賞した場合、Top3プロテクションに加点されます。

このテストでは、Mac OS X向けの各種セキュリティ対策製品を評価します。
検知率で3位以内に入賞した場合、Top3プロテクションに加点されます.

• ベストリペア賞
この賞は、修復カテゴリで1年を通じて完璧な成績を収めた製品に対し、個人向けの総合製品と専門製品に分けて授与されます。
受賞した場合のみ、Top3プロテクションに加点されます。

5

Copyright © 2017 Kaspersky Lab. All rights reserved.

• AndroidおよびWindows向けペアレンタルコントロールテスト
このテストでは、好ましくないウェブサイトを子供に閲覧させないようにするセキュリティ製品の効率性を評価します。認定を獲得した場合のみ、Top3プロテクションに加点されます。

第三者評価機関テストの説明
SELabs（旧Dennis Technology Labs）• 大企業向けウイルス対策製品の保護テスト• 家庭向けウイルス対策製品の保護テスト• 小規模ビジネス向けウイルス対策製品の保護テスト
上記のテストでは、大手セキュリティベンダーが提供するマルウェア対策製品の有効性を3カ月間にわたって比較します。テス
ト期間中、ユーザーの体験を細かく再現した現実的な方法で、対象製品を実在するインターネットの脅威にさらします。テスト結果から、ユーザーの使用事例に基づく実利用環境で各製品がどのような性能を示すのか（例えば、感染したウェブサイトへのアクセスなど）が分かります。テストの一環として、検知と誤検知を調査するサブセットも実施されます。
精度スコア（2つのサブセットの合計ポイント）が最も高かった上位3製品が、Top3プロテクションで加点を受けます。

MRG Effitas• オンラインバンキング/ブラウザのセキュリティ認定（＊1）
このテストでは、実際に感染報告があるマルウェアや現在活動中の各種金融系マルウェアを使い、ボットネット環境や、様々な技法で機密データの傍受を再現するシミュレーションなど様々なテスト手法やシナリオを用いて、金融系マルウェア対策製品の効率性を評価します。すべてのテストに合格した製品のみが認定を取得し、Top3プロテクションで加点を受けます。

• 360度評価および認定
このテストでは、初期感染を防ぐ性能と、感染したシステム上でマルウェアの検知と駆除にかかる時間の両方を評価します。本テストは、「検知・駆除にかかる時間の評価」の後継にあたります。
認定を受けた場合のみ、Top3プロテクションに加点されます。

Virus Bulletin• VB100比較レビューおよび認定
このテストは隔月で実施（＊2）されるもので、毎回OS別に異なるタイプの製品を評価します。認定に合格した場合、Top3プロテクションに加点されます。

ICSA Labs• 高度な脅威の検知に関する認定
このテストでは、新しい脅威やほとんど知られていない脅威を検知するとともに、誤検知を最小限にとどめるという観点から、セキュリティソリューションの効率性を評価します。認定に合格した場合、Top3プロテクションに加点されます。

• In-The-Wildランサムウェアに対する保護性能の比較分析
このテストは、セキュリティベンダーからの委託で実施されるものであり、感染したシステム上でランサムウェアを検知し駆除するセキュリティ製品の性能を評価します。
ランサムウェア保護スコア（システムの修復性能とファイルの復号性能に基づいて算出）の最も高かった製品が、Top3プロテクションで加点を受けます。

注）＊1 第4四半期のテスト結果は、データベースでの報告期限までに公表されなかったため、TOP3プロテクションの評価対象となっていません。
＊2 12月分のレビュー結果は、データベースでの報告期限までに公表されなかったため、TOP3プロテクションの評価対象となっていません

6

Copyright © 2017 Kaspersky Lab. All rights reserved.

TOP3プロテクション 全対象リスト

7• AegisLab• Comodo• HitmanPro• NSHC• Symantec• AhnLab• CompuClever• Ikarus• ONE App Limited• TeamViewer• Alibaba• CrowdStrike• Intego• Palo Alto• Tencent• Antiy Labs

• Cryptoprevent• Invincea• Panda Security• TGSoft• ArcaBit• CYREN• iSheriff• PC Pitstop• Total Defense• Avast• Dr.Web• K7• PCKeeper• Trend Micro• AVG• DU Group• Kaspersky Lab• ProtectWorks AntiVirus• TrustPort• Avira• Elastic Cloud Security System• Lavasoft• Psafe• UtilTool• AVL Team• Emsisoft• Lookout Mobile Security• Qihoo 360• VIPRE• Baidu• eScan• Malwarebytes• Quarri• Watchdog• Barracuda• ESET• Maya• Quick Heal• Webroot• Bitdefender• ESTsoft• Intel Security (McAfee)• REVE• WhiteArmor• Bornaria• FireEye• Microsoft• Secucloud• Wontok• BullGuard• Fortinet• Microworld• SentinelOne• Zemana• Check Point• F-Secure• MSecure Data Labs

• Seqrite• Zillya!

• Cheetah Mobile• G Data• NANO• Sophos• Zoner• ClamAV• Hammock• nProtect• SuperSpamKiller

Copyright © 2017 Kaspersky Lab. All rights reserved.