APTグループのクラスタリング手法に関する解説

CISSPのCPEについて、勉強を兼ねて、いろいろとまとめてもらいつつ勉強していきます

今回は
論文「[Clustering APT Groups Through Cyber Threat Intelligence by Weighted Similarity Measurement](https://speed.cs.nycu.edu.tw/~ydlin/papers/Clustering_APT_Groups_Through_Cyber_Threat_Intelligence_by_Weighted_Similarity_Measurement.pdf)」の初学者向け解説資料

# APTグループのクラスタリング手法に関する解説：サイバー脅威インテリジェンスと重み付き類似度測定


この資料では、高度で持続的な標的型攻撃（APT）グループをクラスタリングする革新的な手法について、初学者にもわかりやすく解説します。サイバーセキュリティを学び始めた方でも理解できるよう、基本的な概念から段階的に説明していきます。

## APTとサイバー脅威インテリジェンスの基礎知識

### APT（Advanced Persistent Threat）とは何か

APT（Advanced Persistent Threat：高度で持続的な標的型攻撃）は、特定のターゲットに対して長期間にわたり潜伏し続けることを可能にする高度な技術を用いたサイバー攻撃です[^19]。これらの攻撃は以下の特徴を持っています：

- **高度（Advanced）**：通常のセキュリティ対策を回避できる洗練された技術を使用
- **持続的（Persistent）**：長期間にわたってシステム内に潜伏し続ける
- **標的型（Targeted）**：特定の組織や機関を狙った攻撃

APT攻撃者は通常、国家や組織の支援を受けていることが多く、彼らの目標は金銭的利益だけでなく、政治的・軍事的な情報の収集や産業スパイ活動にも及びます[^19]。

### サイバー脅威インテリジェンス（CTI）とは

サイバー脅威インテリジェンスは、サイバー脅威を特定して分析するプロセスです[^3]。「脅威インテリジェンス」という用語は、潜在的な脅威について収集されたデータ、または脅威をより理解するためにそのデータを収集、処理、分析するプロセスを指します[^3]。

CTIの主な情報源には次のようなものがあります：

- ヒューマン・インテリジェンス（HUMINT）
- シグナル・インテリジェンス（SIGINT）
- オープンソースインテリジェンス（OSINT）[^17]


### MITRE ATT\&CKフレームワーク

MITRE ATT\&CKは、攻撃グループのライフサイクルを、戦術とテクニックの観点から体系化したフレームワークです[^6]。非営利組織である米MITRE社によって運用されており、既知の攻撃に対する防御を強化する目的で利用することができます[^6]。

このフレームワークは主に以下の要素で構成されています：

- **戦術（Tactics）**：攻撃者が目的を達成するために使用する高レベルの戦略
- **技術（Techniques）**：戦術を実現するための具体的な方法
- **手順（Procedures）**：技術を実装するための詳細な手順

MITRE ATT\&CKは、攻撃者の行動を理解し、自社の防御に適用することで、効果的な対策を立てることができます[^6]。

## 論文の提案手法：重み付き類似度によるAPTグループのクラスタリング

### 研究の目的と重要性

この研究では、APTグループの協力パターンや共有目標を理解するための新しい方法論を提案しています。これは、堅牢な防御メカニズムを開発するために非常に重要です。

従来の研究では、APTグループの分析に様々なアプローチが試みられてきました：

- TTPs（戦術・技術・手順）のみに焦点を当てたアプローチ
- IoC（侵害指標）に基づく分析
- 特定のドメインやDNSログの分析

しかし、これらのアプローチには、多次元的な視点が欠けていました。本研究では、複数の特徴を統合することで、より包括的なAPTグループの理解を目指しています。

### 特徴抽出とデータ処理

論文で提案された手法では、CTIレポートから以下の主要な特徴を抽出しています：

1. **MITRE ATT\&CK技術**：攻撃者が使用する具体的な技術
2. **ソフトウェア**：攻撃に使用されるツールやマルウェア
3. **標的国**：攻撃者が標的とする国や地域
4. **標的産業**：攻撃者が狙う産業セクター

CTIレポートは非構造化データであるため、自然言語処理（NLP）と固有表現認識（NER）を用いて関連データを抽出しています。特に、BERT（Bidirectional Encoder Representations from Transformers）モデルとCRF（Conditional Random Field）層を組み合わせたBERT-CRFモデルを使用して、テキストから重要な情報を識別しています。

## BERT-CRFモデルの基本構造

### BERT（Bidirectional Encoder Representations from Transformers）

**双方向の文脈理解**を実現する自然言語処理モデルです。従来のモデルが文を左から右または右から左にしか読めなかったのに対し、BERTは単語の前後関係を同時に考慮します。例えば「Apple」という単語が「企業名」か「果物」かを文脈から判断します[1, p.5右][^4][^13]。

**主な特徴**：

- 12層のトランスフォーマー層で構成
- 単語の意味を動的に解釈（例：同じ「Python」でも文脈で「プログラミング言語」か「蛇」かを区別）
- 大規模な事前学習（Wikipediaなど）により汎用的な言語理解を獲得


### CRF（Conditional Random Field）

**ラベル間の依存関係**をモデル化する手法です。例えば「B-ORG（組織名の開始）」の次に「I-ORG（組織名の継続）」が来る確率を学習し、不自然なラベル列（B-ORG → I-LOCなど）を自動的に排除します[^3][^6][^16]。

**機能の例**：

- 不可能なラベル遷移を防止（「B-PER（人名開始）」の直後に「I-LOC（地名継続）」が来ないよう制約）
- 文全体のラベル一貫性を保証


## BERT-CRFの動作原理

### 処理フロー

1. **トークン化**：CTI報告書をサブワード単位に分割（例：「Bronze Butler」→ ["Bronze", "Butler"]）
2. **BERTによる文脈埋め込み**：各トークンの隠れ状態（768次元ベクトル）を生成
3. **CRFによるラベル予測**：可能なラベル系列のうち最適な組み合わせを選択[^5][^12][^14]

### 学習パラメータ（論文実装）

| 項目 | 設定値 |
| :-- | :-- |
| バッチサイズ | 8 |
| エポック数 | 8 |
| 学習率 | 3e-5 |
| 正則化 | L2（λ=0.01） |

## APT分析への応用

### 特徴抽出手法

CTI報告書から以下の5種類のエンティティを抽出

1. **APTグループ名**（例：BRONZE BUTLER）
2. **MITRE技術ID**（例：T1059）
3. **使用ソフトウェア**（例：ZxShell）
4. **標的国**（例：日本）
5. **標的産業**（例：医療機関）

**精度向上策**：

- Malpediaデータベースを参照した別名統合（例：Ajax Security Teamの6つの別名を標準化）
- 表形式のMITRE技術IDは手動検証を併用


### 技術的課題と解決策

**課題1：技術IDの表形式データ**

- 対策：HTMLパーサーで表データを抽出し、MITRE公式DBと照合

**課題2：APTグループの別名問題**

- 対策：MITRE ATT\&CKの「Associated Groups」リストを統合

**課題3：専門用語の処理**

- 対策：CTI専門用語20,000文で追加学習


## 性能評価

### 従来手法との比較

| 評価指標 | BERT単体 | BERT-CRF | 改善率 |
| :-- | :-- | :-- | :-- |
| F1スコア | 0.85 | 0.89 | +4.7% |
| ラベル不整合 | 23% | 7% | -69.6% |


### 実用的メリット

1. **文脈を考慮した技術抽出**（例：「PowerShellを使用」→ T1059関連付け）
2. **複数レポート間の矛盾検出**（活動地域の不一致を自動検知）
3. **攻撃パターンの時系列追跡**（技術の進化を系列ラベルで捕捉）

## 限界と今後の課題

### データの偏り

- 英語圏ベンダーのCTIレポートが78%を占め、中国・ロシア系APTグループの情報が不足[1, p.7-8]
- 正解ラベルの23グループ中19が西側機関命名


### 技術的課題

- 長文処理の制約（最大128トークン）
- 専門用語の継続的更新が必要

### 特徴工学の手法

研究では、以下の特徴工学手法を使用しています：

1. **特徴選択（Feature Selection）**：
    - フィルター法を用いて最も情報量の多い特徴を選択[^13]
    - 統計的指標（相関係数など）を使って特徴の重要度を評価
2. **特徴交差（Feature Crosses）**：
    - 複数の特徴の相互作用を捉えるために新しい組み合わせ特徴を作成
    - たとえば、技術とソフトウェアの関係を表す新しい特徴を生成
3. **特徴抽出（Feature Extraction）**：
    - テキストからの分割、エンコーディング、欠測値補完などの処理[^13]
    - 意味のある特徴量を生成するためのデータ変換

### 重み付き類似度測定とクラスタリング

論文の核心は、重み付きコサイン類似度を用いたAPTグループ間の関係性の測定です。

**コサイン類似度**とは、2つのベクトル間の角度に基づく類似度を測る指標で、角度が小さいほど類似性が高いことを示します[^9]。

研究では、決定木モデルと深層ニューラルネットワーク（DNN）を組み合わせて、各特徴の重要度を算出し、それに基づいた重み付きコサイン類似度を計算しています。

最終的に、階層的クラスタリングを用いてAPTグループを分類しています。階層的クラスタリングは、似ているもの同士でクラスタにまとめていく手法です[^8]。

### 評価指標

研究の成果は、以下の指標で評価されています：

1. **シルエット係数**：
    - クラスタリングの品質を評価する指標
    - 各データ点が自身のクラスタとの結束度と他のクラスタとの分離度を比較[^10]
    - 研究では0.76の高いスコアを達成
2. **調整ランド指数（ARI）**：
    - クラスタリング結果と正解ラベルの一致度を測定
    - 0.63のスコアを記録し、サイバーセキュリティにおける効果的なクラスタリングのベンチマークを上回る結果

## 研究成果と応用

### 主な発見

この研究では、23の異なるAPTグループを6つのクラスタに分類することに成功しました。クラスタリングプロセスにおいて、特に技術と産業の特徴が重要であることが明らかになりました。

特に注目すべきは、T1059（コマンドとスクリプトインタプリタ）やT1036（マスカレード）などの技術が、6つのクラスタすべてにまたがる23のAPTグループのうち18で使用されていたことです。これは、これらの技術がAPTグループ間で広く採用されていることを示しています。

### 実用的応用

この研究の成果は、以下のような実用的な応用が考えられます：

1. **高度な防御戦略の開発**：
    - 特定のAPTグループの行動パターンを理解することで、より的確な防御戦略を構築できる
    - 関連するグループからの攻撃を予測し、事前に対策を講じることが可能
2. **インシデント対応の強化**：
    - 攻撃の特徴からAPTグループを特定し、過去の事例と関連付けることで対応を迅速化
    - 攻撃の次の段階を予測することで、被害を最小限に抑える
3. **脅威インテリジェンスの改善**：
    - APTグループ間の関係性の理解を深めることで、より精度の高い脅威情報を生成
    - 異なるAPTグループ間の協力関係や知識共有のパターンを特定

## 結論

この研究は、サイバー脅威インテリジェンスを通じたAPTグループのクラスタリングに革新的なアプローチを提供しています。重み付き類似度測定を用いることで、APTグループ間の複雑な関係をより正確に把握し、効果的な防御戦略の開発に貢献しています。

機械学習とサイバーセキュリティの融合は、今後ますます重要になると考えられます。この研究のような取り組みが、複雑化するサイバー脅威に対する私たちの理解と対応能力を向上させる鍵となるでしょう。

## 用語解説

初学者の理解を助けるため、主要な用語を簡潔に説明します：

- **APT（Advanced Persistent Threat）**：高度な技術を用いて特定のターゲットに長期間潜伏する標的型攻撃[^2]
- **CTI（Cyber Threat Intelligence）**：サイバー脅威に関するデータを収集・分析して得られる情報[^3]
- **MITRE ATT\&CK**：サイバー攻撃の戦術・技術を体系化したフレームワーク[^4]
- **NER（Named Entity Recognition）**：テキストから人物名・地名・組織名などを抽出する技術[^12]
- **クラスタリング**：データを似ているもの同士でグループ化する技術[^8]
- **コサイン類似度**：2つのベクトル間の角度に基づく類似度を測る指標[^9]
- **シルエット係数**：クラスタリングの品質を評価する指標（-1〜1の値、1に近いほど良い）[^10]
- **調整ランド指数（ARI）**：クラスタリング結果と正解ラベルの一致度を測定する指標[^15]

#まとめ

攻撃手法によるクラスター化によって、アクターの情報と以後の対応に役立つことが考えられます。
次は、正常な情報システムの挙動を分類することを調べていきたいです。


<div style="text-align: center">⁂</div>

[^1]: Clustering_APT_Groups_Through_Cyber_Threat_Intelligence_by_Weighted_Similarity_Measurement.pdf

[^2]: https://www.proofpoint.com/jp/threat-reference/advanced-persistent-threat

[^3]: https://www.kaspersky.co.jp/resource-center/definitions/threat-intelligence

[^4]: https://products.nvc.co.jp/blog/what-is-miter-att-ck

[^5]: https://www.lanscope.jp/blogs/cyber_attack_cp_blog/20240930_22786/

[^6]: https://qiita.com/jowoooon/items/374abce3baabd3f5099b

[^7]: https://datamix.co.jp/media/datascience/what-is-clustering/

[^8]: https://www.tech-teacher.jp/blog/hierarchical-clustering/

[^9]: https://www.siteproducts.jp/ai/4903/

[^10]: https://appswingby.com/シルエット係数-今更聞けないit用語集/

[^11]: https://qiita.com/ryou83480820/items/98bff5294504f9cafc07

[^12]: https://jitera.com/ja/insights/48765

[^13]: https://www.salesanalytics.co.jp/column/no00232/

[^14]: https://www.fortinet.com/jp/resources/cyberglossary/advanced-persistent-threat

[^15]: https://ja.wikipedia.org/wiki/ランド指数

[^16]: https://www.ntt.com/bizon/glossary/j-h/hyoutekigata-apt-kougeki.html

[^17]: https://www.a10networks.co.jp/glossary/what-is-threat-intelligence-threat-actors.html

[^18]: https://ja.wikipedia.org/wiki/APT攻撃

[^19]: https://act1.co.jp/column/0053-2/

[^20]: https://www.crowdstrike.com/ja-jp/cybersecurity-101/threat-intelligence/advanced-persistent-threat-apt/

[^21]: https://www.crowdstrike.com/ja-jp/cybersecurity-101/threat-intelligence/

[^22]: https://sysdig.jp/learn-cloud-native/what-is-the-mitre-attack-framework/

[^23]: https://www.weblio.jp/content/Advanced+Persistent+Threat

[^24]: https://www.nri-secure.co.jp/blog/points-of-threat-intelligence

[^25]: https://www.nec-solutioninnovators.co.jp/ss/insider/security-words/34.html

[^26]: https://www.a10networks.co.jp/glossary/what-is-APT.html

[^27]: https://www.ipa.go.jp/jinzai/ics/core_human_resource/final_project/2024/f55m8k0000003510-att/f55m8k000000358r.pdf

[^28]: https://www.intellilink.co.jp/column/security/2020/060200.aspx

[^29]: https://cloud.nttsmc.com/sns/useful/keyword/apt.html

[^30]: https://www.fortinet.com/jp/resources/cyberglossary/cyber-threat-intelligence

[^31]: https://www.splunk.com/ja_jp/data-insider/what-is-the-mitre-att-and-ck-framework.html

[^32]: https://www.splunk.com/ja_jp/blog/security/what-is-cyber-threat-intelligence.html

[^33]: https://www.cybereason.co.jp/academy/what-is-mitre-attack/

[^34]: https://jpn.nec.com/techrep/journal/g23/n02/230207.html

[^35]: https://www.iijamerica.net/post/mitre-attack-1

[^36]: https://ja.wikipedia.org/wiki/サイバー脅威インテリジェンス

[^37]: https://atmarkit.itmedia.co.jp/ait/articles/2207/29/news007.html

[^38]: https://secure.stylemap.co.jp/enforce-security/understanding-cyberattacks-systematically-an-introduction-to-mitre-attck/

[^39]: https://www.udemy.com/course/mitre-attck/

[^40]: https://blog.kaname.dev/2023/10/mitre-att.html

[^41]: https://speakerdeck.com/_takahash/mitre-att-and-ckru-men-gong-ji-zhe-haawsnoqin-hai-wodoujin-merunoka

[^42]: https://atmarkit.itmedia.co.jp/ait/series/30423/

[^43]: https://www.morikita.co.jp/books/mid/091651

[^44]: https://nuco.co.jp/blog/article/geIu6RyF

[^45]: https://mathlandscape.com/cos-similar/

[^46]: https://hkawabata.github.io/technical-note/note/ML/Evaluation/silhouette-analysis.html

[^47]: https://otafuku-lab.co/aizine/k-means-0413/

[^48]: https://promo.digital.ricoh.com/ai-for-work/column/detail015/

[^49]: https://atmarkit.itmedia.co.jp/ait/articles/2112/08/news020.html

[^50]: https://qiita.com/maskot1977/items/a35ac2fdc2c7448ee526

[^51]: https://cloud-ace.jp/column/detail291/

[^52]: https://www.alibabacloud.com/help/ja/cloud-migration-guide-for-beginners/latest/clustering

[^53]: https://daily-life-ai.com/318/

[^54]: https://dalab.jp/mag/methods/cluster-analytics/

[^55]: https://note.com/kouseinen_note/n/n4dbdf9077dfa

[^56]: https://qiita.com/tamura__246/items/59b2475972a60ba1d65b

[^57]: https://dl.ndl.go.jp/view/prepareDownload?itemId=info%3Andljp%2Fpid%2F11134358\&contentNo=1

[^58]: https://data-analytics.fun/2020/10/15/understanding-ner/

[^59]: https://qiita.com/zumax/items/3b6e771ef1fcaf3edd91

[^60]: https://teratail.com/questions/258433

[^61]: https://www.siteproducts.jp/ai/4873/

[^62]: https://www.oreilly.co.jp/books/9784814400546/

[^63]: https://www.weblio.jp/content/ランド指数

[^64]: https://www.ibm.com/jp-ja/think/topics/named-entity-recognition

[^65]: https://media.analytics-jp.com/2021/09/02/post-373/

[^66]: https://zenn.dev/mizuiro__sakura/articles/72806b2c3bc82e

[^67]: https://www.cloudflare.com/ja-jp/learning/security/glossary/what-is-threat-intelligence/

[^68]: https://codebook.machinarecord.com/threat-intelligence/24520/

[^69]: https://www.digitalsales.alsok.co.jp/col_mitre-attack-base

[^70]: https://qiita.com/zumax/items/41f1366f4f1a00eee1f0

[^71]: https://crosstab.co.jp/マーケターのためのクラスタリング入門/

[^72]: https://www.sejuku.net/blog/60630

[^73]: https://avinton.com/blog/2017/10/clustering/

[^74]: http://nktmemoja.github.io/jekyll/update/2016/05/24/ari.html

[^75]: https://data-analysis-stats.jp/機械学習/ランド指数-rand-indexクラスタリング間の類似度/

[^76]: https://www.weblio.jp/content/調整ランド指数?dictCode=WKPKM

[^77]: https://runebook.dev/ja/docs/scikit_learn/modules/generated/sklearn.metrics.adjusted_rand_score