マルウェア対策研究⼈材育成ワークショップ
MWS 2021 @オンライン

MWS2021 トラックチェアからの講評
MWS 2021 プログラム委員⻑
⾼⽥ 雄太

⽬次

l MWSトラックについて
l 表彰の選考について
l 表彰の結果発表

2 MWS2021 トラックチェアからの講評

1
MWS トラックについて

3 MWS2021 トラックチェアからの講評

MWS データセットを活⽤した研究に加え、マルウェア・CSIRT/インシデント対応・脅威インテリジェンス等に関する研究論⽂を募集しました
トラック概要CSS のトラック制

MWS トラック

CSS では発表分野ごとに下記６つのトラックからなる構成でプログラムを編成しています

従来、似たタイトルのセッション・発表がシステムトラックとMWSトラック間で散在していたため、スケジュール含めなるべく被らないよう今年から各 CFP を少し更新しました

システム

暗号

MWS

PWS

UWS

4 MWS2021 トラックチェアからの講評

OWS

MWSトラック
MWSデータセットを利⽤した研究成果，及びマルウェ
ア対策，CSIRT/インシデント対応，脅威インテリジェ
ンス等を中⼼としたサイバーセキュリティ全般に関連する研究技術の論⽂を募集します．

システムトラックコンピュータシステムや社会システムの安全を⽀える通信プロトコル，ネットワーク，アーキテクチャ，オペレー
ティングシステム，アプリケーション，ウェブに関するセキュリティ，およびその適⽤事例，管理運⽤など※緑字が追記箇所

プログラム委員は合計18名で構成されております
皆さまご協⼒いただき、ありがとうございます！🙏
MWS2021 プログラム委員の皆さま

市野 将嗣

電気通信⼤学齋藤 彰⼀

名古屋⼯業⼤学

岩本 ⼀樹

株式会社セキュアブレイン

佐藤 将也

岡⼭県⽴⼤学

内⽥ 真⼈

早稲⽥⼤学

嶋⽥ 創

名古屋⼤学

海野 由紀

(株) 富⼠通研究所

⾼⽥ 雄太

デロイトトーマツサイバー合同会社

岡本 剛

神奈川⼯科⼤学

⽥中 恭之

NTTコミュニケーションズ株式会社

沖野 浩⼆

富⼭⼤学

⽥辺 瑠偉

横浜国⽴⼤学折⽥ 彰(株) ⽇⽴システムズ

千葉 ⼤紀

NTTセキュアプラッフォーム研究所

加藤 雅彦

⻑崎県⽴⼤学⽻⽥ ⼤樹

NTTセキュリティ・ジャパン株式会社

川⼝ 信隆

株式会社⽇⽴製作所

村上 洸介

KDDI総合研究所

5 MWS2021 トラックチェアからの講評

「ウェブセキュリティ」関連の発表はシステムトラックへ統合し、最終的に合計34件の研究発表、9件のセッションを編成しました
セッション編成l セッション名

マルウェア解析プログラム解析

ネットワーク異常検知

ネットワークセキュリティ

AI・機械学習による検知

敵対的学習

CSIRT

脅威インテリジェンス

IoT マルウェア

ウェブセキュリティ
→ システムトラックへ移動

研究テーマやトピックの傾向は昨年から⼤きく変わらず、多様なテーマを扱う論⽂が集まりました。
依然としてマルウェアを起点としたサイバー攻撃への抜本的 & 実⽤的な対策の検討が求められます
6 MWS2021 トラックチェアからの講評

昨年同様 2021 年もオンラインによる開催となり、論⽂件数は昨年から微減でした
数字でわかる MWS 2021

セッション数

論⽂総数

学⽣論⽂数

データセット活⽤論⽂

2015

1032-

232016

1767-

1120171767-

1620181455-

132019

1353

29

92020

10362692021

934208

MWS では、主にマルウェアを起点としたサイバー攻撃に関する論⽂や MWS Datasets を⽤いた研究論⽂を取り扱っており、⼀⾒ MWS では研究活動が減少傾向に⾒えますが、昨今のサイバー攻撃の多様化や OWS/BWS 等の研究テーマの多様化を踏まえますと、MWS から CSS（セキュリティ業界）全体として専⾨性の多様化が進んでいるとも⾔えます。
[参考] 研究⽤データセット MWS Datasets を⽤いた研究活動について
https://www.iwsec.org/mws/achievements.html
7 MWS2021 トラックチェアからの講評

このあとの「MWS 企画②」にて、研究に関する BoF を開催します
少し宣伝

16:10 -- 17:30 に予定している 「 MWS 企画② BoF 」 にて、「サイバーセキュリティ研究相談」 と題して、研究の進め⽅等の⼀般論に加え、具体的な研究事例を交えつつ、サイバーセキュリティ研究を推進・盛り上げるための検討をすべく、参加者の皆さんで議論する予定ですので、ぜひご参加ください！

8 MWS2021 トラックチェアからの講評

2
表彰の選考について

9 MWS2021 トラックチェアからの講評

論⽂集に掲載された論⽂を審査対象とし、既定の評価基準に基づいた厳正な審査を⾏いました
MWS の表彰

l 表彰の⽅針：『⽯を拾うことはあっても⽟を捨てることなかれ』• なるべく多くの⼈が受賞となるように幅広く選定する• MWS データセットを使⽤した研究は積極的に評価する• ただし、賞の価値を毀損しないようにする

l 評価基準：各１〜６点で評価• 新規性：類似の研究がこれまでに無く独創的なものであるか、または、類似の研究と⽐較して進歩改善の度合が⼤きいかどうか。
• 妥当性および信頼性：著者の主張に対する的確な証拠、証明、評価が⽰されているかどうか、および、評価検証の結果は⼀貫しており安定しているか。
• 実⽤性：現在の計算機環境で実装が容易かどうか、または、既に実装済でその完成度が⾼いかどうか。
• 総合評価：上記３つの平均点ではなく、論⽂の良い⾯があればそれを総合的に反映する。

10 MWS2021 トラックチェアからの講評

プログラム委員ならびに評価委員の複数⼈で審査し、優秀論⽂賞とベストプラクティカル研究賞を決めました
選奨プロセスと表彰の種類

l ⼤まかな選奨⼿順• ⼀次査読： 1本の論⽂を2⼈の査読者で評価• ⼆次査読： プログラム委員全員で評価• 最終審査： MWSトラックの点数上位の論⽂を CSS へ推薦ü 優秀論⽂章候補を選び、その後に学⽣論⽂賞候補を選定する

l 表彰の種類（今年から変更あり）(従来) MWS優秀論⽂賞
MWS で候補を選出し、名称を統合
CSS 最優秀論⽂賞
もしくはCSS 優秀論⽂賞(従来) MWS学⽣論⽂賞
MWSで候補を選出し、名称を統合

CSS学⽣論⽂賞

表彰総数は全投稿数の10%以内とする

11 MWS2021 トラックチェアからの講評

後ほどご紹介MWS ベストプラクティカル研究賞（1件）

l 著者全員を表彰対象とする。
l 論⽂集に掲載された論⽂を審査対象とする。
l 過去の受賞経歴を問わない。
l 実⽤性の⾼さやサイバーセキュリティに関する研究コミュニティとしての有⽤性を評価する。

研究⼈材の育成が MWS の設⽴趣旨であることに留意し、良い研究成果を表彰対象にできるよう配慮しています
選奨時における配慮

l 論⽂評価のべからず集• ライバルの研究成果に低い点数をつけるべからず• 知り合いの研究成果に⾼い点数をつけるべからず• ⾃分の好みで判断するべからず• ⼀律に同じ点数をつけるべからず

l 推薦したい論⽂は「なぜ良かったのか」に関するコメントを残し、⼆次査読対象の論⽂著者にはフィードバックいたします• 論⽂改善のアドバイス• プログラム委員会での議論メモ• その他の参考情報やコメント

12 MWS2021 トラックチェアからの講評

3(ちょっとだけ)

表彰の結果発表 🎉

13 MWS2021 トラックチェアからの講評

論⽂ 34件への⼀次選考の結果、総合評価の⾼かった11件が論⽂賞候補、実⽤点の⾼かった 6件が BP 研究賞候補として選ばれました
⼀次選考の結果※いずれの候補も重複を含む

MWS 推薦優秀論⽂賞
候補（5件）

lllll

遺伝的アルゴリズムに基づいた広域スキャンのフィンガープリント特定技術の提案
機械学習を⽤いたCyber Threat Intelligenceの構造化と横断的分析
Soliton Dataset 2021におけるマルウェアによる解析回避処理の調査
IoTマルウェアにおける関数の依存関係と結合の順序関係に基づくライブラリ関数名の特定スクリプト実⾏環境に対する実⾏遅延・実⾏停⽌を回避する機能の⾃動付与⼿法

MWS 推薦
学⽣論⽂賞
候補（6件）

llllll

異議あり！：XAIによる誤識別された悪性活動の特定
遺伝的アルゴリズムに基づいた広域スキャンのフィンガープリント特定技術の提案
SleepHop: 動的バイナリ計装によるマルウェアのタイミング攻撃の無効化
動的解析ログと表層情報を組み合わせたマルウェア感染活動の最終進⾏度推定⼿法
ラベル付きオープンデータセットを活⽤した2⼊⼒深層学習モデルによるネットワーク異常検知
Androidマルウェア分類器に対するパッキングを⽤いた効果的な回避攻撃

MWS
ベストプラクティカル研究賞
候補（6件）

llllllHDLコードに対するSMTソルバを⽤いた⾃動検証システムの提案
機械学習を⽤いたCyber Threat Intelligenceの構造化と横断的分析
Soliton Dataset 2021におけるマルウェアによる解析回避処理の調査
IoTマルウェアにおける関数の依存関係と結合の順序関係に基づくライブラリ関数名の特定
C2サーバを対象とした相互協⼒による継続的監視システムの提案
スクリプト実⾏環境に対する実⾏遅延・実⾏停⽌を回避する機能の⾃動付与⼿法

14 MWS2021 トラックチェアからの講評

受賞おめでとうございます！
⼆次選考の結果

MWS 推薦優秀論⽂賞

MWS 推薦
学⽣論⽂賞

MWS
ベストプラクティカル研究賞

15 MWS2021 トラックチェアからの講評※いずれの候補も重複を含む

l スクリプト実⾏環境に対する実⾏遅延・実⾏停⽌を回避する機能の⾃動付与⼿法
l 機械学習を⽤いたCyber Threat Intelligenceの構造化と横断的分析
l 遺伝的アルゴリズムに基づいた広域スキャンのフィンガープリント特定技術の提案
l ラベル付きオープンデータセットを活⽤した2⼊⼒深層学習モデルによるネットワーク異常検知

l Soliton Dataset 2021におけるマルウェアによる解析回避処理の調査

MWS ベストプラクティカル研究賞は、MWS トラックの全論⽂を審査対象とし、研究成果の実⽤性の⾼さが際⽴つ論⽂に与えられます
MWS ベストプラクティカル研究賞

4A1-2

Soliton Dataset 2021におけるマルウェアによる解析回避処理の調査
⼤⼭ 恵弘 (筑波⼤学)

選奨時のコメント• MWSデータセットの1つである「 Soliton Dataset2021」におけるマルウエアの解析回避処理を網羅的に、丁寧に、そして詳細に調査しており、資料としての価値が⾼く、 MWS/CSSのシンポジウム原稿としてはきわめて有⽤である。
• データセットにおける検体選択⽅式が2020年版と2021年版で⼤きく変化しており、時間経過に基づく評価を難しくしているという問題提起もしており、 MWSデータセット提供側や MWS コミュニティにとって重要なフィードバックになり得る。
• このような重要かつタイムリーなフィードバックをもとに、MWSデータセットの公開やデータセットを利⽤した研究活動がさらに発展することに期待したい。

16 MWS2021 トラックチェアからの講評

論⽂著者の皆さま、プログラム委員の皆さま、ご協⼒いただいた皆さま
ありがとうございました！
さいごにl 来年 MWS2022 のプログラム委員⻑は、早稲⽥⼤学「内⽥ 真⼈先⽣」

引き続き、よろしくお願いいたします！🙇🙇🙇

17 MWS2021 トラックチェアからの講評