パネリスト：阿部 聡（富士通）／近藤 康二（SHIFT）
山崎 崇（ベリサーブ）／高野 愛美（日立製作所）
廣町 幸治（日本ナレッジ）
パネルモデレータ：河野 哲也（日立製作所）
司会：池田 暁（ASTER）

ASTERテストプロセス改善研究会が企画しました（登壇者も研究会メンバーが中心です）

テストプロセス改善についての議論を行なうことで、情報や知見・ノウハウといったものを聴講者の皆さんとシェアしたい
本パネルは次のように進行します・テストプロセス改善研究会活動のご紹介
・パネルディスカッション©ASTER テストプロセス改善研究会

2017/2/3

2

•

司会
•

池田 暁（ASTER）©ASTER テストプロセス改善研究会

2017/2/3

3

「テストプロセス改善技術」は新しい技術なのか？
•実は技術自体は結構前から存在している•しかし「テストプロセス改善技術を使っています」という人にはあまり出会ったことがない•テストプロセスの改善に取り組んでいないというわけではないだろうが･･･

これまで実践事例としての国内発表はあまりない•ただし、これまでのJaSSTで研究発表やキーワードレベルでの言及はあった•JaSST’03の での奥村有紀子氏の「テストプロセス改善モデルの比較分析」→資料•JaSST’09 Tokyo での西康晴先生の「テストの改善、テストによる改善」 →資料•JaSST’11 Tokyo での招待講演にて言及有り（TPI、TMMi）→記事•その他、大西建児氏・湯本剛氏による情報処理学会学会誌の記事も →記事

実は言葉くらいは聞いているはず•記憶に残っていない人も多いかと思いますが、実はこれまでに言葉はすでに聞いているはずなのです•ただし、その内容はあまり知られていない

ISO/IEC33063策定やTPI NEXT翻訳を契機と捉え国内にも技術を広めていきたい©ASTER テストプロセス改善研究会

2017/2/3

4

テストプロセス改善技術の国内の動向や技術概要を解説し、関係者から技術の特色や導入ポイントを突っ込んで解説いただいた↓

反響を受けて、研究会を設立©ASTER テストプロセス改善研究会

2017/2/3

5

JaSST’16 Tokyo パネルディスカッションでの議論をきっかけに立ち上げ
TMMiやTPI、ISO/IEC 33063 等のテストプロセス改善技術について議論や調査活動および技術開発や普及について取り組む
技術や規格の関係者および実践者中心での活動
2016年4月から活動を開始
現在20名程度がアクティブメンバーとして活動中
月に一度の全体定例会 および MLでの議論

2016年4月から活動中！

研究会の中に4つのサブWGを設置
サブＷＧごとに議論や研究活動©ASTER テストプロセス改善研究会

2017/2/3

6

定例会の基本的なメニュー•メンバによる事例やトピック紹介•サブＷＧの活動報告•サブＷＧごとの議論

定例会で取り上げられた事例やトピック•テストプロセス技術概要説明、JaSST’16パネル報告•日立オートモーティブシステム社のTMMi 導入事例紹介•メルカリ社のTPI NEXT 導入事例紹介•日立製作所社のTPI NEXT 導入事例紹介

サブＷＧ（現在4つが活動中）•入門者向け作成ＳＷＧ•スキル系SWG•ノウハウ収集・調査・普及系ＳＷＧ•深掘り・研究系ＳＷＧ

以降のスライドで簡単にご紹介©ASTER テストプロセス改善研究会

2017/2/3

7

＃内容項目

1

リーダ

近藤 康二

2

メインメンバ池田 暁、池田 健太郎、小野 瞬、甲田 悦宏、佐藤 浩一、関 仁慈、泰楽 無雅、高坂 茂樹、廣町 幸治、山﨑 崇、吉澤 麻由（50音順）
入門者用の“テストプロセス改善ガイド”をつくる
テスト業務に関わっている（いた）が、テストプロセス改善にあまり興味がなかった人（経営層、テスト管理者、テスト技術者等々）が読んでテストプロセス改善に興味を持つようになるガイド。対象モデル
は、TMMi、TPI NEXT、ISO/IEC33063、CTP、STEPなどとするが、できるだけ固有のモデルに限定しない内容とする。

3

主な活動

4

直近（今年度）の活動 及びアウトプットイメージ① “解り易く”をモットーに、気軽に手に取り読める入門書を目指す。
② メンバー自らも学ぶことを目的に、プロセス改善に関する勉強会を実施して、その議論をまとめ、入門ガイドの基礎資料とする。
③ ガイド作成のアプローチは、はじめはスモールスタートして、その後、改版を繰り返して完成度を上げていくこととする。第一弾は、2016年度中に何らかの成果物を配布、もしくは発表できること。

5状況

2016年度中に第一弾となる簡単な資料を公開する予定で頑張っています！！

©ASTER テストプロセス改善研究会

2017/2/3

8

＃項目

内容

１

リーダ

池田 健太郎

２メインメンバ

焔硝岩 益士、望月 信昭（50音順）

3

主な活動

テストプロセス改善に取り組むための前提となるスキルとは何かについて議論を実施し、議論をまとめる。
それによりテストプロセス改善に取り組める人材の育成やプログラムなどの検討を実施していく。

4

直近（今年度）の活動及びアウトプットイ
メージ

1. プロセス改善に必要なスキルとして、「意識」、「知識」、「行動」の側面から必要な要素を洗い出す
2. １．で洗い出した「意識」、「知識」、「行動」を身に着ける方法を検討する
3. ２．の方法を元に現場でどう活用するか考える5

状況

・定例会での議論により、必要となるスキルを整理中
・今後、定例会メンバに内容をシェアし、フィードバックを得てからいったん整理する予定©ASTER テストプロセス改善研究会

2017/2/3

9

＃項目

内容

１

リーダ

河野 哲也、山﨑 崇（共同リーダ）

２

メインメンバ

大野 敦寛、高野 愛美（50音順）

3

主な活動

テストプロセス評価後に、改善施策を支援するための方法の検討• コンサルなどの支援がない状況でテストチーム自ら改善を進めるための• 小さな範囲を対象にテストプロセスをPFDで表現する• TPI NEXTをベースにプロセス表現に向く項目と向かない項目の整理

4

今年度の活動及びアウトプットイメー
ジ

TPI NEXTのチェック項目の中でプロセス表現に向く項目と向かない項目をPFDをベースに議論して整理する(テストプロセス成熟度マトリクスにマッピングされるイメージ)

5

状況

TPI NEXTのチェック項目すべてに関してプロセス表現できるかどうかを議論中
8割程度は議論終了©ASTER テストプロセス改善研究会

2017/2/3

10

＃項目内容

１

リーダ

湯本 剛

２

メインメンバ安達 賢二、林 祥一（50音順）

3

主な活動

TMMiやTPI NEXT、ISO/IEC33063 などの技術の深掘りの他、それらを上手く使うための研究や全く新しい物事を研究しガイドや論文にまとめる

4

直近（今年度）の活動及びアウトプットイメージ•

状況

メインメンバが遠方に散らばっているため、主にＭＬベースで議論中。
現在横並び比較資料を作成中。

5•

TMMiやTPI NEXT、ISO/IEC33063 のキーエリアやプロセスエリアなどの要素を横並び比較して何らかの傾向などを見いだし整理する。
それを議論のベース資料としてさらなる議論につなげていく。

©ASTER テストプロセス改善研究会

2017/2/3

11

テストプロセス研究会では、一緒に活動下さる方を随時募集しております•テストプロセス改善技術に興味があり•一緒に活発な議論していだき、•一緒に成果物を作成していただける方興味がある方は是非研究会のメンバまで是非ご一報下さい！

©ASTER テストプロセス改善研究会

2017/2/3

12

•

パネリスト
••
•
•
•

•

阿部 聡（富士通）
近藤 康二（SHIFT）
山崎 崇（ベリサーブ）
高野 愛美（日立製作所）
廣町 幸治（日本ナレッジ）

パネルモデレータ•河野 哲也（日立製作所）©ASTER テストプロセス改善研究会

2017/2/313

 イントロダクション
 テーマ1：

第三者検証の立場での課題と議論
 テーマ2：
開発企業ＱＡの立場での課題と議論
 フロアーを交えて全体ディスカッション©ASTER テストプロセス改善研究会

2017/2/3

14

 昨年のテストプロセス改善技術のパネルの復習◦ テストプロセス改善モデル(技術)の俯瞰的に解説し議論した
 TMMi / TPI NEXT / ISO/IEC33063 / ノンモデル◦ 安達さんが会場からのアンケートをベースに改善のアンチパターンとパターンを示した
 議論が足りない？
 本パネルディスカッションのモチベーション◦ 本セッションの聴講者の特徴(仮説) これからテストプロセス改善技術を導入してみようかと迷っている方
 テストプロセス改善技術の実践で課題を抱えている方◦ そのような迷いや課題を抱えるテストエンジニア対して解決のきっかけを与える
 導入や実践に関して課題や障壁を取り上げその解決について議論する©ASTER テストプロセス改善研究会

2017/2/3

15

 現在どのようにテストと関わっておられますか？

（一番比重が高いものを ひとつ選択）
テストの実行を主に担当

28

テストの分析や設計を主に担当

27

テストツールの導入や運用を主に担当

13

テストのマネージメントを主に担当

39

テストのプロセス改善を主に担当

17

その他，テスト（やテストチーム）への技術支援

21

特にテストとは関わりが無い

4©ASTER テストプロセス改善研究会 2017/2/3

55

16





テストプロセス改善技術について、これまで「知っていた」ものをチェックして下さい（複数回答 可）これまで「使ったことがある/使っている」ものをチェックして下さい。
（複数回答 可）TMM/TMMi

58

TPI/TPI NEXT58

ISO/IEC33063

26

CTP

1

STEP

15

その他

2

TMM/TMMi

5

TPI/TPI NEXT

14

ISO/IEC33063

3

CTP

0

STEP0

その他

2

©ASTER テストプロセス改善研究会 2017/2/3

17



テストプロセス改善技術と活用の問題・課題を記入下さい（自由記述）◦ プロセス改善の立上げの課題<問題分析が難しい> 現在のプロセスの問題点を明確にするのが難しい／
現状のテストに問題がありすぎて何からやるべきなのか<改善の効果を示すのが難しい>
 改善効果を測るメトリクスとしては何が適当か？／改善に対する評価が難しい◦ 他部門・関係者の課題<開発部門を巻き込むのが難しい>
 開発部門と協調するには？／テストに開発側が興味を持っていない<上司や同僚、また自組織を巻き込むのが難しい> マネジメント層の理解／プロセス改善に対する現場の抵抗力が強い◦ 改善意識の課題<改善しようという意識がない>
 現場でテストプロセス自体を改善しようという意識が少ない<手法や改善そのものが目的化してしまう> テストプロセス改善技術の各手法を満たすことが目的となってしまう<プロセス改善に手を付ける余裕がない>
 業務が山積みだとプロセス改善まで手がつけられない◦ モデルの課題：本パネルのスコープ外 モデルを選ぶのが難しい、モデルの導入が難しい©ASTER テストプロセス改善研究会 2017/2/3

18

 パネルの目的◦ テストプロセス改善(技術)に取り組んでいる実践者、もしくは取り組もうと考えている方を対象
 チームメンバ・チームリーダなど現場でテスト業務をこなしている方◦ テストプロセス改善(技術)の導入・実践のために考えること議論 導入しようかどうか迷っている人の背中を押す 導入を進める際の悩みを共有して解決のきっかけを与える
 パネルのゴール◦ テストプロセス改善(技術)の導入・実践の課題や障壁に対して当事者意識を持ってもらい自身の課題解決をイメージしてもらう◦ モデレータのKPI
 フロアを交えて議論する際に、5名から質問・コメントをもらう 時間通りに終わる©ASTER テストプロセス改善研究会

2017/2/3

19



テストプロセス改善モデルなどの技術に絞らない活動の導入・実践
 TMMi / TPI NEXT / ISO/IEC33063 / ノンモデル またはそれ以外
 明日のセッション「TPI NEXT導入の実際」とは、この辺りが大きく違う

一回のテストサイクル・単発プロジェクトで実施されるものは含まない



個人での作業よりはある程度組織だった取り組みを対象とする◦ ある程度の継続性のある取り組み◦ 今回の聴講者の多くは、組織的取り組みの課題が多いと推察

特定のテスト技術・手法ではなく、プロセス改善にフォーカスする◦ テスト活動全般をスコープとした改善活動

 改善の施策としてテスト手法を導入するということもあるがその施策を考えるところが大きな関心

グレーゾーン◦ 継続的にテストプロジェクトでKPTを回している
もしくは、振返り会を実施しその改善事項を計画で取り込み改善を回している ノンプロセスのテストプロセス改善活動をしているようにも見える
 ただし、本パネルで議論する課題には該当しない可能性大(導入や実践の課題が少ない) そんな面倒な課題を避けるためにKPTをやるというのも一アイデア©ASTER テストプロセス改善研究会

2017/2/3

20第三者検証企業

開発企業
QAチーム

スタッフ

開発チーム

人財リソース
開発企業
QAメンバ

第三者検証
メンバ

コンサルディング企業

スタッフ部門(SEPG)

人財リソース
コンサルタント©ASTER テストプロセス改善研究会

2017/2/3

21

第三者検証企業

開発企業
QAチーム

スタッフ

開発チーム

人財リソース
開発企業
QAメンバ

近藤高野
第三者検証メンバ

コンサルディング企業
人財リソーススタッフ部門(SEPG)

廣町コンサルタント

阿部山崎©ASTER テストプロセス改善研究会

2017/2/322第三者検証企業

開発企業QAチーム

スタッフ

開発チーム

人財リソース
開発企業
QAメンバ

近藤

高野
第三者検証
メンバ

コンサルディング企業
人財リソーススタッフ部門(SEPG)

廣町コンサルタント

阿部山崎

第三者検証：廣町さん、 QA：高野さん、QAリード：近藤さん
スタッフ：阿部さん、コンサル：山崎さん©ASTER テストプロセス改善研究会

2017/2/323

第三者検証企業

開発企業
QAチーム

スタッフ

開発チーム

人財リソース
開発企業
QAメンバ

近藤

高野
第三者検証
メンバ

コンサルディング企業
人財リソーススタッフ部門(SEPG)

廣町コンサルタント

阿部山崎

第三者検証：廣町さん、 QA：高野さん、QAリード：近藤さん
スタッフ：阿部さん、コンサル：山崎さん©ASTER テストプロセス改善研究会

2017/2/3

24

 イントロダクション
 テーマ1：

第三者検証の立場での課題とそれに基づく議論
 テーマ2：
開発企業ＱＡの立場での課題とそれに基づく議論
 フロアーを交えて全体ディスカッション©ASTER テストプロセス改善研究会

2017/2/3

25

 プロセス改善要望元『スタッフ部門』

 前提◦ 日々検証業務を行っている クリアすべき障害◦ 目先の業務で手一杯、改善という活動まで手が回らない◦ そもそも目に見えるアウトプットが出にくい◦ 限られた契約期間内にやりきる必要がある©ASTER テストプロセス改善研究会

26 じゃあ…

何から取り掛かれば良いのか？

©ASTER テストプロセス改善研究会27 イントロダクション
 テーマ1：

第三者検証の立場での課題とそれに基づく議論
 テーマ2：
開発企業ＱＡの立場での課題とそれに基づく議論
 フロアーを交えて全体ディスカッション©ASTER テストプロセス改善研究会

2017/2/328

 テーマ◦ テストプロセス改善に取り組むにあたり関係者の理解・協力を得るにはどうしたらよいか©ASTER テストプロセス改善研究会

29

 前提

◦ ボトムアップの取り組み（現場のＱＡ担当者主導）◦ ＱＡ部門は開発部門とは異なる組織
 ＱＡは開発チームとは独立した立場でテストを行う
 課題◦ 関係者の理解・協力を得られない
 関係者：上司、開発チームのメンバ、他ＱＡチームのメンバ◦ 理由 関係者はテストプロセス改善の必要性を感じていない
 上司がＱＡ担当者に取り組んでほしい課題と異なる／
開発・他ＱＡメンバが取り組みたい課題と異なる
 関係者は改善による効果やプロセス変更時のリスクがわからないと既存のプロセスを変えたくない 開発・他ＱＡメンバは作業が増えるため、改善に前向きにならない©ASTER テストプロセス改善研究会30 イントロダクション
 テーマ1：

第三者検証の立場での課題とそれに基づく議論
 テーマ2：
開発企業ＱＡの立場での課題とそれに基づく議論
 フロアーを交えて全体ディスカッション©ASTER テストプロセス改善研究会

2017/2/3

31

質問・コメント・反論、など

議論に参加してください©ASTER テストプロセス改善研究会

2017/2/332

 スタッフ部門、開発部門、もしくは上層部からテストプロセス改善の指令が下りる◦ いろいろと勉強した結果、プロセス改善モデルに出会う◦ 現場に導入しようとしたがメンバからは冷めた反応
第三者検証企業

 マネージャはどうすればいいのか？

開発企業
QAチーム

スタッフ

開発チーム

人財リソース
開発企業QAメンバ

近藤高野
第三者検証
メンバ

コンサルディング企業
人財リソーススタッフ部門(SEPG)

廣町コンサルタント

阿部山崎©ASTER テストプロセス改善研究会

2017/2/3

33

パネリスト：阿部 聡（富士通）／近藤 康二（SHIFT）
山崎 崇（ベリサーブ）／高野 愛美（日立製作所）
廣町 幸治（日本ナレッジ）
パネルモデレータ：河野 哲也（日立製作所）
司会：池田 暁（ASTER）