JaSST’22 Tokyo
テクノロジーセッション

テスト支援ツールのアジャイル開発とビジネス化の課題に関する事例
2022年3月10日

株式会社ベリサーブ
研究企画開発部 サービス開発課

朱峰錦司© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

株式会社ベリサーブ➢ 35年以上にわたりソフトウェア検証で品質向上に貢献◼ 仕様などの要求事項が満たされているかを評価する Verification と、機能や性能が本来意図された用途や目的に合っているかを評価する Validation
当社の社名にはこの 2つのV を提供する（Service）という想いが込められています
社
設

名立

代表者

株式会社ベリサーブ(VeriServe Corporation)

宇都宮テクニカルセンター
栃木県宇都宮市宿郷2-7-3

IRビル宿郷 5階

2001年7月24日
代表取締役社長 新堀 義之

広島テクニカルセンター

西日本支社

広島県広島市南区荒神町1-2

大阪府大阪市中央区北浜1-8-16

日宝荒神町ビル 2階

大阪証券取引所ビル 19階

従業員数 1,371名（2021年3月末時点 連結）
資本金792百万円（2021年3月末時点）

本社
東京都千代田区神田三崎町3-1-16
神保町北東急ビル 9階

1. 製品検証サービス
事業内容 2. セキュリティ検証サービス
3. その他サービス

西新宿テクニカルセンター
東京都新宿区西新宿6-24-1

子会社
拠点

西新宿三井ビル 14階

株式会社ベリサーブ沖縄テストセンター

AIQVE ONE株式会社
右記参照© 2022 VeriServe Corporation

沖縄テストセンター
沖縄県うるま市字州崎14-1

中部支社

刈谷テクニカルセンター

沖縄IT津梁パーク

愛知県名古屋市東区泉2-27-14

愛知県刈谷市桜町1-24

情報通信機器検証拠点施設

関電不動産高岳ビル 13階

JS刈谷駅ビル 2階

会社名・製品名・サービス名は、各社の登録商標または商標です。

1

当社の研究開発
ベリサーブ

研究企画開発部
内製テスト支援ツールの開発・運用

直接のサービス提供

お客様
案件ベースでのご支援

事業部

サービス開発課
自動テスト推進課

会社名・製品名・サービス名は、各社の登録商標または商標です。

テスト自動化ソリューションの活用推進• OSS：Selenium, Appium…etc• ベンダー製品：Autify, mabl,MagickPod, UFT One…etc

先進技術の目利き・実証実験

技術戦略課© 2022 VeriServe Corporation• QualityForward• GIHOZ• TESTRUCTURE…etc• Model Based Testing• AI4QA, QA4AI• 各種業界規格の策定…etc

2

自己紹介

朱峰 錦司（あけみね きんじ）
➢ 2021年4月に株式会社ベリサーブ入社◼ 研究企画開発部 サービス開発課 課長 / プロダクトマネージャー◆ ベリサーブ内製のテスト支援プロダクト群の全体統制と普及展開に従事➢ 前職は大手SIerにて、全社横断技術部門にて技術開発や商用案件適用支援などに従事◼ 2009年～2013年：ソフトウェアテスト技術を中心に◼ 2013年～2020年：アジャイル開発関連技術を中心に◆ ECサイト基盤・アプリのアジャイル開発適用・PO支援◆ 金融系渉外アプリのアジャイル開発適用・PO支援◆ グローバルコネクテッド基盤・アプリの大規模アジャイル開発適用・PO支援© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

3自己紹介➢ ソフトウェアテスト技術関連の社外活動にも継続的に従事
2013年～2019年

2016年～2017年

WACATE
実行委員

出典： https://wacate.jp/© 2022 VeriServe CorporationICST 2017
運営委員

出典： http://aster.or.jp/conference/icst2017/

会社名・製品名・サービス名は、各社の登録商標または商標です。

2021年～

JaSST nano
お世話係

出典： https://jasst-nano.connpass.com/

4サービス開発課が提供するプロダクト➢ テストプロセスのさまざまな工程を支援するプロダクトを開発・運用中
業界初のテスト分析/設計支援ツール“今すぐ使える”テスト技法ツール

チームによる探索的テストを加速させるツール[仮] 探索的テスト支援ツール
テス
ト計
画テス
ト分
析テス
ト設計テス
ト実
装テス
ト
実
行テスト
完了

テストのモニタリングとコントロールテスト管理をシンプルに。快適、スケーラブルなテスト管理ツール© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

5

サービス開発課が提供するプロダクト➢ テストプロセスのさまざまな工程を支援するプロダクトを開発・運用中
業界初のテスト分析/設計支援ツール“今すぐ使える”テスト技法ツール

チームによる探索的テストを加速させるツール[仮] 探索的テスト支援ツール
テス
ト計
画テス
ト分
析テス
ト設
計

テス
ト実
装テス
ト実
行

テス
ト
完了

テストのモニタリングとコントロールテスト管理をシンプルに。快適、スケーラブルなテスト管理ツール© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

6

QualityForward
は、リリースサイクルの高速化を支え、プロジェクトの大規模複雑化にも対応可能な、テスト管理ツールです。
クラウド型
テスト管理ツール

テスト・品質の可視化のための定常作業を自動化し、エンジニアを煩雑な集計・管理作業から解放します。
✔

快適なパフォーマンスを、テストチームに✔

さまざまな開発モデルに対応✔

素早く細かい分析レポート✔

「シームレスな連携とナレッジの集約・蓄積」でチームを一つに© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

7

GIHOZ
は、各種テスト技法を手軽に利用できるクラウド型ツールです。
アカウント登録のみで、すぐに利用が可能です。
無料

クラウド型
テスト技法
ツール

ソフトウェア開発に関わる全ての人のテスト設計の「作業」をゼロにします。
✔

手軽にテストケースを作成・利用✔

目的に応じてテスト技法を選択✔

ソフトウェア開発の効率化に貢献© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

8

➢ 内製アジャイル開発体制とプロセス© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

9

各ツールの開発体制➢ いずれのツールも小規模アジャイル開発体制で継続開発中◼ Scrumでいうところのスクラムマスターは不在◆ 長期にわたって活動しているチームのため、十分に自己組織化ができているため

QualityForward

GIHOZ

プロダクトオーナー

社員1名

社員1名

プロダクトオーナー補佐

派遣メンバー1名

派遣メンバー1名

内部DevOps

（なし）

社員1名
（※フロントエンドエンジニア）

外部DevOps

業務委託メンバー1名（※フルスタックエンジニア）

業務委託メンバー2名（※バックエンドエンジニアフロントエンドデザイナー）© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

10

プロダクトオーナーチームの活動➢ メイン業務は、調査・ヒアリングをもとに、プロダクトの仕様を策定し、検証すること◼ 仕様策定はプロダクトオーナーで◼ 検証＝受入れテストは以下の観点で分担◆ プロダクトオーナーは新機能・機能変更部分を中心に◆ プロダクトオーナー補佐はリグレッションを中心に➢ 一方で、プロダクトを「買ってもらう」「使ってもらう」ためには、さまざまな周辺業務にも対応◼ プロダクトオーナー◆ プリセールス・営業同行◆ 社内外イベント登壇◼ プロダクトオーナー補佐◆ ツール活用Tipsの記事執筆・情報発信© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

11

各ツールの開発プロセス➢ いずれのツールも、1週間を活動の基本単位にQualityForward

GIHOZ

スプリント期間

1週間

1週間

計画 / 振り返り

木曜午前

金曜午後イチ

要件管理

業務委託先の専用ツール

JIRA
Confluence
Figma

リリース頻度月に1回程度月に1回程度

QA方針• 機能テストはUT/E2Eテストを全自動化• 非機能含め、リリースごとにPOチームで受入れテスト実施• 機能テストはUTを全自動化• 非機能含め、リリースごとにPOチームで受入れテスト実施• 受入れテストの基本シナリオも自動化

自動E2EテストはRuby on RailsのSystem Specを用いて実現© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

自動受入れテストはAutifyを用いて実現

12かくして、ベリサーブのサービス開発課では、アジャイル開発でプロダクトを内製開発し、継続的なローンチができております。

めでたしめでたし！
© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

…

開発ができてもビジネスができるとは、限りません…

JaSST’22 Tokyo
テクノロジーセッション

テスト支援ツールのアジャイル開発とビジネス化の課題に関する事例
2022年3月10日

株式会社ベリサーブ
研究企画開発部 サービス開発課

朱峰錦司© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

[再掲] 当社の研究開発
ベリサーブ

研究企画開発部
内製テスト支援ツールの開発・運用

直接のサービス提供

お客様
案件ベースでのご支援事
業部

サービス開発課
自動テスト推進課

会社名・製品名・サービス名は、各社の登録商標または商標です。

テスト自動化ソリューションの活用推進• OSS：Selenium, Appium…etc• ベンダー製品：Autify, mabl,MagickPod, UFT One…etc

先進技術の目利き・実証実験

技術戦略課© 2022 VeriServe Corporation• QualityForward• GIHOZ• TESTRUCTURE…etc• Model Based Testing• AI4QA, QA4AI• 各種業界規格の策定…etc

17

ツールビジネス確立の壁➢ いずれのツールも、まだ研究開発の一環にとどまっており、当社のメインビジネスと肩を並べる規模のビジネスには至っていない➢ 本日は、これらのツールのさらなるシェア拡大に向けて、実際にプロダクトオーナーチームが直面している
主たる2つの課題と、それに対するアプローチについて紹介する© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

18

課題①
➢ プロダクトのターゲッティング© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

19

①-1 QualityForwardのターゲッティング➢ 現在の当社のメインビジネスは、受入れテストや、システムテストに対するサービスが中心

要件定義

受入れテスト

システムテスト

基本設計

詳細設計

統合テスト

実装

© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

コンポーネントテスト

20

①-1 QualityForwardのターゲッティング➢ QualityForwardの立ち上げ当初は、前述のテストレベルにフォーカスすること「のみ」で、顧客ターゲットを設定していた➢ 現在、初版ローンチから3年以上が経ち、多くの顧客に利用いただくようになった結果、非常に多くの機能追加要望もいただくようになった◼ 例◆ テストチームがサブチームに分かれているので、サブチームごとの進捗が見れるようにしてほしい◆ 派生開発が主流のため、プロジェクト・プロダクトをまたいで、テストケースを再利用可能にしてほしい◆ ツールごとのユーザ管理が煩雑なため、会社のユーザ管理基盤とSSOができるようにしてほしい…etc

限られたリソースで開発していくための優先順位がつけられなくなってきた© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

21

①-1 QualityForwardのターゲッティング➢ 前述の課題解決のために、現在、顧客セグメントの詳細化と優先順位付けを行っている➢ 例えば、前述の機能追加要望例からは、以下のような顧客セグメントの軸を抽出できる◆ テストチームがサブチームに分かれているので、サブチームごとの進捗が見れるようにしてほしい

1プロダクト × 複数QAチーム◆ 派生開発が主流のため、プロジェクト・プロダクトをまたいで、テストケースを再利用可能にしてほしい

複数プロダクト × 1QAチーム◆ ツールごとのユーザ管理が煩雑なため、会社のユーザ管理基盤とSSOができるようにしてほしい…etc

大企業・大規模プロジェクト© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

22

（参考）B2BビジネスにおけるMVP（Most Viable Product）

B2Cビジネスにおいて、MVPは、さまざまなユーザが「共通して望むもの」というアプローチが有効。

一方、B2Bではアンドをとっただけでは、誰も使ってなくれないものになる。
特定の会社層をターゲット層とし、そこにハマるものをつくる必要あり。
参考： https://note.com/yusuke_ohira/n/n7a0110462d3a© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

23

①-1 QualityForwardのターゲッティング➢ 例示した軸を中心に顧客セグメントを詳細化し、以下の観点で直近ターゲットをアップデート中◼ 各セグメントの市場ボリューム◼ QualityForwardのLife Time Value拡大効果➢ 2022年度、QualityForwardは、◼ テスト対象の製品の責任会社に属するテスト組織が、◼ 限られたメンバーで、◼ 並列に、かつ、継続的にバージョンアップする複数の製品に対して、◼ 手動メインの受入れテストを実施する場面を重点的にサポートします※あくまで今時点の仮説であり、今後の状況見合いで変更の可能性あり© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

24

①-2 GIHOZのターゲッティング➢ GIHOZはブラックボックステスト技法全般の活用を支援ツールであり、これらの技法は、結合テストやコンポーネントテストでも活用可能
要件定義

受入れテスト

システムテスト

基本設計

詳細設計

統合テスト

実装

© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

コンポーネントテスト

25

①-2 GIHOZのターゲッティング➢ これまでは、当社のメインビジネス領域での営業活動や、マーケティング活動が中心◼ イベント出展も、JaSSTのような、いわゆる「テスト」系のイベントのみ➢ 今年度から、いわゆる「開発者層」への情報発信を強化中◼ 新規協賛イベントの例◆ Agile Japan◆ Developers Summit

出典： https://2021.agilejapan.jp/© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

出典： https://event.shoeisha.jp/devsumi/20220217

26

課題②
➢ 市場成熟度とカスタマーサクセス© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

27

②-1 テスト管理ツールの市場➢ 日本ではテスト管理ツールがなかなか流行っていない

出典：2018年SQiPシンポジウムランチセッションアンケート© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

28

②-1 テスト管理ツールの市場➢ 例えば、プロジェクト・課題管理ツール「JIRA」は業界で広く活用されている印象➢ なぜか？
◼ システム開発の現場にチケット駆動の考え方が浸透している◆ 勢いのあるOSSの存在⚫ Trac⚫ Redmine…etc◆ 方法論の確立⚫ チケット駆動開発⚫ Scrum / XP
⚫ カンバン◆ 技術交流の場でのさまざまな事例・プラクティスの流通◼ 上記の土壌のおかげで、使いこなすための個別コンサルティングがなくても、ある程度スムーズに使い始められる© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

29

②-1 テスト管理ツールの市場➢ プロジェクト管理市場と比べ、まだまだ成熟していないと考えられる◼ OSSの勢いの欠如◼ テストケースや進捗はこう管理すればいい！という業界テッパンの方法論もない➢ 市場拡大のため、QualityForwardチームとしては、来年度以降以下の2つのアプローチを強化予定◼ ドメインスペシャリストとしてのプロダクトオーナーによる、競合に先駆けたテッパン方法論の確立と、業界イベント・自社イベントを通しての啓発活動◼ 上記の浸透には時間がかかるため、それとは別に、専任要員をアサインの上、個別顧客向けのツール活用スポットコンサル＝カスタマーサクセス活動の実施◆ 「ツールにプロがつく！」コンセプト© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

30

（参考）感銘を受けたカスタマーサクセス➢ 当組織で活用中にクラウドサービスのカスタマーサクセス活動が非常に参考になった◼ カスタマーサクセスが付くことを前提としたビジネスモデル◼ トライアル時に導入目的の可視化とマイルストーン設計ワークショップが実施される◼ 加えて、月イチの活用状況の振り返りMTGも実施される◆ その際に、ツールの活用度合メトリクスと、それにもとづく活動改善案のたたき台も持ってきてくれる➢ ポイントとしては、顧客ごとに張り付き要員ではないところ◼ おそらく1顧客当たり、割り当てているか同僚は月5～10時間程度と考えられる◼ 1人で10社以上を対応可能ならば、専任要員のアサインも現実的か© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

31

②-2 GIHOZも市場開拓強化中➢ 前述のとおり、「開発者層」へのリーチを強化中➢ ただし、いわゆる「開発テスト」、例えばユニットテストやAPIテストにおいてテスト技法を活用することが現状まだ一般的とは言えない状況➢ 今年度から従来の情報発信に加え、以下を強化◼ QualityForwardと同様、プロダクトオーナー自身による、開発者イベントでの開発テストでのテスト技法活用例をふんだんに取り入れたプレゼン登壇◼ 上記の記事化・SNS拡散によるさらなる情報発信強化© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

32

➢ おわりに© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

33

[再掲]

開発ができてもビジネスができるとは、限りません…

まとめ➢ 本気で新規ビジネス立ち上げをする上では、「ただAgile開発が出来ます」では足りない。
➢ プロダクトオーナーシップを支える知見は多岐にわたる。
◼ 適切なターゲット顧客を設定できているか？
◼ ツール単体ではなく、ツールも含めたプロセス・方法論が市場に浸透しているか？

© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

35

プロダクトマネージャー（PdM）というロール➢ 自己紹介でプロダクトマネージャーと名乗りました➢ 本日お話した活動をすべてプロダクトオーナーだけでやるのは不可能➢ プロダクトマネージャーと各ツールのプロダクトオーナーで役割を分担中◼ プロダクトのターゲッティングや、ドメインスペシャリストとしての役割はプロダクトオーナー◼ カスタマーサクセスを強化しようなどの戦略立案や、戦略実現のために社内の他の各部門と連携の上、具体的な施策活動の役割はプロダクトマネージャー© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

36

最終的に目指したい理想的な体制
横断的なツール連携企画や、新規ツール企画なども検討

プロダクトマネージャー(PdM)※ツール横断※ツール個別※ツール横断プロダクトオーナー(PO)DevOps© 2022 VeriServe CorporationUX/UI

プロダクトマーケティングマネージャー(PMM)

QA

会社名・製品名・サービス名は、各社の登録商標または商標です。

マーケ
ティングセールスプリセールス

カスタマー
サクセス

37

➢ おわりのおわりに© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

38

ツールデモ
特にGIHOZについては、無料ツールですので、ぜひお手元でも触ってみてください。

[再掲] サービス開発課が提供するプロダクト➢ テストプロセスのさまざまな工程を支援するプロダクトを開発・運用中
業界初のテスト分析/設計支援ツール“今すぐ使える”テスト技法ツール

チームによる探索的テストを加速させるツール[仮] 探索的テスト支援ツール
テス
ト計
画テス
ト分
析

テス
ト
設計

テス
ト
実
装テス
ト
実
行

テス
ト
完了

テストのモニタリングとコントロール
テスト管理をシンプルに。快適、スケーラブルなテスト管理ツール© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。

40

Thanks foryour attention!

© 2022 VeriServe Corporation

会社名・製品名・サービス名は、各社の登録商標または商標です。