株式会社フォトロン(以下、フォトロン)は、ソフトウェア開発機能を部門横断的に統合する組織編成に着手。それに伴うテスト管理時間の急増に対処するため、Web ベースのテスト管理ツール「TestRail」を導入した。従来のExcel管理に比べ、テスト進捗管理の精度向上やテスト管理時間の短縮を可能にし、テストケースを作成する際のチェック漏れも防止。1ヵ月費やしていたテストケースの再作成作業も数日で完了するようになるなど大幅な効率化を実現させている。

できる限りテスターに配慮し使いやすいテスト環境を準備

その有力候補として挙がったのがTestRailだった。機能や使い勝手の他に注目したポイントは3つあったという。

第1に、他のツールとの連携性。フォトロンでは、2019年にUIテスト自動化ツール「Ranorex」が全社レベルで導入されているため、TestRailがRanorexと連携しやすいように開発されている点が重視された。順調に運用が進んでいるRanorexとTestRailを連携することでRanorexで実行したテスト結果を自動的にTestRailに登録することができる。さらに、課題管理ツールとの連携で、テストによって発見された問題を開発部隊とテスト部隊で共有するシステムを構築できる点も挙げられる。

第2に、導入の容易性。2020年1月に無償版を試したところ、導入作業はパブリッククラウド上にサーバを立てて日本語のマニュアル通りに設定していくだけで短時間に完了できたという。和久氏は「別途物理インフラの構築も不要で、メンテナンスの負担が少なく、他ツールとの連携の作り込みも容易な印象を受けました」と述べる。

第3に、日本の代理店がサポートする信頼性。中でもTestRailの更新頻度が適切である点に注目したという。「海外のソフトウェアはアップデートが頻繁に行われるものの、バグが残っているケースもあり、そのまま適用すると不具合が発生して、解決まで業務に支障が出ることもありました。TestRailはテクマトリックスが日本の品質レベルに合わせて最適化した更新ファイルだけを提供していると知ったので、導入後も不安なく運用できると確信しました」と和久氏は話す。

フォトロンは2020年2月にTestRailの採用を決定。最初に取り組んだのは、使い慣れたExcel運用からの移行を円滑に進める社内調整だった。従来のExcelによるテスト管理の仕様や構成にこだわらず、TestRailでもテスターが支障なく扱えるようにフォーマットを組み上げる作業を、テストリーダーとともに取り組んでいったという。「TestRailでは1つのフォーマットにさまざまな情報を投入できる上に、カスタマイズも可能なので、できる限りテスター側に歩み寄り、テスターが使いやすいものになるよう構造やフォーマットなどの準備に時間を掛けました」(和久氏)
その結果、テスターはすぐにTestRailに慣れて、実務的にも以前と変わらないかそれ以上のスピードでテストを行えるようになったという。

確認工数を削減。出荷判定会議の資料はTestRailで作成

TestRailは2020年3月から本格的に活用を開始した。導入後の効果について和久氏は主に3点ほど列挙する。

1つめは、テストケースを作成する際のチェック時間の削減。新しいテストケースを作成する際、これまではExcelのシートをコピーして新しいフォーマットに作り変える作業を毎回行っていたため、抜け漏れがないかチェックに時間がかかっていた。TestRail導入後はWeb上でフォーマットに従ってテストケースを作成するようになったため、テストケースの登録に抜け漏れが減った。また、過去に登録したテストケースを参照・再利用することもできるので、チェック作業が効率的に行えるようになった。「大きなバージョンアップが行われる時などは、Excelのフォーマットを作り直す作業に1ヵ月費やすこともありましたが、現在はTestRailにあらかじめ用意されているフォーマットの調整を行うだけなので、1～2日で完了します。過去のテストケースを見返しやすくなった結果、正確性が向上し、属人的なやりとりが削減され、非常に効率化できました」と和久氏は高く評価する。

2つめは、テスト進捗管理の精度向上。Excelで管理していた時はシートを見比べながら進捗確認を行っていたが、TestRail導入後は、開発部隊のリーダーやテスト部隊のリーダーがそれぞれのタイミングでTestRailにアクセスし最新の進捗状況を確認している。また、進捗レポートも必要な項目をカスタマイズでき、設定した任意の宛先に定期的に届けることができる。TestRailのインターフェイスやレポートは視認性が高く一目で判断できるためリーダーたちにも好評だ。

3つめは、テスト管理時間の短縮。TestRail導入後、和久氏の月あたりの作業時間のうち、 1～2日分は削減されているという。「削減できた時間は、ソフトウェアの仕様の再検討など別業務に費やしています」と和久氏は話す。また、ソフトウェア開発の最終段階で行われる出荷判定会議に向けて、資料を1日かけて作成していたが、TestRailで出力されるレポートを活用することで、わずか数分で完了するようになった。省力化できた上に、見やすく分かりやすくなったという。

TestRailへの移行でExcel運用の課題が顕在化

今後フォトロンでは、TestRailをRanorexに連携させることで、Ranorexのテスト実行結果をTestRailに登録する自動化などを行っていく計画だ。「TestRailへの移行をきっかけに、Excelで行っていた運用上の課題を明らかにすることができました。この体験を元に、他のソフトウェアにもTestRailによるテスト管理の適用範囲を拡大していく考えです」と和久氏は語る。
テスト管理の効率化や自動化によって同社のソフトウェア開発機能の統合は着実に実を結びつつある。テクマトリックスはこれからもそのチャレンジをツールの面から支えていく。