なぜ内部網と公共事業のテスト自動化は構築後に止まりやすいのか?

公共機関や金融・規制産業の情報システムでは、法令改正、申請画面の改修、クラウド移行、定期セキュリティパッチによって保守リリースが絶えず発生します。同時にリリースごとに機能回帰の試験結果書と画面証跡を文書で残す必要があるため、手動テストだけでは日程と人員を支えきれません。

そのため次世代構築や高度化事業でテスト自動化を導入するものの、公開直後や保守フェーズへ移った瞬間に実行が止まってしまう事例が少なくありません。原因はツール自体の性能よりも、ネットワーク分離環境におけるパッケージ・ブラウザーの実行制約、外部連携区間のテストデータ汚染、検収様式と乖離した実行ログの3点にあります。[1][2]

インターネットが開かれた開発環境で順調に動いていたスクリプトも、内部検証網へ搬入するとブラウザーバイナリをダウンロードできず1行目で止まります。また本人認証や他機関連携APIが閉じているという理由で主要業務フロー全体を自動化から外してしまえば、ログインと単純照会だけを確認する半端な資産しか残りません。

自動化範囲を選ぶ一般的な原則はテスト自動化は何から始め、何を人に残すべきかで扱っています。本稿ではその基準をネットワーク分離・公共システムおよび規制環境へ適用し、実行環境の固定、連携区間の分離、検収証跡の設計、保守引き継ぎ基準を具体化します。

ネットワーク分離環境で実行基盤とブラウザーの版はどう固定すべきか?

Playwright、Selenium、Appiumなどの自動化ツールは、標準ではインストール時または初回実行時に外部リポジトリからブラウザー実行ファイルやドライバーを取得します。[3] 外部通信が遮断された内部網や検証サーバーでは、この標準動作がそのままインストール失敗とバージョン不一致につながります。

内部網で自動化を安定稼働させるには、スクリプトのリポジトリだけを搬入するのではなく、実行ランタイム、ブラウザーバイナリ、モバイルドライバー、依存パッケージを1つの版固定セットとして束ねて搬入する必要があります。[3][5]

構成要素外部インターネット環境の標準動作ネットワーク分離・内部網で起きやすい失敗内部網における固定設計基準
ブラウザーバイナリインストール時にChromium・Firefox等を外部から取得バイナリ経路の欠落またはOS標準ブラウザーとの版衝突指定版のブラウザーアーカイブを搬入し環境変数でローカル経路を固定
パッケージ・ライブラリnpm・pip・maven リモートレジストリを即時照会セキュリティゲートウェイ遮断によりビルド・導入が中断社内アーティファクト保管庫へのミラーリングまたはオフラインキャッシュ一式の搬入
モバイル端末・Appiumクラウドデバイスファームまたは外部ドライバーの取得USBデバッグ制限およびドライバー導入失敗内部検証室専用の実機・エミュレーターとオフラインドライバー版の固定
CI実行エージェントSaaS型GitHub Actions・外部ランナーで即時実行内部検証サーバーへネットワーク到達不可内部網専用のSelf-hosted Runnerまたは内部Jenkins・GitLab CIエージェントの配置

とくに機関PCや検証サーバーのOSセキュリティパッチで標準ブラウザーの版が予告なく変わると、昨日まで通っていた画面テストが一斉に壊れます。実行サーバーでは自動更新が有効な利用者向けブラウザーではなく、テストランタイムに紐づけた専用ブラウザーバイナリを参照するよう固定することで再現性を維持できます。[3]

搬入手順とセキュリティ点検をデプロイパイプラインに合わせる

内部網へテストコードを移すたびに手動の圧縮ファイルでコピーしていると、どの版のアプリケーションをどの版のテストスクリプトで検証したのか追跡が途切れます。NISTのセキュアソフトウェア開発フレームワーク(SSDF)も、ビルド・検証環境の構成と成果物の完全性を版単位で記録するよう勧告しています。[5]

網間ファイル転送システムを経由する場合でも、アプリケーションのビルドタグとテストスクリプトのコミットハッシュ、実行に使ったブラウザーの版を実行レポートの先頭に併記してこそ、後から回帰失敗が起きた際にコード変更が原因か環境変化が原因かを切り分けられます。

サービスの仕組み

実行結果の信頼を保つ保守 — 変更に強い識別子で実行し、失敗原因を分類・修正して結果を再検証します。

外部機関連携と本人認証区間はどう分けて検証するか?

公共サービスや企業の基幹システムは、公的証明書・簡易認証、行政情報の共同利用、外部決済・収納、SMS・通知配信のように組織外のシステムと噛み合って動いています。検証網から外部機関の本番サーバーを繰り返し呼び出せないからといって、その後ろに続く申請・審査・精算画面まですべて手動検証のまま残せば自動化の効果は大きく損なわれます。

解決策は、外部連携自体の疎通確認と連携以降の内部業務ロジックの回帰検証を二層に分離することです。[1]

  1. 内部業務の回帰レイヤー(スタブサーバー・検証専用の認証トークン): 検証環境に限り外部機関の正常・遅延・エラー応答仕様をそのまま返すスタブサーバー(Stub/Mock)を置くか、セキュリティ審査を経た検証網専用テストアカウントを使い、申請から承認・差戻し・取消までの内部フロー全体をリリースごとに自動実行します。
  2. 連携契約の検証レイヤー(Schema & Contract Check): 自社システムが外部機関へ送る要求電文の必須項目、暗号化・署名形式、タイムアウトとエラーコード処理が連携定義書と一致しているかをAPI階層で自動検査します。
  3. 実連携のスモークレイヤー(承認された点検窓口): 実際の外部テストサーバーとの通信確認は、機関間で合意した点検時間帯に最小件数のスモークシナリオだけを切り出して実行し、結果を別項目として記録します。

この際、検証網専用の認証経路やスタブ設定が本番環境へ絶対に反映されないよう環境分離と権限検証を二重にかける必要があります。OWASPアプリケーションセキュリティ検証標準(ASVS)も、テスト用バックドアや開発用設定が本番ビルドに含まれないよう統制し、権限境界をサーバー側で検証することを求めています。[4]

Web画面、モバイルアプリ、APIのどこに回帰テストを配置すべきか?

すべての検証をブラウザー画面のクリック(E2E UI)だけで実装すると実行時間が長くなり、画面の文言や配置が少し変わっただけでスクリプトが壊れます。反対にAPIだけを検査すると、ブラウザーの描画エラーやモバイルWebViewのスクリプト衝突を見落とします。

保守リリースが多いシステムほど、確認したい目的に応じてWeb・モバイルUIとAPI階層の役割を明確に分ける必要があります。[1][6]

検証レイヤー主に確認する対象推奨比重と実行タイミング破損を減らす設計方法
API回帰検証権限等級別のアクセス統制、入力値検証、状態遷移、エラー応答コード高い(コミット・日次ビルドごとに即時実行)画面を介さず要求・応答スキーマとDB状態変化を高速に検証
Web主要ジャーニー(UI)ログイン、申請・注文、添付提出、最終結果照会などの代表業務フロー中程度(リリースゲートおよび夜間回帰実行)CSSクラスではなく役割(Role)・明示的テスト属性基準で要素を選択
モバイルアプリ・WebViewネイティブ権限、アプリ内WebView遷移、端末別の表示崩れとプッシュ進入主要シナリオに集中(リリース候補ビルドの検証)機関標準の対応端末・OS版リストを着手時点で確定し反復実行
移行・性能比較クラウド移行前後における同一シナリオの応答時間およびエラー率の比較移行リハーサルおよび大規模変更の直前機能回帰シナリオと負荷シナリオの基準指標を併せて記録

回帰範囲をコード変更量ではなくリスクと業務重要度で絞り込む基準は、回帰テストの範囲はコード変更量ではなく何で決めるべきかおよび回帰テスト範囲算定ワークブックでそのまま活用できます。

監理・検収成果物と自動実行の証跡をどう結び付けるか?

公共SI事業や大企業プロジェクトでは、「CIパイプラインが緑(Pass)です」という画面1枚だけでは検収を通過できません。発注元の監督官や監理担当者は、要件定義書の各項目がどのテストケースで検証され、いつ実行されてどの画面とデータ結果を残したかを文書で確認します。[2]

ISO/IEC/IEEE 29119-3テスト文書化標準でも、テスト計画、設計明細、手順、実行ログ、完了報告が追跡可能な識別子で結ばれているべきだと定義されています。[2] 自動化レポートが検収資料としてそのまま使われるには、スクリプトの実行結果が次の4つの情報を自動的に束ねて出力する必要があります。

  • 要件・業務識別子の連結: 各自動テストケースに要件ID(例:REQ-014)と業務分類をメタデータとして付与し、要件追跡表(RTM)と1対1で照合できるようにします。
  • 実行段階別の視覚証跡: 最終の成否だけでなく、主要入力段階と完了画面のスクリーンショット、再生動画、API要求・応答要約を実行時刻とともに保全します。
  • 未検証・除外範囲の明示的な分離: 自動化対象から除外した項目、環境制約で今回スキップした項目(SKIPPED)、まだ実行していない項目を「合格」に混ぜず別表として分離します。
  • 欠陥対応と再検証の履歴: 失敗したケースがどの欠陥チケットとして登録され、修正リリース後に同じケースを再実行して合格した時刻とビルド番号が何かを1行で結びます。

要件変更とテストケースを結び付ける設計は要件が変わるときテスト漏れを減らすトレーサビリティ設計で、検収に提出する品質証跡の構成は品質証跡資料で詳しく扱っています。

サービスの仕組み

製品の文脈を保ち、実行規模を調整 — 固定リードが基準と履歴を引き継ぎ、期間ごとのスクワッドの実行結果を判断の根拠にまとめます。

失敗ログが溜まるとき、製品欠陥と環境・スクリプト問題をどう切り分けるか?

自動テストを数か月運用すると、失敗通知の半分以上が実際のソフトウェアバグではなく、テストデータの枯渇、連携サーバーの一時停止、画面改修後の未修正スクリプトから発生することがあります。すべての失敗を同じ赤色のエラーとして投げるだけでは、運用チームはやがてレポートを見なくなります。

実行レポートと失敗台帳では、失敗原因を少なくとも3つに分類して対応担当者を即座に指定できるようにする必要があります。[6]

失敗分類代表的な兆候一次対応担当再発防止措置
製品・業務欠陥画面・API動作が要件と異なる、権限迂回や 500 サーバーエラーが発生開発・受託事業者担当者欠陥チケット起票後、修正ビルドで同一自動ケースにより再検証
テスト環境・データ問題テストアカウントロック、在庫・予算データ枯渇、検証網DB・スタブの無応答インフラ・検証環境運用者実行前のデータ初期化(Seeding)自動化および環境の事前ヘルスチェック分離
スクリプトの劣化(Stale Script)意図したUI文言・導線改修後に旧セレクターを見つけられずタイムアウトQA・自動化保守担当者画面変更PRとテストセレクター修正を同一リリース周期に束ねて更新

失敗原因を記録して回帰資産として管理する実務様式は、テスト自動化失敗管理台帳からダウンロードして適用できます。

事業終了時の受託事業者からの引き継ぎと保守契約はどこまで定めるべきか?

構築事業が終わる際にスクリプトの圧縮ファイル1つだけを受け取って引き継ぎを終えてしまうと、翌月の保守リリースからは誰もそのテストを回せなくなります。発注機関や運用部門が資産を実際に引き継ぐには、着手時点から引き継ぎ成果物と保守責任を文書で合意しておく必要があります。

外注・SI検収段階における全般的な品質確認基準は外注・SI成果物を検収する前に合意すべき品質基準およびQAアウトソーシングガイドで扱っています。テスト自動化資産を引き継ぐ際は、以下の4点を検収条件に含めます。

  1. 独立実行の再現性確認: 受託事業者の開発者ノートPCではなく、機関の内部検証サーバーまたは検収環境で文書に記載されたコマンドだけで全回帰セットが最後まで実行されるか立会い確認します。
  2. テストデータ準備・初期化機構の引き渡し: 反復実行しても「申請済みの案件」や「残高不足」エラーが出ないよう、事前データ生成・初期化スクリプトとアカウント一覧を併せて引き渡します。
  3. 要件マッピングと除外リストの引き渡し: 全機能のうち自動化された範囲と手動検証として残した範囲を一覧で明確に示し、次の運用者が自動化だけを信じて必須の手動確認を漏らさないようにします。
  4. 保守周期とスクリプト修正責任の合意: 画面や業務規則が変わった際に誰がいつスクリプトを更新するかを決め、社内人員で直接維持しにくい区間は保守契約の範囲として残します。

公共・内部網のテスト自動化を導入する前に確認すること

ネットワーク分離環境や公共システムでテスト自動化を成功させるには、「何件のテストケースを作ったか」よりも「次の保守リリースで人が介入しなくても回り、その結果がそのまま検収証跡になるか」を基準に据える必要があります。

導入を控えているなら、まず①テストが実行されるネットワーク環境と外部接続の許可範囲、②Web・モバイル・API階層別の検証比重、③検収文書に求められる実行ログと未検証分離の様式を3行で整理してみてください。

公共機関向けテスト自動化サービスは、公共Web・モバイル・APIの回帰検証構築からQoretix(コアティクス)ベースの実行ログ・未検証範囲レポート、成果物の引き渡しまでを一貫して支援しており、韓国の情報システム開発サービスなど5品目の直接生産確認とソフトウェア事業者登録の資格を備えています。[6] 一般企業や公共機関での構築範囲はテスト自動化サービスおよびQAアウトソーシングサービスでご相談いただけます。