テストを再実行しない技術

CC BY 4.0

仕組み: テストを走らせようとしたその場で、前回の結果を読む入口を示す

1 作目 第 1 回のラッパーが、テストを走らせるたびに出力の全文を残す先は、tmp/test_last.log です。

つまり、結果の確認に必要なものは、このログの中にあります。ラッパーに足すのは、前回の結果を読む入口 1 つです。

# scripts/test.sh へ追記。--last の分岐は log= と mkdir の直後に置く
if [ "${1:-}" = "--last" ]; then
  if [ ! -f "$log" ]; then echo "No test run recorded yet" >&2; exit 1; fi
  echo "--- last summary (full log: ${log}) ---"
  grep -E "^Finished in " "$log" | tail -1
  grep -E "^[0-9]+ runs, " "$log" | tail -1
  exit 0   # 何も実行しない。読み直すだけ
fi

そして、1 作目 第 1 回で置いた「素のコマンドを止める hook」（🤖AIがラッパーを通さずにテストを走らせようとしたとき、その実行の直前に割り込んで止める仕組み）が、止めたときに🤖AIへ返す案内文に、1 行だけ足します。

To see the result only: scripts/test.sh --last (prints the last summary without re-running)

--last と案内文の 1 行を置いたあとの流れは、次のとおりです。🤖AIが、結果を確かめるために、素のコマンドでテストを走らせようとする → hookが止めて案内文を出す → 案内文に「結果を見るだけなら --last」とある → 🤖AIは一瞬で前回の結果を受け取り、次の作業へ進みます。

指示ファイルは、この仕組みを置く前と同じです。

--last の 1 行目には、出力の全文を残したログの場所を出します。絞ったあとの出力から失敗したテストの名前が消えていても、🤖AIは、全量を再実行する代わりに、このログからその名前を読むことができます。

CC BY 4.0 はここまで

CC BY 4.0

注意: --last が再実行の代わりになるのは、コードを変えていないときだけ

--last の死角は、🤖AIがコードを変えたあとに --last で確認すると、古い結果を新しい結果として読むことです。案内文に「結果を見るだけなら」と書いたのは、🤖AIに --last を案内する場面を、「再実行の代わり」に限るためです。コードを変えたらテストを走らせ、変えていないなら前回の結果を読み直すという区別は、案内文を置いたあとも、🤖AIがつけることとして残ります。

案内文が出るのは、hookが素のコマンドを止めたときだけです。🤖AIがラッパーを通して走らせ直した実行は、案内文なしで最後まで走ります。

検証手順: 一瞬で返ることを確かめる

前提

• 1 作目 第 1 回のラッパーが、出力の全文を tmp/test_last.log に残していること
• そのラッパーに --last（前回の結果を読む入口）を足し、hookの案内文に 1 行を足し終えていること

所要時間: 5 分

手順

1. 🤖AIに、ラッパーでテストを 1 回走らせます。ここでラッパーが、tmp/test_last.log を書き残します
2. 📖あなたが --last を叩きます

合格条件（すべて満たすこと）

• 手順 2 で、--last が前回の結果を表示するだけで終わる（テストが走り出したら、--last が再実行になっています）
• 手順 2 で、手順 1 と同じ件数の行が返る
• 手順 2 で、--last が 1 秒以内に返る

合格しなかったとき

• 手順 2 でテストが走り出した —— --last を付けても、ラッパーがログを読む代わりにテストを実行しています

後始末

• 要りません。手順 1 でも手順 2 でも、コードは変えていません

この検証手順で確かめたのは、「読み直しが速い」ことだけです。--last が再実行の代わりになるのは、コードを変えていないときだけです。

CC BY 4.0 はここまで