Techvify Forge Pulse · 性能
リリース前に、スケールすることを確かめる。
Forge Pulse は、オープンソースの負荷生成基盤の上に組み立てた Techvify の性能テストの実践です。エージェントが定石どおりの負荷・ストレス・耐久テストを用意し、ツール連携がスクリプトを検証してエディタから範囲を限った実行を行います。出力を設定すれば結果はダッシュボードへライブで流れ、しきい値が性能のリグレッションを「失敗した実行」に変えます。本番の後ではなく、前に捕まえます。
- 6
- 連携ツール
- 50 VU
- エディタ内の上限
- p(95)
- しきい値ゲート
含まれるもの
テストを説明すれば、証跡が出る。
AI エージェントによる初期構築
サブコマンドの拡張がスキル一式を導入し、負荷テストのツール連携をエディタに登録します。テストを普通の言葉で説明すれば、エージェントが定石どおりのスクリプトを書きます。
ツール連携 · 6 種
6 つの機能で足ります。スクリプトの検証、エディタ内での範囲を限った実行 (仮想ユーザー 50、5 分の上限)、そしてドキュメントの参照。本格的な負荷テストは CLI か CI から実行します。
負荷、ストレス、耐久
仮想ユーザーを段階的に増やすシナリオとしきい値。レイテンシ p(95) 200 ms 未満、エラー率 1% 未満を実行ごとに強制し、超えれば実行が失敗します。
ダッシュボードへのライブ配信
ランナーをホスト型のメトリクス出力に向ければ、レイテンシ・スループット・エラー率が実行中にライブで流れます。リグレッションは本番ではなく実行の途中で表面化します。
ブラウザとアサーション
ブラウザテストは標準的な自動化 API の対応範囲を広げつつあり、付属のアサーションライブラリが expect() の API を加えます。静的な値には再試行なし、非同期の UI には自動再試行で動きます。
perf/load.js
負荷テストは、エージェントが代わりに書いてくれる小さなスクリプトです。目標の仮想ユーザー数まで増やし、ステータスとレイテンシを検証し、合否を決めるしきい値を宣言します。テスト対象のコードの隣で、一緒にバージョン管理してください。
実行の様子
しきい値が実行を判定する。
しきい値を超えるとランナーが実行を失敗として扱うので、性能のリグレッションが、ユニットテストの失敗と同じようにパイプラインを止めます。同じメトリクスが、テストの実行中にダッシュボードへライブで流れます。
$ run perf/load.js passed: status is 200checks 100.00% ✓ 14820 ✗ 0http_req_duration avg=88ms p(95)=171mshttp_req_failed 0.00% ✓ 0 ✗ 14820vus, max 50 iterations=14820passed: threshold http_req_duration p(95)<200passed: threshold http_req_failed rate<0.01
THRESHOLD p(95) < 200ms171ms
- 仮想ユーザー
- 50 / 50
- レイテンシ p(95) としきい値
- 171 / 200ms
- エラー率と許容枠
- 0.00 / 1.00%
どちらのしきい値も守られました。実行は合格し、リリースゲートは緑のままです。
Setup steps live in the guidebook.
The guidebook carries the current install and configuration steps for every kit, kept in one place so they stay accurate. Open to Techvify users and invited guests.
Open the guidebook