本文へスキップ

CodeRabbit Verify

パブリックベータ期間中のテスト実行は無料

ユーザーが気づく前に、エージェント型QAで機能バグを検出。

CodeRabbit Verifyはユーザージャーニーを生成してアプリをテストする、エージェント型のQAプラットフォームです。録画やスクリーンショット、ログで失敗を調べ、検出結果をコーディングエージェントに送って修正できます。

テストをエージェントコーディングの速度で実行する

AIコーディングエージェントが生成する変更は、チームが手作業でテストできる量を上回っています。それでもアプリを起動し、ユーザージャーニーを確かめ、不具合をエージェントに報告する必要があります。CodeRabbit Verifyが最初のテストを担うので、チームはリリース前に失敗と完了できなかったチェックを確認できます。

プルリクエストの変更をテスト

CodeRabbit VerifyはPRの差分とコードベースのコンテキストをもとにテストシナリオを生成し、アプリケーション上で実行します。

  • シナリオを生成
  • テストを実行
  • 結果を確認
プルリクエスト #482

購入手続きに20OFFを適用

9f2c4a1

PRのテストシナリオ

バグ2件成功1件

PRの変更・コード・ドキュメント

/checkout/confirmation
ブラウザでの実行00:24
注文を確定しました

キャンバストート

1 × ¥15,000

¥15,000
小計
¥15,000
20OFF割引
−¥3,000
注文合計
¥12,000
アプリ内部の処理額
¥15,000

アプリ内部の処理額が割引後の注文合計と一致しません

録画・スクリーンショット・ログ

コードベースからユーザージャーニーを自動で発見

CodeRabbit Verifyがリポジトリを解析して、ユーザーの目的と操作手順、期待する結果を含むユーザージャーニーを提案。生成されたジャーニーは確認と調整をしたうえで、アプリケーション上で随時またはスケジュールに従って実行できます。

コードベースを解析

アカウント作成や購入手続き、アカウント管理などのジャーニーをリポジトリから見つけます。

生成された手順を確認

各ジャーニーの操作と期待する結果を調整してから承認して保存します。

ジャーニーを実行

実行中のアプリケーションを随時またはスケジュールに従ってテストし、実行ごとの結果を確認します。

リポジトリの分析

acme/shop

app/

app/checkout/

app/checkout/page.tsx対象

app/api/orders.ts対象

app/signup/page.tsx

app/account/

app/account/settings.tsx

README.md

ルートとアプリケーションの動作

生成されたユーザージャーニー

ユーザーの目的

有効な割引を適用して注文する

テストする手順

  1. 15,000円の商品をカートに追加する
  2. 20OFFを適用して注文を確定する
  3. アプリ内部の処理額を確認する

期待する結果

注文合計とアプリ内部の処理額がどちらも12,000円になる

生成された手順を確認してからジャーニーを実行します随時またはスケジュールに従って実行

テストの失敗を調べて修正に回す

検出結果には期待する動作と実際の結果、その裏付けとなる証拠が含まれます。失敗の内容を確かめてから、お使いのコーディングエージェントに修正を依頼できます。

テスト実行を確認

テストシナリオ実行をブラウザでリアルタイムに確認し、録画やスクリーンショット、ログを調査

期待する動作と実際の動作を比較

記録された証拠をもとに、期待するユーザージャーニーと実際のテスト結果を比較

検出結果を渡して修正

バグやブロッカーを関連するコンテキスト付きでCodeRabbit Agentに送って修正を依頼

機能バグ

記録されたブラウザ操作

00:24
/checkout/confirmation
注文合計¥12,000
アプリ内部の処理額¥15,000
  1. 00:0515,000円の注文に20OFFを適用
  2. 00:16注文を確定
  3. 00:24注文合計とアプリ内部の処理額を比較
バグを検出

アプリ内部の処理額に割引が反映されていない

画面の注文合計は12,000円ですが、アプリ内部では15,000円で処理されています

開発者向けの修正ガイド

表示される合計とアプリ内部の処理額を一致させ、ページ再読み込み後の金額も確認してください

修正に必要な情報

検出内容、テストしたリビジョン、環境、証拠

テスト環境は自動で準備

CodeRabbit Agentがサンドボックスを用意して依存関係をインストールし、関連サービスの設定とアプリケーションの起動まで行います。セットアップ手順と環境のスナップショットは再利用できるので、次回以降の準備は簡単です。テストの実行場所は本番環境から切り離されたCodeRabbitのサンドボックスです。

テスト環境
acme/shop · pr/482分離されたサンドボックス
  1. 依存関係をインストール

    プロジェクトのパッケージ

  2. サービスを設定

    ローカルDBと関連サービス

  3. アプリケーションを起動

    アプリの準備完了を確認

  4. 準備した環境を保存

    セットアップ手順とスナップショット

テストの準備完了
PRのブランチ · 9f2c4a1
次回の実行では準備済みの環境を再利用次のテスト実行

よくある質問

次のPRでテストしてみましょう

プルリクエストからシナリオを生成して実行中のアプリケーションをテストし、結果を確認できます。

PRからVerifyを実行 @coderabbitai verify

リポジトリが未設定の場合は、CodeRabbitのコメントにあるセットアップリンクからテスト環境を準備してください。