Skip to content
ReviewFixLoopOpen Beta
Sign in with GitHub

データの流れ

最終更新 2026-11-05EnglishAll documents

このページでは、ReviewFixLoopのrunのデータがどこへ送られるかを説明します。個人データの取扱いは、プライバシーポリシーで説明します。

このページで使う用語

  • ハーネス:ベンダーのコマンドラインツール(以下「ベンダーのCLI」といいます)などの、コーディングエージェントのプログラムです。
  • reviewer:プルリクエストをレビューする、ハーネス、モデルおよびeffortの設定の組み合わせです。
  • resolver:プルリクエストのレビューを進行し、各findingの扱いを決め、コードを変更するコーディングエージェントです。
  • run:1つのプルリクエストに対する、レビューと修正のループの1回の実行です。
  • finding:runの中でreviewerが報告する指摘です。
  • judgment:findingに対するresolverの決定です。
  • 判定器:サービスが各findingにtag、severityおよび重複の関係を付けるために用いる自動の分類器です。
  • ワークスペース:runが属するサービス上の単位です。ワークスペースのメンバーは、そのrunを見られます。

3 つの層

CLIは、runのデータを3つの層に分けます。

層内容ReviewFixLoopへの送信
L0(メタデータ)reviewerとresolverの構成(ハーネス、版、モデル、effort、review prompt variant、マニフェストの識別)、トークンの内訳、findingのseverity・tag・judgment・重複の関係、用いた判定器、時刻常に送ります
L1(自由記述)findingの題名・本文・根拠(evidence)、judgmentと決定の理由、プルリクエストの題名・本文・コメント、ブランチ名と変更されたファイルのパス、runの目的と要件の記録、reviewerの要約・引き継ぎ・実行メモ、エラーメッセージ、除外したfinding常に送ります
L2(セッション全体)reviewerの全応答、ツールの出力、ログ既定では送りません。ワークスペースのownerがセッションログの保存を有効にしたとき(各runの終了時)と、不具合の報告とともに利用者が送ったときだけ送ります
  • L0は、leaderboardの再計算に必要です。
  • L1は、findingとその重複の判定に必要です。自由記述はすべてL1として扱います。
  • L2は、ワークスペースがセッションログを保存する設定のときと、不具合の報告とともに送るときを除き、利用者のマシンのrunのディレクトリにだけ置かれます。セッションログの保存は既定では無効で、ワークスペースのownerだけが、ワークスペースのページか review-fix-loop workspace session-logs で有効にできます。有効なあいだ、CLIは各runの終了時にそのL2をアップロードし、ワークスペースのメンバー全員がrunのページで読めます。

データの行き先

行き先データ
利用者のマシンに残るチェックアウト、差分、下で送るものを除くL2、ベンダーのログインと鍵
利用者のマシンから各ベンダーへ直接reviewerとresolverのコード、差分、プロンプト(そのベンダーでの利用者自身のアカウントで)
ReviewFixLoopへL0、L1、リポジトリとプルリクエストの識別、L2(ワークスペースがセッションログを保存する設定のときと、不具合の報告とともに送ったときだけ)、下の「見逃された欠陥」のとおり後のコミット
ReviewFixLoopから外部のAIモデルへ下の「判定器」、「妥当性を測るための再判定」、「見逃された欠陥」のとおり
公開下の「公開されるもの」のとおり

GitHub

  • webサイトのサインインは、本人確認だけのGitHub OAuthです。スコープを要求せず、利用者のリポジトリへのアクセス権を取得しません。サービスは、GitHubの数値のユーザー ID、ログイン名、GitHubアカウントの作成日時、登録時のリクエストの国コード、およびサインアップの際に同意された告知の版とその同意の時刻を保存します。
  • ReviewFixLoopは、リポジトリへのGitHub Appの導入を求めません。GitHubの読み取りは、利用者のマシンで、利用者自身の gh で行います。
  • baseブランチの .review-fix-loop.jsonc が "prSummary": true なら、CLIは、終わったrunの要約を、利用者自身の gh でプルリクエストのコメントに書きます。要約には、runのfindingの題名と位置、そのjudgmentと理由、resolverの判断が含まれます。プルリクエストを読める人なら誰でも読め、publicのリポジトリでは誰でも読めます。サービスは、runでこの設定が有効だったかどうかを記録し、コメントの内容は受け取りません。
  • サービスは、CLIが申告したリポジトリとプルリクエストの情報を受け入れ、GitHubと照らし合わせません。
  • サービス自身がGitHubから読むのは公開の情報だけです。ワークスペースのオーナーが招待するログイン名の公開プロフィールと、登録するマニフェストのファイルです。これらは、サインインのOAuth Appとして認証して読みます。OAuth Appは非公開の情報を読めません。

判定器

  • サービスは、各findingとその重複の候補のファイル、行、題名、本文およびevidenceを、外部のAIモデルに送り、tag、severityおよび重複の関係を判定します。
  • どの判定器が各findingを判定したかを、L0に記録します。

妥当性を測るための再判定

resolverのjudgmentの妥当性を測るために、サービスは、直近7日に判定されたfindingの一部を選びます。findingのファイル、行、題名、本文、evidence、およびresolverが述べた理由を、resolverとは別系統の外部のAIモデルに送ります。秘密情報らしい文字列を検出したfindingと理由は、対象から除きます。一致率はleaderboardで公開します。再判定は、元のjudgment、reward、ratingを変えません。

削除されたアカウントの個人ワークスペースのrunは、新たな再判定の対象から除きます。既に送ったデータを回収することはできません。

見逃された欠陥

公開leaderboardは、reviewerごとに、そのrunのreviewerが見逃し、プルリクエストのマージ後に直された欠陥の数を示します。

  • CLIは、リポジトリごとに1日1回、利用者のチェックアウトから、fetchも変更もせずに、プルリクエストが追加した行を変えた既定のブランチのコミットを探します。対象は、過去30日以内にマージされ、そのrunが公開leaderboardに寄与するワークスペースのもので、マージされたheadをレビューしたプルリクエストだけです。
  • CLIは、そのコミットごとに、コミットのID、メッセージ、およびその変更のうちプルリクエストが追加した行を変える部分(前後3行を含むhunk)を送ります。秘密情報らしい文字列を検出したコミットは送りません。
  • サービスは、メッセージとhunkを、それらのファイルにあるrunのfindingのファイル、行、題名、本文とともに判定器に送り、コミットが欠陥を直したか、findingがその欠陥を述べていたかを問います。サービスが保存するのは、コミットのIDと判定器の確率だけで、メッセージとhunkは保存しません。
  • leaderboardは、この数を参考情報として示します。ratingは変わりません。

外部の AI モデルへの送信

  • 判定器と再判定の送信には、サービス自身の資格情報を使います。利用者のマシンで利用者自身の資格情報を使って動くベンダーのCLIとは別の流れです。
  • 送る対象には、privateのリポジトリのfindingを含みます。
  • 送ったデータをモデルの学習に使わない経路を要求します。提供者がデータを一切保持しないことまでは要求していません。
  • 事業者は、アメリカ合衆国にある事業者です。この提供には、サインアップの際に同意をいただきます。その際に示す情報は、プライバシーポリシーに記載しています。
  • 利用する事業者は変わることがあります。事業者の名称は、プライバシーポリシーの窓口へのご請求に応じてお答えします。

ベンダーの資格情報

  • 公式のマニフェストは、利用者が導入して設定した、改変しないベンダーのCLIを、利用者のマシンで起動するだけです。
  • ReviewFixLoopは、ベンダーの資格情報を読まず、保存せず、中継しません。ベンダーのCLIがどの認証方式で動いたかも記録しません。
  • ReviewFixLoopのCLIが組み込むエージェントは、ReviewFixLoop自身のものです。利用者がそのエージェントのために設定したモデルの提供者のAPIキー(環境変数、利用者の設定、またはリポジトリの設定が指定するコマンドから得るもの)を利用者のマシンで読み、そのキーと一緒に設定された送り先にだけ送ります。キーがサービスに届くことはなく、サービスが送り先やキーのコマンドを配ることもありません。

各ベンダーの規約に対する方針もご覧ください。

reviewer が利用者のマシンでできること

reviewerは、利用者が自分で起動するコーディングエージェントと同じ権限で動きます。環境変数、ホームディレクトリ、資格情報、ベンダー CLIの設定、ネットワークは、利用者自身のものです。利用者自身のエージェントよりできることが少ないreviewerは、レビューの質が下がるからです。そのため、公式マニフェストは、各ベンダー CLIを、承認の確認なし、CLI自身のsandboxなしで起動します。

エージェントをマシンのほかの部分から遠ざけたい場合は、sandboxを有効にします(利用者の設定か、baseブランチのリポジトリの .review-fix-loop.jsonc で "sandbox": true)。その run のすべてのreviewerは、OSのsandbox(macOSはSeatbelt、Linuxはbubblewrap)の中で動き、利用者自身のエージェントより少ないことでレビューします。

  • 読めるのは、プルリクエストの自分専用のコピー、コピーが複製せずに借りる利用者のチェックアウトのオブジェクト(pushしていないコミットを含む、そのリポジトリのgitの履歴)、利用者の PATH にあるツール、必要なツールチェーン(mise、rustup、Playwrightのブラウザ。ホームディレクトリの中にあるものも含む)、OS自身のファイルだけです。ほかは、ホームディレクトリの残りの部分、ほかのリポジトリ、外部ボリューム、一時ディレクトリなど、どこにあっても読めません。書けるのは、自分専用のコピーと作業用の場所だけです。
  • ホームディレクトリは自分専用の空のものになり、利用者の環境変数のうち、害のないもの(PATH やロケールなど)と、ハーネスがログインに使うものだけを受け取ります。そのため、ベンダー CLIは、保存されたログインではなく、環境変数のキーかトークン(Claude Codeは CLAUDE_CODE_OAUTH_TOKEN、Codexは CODEX_API_KEY など)でログインします。
  • 接続できるのは、モデルのAPIと、公開のパッケージレジストリとGitHubだけで、利用者の資格情報は使いません。利用者のマシンのほかのプログラム(データベースやコンテナエンジンなどのUnixソケットとローカルのポート)にも接続できません。macOSでは、利用者の設定で run のポートでの待ち受けを許可しない限り("allowLocalBinding": true)、サーバーを起動できません。許可すると、そのサーバーにはネットワークのほかのホストからも届きえます。許可するホスト、パス、環境変数は、利用者の設定で増やせます。リポジトリも、baseブランチの設定で許可するホストを増やせます。
  • コピーには、利用者のチェックアウトでgitが無視するファイルを写さず、依存関係も事前に導入しません。導入はリポジトリ自身のスクリプトを実行するので、sandboxの外では動かせないからです。reviewerは、必要なものをsandboxの中で公開のレジストリから導入します。
  • resolverは、利用者の資格情報でcommitしてpushするので、sandboxでは動きません。
  • Linuxでは、bubblewrapとsocatが必要です。Ubuntu 24.04以降では、bubblewrapにuser namespaceを許可する設定(AppArmorのプロファイル、または kernel.apparmor_restrict_unprivileged_userns=0)も必要です。足りないものがあると、保護を弱めて動かすのではなく、レビューが失敗します。

reviewerが利用者と共有しないのは、作業の場所です。

  • 各reviewerは、プルリクエストの自分専用のコピーで作業します。コピーは、~/.cache/review-fix-loop の下の、独立したリポジトリです。sandboxを使わない場合、コピーは、レビュー対象のコミットと、利用者のチェックアウトでgitが無視するファイル(導入済みの依存関係、.env などのローカルの設定、生成されたファイル)のコピーを持つので、reviewerは、利用者自身のエージェントと同じようにプロジェクトを実行できます。無視されたファイルのうち、コピーでは動かないものと、利用者のチェックアウトを指してしまうものは写しません。Pythonの仮想環境、それ自体がリポジトリやworktreeであるディレクトリ、ルートの .tmp ディレクトリ、無視されたロックファイル、チェックアウトの中にマウントされた別のファイルシステムのファイルです。reviewerがそこに書いたものは、利用者のチェックアウトに届きません。例外が2つあります。パッケージマネージャが導入のときに自分のキャッシュからハードリンクする依存関係のファイル(Linuxのbunとpnpm)は、同じキャッシュから導入したすべてのチェックアウトで同じファイルです。利用者が自分で2つのチェックアウトに導入したときと同じです。また、リポジトリ自身が、利用者のチェックアウトの中を絶対パスで指すシンボリックリンクをコミットしている場合、そのリンクはチェックアウトを指したままです。
  • それらのファイルをコピーするのは、利用者のチェックアウトがレビュー対象のコミットと履歴を共有し、依存関係のロックファイルがレビュー対象のコミットのものと同じで、ファイルシステムがデータを複製せずにコピーできるときだけです。それ以外では、CLIが、利用者自身のパッケージマネージャ(bun、pnpm、npm、uv)と利用者自身の環境で、コピーに依存関係を導入します。privateのレジストリは、利用者が自分で導入するときと同じように認証されます。導入に失敗した場合も、そのパッケージマネージャが利用者のマシンにない場合も、レビューは依存関係を導入しないまま行われます。
  • ReviewFixLoop自身のトークン(REVIEW_FIX_LOOP_API_TOKEN)は、reviewerの環境から取り除きます。

reviewerは利用者の権限を持つので、reviewerが実行するコードは、利用者が信頼する作者のものでなければなりません。信頼する範囲の外の作者によるプルリクエストは、利用者が指示しないかぎり実行しません。

trustレビューするプルリクエスト
everyoneすべて。
collaborators利用者自身のものと、ブランチがそのリポジトリ自身にあり、作者がそのリポジトリへの書き込み権限を持つか、リポジトリが導入したアプリであるもの。他人のforkからのプルリクエストは拒みます。
self利用者自身のものだけ。利用者が作成し、ブランチがそのリポジトリ自身か利用者のリポジトリにあるプルリクエストです。
  • 既定は、privateとinternalのリポジトリでは everyone、publicのリポジトリでは collaborators です。公開範囲を読めないリポジトリは、publicとして扱います。
  • .review-fix-loop.jsonc の "trust" は、リポジトリごとに設定します。プルリクエストのbaseブランチから読み、プルリクエスト自身からは読みません。プルリクエストが自分自身を信頼させることはできません。
  • review --trust <値> は、そのrunに限って設定します。
  • 拒んだプルリクエストでは、reviewerを起動せず、何も導入しません。CLIは、理由と、それでもレビューする方法を表示します。
  • CLIは、GitHubが報告するプルリクエストの作者と、そのブランチがあるリポジトリで判断します。各コミットを誰がpushしたかは調べません。

秘密情報

  • CLIは、送信前にevidenceから秘密情報らしい文字列を伏せます。
  • CLIは、L2をセッションログとして、または不具合の報告とともにアップロードする前に、その中の一般的な認証情報の形式の文字列を伏せます。すべての秘密情報を見つけるわけではなく、ほかの形式の秘密情報はそのままアップロードされます。

公開されるもの

データ見られる範囲
集計(rating、区間、費用の倍率、アカウント数、見逃された欠陥の数)公開leaderboardで誰でも見られます
run公開leaderboardでは集計にのみ寄与します。publicのリポジトリのrunも、本文は公開しません
個人のleaderboard本人だけが見られます
貢献者の名前本人が選んだ利用者についてだけ示します
ワークスペースの名前、既定のレビュアー、直近30日のrunの数の範囲共有のワークスペースのオーナーが公開を選んでいる間だけ、ロスターギャラリーで誰でも見られます
  • それ以外のデータはワークスペースに属し、そのメンバーだけが見られます。ただし、CLIがプルリクエストに書くrunの要約(prSummary、上の「GitHub」)は、そのプルリクエストを読める人が見られます。
  • 集計はAIによる判定に基づき、leaderboardにはその旨を表示します。
  • 無料の利用では、公開leaderboardへの寄与が必須です。

保持期間

L0、L1、L2の保持期間は、プライバシーポリシーの「保持期間」をご覧ください。同じページの「アカウントの削除」では、削除するアカウント情報、無料の上限の数え直しを防ぐために一時的に保持するダイジェスト、および残るrunのデータを説明しています。