GitHub Blogby Michelle Zhou
元記事公開:
ReviewBench: AIコードレビューのためのオープンベンチマーク
原題: ReviewBench: An open benchmark for AI code review
AI要約
GitHubが、代表的なプルリクエストと多様な正解データに基づいたAIコードレビューエージェントの性能評価ベンチマーク「ReviewBench」を公開した
重要ポイント
- •代表的なGitHubのプルリクエストを基に構築されたベンチマークである
- •多様なソースからの正解データを用いた評価体系を採用している
- •生産環境に即した指標を用いた較正された評価が特徴である