Claude CodeがAnthropic自社アプリの日常保守を実行、マージ率46%を達成

Boris Chernyは、AnthropicのiOS、Android、デスクトップ、Web、CLI、Agent SDKのコードベース全体で、クラッシュファザー、デッドコードの削除、重複した抽象化の統合など、12種類の日常的な保守ルーチンをClaudeに実行させている。数週間の間に388件のプルリクエストを作成し、そのうち180件がマージされ、46%のマージ率を記録した。これらのルーチンは複雑なプロンプトエンジニアリングを必要としない平易な言葉のSlackメッセージであり、どのチームでもすぐにこの設定を導入できる。一方で、マージされなかった54%は、人間のレビューが依然として不可欠な領域を示している。

出典： the-decoder.com ↗

Cherny氏によると、Claudeは通常、最初の一回でpull requestを正しく実行する。

ボリス・チェルニー、Anthropicのエンジニア

なぜ重要か

→ 手動によるリファクタリングなしで46%のmerge率が実現可能な自律メンテナンスを示す。
→ エンジニアリング不要で平易な言葉のSlackプロンプトが、日常的なCI/CD自動化を今日から導入可能にする。
→ 54%の却下率は、安全性において人間によるレビューが依然として不可欠な領域を示唆する。

機械が機械をメンテナンスする