1日3万件のレビューを捌くAnthropicのレビューテクニック!
「この番組は、エンジニアの成長は楽しい学びからをモットーに、昨日より少し成長できる学びをワイワイお届けする、エンタメ系テックラジオでございます」
「ちょろい。ございます」
「はい、というわけで、えー、アンソロピックテックブログ紹介おじさんがやってきました」
「お、初めて聞きました」
「嬉しい」
「アンソロピックテックブログ紹介おじさん」
「テックブログ紹介おじさん?」
「はい」

「そんなキャラ、確立してました?」
「いやー、全然ね。数か月前からアンソロピックテックブログ紹介おじさん、やろうとしてましたけどね」
「やろうとしてた?」
「うん」
「はい」
「あ、じゃあもう、気持ちはもう、ばっちりだ」
「ばっちりっすよ、もう」
「オッケー」

「ベテランの域」
「ベテランの域まで行った」
「はい」
「そういうやつが一番怪しいからな」
「まあまあまあまあ」
「ま、トー君の話とかしてましたしね、直近」
「確かに」
「確かにね」

「うん」
「確かに、確かに。そうだな、最近もうね、やっぱね、クロードコードでね、クロードコードしかね、ない、最近の私のテックの接点」
「うーん」
「でも分かる」
「分かる」
「というわけで、今日はですね」
「はい」
「はい」

「えー、ま、ちょっと話題にはなってたんですけど、HowtheClaudeCodeteamdoescodereview」
「クロードコードチームは、どうやってレビューしてんの?って」
「イエス」
「うーん」
「はい。これちょっと、タイムラインをにぎわせてた記事だったんで」
「うん」
「ま、ちょっとこれについてお話ししていこうかなと思うんですけど」
「おお」

「まあ、どんな記事かというと、タイトルの通りですね、クロードコードのチームはどうやってコードレビューしてんの、という話なんですが」
「うん」
「はい。えーと、ま、アンソロピックの、まあ、とあるチーム、ま、クロードコードチームの運用の、ま、お話で」
「うん」
「ま、このチームですね、ま、5月、2026年5月時点では、1日の変更は2,500件だったらしいんですよ」
「え?」
「あー」
「件?」

「件」
「その話か」
「この件がね、ちょっとどういう単位かよく分かんないっす。もう、コミットなのか行なのかよく分かんないっす。ちょっと記事から読み取れんかった」
「まあ、でもなんか、つけた気がしますけどね」
「マージ?まあ、あり得るよね。この文脈的にはさ」
「はい」
「コードレビューの話なんだからさ、プルリクで合ってほしいよね」
「うーん」

「件数」
「うーん、あ、まあ確かに」
「まあ確かに。で、それが9月になったら3万件ですと、1日」
「3万件も?」
「1日?」
「はい」
「やばすぎ」
「すごくね?」

「やってらんないっすよね」
「いや、3万行も書いてないわ」
「ねえ」
「すごい」
「ほんとに」
「しかも少数精鋭ですよね、結構。確か」
「うーん、まあ、そうでしょうね。どうなんだろうね。今となっては人増えてるとかもありそうですけど」
「まあまあ、確かに」

「うん」
「確かにね。3万人いたら分かるもんな、だって」
「いやいやいや、バラバラに作業しすぎやろ。やばすぎるだろ」
「結構だらけてるの、多分」
「うん」
「それを、それをまとめてるリーダー、半端ないけど」
「やばいね」
「うん」

「丁寧に作業しなきゃいけないから、1日1件までしかできないんだよね。アンソロピックの人、実際やだわ」
「確かにな」
「ま、ていうので」
「はい」
「この3万件さばくためには」
「うん」
「まあ、どうしようかなっていう工夫はいろいろやってるんですけど、ま、その中で、じゃあプルリクどうやって回すんだというところで、えー、アンソロピックの中で、ま、プルリクを再定義して、こうやってやってみてるっすっていう、えーと、ブログ記事になってますと」
「うん。プルリクを再定義?」

「そうですね、ごめんなさい。プルリクじゃねえや、コードレビューを再定義」
「あ、コードレビュー。コードレビューね」
「はい、すいません、間違えた。コードレビューね。で、コードレビュー」
「うん」
「これは一般的にの話なんですけど、どんな目的でやられるものでしょう?」
「コードレビューですか」
「はい、あえてじゅんぺいに聞きましょう、じゃあ」
「へー」

「えー、じゅんぺいが出し切ったとおりにのりさんお願いします」
「はい」
「干からびますね、一旦。えー、まあ、間違い、コードの、えー、例えば、これ」
「ま、すごいざっくり言っていいよ」
「はい。同じような関数、なかったっけとか」
「うん」
「なんか、ここ、書き方もうちょっとこういうふうに書いたほうがいいんじゃね、みたいなのを見つけて、いい感じのコードにするっていうのが、コードレビューの意義」
「うん、正解ですね。1つ目は、あの、マージされる前になんかしらの問題を潰すため」

「うん」
「もう1個あります」
「出し切りました」
「え?」
「はい」
「なんやって」
「出し切りました」
「はい」

「はい」
「じゃあ、僕出していいっすか」
「はい」
「メンバーとの絆を育むためですかね、やっぱり」
「難しいこと言いますね」
「難しいこと言う」
「なんとも難しいこと言う」
「難しいこと言いました?」

「うーん、なんかもう、合ってるとも、外れてるとも言いづらい」
「まあ、正面から違うよとは言いづらいよね」
「言いづらいね」
「うん」
「コミュニケーションですから」
「そう。ま、それはさておき」
「うん」
「コード品質は今、じゅんぺいが言ったやつじゃないですか」

「うん」
「あと、バグ」
「もう、じゅんぺいが言ったやつじゃないですか」
「うん」
「うん」
「俺も干からびたかもしんない」
「いや、惜しかったな、じゃあ」
「うん」

「えーと、もう1つがですね、一般的にコードレビューって、あの、理解を共有するために行われると言われております」
「おお」
「絆で合ってるやん」
「いや、そう。だからね、ちょっと難しかったんですよ。だから外れとも言いづらい。ボケなのかもよく分かんない」
「あー、絆で合ってるやん」
「散々ね、あの、コメントの書き方気をつけようねってポッドキャストでも取り扱ってきたばっかりに」
「うん」
「絆を否定するわけにもいかない」

「うん」
「確かにね」
「はい」
「そうだわ」
「ま、っていうね、ま、レビュー一般的にそのへんだと思うんですよ、目的っていうのは」
「うん」
「はい」
「なんで、やっぱりね、ま、この問題を捕まえるっていうところと、チームで理解を共有するっていうところで言うと、ま、複数人がその同一のコード、開発者含めね、複数人が同一のコードを読む、理解するっていうのが、ま、非常に重要と、ま、されてますと」

「うん」
「うん。ただね、3万件もですね」
「うん」
「そんなことできないでしょうと」
「ほんとにそれ。だって、プルリクが1文字だとしても3万文字あるからね」
「そうね。1人だと無理ですね。ちょっと複数人いるかもしんないけどね」
「本や」
「本か?」

「本の」
「3万文字は本か?」
「本の前半の前半やん」
「ま、そんぐらいですね、多分ね。まあ、で、なので、ちょっとこれじゃあまりまへんと」
「はい」
「というので、アンソロピックのチームはどうしたか、どうしたかというと、ま、何が壊れうるかというところに集中しようと」
「うん」
「うん。何を、まあ、そうね、これを通したときに、ま、どういう影響があるかみたいな」

「うん」
「ま、やばそうか、やば、なんだろうな、なんかや、なんかあったときやばそうか、やばくなさそうか」
「うん」
「おっきい問題を起こさないようにしよう」
「うん」
「ま、みたいなふうに、ちょっと問いを立て直して試行錯誤してみましたと」
「うーん」
「うん。で、結局ね、その5月から9月で、ま、プルリクの数が10数倍になってるんで」

「はい」
「ま、人間の時間を削らないといけないし、プルリクあたりの」
「うん」
「で、なおかつ、こんなに変更数増えてるんだったら、普通に考えたら、ま、問題も10数倍起きるわけですよ」
「うん」
「うん。でも10数倍起きたら大変なんで、それの精度も上げていかなければいけないと」
「はい」
「ま、いうので、えーと、まあ、改善をしてこうというところで」

「うん」
「物事を改善するならですね、ちゃんとメトリクスを計測しながら」
「うん、うん、うん」
「ポストモーテムを作りながら、しながら」
「うん」
「えー、改善を図っていく必要があります」
「なるほど。何を計測するんすか」
「はい。で、ここでアンソロピックのチームは、さし、プルリクの差し戻し率と」

「うん」
「あとは、ま、デプロイ後のインシデント率ですね」
「うーん」
「うん。こいつらを測っていきます」
「はい、はい、はい」
「で、これを測りつつ、この差し戻し率、インシデント率が上がったら、やり方間違えてたわ、だし。維持ないし下がってったら改善できたね、みたいな」
「うん」
「維持は変わんないか。で、改善できたら、改善できたというか、えーと、その差し戻し率、インシデント率が下がってったら、あ、やり方よりいいほうに行ってるというので、えーと、ちょっと試行錯誤していきます」

「うーん」
「うん」
「はい」
「というので、ちょっと具体的に、じゃあ何やってるんだというところが、ま、気になってると思うので」
「はい」
「えー、そちらのちょっと紹介に移るんですけど」
「うん」
「二方面ちょっと紹介します。で、二方面っていうのは、1つのプルリク、流れあるじゃないですか。開発して、プルリク出しました」

「うん」
「レビューしました。マージしました」
「はい」
「みたいな、この変更のライフサイクルあるわけじゃないですか」
「うん、うん」
「この変更のライフサイクルごとにこういうことやってます、と」
「うん」
「あとは、えー、効果測定、こうやってるよ、みたいな」

「うん、うん、うん」
「この2つ、ちょっと紹介させていただきます」
「はい」
「プルリクのちょっとライフサイクル、ちょっと紹介したんですけど、すいません、アンソロピックの例入る前に、一旦すごく軽くでいいんで、じゅんぺいとのりさん、普段なんかどんな感じでAIにレビューさせてるかというか、変更に対してなんかレビューをうまく、うまいことやってるかみたいな。うまいことやってるというのはちょっと精神的に厳しいかもしんないんですけど」
「うん、うん」
「なんかどういうふうなことやってるかをちょっと軽く教えてください。参考までに」
「コードはマジで全く見てなくて」
「じゅんぺいは?」

「はい。僕は、僕の場合、ま。なんか機能作るときに、なんかintention.mdみたいな、なんかこういうの作りたいみたいな1枚を整理させて、で、それで機能作って、それに照らし合わせて、テストも作ってもらって、機能ができたら回して、オッケーならもうgoっていうだけですね。テスト失敗したらまた勝手に変更、テスト通るように修正させて回し」
「そのオッケーだったらは?」
「テストが通ったらですね」
「うん、うん、うん、うん」
「はい。ま、そのあと実機でも自分でチェックするんですけど。まあ、でもそれはマージしたあとになるんで」
「いや、まあでも、マージしたあとも入れていい」
「うん」
「はい」

「じゃ、続いてのりさん」
「はい」
「えー、僕はですね、プルリク作ります」
「うん」
「で、作ったら、えー、基本的にはまずね、えー、Cursorのコードレビューが走ります」
「うん」
「そして、コーデックスのコードレビューが走ります」
「ほう。へー」

「2個走ります」
「2重みたいな?」
「Cursorはなんか動いちゃうから止め方分かんないだけです」
「へー。でもCursorあるからいいやってなんないんすね、じゃあ」
「えーとね、それで言うとなんなくて、Cursorはね、基本的にすべて見逃します」
「そんなこと言っていいの?」
「いや、なんだろうな、あれね、レビューっていうかセキュリティチェックなのかな」
「あー、そうなんだ」

「なんかたまに引っかかるんだけど、大体それで引っかかるやつはコーデックスで見つかるし」
「うん」
「大体コーデックスが見つけるやつをCursorは見つけてこないので」
「うん」
「まあ、動いてるだけと思っていいと思う、そこは」
「なるほど、なるほど」
「うん」
「止めたい」

「止める方ありそうだけどな」
「うん、止め方ありそうなんだけどね」
「うん」
「ちょっと止めるのもめんどくさいかってことで」
「うん」
「で、コーデックスがまず動きます。で、あいつ大体。なんか優先度ごとに3つ、3段階で分けて出してくるんすよ」
「うん」
「超やばP1、プライオリティワン」

「うん」
「で、P2が、まあ、直したほうがいいんじゃないのみたいなやつ」
「うん」
「P3は、まあ、余裕、余裕があればみたいな」
「うん」
「で、えー、基本的には全部潰す」
「うん」
「ようにはしている。で、そのレビューのフローは、もうプルリクのURLをですね、Claudeにそのままぶん投げて、あのー、これ直しておいてくれっつって」

「ん?」
「だ」
「今」
「はい」
「登場人物が結構いたと思ってて。CursorとコーデックスとClaudeCodeって出てきましたけど」
「はい」
「ど、どうなってるんですか」
「開発はClaudeCodeでやってたりします」

「ただ、Cursorのレビューが動いちゃう」
「なんか知らんけど、動いちゃい、動いてしまいます」
「なるほど」
「あの、GitHub上でね、GitHub上で動く」
「はい、はい」
「プルリク作ると。で、えーと、プルリクのURLだけ渡して、とりあえずここにあるコメントのやつ全部内容見て、妥当だったら修正して、終わったら@codexで再レビューしておいてっていうのを毎回指示して、何も問題出なくなるまでやりますね」
「うん、うん」
「で、えー、何か問題が出続けるときがあるんですけど、たまに」

「うん」
「何を直してもずっと、ずっとP2が出続けるみたいな」
「うん、うん」
「そういうときは、もう、えー、特に何回やったらとか決めてないんですけど、もうP2でも内容読んで、うーん、こんなんエッジケースもエッジケースだわっていうときは、もう気にせずマージしますね」
「うん、うん」
「そんな感じです」
「ちなみにお二人、AIエージェントに対して、なんか明示的に指示したりとか、なんか入れてるレビュー用のツールやらプロンプトやらみたいな、なんかそんなんってあったりしますか」
「うわ、あるんですけど、もう把握してないな」

「ありません。じゃ、のりさん、デフォで。じゅんぺいはなんか、なんか入れてんのね」
「そうですね。あの、なんかセルフオーディットみたいな、自分で作ったスキルみたいなのとかも、たまにこう、なんかリリースするってなったときは、がっつりチェックしてほしいみたいなのは、そういうスキルを使わせたりしてます」
「うん、うん、うん」
「でも、なんかGitHub上に落ちてるライブラリかなんかを使ったやつも入れているはず」
「ただ、な、何かは今はぱっと出ない」
「もう覚えてないですね」
「オッケー。ありがとうございます。じゃ、ちょっとどっちがClaudeというかアンソロピックに近いか、選手権が、じゃあ開始しますね」
「あ、ちなみに、あの、僕、動作テストは自分でやってます」

「あー、はい、はい、はい、はい。AIにやらせることはない」
「はい」
「ここは、なんか、ちゃんと動くかのテストっていうより、ほんとにこの体験でいいのかっていうテストしてる」
「ふーん、なるほど」
「うん」
「これ、お客さん見たとき分かりにくくねみたいなやつを削ったり削ったり、大体削ることしかないんですけど、削りまくります」
「うん、うん、うん」
「すげえな。マジで作ってると分かんなくなるからな、そのへん」

「うん」
「それ、僕どっちもやってますね」
「ん?」
「iPhone、iPhone、iOS、iPhoneとかでも、なんか、ま、Xcodeとかで立ち上げてもらって、で、画面ぱーってなんかやってもらって、で、なんかAIが、まあ、ここちょっと心配なんで見といてくださいとかって言ってくれたりするんで、ま、そこ含めて実機でさらに自分でチェックみたいのはやりますね」
「うん、うん、うん」
「はい」
「まあ、最後に信用できるのは人間だと。ま、それはそう」
「ですね」

「うん」
「そこは」
「まず使い勝手に関しては全然良くなんない」
「うん」
「フル任せしたら。へー、そうなんだ」
「うん」
「7割ぐらいですよね」
「バカみたいに説明文つけてくる」

「あ、分かります」
「そうなんだ」
「うん」
「ホバーしたときの文章長くねとか」
「そう。これ1つの文章に括弧3つ入って説明書きのほうがもう長いけどみたいなときあるよ」
「へー。いや、あるあるなんだろうな、それは」
「ま、なんかそのへんはね、ちょっとやろうと思えば、Claude.mdとかにもう日本語を複雑にすんなって言ったときはやってくんないのかな。ま、置いといて、ちょっと別件なんで」
「はい」

「はい。じゃあ、ちょっとアンソロピックのやり方紹介します」
「はい、お願いします」
「ま、そんなにね、めっちゃ意外なことはちょっとしかないんですけど、いや、言い過ぎだな、少しあるんですけど」
「うん、うん」
「えー、まずプルリク前ですね」
「プルリク前。はい」
「プルリク前の段階、ま、実装終わりましたぐらいのやつですね」
「うん」

「で、実装終わったら、まずローカルでテストとビルドを自分で回してもらいますと」
「うん」
「うん」
「あとはローカルでのその動作確認をやってもらうらしいです」
「それはAIで」
「で」
「はい」
「うん。で、ちゃんとその動作確認は、なんか動いたかどうかを、ま、見てもらうというよりは、なんか動いた出力をスクショ取って、で、元々のデザインと比べさせたりとか、UIに関しては。あとは、ま、UIじゃなかったとしても出力をちゃんと貼って、実際のに動いたものをAIに見てもらうということを意識してやってるみたいです」

「ふーん」
「で、これを、なんだろうな、なんかテストコードとかっていうよりは、ま、なんか動いたもののスクショとか検証結果みたいなものを確かめてもらうことによって、えー、ほんとか分からんけど、まあ精度2、3倍ぐらい良くなるよって言ってました」
「精度ってなんだ」
「なんか変なのができないというか、正しいものができるものですね。ただ、これの2、3倍の根拠もよく分かんないんですけど」
「うん、うん、うん」
「まあ、精度そっちのほうがいいよって言いたいんだろうなって思ってます」
「うーん」
「で、あとは、えー、サブエージェントを使ってレビューをさせるっていうのも書いてますね」

「なるほどね」
「これ、あの、はい。サブエージェント分からない人がいるかもしれないので、えーと、ま、コーデックスとかClaudeCodeとかで作業すると、そうな、ま、チャットベースで仕事が進んでいくんですけど、そのチャットベースで話をしているAIくん、こいつを、まあ、メインのAIとして、メインのAIとはまた別にサブエージェントにお使いを頼むことがありますと」
「うん、うん」
「お使いを頼む際には、そのメインのやり取りをしてるチャットの内容は読まずに、えー、メインのAIくんがサブエージェントに何かしらの指示を飛ばしてやってくれるので、えー、例えばレビューとかだと、元々の何、なんか設計やら、昔の、ほんとは採用されなかった設計の情報とかが、ま、誤って入っていたときに、メインのAIくんは間違えて作っちゃうかもしんないけど、サブエージェントはそのへんの情報知らないから、ま、公平な目で見てくれるみたいな使い方をするんですけど、サブエージェントって」
「うん、うん」
「ま、なので、サブエージェントを使ってちゃんとレビューをさせると」
「なるほどね」
「はい」

「うわー、なんか勝手に作ってるな」
「まあ、それもあるでしょうし、じゅんぺいが入れた何かの作用なのかも分かんないし」
「そうっすね」
「分かんないな」
「大体3体が違う視点からいつもテン、テストしてますね」
「3体」
「これ、これやってくれんのかな」
「入れてんのかな。大体3体ですね。で、たまに怒るんですよ、僕。ちょっと使いすぎって言って、遅いよって言って怒るんですけど、トークンとか」

「まあ、でも敵対的レビューはいいとはされてますね」
「あ、それだ。敵対的レビュー、はい」
「うん」
「トークンいっぱい使っちゃうけどね」
「うん」
「うーん」
「ま、よくしてますね」
「あとはですね、review.mdを定義しますというふうなことが書いてました」

「うーん」
「ほー。で、review.mdはスキルというよりは、何、レビュー観点が書いてあるだけのプロンプトというか、ま、テキストファイルというか」
「うん、うん、うん」
「なんで、スキルに入れるっていうよりは、レビューするときにここ見てねってスキルに書いておくイメージですね」
「へー、じゃあリポジトリに混ぜてんだ」
「あ、そう。リポジトリごとに定義します。で、何が書いてるかっていうと、このリポジトリ、えー、ソフトウェアにおける、なんか失敗の定義、この機能が動かなかったらだめとか」
「うん」
「あとは、なんかここの機能大事だからみたいな、その重要度の基準とか」

「うん、うん、うん」
「が、ま、書かれてるものっぽいです」
「うーん」
「うーん」
「えー、例えば、えーと、さっき、こ、コーデックスのレビューだと、プライオリティワン、プライオリティツーみたいなことが優先度で書かれてるって言ってましたけど」
「はい」
「なんだ、指摘のレベル」
「うん」

「ここではインポータント3つみたいに定義してるんですけど」
「うん、うん、うん」
「ま、インポータントはこっからここまでみたいな」
「うん」
「えー、挙動を壊したり、データを漏洩したり、戻せないような変更というか、差分というか、バグというか」
「うん、うん」
「は、インポータントにしましょうとか。で、あとは、もうCIでチェックできるようなものは報告すんなとか」
「うーん」

「えー、あと、ロ、ロックファイル見るなよとか」
「うーん、なるほど」
「で、あとは、APIは絶対結合テストしてねえみたいな」
「うん、うん、うん」
「モデルが見てねえとか。なんかそのへんのものを書くんですけど、これは決まった書き方は、まあ、多分なくて」
「うん」
「この記事の中では、ま、こういうふうなこと書くよみたいなことは、まあ、少し紹介されてたんですけど、さっき言ったぐらいのものが紹介されたと思うんですけど、まあ、細かい定義は多分、運用していく中で問題が起きたら書き足してみたいなことをやってくんだろうなと思います」
「うん、うん、うん」

「うん」
「はい。で、ここまでが、ま、プルリク前ですね」
「はい」
「で、次、プルリク出したら」
「出したら」
「出したら」
「はい」
「で、えーと、プルリク出したら、えー、えーと、プルリクにAIのレビュー結果を追記します」

「うーん」
「うん、うん、うん。なるほど。はい。プルリクに記録として残す」
「はい」
「ここでも、じゅんぺいが言ってたように、複数が、複数のエージェントがレビューをするやり方が取られてます」
「うーん」
「ただ、AIのレビューって、のりさんが言ったように、いつまでたってもなんかニッチな」
「うん」
「えーと、指摘をしまくってくると」

「ある」
「これ、あの、自動でループを回してるような形にしてると、トークンを一生消費し続けるし」
「うん」
「時間もかかって」
「そうなの」
「非常に非効率ですと」
「そうなのよ」
「うん。っていうので、じゃあアンソロピックのチームはどうやってるか」

「気になる。これは超気になる」
「っていうと」
「うん」
「ちょっと具体的な数分かんないんですけど」
「うん」
「複数のエージェントで並列してレビューをさせて。で、過半数が指摘したことだけ指摘にする」
「うーん」
「なんか、やっぱAIってめっちゃノイズ出すから、そのノイズをどう削るかがめっちゃ大事だぜみたいなことを」

「うん、うん」
「ま、やっぱ言ってて」
「なるほど」
「で、複数にレビューさせて、多数決で、えーと、指摘の重要性を見極めるっていうんですか」
「うん、うん、うん」
「ってことをやってみたいです。で、あと、レビューの回数、レビューして直して、レビューして直してみたいなのを自律的にやらせてるんですけど」
「うん」
「その回数も制限をかけてます。3周までみたいな」

「なるほど。3周目でインポータント見つかったらどうするんですか。ま、それはやるか、普通」
「やるんじゃないですか。で、やって終わるんじゃないですか」
「うーん。だから、ここまでは3周目超えたらもう無視していいっていうラインがあるのか」
「そう、そう、そう、そう、そう」
「うん」
「で、ですね、なんかちょっと話順番前後しちゃうんですけど、そのレビューの指摘とかも変えた部分を指摘するのもいいんですけど、なんかAIって最初からあったのに、めちゃくちゃ後になって頑張って、ね、指摘をひねり出してくるみたいなこと、やっぱするみたいなんで」
「する。うん」
「その、なんか、元々あったやんけとかもコメントのタグに付けてるみたいです。さっき言った、そのインポータントっていう、ま、始まりに絶対直さなきゃいけないやつと」

「うん」
「に、3つ。直さなくてもいいけど、まあ、細かい指摘」
「うん、うん」
「あと、プレイグジシテン、えーと、プレイグジシテンツ、うん、違う、プリエグジスティングっていう、ま、差分の前からあるよっていう」
「うん、うん、うん」
「タグとかも、ま、付けて。で、それで重要度みたいなのを出して、人が、ま、どこをどうするとかっていうところとか、あと記録に残したりとかするみたいです」
「うん、うん、うん」
「うーん」

「ここまでが多分AIレビューの、えーと、コードレビューの話かですね」
「はい」
「うん。で、まだプルリクの話は続いてて、えーと、セキュリティレビューもAIにやらせます」
「うん」
「うん」
「で、これはClaudeCodeとかでもね、セキュリティレビューコマンドはあるよね」
「うん」
「あるので、ま、そのへんを使ってるのかもしんないし、いや、多分違うと思う。多分、さすがに自前でやってんじゃないかな」

「でも、公式のやつあるよね」
「公式のやつあるっすね」
「うん」
「うーん」
「ま、公式のやつあるんで、ま、特にこだわりない人はそれ使えばいいと思います」
「うん。結構いいという評判は聞きます」
「ね。あとは、まあ、ネット上に転がってるのがあったりとか」
「うん」

「しますね。はい。で、あとCIもちゃんとやりましょうと。ま、lintとか」
「うん」
「ビルドとか、ま、そのへんでしょうね」
「はい、はい、はい」
「自動テストとかか。で、最後」
「はい」
「うそ、あと2個」
「あと2個」

「えーと、レビューの人数」
「うん」
「人間の」
「人間の、はい」
「はい。これ、なんか変更のレベル感によっては変えてるみたいです」
「うーん」
「えーと、ドキュメントだけとか、なんかそういう動作にあんま関係ない系」
「うん」

「の差分に関しては、レビューはゼロ」
「ゼロ」
「おー」
「勝手にやっちゃっていいよと」
「本人でオッケー」
「気づいたら直せる」
「あ、AIがオッケーって言ったら、そう。で、普通の変更の場合」
「はい」

「更新、なんか」
「普通の変更」
「まあ、まあ、まあ普通に変更だよねぐらいのときは」
「うん」
「自分プラス1人」
「まあ、なんか分岐増やしたりとか」
「うん」
「見た目ちょいと変えたりとか。そんな大掛かりじゃない変更ってことっすかね、これ」

「そう思っている」
「うん」
「うん」
「で、あとは、ま、リスク高いよねと呼ばれる、ま、機能に影響あるところなのかな、そのコアの」
「うーん」
「は、レビュー2人。ま、あとCIのワークフローとか」
「はい、はい」
「あとは、ほ、ほかの人が今後参考にするであろう、なんか今まで作ったことないような機能とか」

「うん」
「なんか設計って流用するじゃないですか、似たような機能で」
「うん、うん、うん」
「その、しょう、詳細設計か」
「はい」
「ま、そういう詳細設計、ほかのとこに流用しそうな、なんか新しい感じのやつも、ま、レビューちゃんとやりましょうねというポリシーになってるみたいです」
「なるほど」
「で、これらを踏まえて、マージするときもちゃんとマージキューというものを使ってるみたいです」

「マージキュー」
「はい。これ、僕、恥ずかしながら知らなかったんですけど」
「はい」
「複数の変更を同時にやると、なんかCI通ってるけど、マージしたらぶっ壊れるみたいなことあるじゃないですか」
「うーん」
「なんて」
「あー、各々が通ってるけど、合わせたときにぶっ壊れるみたいなこと?」
「あ、そう、そう、そう、そう、そう」

「はい、はい」
「そんなことが起きないように、えーと、キューになってますと」
「うーん」
「必ず、えー、自分がメインとかに入れる場合は、ほんとに直前の差分とか全部入った状態でCIが全部通って、マージするようにする仕組み」
「へー、なるほど」
「これ、GitHubのエンタープライズかな、とか、あと有料プランであるみたいなんですけど」
「へー」
「フリープランだとなかったんですけど」

「順番にマージしてってるみたいなことですか」
「あ、そうです。はい。まあ、順番にマージしてるやつですね」
「最新にしながら順番にマージしてるってことか」
「そう」
「うーん」
「のを入れて、まあ、ぶっ壊れのを防いでるらしい」
「へー」
「ま、これはね、なんか仕事をしてたら入れたいなと思いました」

「すごいな。それがだってね、1日で3万キュー溜まってるんでしょう」
「ほんと。あ、うん、うん、そう」
「大行列だよ」
「大行列ですね。ま、ちょっと、ま、モノリポの話って書いてるから大行列」
「終わんの、それ」
「終わんないよな。どうなってんでしょうね。ま、でも、ばけもん、ばけもんCIランナーなんでしょうね、多分」
「そういうこと」
「ばけもんアクションズランナーだから、ビルドとかテストは一瞬で終わりますみたいな」

「瞬殺いけんだ。だって絶対さ、テストの量とか」
「うん」
「ビルドの時間も長くな、なんかサービスがでかくなればどんどん長くなるじゃないですか」
「ね、やばそうですよね」
「やばそう。あ、まあ、でもテストは毎回全部走らせてるわけじゃないのかな」
「かも、分かんないですね」
「うん」
「どうなんでしょうね。はい。っていうのが、ま、プルリクしてるときですね」

「はい」
「で、最後、マージしたあと」
「したあと、はい」
「マージしたあとは、えーと、社内に最新版が先行で公開されて」
「うん」
「えー、動かして試しますと」
「うーん」
「うん。で、おかしかったら、なんかそこで」

「うん」
「戻しますと」
「自社の人たちも使ってるからこそって感じだな、それ」
「そうっすね」
「うん」
「と、あとは、あの、戻す週替わりで、なんかオンコール対応する人が決まってるみたいで」
「うん、うん、うん」
「ぶっ壊れたら直す係が常に決まっている」

「うーん」
「ので、もう、まあ、ポリシーとしては、ま、壊さないように上げるけど、ぶっ壊れたらめっちゃすぐ直せるよ。だから、まあ、おっきい問題は起きないよみたいな」
「うん」
「状態になってると」
「なるほど」
「うーん。で、フローとしてはこうなんですけど、ただですよ」
「はい」
「今って、まあ、なんかこうやったらうまくいくんやないかみたいな話ですけど」

「うん」
「で、のりさんとじゅんぺいもね、今、プルリクのレビューをしてると思うんですけど」
「はい」
「AIとかが使って」
「うん」
「コードを変更してると思うんですけど、今のやり方が、あの、真実に近づいてるかというか、正解に近づいてるかどうかなんて分かんないじゃないですか」
「うん?」
「測ったことありますか」

「近づいてます、僕は」
「あー」
「僕も、あの、近づいてるらしいっす」
「そうなの?」
「うん」
「いや、まあ、確かに。どうなんすかね」
「いや、怖いね」
「アンソロピックのチームはね、そのへん定量的にやってます」

「真実に近づいてるかどうか」
「最初にお伝えした、あの、インシデント率とリバート率、差し戻し率か」
「うん」
「リボ、リバート率、測ってるって言ってたじゃないですか」
「うん、うん」
「このへんが若干効いてくるんですけど、えー、毎日、このレビューのフローというか、ま、レビューエージェントかな、レビューエージェントかな、うん、レビューエージェントに過去問を解かせまくってます」
「過去問?」
「はい」

「過去問解かせてんの?」
「はい」
「じゅんぺいも予備校時代に過去問解きまくったと思うんですけど」
「はい。どこ、どこの埼玉大学の過去問?」
「うん、うん」
「解かせまくってるんですかね」
「めっちゃためになるやん」
「そう。なんか、問題を考えるときに、こういう観点で考えたほうがいいんじゃねえかって思考を切り替えて、過去問を解かせて、で、それで点数上がった下がったで、そのさい、方法を採用するかどうかを決めてますと」

「へー、あー、それは定点観測できていいかもな」
「そう。で、なんでreview.mdとかも、まあ、代わり移りゆくものじゃないですか」
「うん、うん、うん」
「で、あと、AIモデルとかも新しいのが出るわけじゃないですか」
「うん、うん、うん」
「で、AIの、ね、モデルが変われば、食わせるべきプロンプトも変わったりするわけじゃないですか」
「うん、うん」
「ね、最初はあなたは、えーと、ソフトウェア開発にすごく詳しいシニアエンジニアですっていうプロンプト食わしたほうが精度いいと言われてたのに、今となってはそうじゃないと」

「確かに」
「はい。っていうので、えー、何か変えるたびにもそうだし、毎日1日1回過去問を解かせてます」
「うーん」
「で、過去問は何かっていうと、過去にリバートしたものとかインシデントが起きたプルリク」
「うん、うん、うん、うん」
「なぜなら、リバートとかインシデントが起こったやつはレビューでそれが漏れてるから」
「賢っ」
「うん」

「すげえな、それ」
「ね、これめっちゃいいっすよね」
「めっちゃいい」
「で、その、何かリバートとか、えーと、インシデントが起きたら、そのプルリクに対して、えー、ここ問題だったよねみたいなのをプルリクに残すんじゃなくて、えーと、別に問題集作っときますと」
「うん、うん、うん」
「で、え、1日1回レビューエージェントに過去問食わせて、で、正解できるかどうか、正解数何点みたいな」
「うん」
「のを出すことで精度を測って、より正解に近づく方法を模索した結果、今の」

「はい」
「さっき紹介してた、なんかreview.md作ったりとか、うんぬんかんぬん」
「うん」
「うーん」
「っていう方法にたどり着いたんやでと」
「はー、なるほどね」
「それはアンソロピックだから成り立ってることではある」
「ではないんじゃないかなと僕は解釈してるんですけど、ちなみにどういうところって思いました?」

「あ、いや、なんか、アンソロピックはさ、要は自分たちがじゃあClaudeCode使ってたら、その製品ごと変えていけるじゃん。そうするとデイリーでチェックする意味ある気がするんですけど」
「うん」
「我々って変更できるのreview.mdぐらいじゃないですか、今のできたやつで言うと」
「ま、review.mdと、どのモデル使うかと」
「うん」
「あとはスキルのところかなと思います」
「あー、そう、そう、そう、そう」
「はい」

「っていうところを考えると、なんか、アンソロピックと同じ重みで考えちゃ良くないんじゃないかなって思ったというか」
「あー、どうなんでしょうね。とはいえ、アンソロピック側も、というか、ま、このチームで話してるスコープで言うと、モデルの改善できるわけではないし」
「うん」
「Claude使って開発してるんだったら、そんなに変わんないんじゃないかな」
「うーん」
「って思いますね。なんか、やっぱ、多分外側の渡す情報を変えるぐらい」
「うん、うん」
「だと思うので」

「うん」
「できることって」
「うん、うん」
「で、ま、ちょっと時間もまあまあいったんで、だんだんクローズしてこうかなと思ってるんですけど」
「はい」
「今日の話で、ま、持ち帰っていただきたいのは、ま、いろいろ言いましたけど、この定点観測させてみるっていうのは、なんか、面白いなと思ってて」
「うん」
「ま、個人開発してるとですね、そんなリバートしたりね、インシデントが起きたりとかっていうのは、まあ、な、ないんですけど」

「うん」
「あんまり。ま、ただ、バグったものは過去にあったので」
「うん」
「そのへんの過去問を今ローカルで用意して、えー、過去問を溶かせたりとか、で、あとはreview.md導入してみてとか」
「うん、うん、うん」
「あと、プルリクに今回の記事の内容の、えー、観点とか項目でレビューさせたりとかっていうことを、まあ、やってみてて」
「うん」
「めっちゃ効果変わったわみたいなのはないんですけど」

「はい」
「別によく分かんない、元々良かったから」
「うん、うん、うん」
「とはいえ、今後モデルが変わったりしたときに、今、僕はレビュースキルとかって自前というか、なんだ、えー、スーパーパワーズベースで自前でちょっとアレンジしてやってるたりとかするんですけど」
「うん、うん」
「なんか、そのへんのプロンプトが腐ってくるのとかを検知できるなと思ってて」
「うん、うん、うん、うん」
「そのへんちょっと効果出たら、またエンディングトークとかでお話ししたいなと思ってやってるので、えーと、説明欄にこの記事載せとくので、これ導入すごく簡単で、この記事読んで、僕のプロジェクトに入れれるのって何って聞いて、で、気になったやつだけ入れてみれば、多分すぐ入ると思うんで」

「うん」
「まあ、仕事で試すのはちょっとハードルあると思うんですけど、個人プロジェクトでちょっと遊んでみると面白いかなと思うので、ぜひぜひやってみてください」
「はい」
「以上、アンソロピックのテックブログ紹介おじさんでした」
「ありがとうございます」
「ありがとうございます。結局、僕とじゅんぺいはどっちが近かったのか。あんまり変わんなかったな」
「まあ、あんま変わんないっすね」
「まあ、そうっすね」

「じゃあ、今回ドローってことで」
「ドローで」
「おー」
「ぜひ、次のね、次のアンソロピックテックブログでまた」
「うん」
「比べてもらいましょう」
「次、どっちが本当のアンソロピックか決めようぜ」
「いや、どっちでもないですけど」

「二者択一」
「いや、でも、のりさんとドローになれる日が来るなんて」
「うん」
「成長しましょう」
「まさかな」
「うん」
「まさか貴様とドローになるとはな」
「はい、では最後お知らせです。ハッシュタグひまじんプログラマーでSNS、ネックスでフィードバック募集してますので、本日のエピソードの感想、えー、俺がアンソロピックだという人、ぜひポストお願いします」

「俺だ、俺だ、俺だ」
「はい、で、あとは、えー、ポッドキャストの説明欄からGoogleフォームで番組の要望、感想、質問お待ちしてます。また、エピソードでは、エピソードではなくチャンネル説明欄からSlackオンラインコミュニティ、ひまプロ談話室の参加申し込みもございますので、ClaudeCode使いたい、使いたいじゃねえな、つ、楽しく使ってるよという方、ぜひぜひお気軽にご参加お願いします」
「どんどんお願いします」
「えー、最後に各種ポッドキャストプラットフォームのフォロー、高評価もお願いしまーす」
「モチベーションになるのでお願いします」
「待ってまーす」
「はい、それではまた次回」
「バイバイ」

「バイバイ」
「あなたが落としたのは、この金のサーバーですか。それとも銀のサーバーですか」
「いいえ、私が落としたのは普通のウェブサーバーです。すみません」
「あなたは正直者ですね。全部のサーバーを上げましょう」
「正直者のエンジニアは不可分散ができるようになりました。それを見ていた欲張りな男がサーバーを落としました」
「あなたが落としたのは、この金のサーバーですか」
「へい、その金のサーバーを落としました」
「どうやらあなたはうそつきのようです」

「そう言って女神は帰っていきました。欲張りな男は復旧できないサーバーの前でわんわん泣いていました」
「サーバーを落としたくないあなたへ。ひまじんプログラマーの週末エンジニアリングレッスン」