生産性メトリクスの基礎と運用の勘所は、健康診断と同じ
「この番組は「エンジニアの成長は楽しい学びから」をモットーに、昨日より少し成長できる学びをわいわいお届けするエンタメ系テックラジオです」
「さあやってきました」
「はい、ということで、まあちょっと世間話から入るんですけど、えー、なんか最近ちょっと僕自画自賛ムーブ、うん、あ、を、ん、してですね」
「自画自賛ムーブ、はい」
「はい、自画自賛ムーブ、いや違うな、自画自賛したいムーブをしたんですけど」
「自画自賛したいムーブ」
「はい、そう、自画自賛のムーブだとちょっと自画自賛になっちゃう」
「まだしてないんだ、オッケー。その気持ちで聞くわ」
「はい」
「はい」
「今から自画自賛します」
「はいはいはい」
「え、開発チームの、うん、え、生産性を測るツール」
「生産性測るツール、はい」
「が、まあ、ないので」
「ああ、今」
「はい」
「ほお」
「で、まただ、あのー、なんでしょうね、これからも、ま、チームで、うん、なんか振り返りをして、で、何かのアクションをして、やってくわけじゃないですか」
「うん」
「常に。で、なおかつ、おそらく2026年、開発チーム中に僕はなんかすごい開発のライフサイクルが結構抜本的に変わるんじゃないかと思ってて、特にハーネスエンジニアリング周りで」
「ハーネスエンジニアリングっていう単語があるんですか、今」
「はい。すいません、ちょっと知らん単語出してしまって。今日はハーネスエンジニアリングの話じゃないんですけど」
「はいはい」
「まあ要するにね、AIにやらせる仕事を、まあ増やそうというムーブメントだと思ってるんですけど」
「なるほどなるほど」
「まあレビューどこまで人間がやるようにするかみたいなところ含め。それって多分結構インパクトあると思ってて」
「はい」
「測れるようにしときたいなと思って」
「うん」
「で、一晩で、その開発チームの生産性を測るメトリクスを、まあ少し取れるアプリを作って」
「うん」
「で、動かして、で、チーム内で、まあ確認できる状態まで持ってったんですけど」
「一晩で？」
「一晩で」
「それはあれ、寝てる間にAIが働いてみたいなこと？」
「えっと、まあ正確なこと言うと、15時ぐらいにやりたいなと思って、AIがまあ終業ぐらいまで働いてくれて」
「はいはいはい」
「で、次の日の朝もちょろっとやって、動いたぐらいの感じ」
「なるほどね。すげえ、BANを丸ごとすっ飛ばしてた」
「まあBANはすっ飛ばしてません、はい」
「BANを丸、なるほどね。BANまた入れて」
「ほんとにサクッと作れる範囲でやったんですけど」
「はいはいはい」
「っていうのでちょっと今すごい開発チームの生産性のメトリクスというところに非常に関心があるんですよ」
「おお」
「で、というのでなんかちょっと改めて、開発チームの生産性のメトリクスって、まあどんなのがあるんだろうかっていうところ」
「うんうんうんうん」
「をちょっとまあ勉強した話と」
「うん」
「で、あとちょっと勉強した結果ですね」
「はい」
「これちょっと数字取るのも大事だけど、数字よりもなんか正しく運用するほうも結構大事そうだなと」
「うん」
「思っていて」
「うんうんうん」
「でもっと言うと、多分数字を正しく運用してないからうまみを得られてないっていうチームのほうが多そうだなと思ったので」
「はい」
「今日は、なんか正しい運用方法の勘どころ」
「うん」
「を理解できるような」
「うんうんうん」
「ちょっと例え話で締めていくみたいな。最初にだからメトリクスの話をして」
「うん」
「例え話をして締めるみたいな」
「なるほど」
「はい。感じのエピソードを話していこうかなと思ってます」
「おお、え、この、なんでしょう、うーん、生産性の指標っていうのは、さっきあの言ってたなんか、え、今後AI時代で結構そこ変わってくよねみたいな」
「うん」
「ので、えー、新時代に求められる生産性みたいな、なんかそういうことってことですか」
「うーんと、まあ新時代に求められる生産性ではあるんですけど、昔からあるやつです」
「ああ、なるほどなるほど。まあ言うて本質は変わってないよねっていうことか」
「まあそうですね。結局ね、その開発チームのパフォーマンスを測るのって何っていうところは多分変わらないとは思うので」
「なるほど」
「言い方が変わったとしても」
「うんうん」
「うん。というので、まあちょっと昔からあるやつと最近出たやつ紹介しつつ、えー、それを運用する上での勘どころをわいわいお話しさせていただきます」
「お願いします」
「はい。で、まず開発チームの生産性のメトリクスって何言ってんだっていうところがあるかもなと思ってて」
「はい」
「じゃあちょっとのりさんに質問なんですけど」
「はい」
「もし、えー、そうですね、なんか開発チーム、この開発チーム生産性が高い、低いみたいなものを測ろうと思ったときに、のりさんだったらなんかどんなことを見ようと思いますか」
「えーとですね、やっぱこの生産性っていうと、一番よく聞くメトリクスはあの4Keysってやつだと思うんですよ」
「はい」
「で、これ四つの指標がありまして」
「うん」
「で、俺その四つの指標一つも何がなんだか分かってないんですけど」
「はい」
「多分、プルリクを作ってからマージされるまでのリードタイム」
「うん」
「と」
「うん」
「朝会のときの笑い声のデシベル」
「はいはいはいはい」
「と、1on1のときの盛り上がり。と」
「おい」
「えー、寿司田の平均速さ」
「ああ」
「かなって思いますね、多分。はい」
「4Keys」
「4Keys」
「えーと、1eと0byteって感じなんですか」
「1eと0byte。ちょっと、な、なんですか、それ。な、何の世界のやつですか、これ」
「すいません、その辺は」
「そのNumeronっていう昔流行ったV1組の」
「いや、ああ、ちょうどテレビ見なくなったタイミングで始まってたやつですよ、それ」
「はい。ちょっと全然伝わらないんですけど。まあ一個だけ当てた、当たってたっていうタイミング」
「一個だけ当たってた。あ、じゃあ、あれかな、デシベルかな、多分」
「うん。あ、そっちかい」
「ああ」
「えっと、4Keysよく言われて、あ、ごめんなさい、しかも一個当たってないわ、すいません」
「当たってないんだ、しかも」
「はい」
「やっぱ」
「ちょっと惜しかったです、はい」
「やば」
「まあ一つのりさんが言ってた4Keysってやつよく言われるもので」
「はい」
「えー、これはあの、一つがデプロイ頻度ですね」
「デプロイ頻度」
「本番に変更どんぐらいの頻度でデプロイしてるか」
「はいはいはい」
「と、あとはまあ変更のリードタイム」
「うん」
「コードを変更してからマージじゃなくて本番環境にデプロイされるまでの時間」
「ああ、そっちなんだ、ゴールが」
「はい」
「なるほどね」
「そうですね。で、あとは変更失敗率」
「変更」
「デプロイした変更のうちどのくらいの割合で、まあ障害が起きて修正しなきゃいけなくなったか」
「ああ、はいはいはい」
「はい。で、最後がサービス復旧時間。障害が発生したときにそれを復旧させるまでにかかる時間」
「はいはいはい」
「はい。まあなんかこの辺を見るのが、まあいわゆる4Keysと言われるもので」
「はい」
「で、これはあの開発組織のパフォーマンスを測る四つの指標っていうので」
「うん」
「えー、まあ測られるもので。まあなんで、なんでしょうね、まあ今挙げた四つって結局、えー、細かく変更しなさい、えー、コードの変更し始めたら早く本番にデプロイできるような仕組みにしなさい」
「うんうん」
「で、変更は失敗しないようにしましょうね。障害起きてもすぐ直るようにしましょうね」
「うんうんうん」
「まあ確かに。これでまあかい、えーと生産性のメトリクス測れそうだなっていう感じするじゃないですか、これら全部測ったら」
「うん。なんかMeeshiじゃない感じもす、なんか、なんとなく感じるけどな」
「まあそれはそうですね。ただこの四つもおそらく」
「うん」
「もうすっごい揉めに揉めて、厳選に厳選して、まあこの四つにしようってなったんでしょうね」
「うんうんうん。これまず誰が考えた基準なの、これって」
「これはDevOpsResearchandAssessmentっていう団体?まあDoRAっていう団体なのかな?」
「はい」
「が提唱してる指標らしいです」
「あ、そうなんだ」
「はい。これいつからあるんだろう?ちょっと待ってくださいね。2019年?」
「え?ミルクボーイが優勝した年ですか、じゃあ」
「いや、なんでM1換算なん?そして一番ピンとこない、僕はミルクボーイの優勝した年」
「2019だっけ、あれ?」
「おお」
「ちょっと不安になったな」
「裏取りしなきゃいけなくなる」
「不安になった」
「ちょっと待ってね。誰だ?ミルクボーイだ。すげえ」
「おい。ほら」
「なんでぱっと出てくんね?」
「ほら見ろ」
「すごすぎる。なんのスキルなんすか?」
「ほら見ろ」
「はい。で、まあこれはまあ4Keysっていうメトリクスなんですけど、もう一個有名なのがあって」
「うんうん」
「スペースっていうのがあります」
「スペース?これ頭文字だろ、絶対」
「そうです」
「えー、スピード、パワー、アクロバティック、チーズ、エクセレント」
「チーズ。ちょっと惜しかったっすね」
「惜しかった?」
「途中までそろっぽかったっすけどね」
「そうだよね」
「はい。まあこれあの2021年にマイクロソフトとビクトリア大学の共同研究でなんか出たやつで」
「ほお」
「ちょっと2021年で誰ですか、優勝したの」
「えー、あー、錦鯉」
「わー、めっちゃぽいな。正解は?」
「レストランとか?」
「錦鯉」
「ほら見える。ほら見える」
「すごすぎるだろ。なんのスキルなんすか、それ。いやいいな。ちょっといいっすね、それ特技に書いていいっすよ、のりさん」
「マジで?じゃあ」
「はい」
「アバウトなところ覚え直さなきゃいけないな」
「うん。まあそんな数ないっすよ、多分」
「そうか、確かに」
「はい。で、まあちょっと戻って、スペースですね。これあの4Keysだけだとまあ測りきれないよねっていうので」
「うんうん」
「で、4Keys結構なんか定量的に測れるところ」
「うん」
「のメトリクスが並んでたんですけど、スペースはもっとなんか多角的に見るもので」
「うん」
「Sがサティスファクションアンドウェルビーイング」
「アンド?」
「はい」
「うん」
「まあ開発者がね、どんぐらい満足度が高くて、いい感じに働いてるかっていう」
「いきなり計測むずそうだね」
「これむずいっすね。これもインタビューで」
「これスタンプの数とかで測んのかな?」
「いや、大体インタビューで測るのが多いですね、これは」
「うん」
「なんか定期的なアンケートっていうんですか」
「うんうんうん」
「で、二つ目がパフォーマンス」
「パフォーマンス」
「はい。これは」
「雑」
「エンジニアのパフォーマンスじゃなくて」
「うん」
「プロダクトの利用者数とか、なんかそういう。プロダクトにどんだけ」
「うんうんうん」
「影響を与えたかとか」
「ああ、じゃあそのプロダクトのKPIによって変わってくるみたいな感じ?」
「ああ、うん、そうっすね」
「うんうんうん」
「まああとはまあ品質とかバグのなさとかも含まれるみたいですけど」
「おお」
「で、Aがアクティビティ」
「はいはいはい」
「まあこれはまあリリースした数も入るし、えー、インシデントの数とかも入るし、まあいろいろ」
「はいはい」
「だからまあ結構4Keysって具体的に測るものが来ましたけど、スペースはなんかこういうの取りましょうねぐらいの」
「うんうん」
「リードになってますね」
「なるほど」
「で、Cがコミュニケーションアンドコラボレーション」
「うんうん」
「これはあの、いわゆるのりさんが言ってた朝会で」
「盛り上がり?」
「した盛り上がりのデシベル数も入るかもしれないし」
「はいはいはい」
「まああとはチーム内でちゃんとコミュニケーション取れてるかとか、あとドキュメントとかがちゃんと整理されてて、見つけやすくなってるかとか」
「うんうんうん」
「コミュニケーションとかコラボレーションの周りのもの」
「うん」
「で、最後がエフィシエンシーアンドフローっていうので、効率とフロー」
「うん」
「えー、これは、まああの4Keysで言うね、変更リードタイム、なんかコード変更始めてからデプロイされるまでにかかる時間も含まれるし」
「うんうんうん」
「まあエンジニア個々人が、その集中状態を維持して仕事を完遂できるような状態になってるかとか、なんかその辺?フローだからフロー状態か」
「あ、そ、それなんだ」
「はい」
「マジで計測方法謎すぎるけどね」
「いやそう。で、スペースはね、計測方法が全体的にむずい」
「そうだよね。なんならなんか一個一個の文字に対していろいろ詰め込みまくってる印象もありました」
「あ、そうですそうです」
「うん」
「これはだからすごい、なんでしょうね、その4Keysを名指しはしてないんですけど、これなんか論文もあるんですけど」
「うん」
「4Keys名指しにしてないんですけど、僕はなんか4Keysに対してそんななんか、い、い、一つの見方だけじゃ分からんだろう」
「うん」
「だから多角的に見るフレームワーク作ったぜ、的なメッセージを勝手に受け取ってます」
「ああ」
「うん」
「なるほどな。なんか直感だとその中間に何かありそうだけどなって気もしちゃうけど」
「結局多分スペースもまるっと取るんじゃなくて、多分チームにあった、なんかこのチームではここがボトルネックというか、ここを改善すると良さそうだよねみたいな、えーと診断項目っていうんですかね」
「うんうんうん」
「を設定して、で運用していくようなものになるんだろうなって感じですね。なんか論文出てるんですけど、論文の中でなんか具体的にこうやることもできるよっていうのは書いてるんですけど、あんまり実践的なこと書いてねって言ったらあれですけど」
「うんうんうん」
「だからそのまままるっとチーム内に入れられる感じではないなとは思ってるので」
「うーん」
「まあかなり、うーん、まあ理論への熟知というか」
「ああああ」
「うん、開発チームの解像度が高い、なんか組織というか、組織作りへの解像度が高いかつフレームワークを理解して、じゃあ何しようってみたいな」
「はいはいはい」
「そういう理解が求められるフレームワークだったりしますと」
「なるほど。え、てかあれだね、指標、歴史、新しいな」
「うん。まあ今紹介したのはどっちもそうですね」
「なんかこんなにさ、あのー、大事そうなものなのにReactより新しいとなんか不思議でしょうがないね」
「あんまりなんか定量的に測ってこなかったのかな」
「もしくは別の指標があったのかな、当時は」
「まあスクラムで言うとベロシティとかがね、まあ一個言われますけどね。まああれもちょっと生産性を測るものでもないか。未来を予測するために使うだけのものなんで」
「うん」
「うん」
「やっぱステップ数ですか」
「えっとー、コードの?」
「うん」
「ね、アンチパターンって言われるやつね」
「そうなんだ」
「あの、複雑なコードをね、書いたらね、それ増えますから」
「いやまあそうだよな、確かに」
「はい。まあそういうのもあったりするんでね」
「うん」
「まあていうので、えっとー、まあ今までちょっとね、こういう指標がありますよと」
「うん」
「いうのがまあ、これこんなんインターネットで調べたらすぐ出るんですけど」
「うん」
「で、これをね、じゃあ、よっしゃーじゃあツールに入れてつっかおうって思ってもですね、まあうまくいかないですと」
「そうなんだ」
「うん。で、なんでうまくいかないか」
「うん」
「これはですね、まあ運用方法を間違えると良くないんですよね」
「うん」
「で、えっとー、ちょっとのりさんになんかお聞きしたいんですけど」
「はい」
「なんかそういう4Keysとかのなんかアンチパターンって言うんですか」
「うん」
「こうやって運用するとうまくいかないよみたいなので、なんか聞いたことあるやつとかってなんかあったりします?」
「1個もないんですけど」
「1個もないんですけど、どうでもいいです」
「えー、そうだな、なんていうか、例えばだけど」
「うんうん」
「えーっと、うちのチームではこれしか測れないからこれでやってこうってなると、なんか数字のハックとかできるようになりそうだなと思ってて」
「うん」
「例えば極端なこと言うと、えーとー、なんだっけ、あのインシデント、インシデントが起きた回数とか言ってたよね。インシデントだっけ?」
「えっとー、4Keysで言うと、例えば障害が発生したあとに復旧させるまでにかかる時間がし」
「あとなんか、なんか失敗した数みたいなやつか」
「あ、そうですね、変更失敗率も4Keysにありますね」
「うん。あれとかってデプロイの回数とセットで測らないと」
「うん」
「あのー、デプロイ減らせば減るじゃんってなっちゃうから」
「うんうん」
「なんかその数値だけを追っても意味ない状況が起きうるなってのは、まあぱっと思いつくとこですかね」
「うんうん。あ、ありがとうございます。それもまあ、ね、アンチパターンですけど、でも現場で実際運用するとね、まあなんか小さいところから始めようというところの言い訳で」
「うん」
「なんか正当化されちゃいそうじゃないですか」
「そうだね、なんか例えばだけどもうデプロイサイクル決まってるからとか」
「うん。そうそうそうそうそう。いいっすね、いいっすね。で、そのへんってやっぱりこの理論に対して深くね、改めてめっちゃ勉強して理解しないといけないんじゃないかって思われるかもしんないんですけど」
「うん」
「実はそんなことなくてですね」
「ほお」
「誰もが知っているものと照らし合わせながら考えると」
「うん」
「ひょっとしたら全部正しい理解できんじゃないかという仮説を持っていて」
「おお、こっからじゃあ大きな社会実験が始まるわけですね」
「はい。こっからちょっと大きな社会実験です」
「はい」
「で、まああんまりね、ちょっと遠からずな例えで超申し訳ないんですけど」
「うん」
「皆さんが1年に1回受ける」
「うん」
「健康診断に例えるとですね」
「うわー、去年受けてねー」
「受けてねえんだ。ちょっとじゃあ例外の人がいるんですけど」
「はい」
「健康診断に例えると、メトリクスの運用の正しい運用の勘どころが」
「うん」
「見えてくるんですね」
「なるほど」
「はい。っていうちょっと仮説の実験をさせてください」
「はい」
「で、まあよくあるなーっていうアンチパターンを」
「うん」
「並べつつなんですけど」
「うん」
「えー、例えばじゃあ」
「はい」
「僕がまあ今回あのアプリ作ったって言ってますけど、まあでも世の中にもやっぱりこういう生産性を測るツールはいっぱいありますと」
「まあ有名なやつだとね、Findyさんとかが出してるイメージありますね」
「うん。で、ああいうのってね、まあもちろん入れるとまあすごいいろいろ見えますと」
「うん」
「で、これは想像なんですけど、見えるようになって満足する」
「ああ」
「ことあるんですよ」
「はいはいはい」
「ああよしよし見えたっつって」
「うん」
「じゃあまあこれこのままちょっと様子見してこうかみたいな」
「うんうんうん」
「で、そのまま1年経つみたいな」
「なるほどね」
「うん。で、これも結構まあ危機感持ったほうがよくて」
「うん」
「例えばね、多分Findyさんのやつだったらまあ有料なんでしょうしね」
「うんうんうん」
「うん。で、これあの健康診断に照らし合わせてみましょう」
「はい」
「これ健康診断受けます」
「受けました」
「受けました。よっしゃー今年の健康診断も終わったって」
「うん」
「で、数週間後結果届きます」
「届きました」
「見ません」
「見ましょう」
「え、見」
「見ません」
「み、見ないの」
「はい」
「そんなやついる?」
「もうね」
「うん」
「そういう状態なんですよ」
「えー」
「よし、メトリクス見えるツール入れたぞ」
「うん」
「で、結果を見てちゃんと考えないっていうのは健康診断の結果見ないのと一緒」
「えー、とりあえずニヤニヤしちゃうけどな、見て。でも」
「でしょ?」
「でも、とりあえず見てニヤニヤしなきゃいけないんですよ」
「うん」
「てかまあもっと、もう一歩踏みの込むんですけどね、健康診断はね」
「うんうんうん」
「その結果の良し悪しを考えて、で、ネクストアクションがないかどうかっていうのがちゃんと健康診断に書かれてます」
「はいはいはい」
「けどそれをやってない状態と一緒なんですよ」
「そうなんだ」
「うん」
「いやでも全然あるあるか」
「うん」
「あるあるですよ」
「あるあるですよ、多分」
「うん。で、あるあるだし」
「うん」
「で、もっと言うとね、仮に結果が、まあ届いたと」
「はい」
「で、ちゃんと見ましたと」
「うん」
「ニヤニヤしますと」
「うん」
「で、あーなんか体重増えてきたなあ」
「うん」
「メタボリックシンドロームって言われてるなあ」
「うんうん」
「なんかちょっと、なんだっけ、対面で最後お医者さんとしゃべるときにもなんかチクッと言われたなあ」
「うんうん」
「これで終わっちゃだめなんですよ」
「うん」
「これで終わっちゃう人いますよね、多分ね」
「いますね。僕毎年あの尿酸値高いんですけど」
「そうなんだ」
「はい。でもね、どうしていいか分かんない」
「尿酸値ね」
「うん」
「ちょっと僕も専門家じゃないから、尿酸値分かんないですね」
「うん」
「まあでもそれはね、でも多分聞いたら教えてくれるんじゃない?」
「聞いたら教えてくれるか。そこ聞かないからだめなんだよね、きっと」
「そうそうそう」
「うん」
「これも結局ツール入れて」
「うん」
「グラフ見て」
「うん」
「うーん、なんかデプロイ頻度下がってるけどなあとか」
「はいはいはい」
「えー、変更失敗率上がってるなあ」
「うん」
「って終わってるのと一緒なんですよ」
「うんうんうんうん」
「ちゃんと行動を変えて健康になりましょう」
「なるほどね」
「うん。っていうのがまずその1ね」
「はい」
「あるある。あるあるその2」
「うん」
「じゃあデプロイ頻度の話」
「うん」
「あるじゃないですか。で、例えばですよ。じゃあうちの組織はアジャイルなチームだから」
「うん」
「デプロイ頻度。この例えばさっき紹介した4Keysっていうやつって」
「うん」
「このぐらいの基準満たしてたらエリート、エリートランクですみたいなのが基準決まってるんですよ、がっちり」
「へー」
「で、それが1日数回だっけな。ちょっと待ってくださいね。うん、1日複数回」
「うん」
「デプロイをしてたらエリートランク」
「ふーん」
「なんですけど」
「うん」
「じゃあうちはアジャイル目指すから、このエリートランクになるようにみんな開発してくださいと」
「うんうん」
「トップダウンでいきますと。そしたら何が起きますか」
「えー、ちっちゃいタスクばっかやるようになる」
「うん。ちっちゃいタスクばっかやるようになるし、なんなら1回でデプロイしたらいいやつを複数回に分けるかもしれない」
「なるほどね」
「はい」
「ありえるな、全然」
「そう。こういうこと起きるんですよ」
「うんうんうん」
「これもね、多分ね、あるある」
「うん」
「で、これね、開発チームだったらおおおおとしていっちゃうかもしんないですけど」
「うん」
「健康診断に例えるとですね」
「うん」
「うーん、再来週健康診断だからお酒飲むのやめとこうみたいなことなんですよ」
「なるほどね」
「うん」
「はいはいはい」
「それはね」
「うん」
「もともと測りたかったものを測れてない」
「うん」
「うん。もうなんか手段が目的かとは違うな。なんて言うんだろうな」
「うーん」
「うーん。まあ無駄な労力かけてるだけになっちゃうんですよね、だから要するにね」
「うんうんうん。いい格好しようとしてるというか」
「あ、そうそうそうそうそう。なので、まあそういう数字のハック良くないですし。で、もっと言うと、そういうトップダウンでね、指定するのもあんま良くなくてですね」
「うんうんうん」
「下手したらね、じゃあデプロイ頻度がエリートになってない君たちのチーム、いけてないから評価マイナス」
「うん」
「これも良くないんですよ」
「うーんうんうんうんうん」
「だってあれですよ、のりさん。あなた尿酸値Dなんで」
「はい」
「評価マイナス」
「Cマイナスです」
「Cマイナス」
「はい」
「うん、ちょっとなかなか悪いですけど。Cマイナスなんで」
「はい」
「ボーナス削減です、あなたは」
「いえ、待ってください。僕はまだ通風になっていません」
「いや、だめです、尿酸値が低いんで」
「いや、僕は痛くないんで働きます」
「みたいな、なってるでしょうね、その実害出てる、実害出てなきゃいいんですよ、だから、結局」
「うん」
「でも、デプロイ頻度だけ見て評価を下げる行為って、尿酸値だけ見て評価を下げてんのと一緒なんですよ」
「だいぶ理不尽だね」
「そう」
「うん」
「だいぶ理不尽」
「うんうんうん」
「じゃあのりさんは前日に水をガブ飲みするかもしれない。それで薄まるか分かんないけど」
「まあ、薄まったことはないけど」
「ないんだ、やったことあるんだ」
「いや、やってないか、やってないな」
「はい。っていうので、こういうメトリクスとかをね、評価に使ったり、あんまりなんかトップダウンでね、基準を押し付けたりするっていうのが」
「うんうん」
「まあよろしくないと言われます。これもね、あるある」
「うん」
「あと1個か2個にしようかな」
「はい」
「続いてのあるあるです。えー、メトリクス可視化しました」
「はい、しました」
「で、えー、じゃあデプロイ頻度」
「うん」
「週複数回達成してます」
「はい、してます」
「うん。よし、みたいな。で、それでじゃあ週複数回が1回になりました」
「うん」
「うん、まあ1回やってればいいか。みたいなふわっとした判断しちゃだめなんですよ」
「うんうんうん」
「やるべきは明確な基準を設けるべきで」
「はい」
「なんでしょうね、これ今言ったのって、健康診断で言うと」
「うん」
「あのABCDのアルファベットがない状態の判断なんですよ。数字だけ見える状態になっていて」
「ああ」
「その数字が何を意味するのかっていうところの判断をしてない状態」
「はいはいはい」
「分かんないですよね」
「尿酸値7.8ですよみたいな」
「そうそうそう」
「え」
「って言われたとき」
「うん」
「どんな気持ちになるんでしょうね」
「まあ僕は」
「あ、確か」
「ああ、Cマイナスかってなっちゃいますけど」
「でもCマイナスとか基準値がない状態でそのメトリクスだけ渡されると」
「そうだよね」
「全然たまにあるよね、健康診断で」
「あるかな」
「なんかガンマなんちゃらかんちゃら136いね」
「うん」
「あ、いやいやでも基準あるかあれ」
「基準ある基準ある。健康診断は基準あるんですよ」
「あるな」
「だからちゃんとこういうメトリクスを設定するときには基準を設けるべきなんですよね」
「うんうんうん」
「で、まあ基準はチームによってなんかあるべき姿って変わるので」
「うん」
「まあ運用しながらまあ基準を用意する必要があるんですけど」
「うん」
「ただ基準がないと、その基準を終わったときに議論が発生しないっていうんですかね」
「うん」
「その課題だよねっていうのをまあ認識させるためのフックとしてメトリクスがあるべきだと思ってるんで僕は」
「はいはい」
「なのでちゃんと閾値とかを持っておくことによって意味のあるメトリクスになるよねっていう」
「うん」
「で、そういう閾値を持ってないメトリクスってA判定B判定がない健康診断の結果と一緒だよねっていう」
「うん」
「ところになってきますと」
「なるほど。これはあれですか、スペースのほうですか。なんか4Keysはさっきなんか割と明確に決まってるみたいな言ってたけど」
「うん。どちらもですね」
「あ、そうなんだ」
「はい。チームによってハイであるべきなのかエリートであるべきなのかミディアムであるべきなのかも、まあ4Keysでも違うかなと思って」
「ああ、そういうことか」
「はい」
「そもそも自分たちが目指すべきポイントがあるよねっていうことね」
「あ、そうそうそうそうそう。ですですです。はい。っていう感じですかね」
「うん」
「で、あとはまあちょっとちょろっと終わるんですけど。あとは隣のチームに比べてデプロイ頻度が低いなお前らみたいなところって、まあどうでもよくて」
「うん」
「これもね、やっぱ他人のね、けん、結果と比べて」
「うん」
「のりさんの体重は僕より重いですけど」
「うん」
「でもそれはのりさんがでかいからであって」
「うんうんうん」
「身長っていうなんか別の事情があるからここの数字違うよねっていうのはやっぱりデプロイ頻度とか変更リードタイムとかなんかそういうのも関わってくるんで」
「うんうんうん、確かに」
「一概にチーム間で比較するのも良くないし」
「うん」
「っていう感じで」
「うん、プロダクトの性質によって変わりますよね」
「ああ、そうそうそう」
「うん」
「なんすよ。なので、結構こういうメトリクスって健康診断に例えると、それっぽい移動札が得られるというか」
「うん」
「うん」
「なるほどね。いや」
「っていうのをちょっと妄想してしゃべってみました」
「これ逆に、このじゃあメトリクスをどう使うと」
「うん」
「有効活用できるでしょうっていう」
「うんうん。だから結局、まあさっき言ったように」
「うん」
「まあ何のために取ってるんだろうから、まあ逆算して」
「うんうんうん」
「おそらくこのメトリクスを見たときにコミュニケーションが発生するべき」
「うんうんうん」
「なんですよ。なんで、えー、マネジメント層だけが使う、運用するようなものじゃなくて、開発メンバー全員が認識して、で、数字を見たときに」
「うん」
「全員で、あ、この数字だとか問題があるねっていう。認識ができるような運用をすべきですね」
「なるほど。まあだから、だから全員で合意を取ったまず基準を決めて」
「うん」
「えー、じゃあその基準を達成するためになんかその、まあアクションとか会話が生まれたりとか」
「うん」
「じゃあこれだめだったねってなったときに、えー、そこに対してちゃんと反応できるようにするとか」
「うん」
「そういうことですか、これは」
「そうですね」
「うん」
「で、あとはそれが、まあね、評価とか上からの圧に利用されない状態であるべき」
「うんうんうん」
「が、まあざっくり言うと」
「なるほど」
「うん。まあ運用する上で」
「うん」
「大事なことかなと思います」
「うーん」
「ほかにもまあいろいろありますけどね、気にすべきはね。なんか一気に改善しないで1個ずつ課題にフォーカスしてやるよねとか」
「うん」
「あとはまあ定期的にどのぐらいの頻度で見るべきかとか」
「うん」
「1年に1回じゃだめなんすよ、健康診断もね、ほんとはね。健康診断はいいか」
「健康診断はいいんじゃないかな」
「うん。メトリクス見るのは1年に1回じゃだめなんでね」
「うんうんうん」
「健康診断もね、理想を言うと毎朝やってほしいぐらいかもしんないですけど」
「うん」
「ちょっと労力がかかるんであれはね」
「まあでもチェックする頻度はやっぱなんか、うん。ものによって変わってくるなって気はしますね。やっぱ健康診断は年1かもしんないけど、歯科検診は3か月に1回とかね」
「ああ、そうそうそうそうそうそう。それはいいメタファー」
「メタファー」
「ナイスメタファー」
「うん」
「はい。というのでちょっとまあ最近、あのチームの生産性を測るメトリクスというのをまあちょろっと勉強してみたのと」
「うん」
「まあちょっと運用上気をつけるべきだよねみたいなところ。これはあの、えーっと、まあどのメトリクスにも言えるのかな。まあ、あー、システムメトリクスはちょっと違うかもしんないです。メモリ使用率とかには言えないかもしんないですけど」
「うんうんうん」
「まあスクラムのね、中でも言われるね、えー、め、え、ベロシティとか」
「うん」
「まああの辺でも共通で言えることかなとは思うので」
「うんうんうん」
「まあぜひ、もしこういう数字を運用してるチームの方いらっしゃれば、まあぜひ気をつけて運用していただけると良いかなと思います」
「なるほど。ちなみにこれはあの、もし話せる範囲だったらでいいんですけど」
「はい」
「そのチームに実際そのツールを導入してみて」
「はい」
「なんかどんな値を計測して、なんかどう行動が変わったみたいなのって聞けたりするんですか」
「これからです」
「分かりました。続報お待ちしてます」
「はい。あ、今あの、それこそ」
「うん」
「えー、い、い、一旦作ったのってGitHubAPIで取れる範囲で作ったっす」
「うん」
「なので、デプロイ頻度とか変更リードタイムは取れるけど」
「うん」
「サービス復旧時間とかは取れないです」
「ああ、ああ、ああ、ああ、なるほどね」
「だからその辺ちょっとどうやってやろうかなって今考え中だったりするのと」
「うん」
「あとはスペースのほうをまあどこまで拾うかですよね」
「確かにね、あれ結構ざっくりしてるから、結構こっち側で定義しなきゃいけないこと多そうだね」
「ああ、そうそう。で、なおかつなんかそこもどんだけ頑張るべきなのかっていうところもあるし」
「うん」
「まあ最初にやるんだったらね、なんか、んー、まあ4Keysぐらいは取ってやれると良いなと思いつつ、なんかどうやって実装すんだろうなっていうのが、まあ分からんなぐらいの状態なんで」
「なるほど」
「まあそこはね、まあアジャイルに」
「うんうん」
「もうチーム内に一旦簡単なものを共有するっていうところは突破したんで」
「うん」
「もう実際に運用しながらフィードバック回して」
「うん」
「それっぽいものができればいいかなぐらいの気持ちです」
「なるほど」
「なんで続報はこうこう期待」
「はい」
「なのか」
「なのか」
「感じですね」
「分かりました」
「はい。では締めます」
「はい」
「ハッシュタグひまじんプログラマーでSNS、NEXTでフィードバック募集してますので、本日のエピソードの感想とか、あとはそうですね、チームの生産性を測るというか、まあこれもね、結局なんでしょうね、なんか自分で何かチャレンジをしたときに」
「うん」
「何々をこんぐらい削減しましたなのか、効果ありましたっていうために取ろうっていう、まあ下心もあったりするので」
「うんうんうん」
「だからその辺上手な人いたらちょっとぜひノウハウ共有いただけるとありがたいです」
「うん。削減しましたってむずいよなあ、なんか」
「むずい」
「うん」
「あんまりに現れないですからね、なんか。抜本的に良くなんないと数字出ないですからね」
「ね」
「結構破壊的にプロセス変えてとかね」
「うーん。あとなんかその削減しましたは一旦オッケーとして、なんかじゃあそれで空いた分何しましたがめっちゃ大事っすよね」
「そうですね」
「うん」
「それもそう。はい。で、あとはポッドキャストのエピソード説明欄からGoogleフォームで番組の要望、感想、質問お待ちしてます。また、エピソードではなくチャンネル説明欄からSlackオンラインコミュニティひまプロ談話室の参加申し込みフォームもございますので、ぜひぜひ何か刺激を受けたい方いましたら、えー、ご参加お願いします」
「応募してくれたら1週間を目処に招待いたします」
「はい。最後に各種ポッドキャスト、プラットフォームのフォロー、高評価もお待ちしてます」
「お願いします」
「ちょっと最後の最後にちょい話ですけど」
「はい」
「今回はこのツール、ClaudeCodeプラススーパーパワーズっていうプラグインを使って開発したんですけど」
「スーパワー？」
「スーパワー」
「はいはいはい」
「それで略すんとかなあ。で、このスーパーパワーズってやつ」
「はい」
「えっと、使用駆動開発じゃないんですけど」
「うん」
「まあ割と使用駆動開発的になんか開発のプロセスがガチッと固まってて」
「うん」
「なんかもれなく仕様を設計して開発してくれる系のツールなんすけど」
「うーん、なんかワークフローちゃんとしてる系のやつっすか」
「あ、そうそうそうそう」
「ああ」
「で、使用駆動よりもかっちりしてなくて」
「はい」
「プランよりかっちりしてて、なんか使い心地良かったっす」
「へー。気になる」
「なんで、まあこれもね、もう少し使ってみて、なんか良い、良い感じだったらちょっとあとで紹介しようかなと思ってます」
「え、それClaudeのプラグインみたいなこと？」
「はい。ClaudeとCodexかな」
「うんうんうん」
「で使えるプラグインだった気がします」
「あ、じゃあまあスキルズみたいな感じでマークダウンがまとまってる」
「あ、ですね」
「のでワークフローが固まる感じか」
「ですですです」
「はいはいはい」
「えっと、なんだっけな。えー、スキルズで」
「うん」
「実行順を明示的に指定することによって」
「うん」
「なんか今までの、えーと、SDDツールとかでは」
「うん」
「なんかその、絶対テストファーストでやってくださいねみたいなことをしつこく言ってやらせてたことを」
「うん」
「明示的に実行順指定してスキルで順番に実行してるから」
「うん」
「なんか思い描いたやり方でやってくれるようになってるみたいな」
「おー」
「ことを」
「うんうん」
「ちょろっとどっかで見ました」
「へー、おもしろそう」
「まあちょっと詳しくは後日というか、まあ気が乗ったらやります」
「読み解くのおもしろそうっすね、それを」
「うん。あの、とんでもない量ありました」
「あ、そうなんだ」
「スキルの量が」
「そうなんや」
「はい。でもすごいおもしろいっす」
「うん」
「開発以外にも使えてますしね」
「うん」
「あの、正直今回の原稿の一部はそのスーパーパワーズのブレインストームという」
「うん」
「ブレインストーミングというスキルを使って」
「うん」
「ちょっと原稿を一緒にブラッシュアップとかしてました」
「あ、じゃあビジネスマン向けってことっすか」
「いや、ほんとは仕様設計をするスキルなんすけど」
「あー」
「ただクリエイティブ、え、エブリシングクリエイティブタスクっていう」
「うん」
「のを対象にしてるみたいなんで」
「うん」
「だから多分なんでもいけるんじゃないかな、その原稿考えるとかも含め」
「おー、いいね」
「ただまあ考えを整理するっていうスキルなのかな」
「うん」
「ちょっとまあ、ちょっとまだ触りきれてないんで」
「はい」
「3回か4回ぐらいしかやってないから。ちょっと触ってみます」
「はい」
「はい、ではまた次回」
「ばいばい」
「さあ皆さん、次の商品は目玉商品です。こちら、めちゃくちゃでかいエンターキー」
「うわー、おっきー」
「これがあるとストレス発散、生産性アップ、快適な睡眠も」
「え、枕にしちゃうんですか」
「こちらの商品はお値段なんと1,024円」
「わーお、2の10乗」
「そして今、番組終了1時間以内にGoogleフォームよりお便りを送った方はちっちゃいスペースキーも付いてきまーす」
「ポケットに入れて持ち運べますね」
「番組の高評価、フォローもすると会員割引なんと90%オフ」
「え、ほぼタダー」
「今すぐご応募を」
