AIgram

Amazon KiroRankが示すAI評価の限界

元記事公開日: 2026年8月3日

Amazon KiroRankが示すAI評価の限界AI活用事例の構造図評価目的化限界活用代替乖離要望数値での評価背景AIネイティブ業務その他KiroRankAI処理コード・文章生成結論トークン利用の目的化結論数値評価の限界成果打鍵数の減少https://www.itmedia.co.jp/enterprise/articles/2608/03/news007.html

出典: https://www.itmedia.co.jp/enterprise/articles/2608/03/news007.html

AI活用の概要

Amazonでは、非公式のKiroRankが従業員のAIトークン消費量を追跡した。順位を上げるため成果と結び付かないタスクをAIに投げる「トークンマキシング」が起き、2026年5月下旬にランキングは廃止された。AI活用では、人の打鍵数やトークン量だけで成果を評価できない。

背景

生成AIやAIコーディングツールの料金体系は、定額制から従量課金へ移行している。企業は利用量を可視化しやすくなり、その数値を評価に用いたくなる。GMOインターネットグループでは、テレワーク時のタイピング数の減少が在宅勤務の完全廃止を巡る議論の一因となった。

実装・実施内容

Amazonでは従業員が非公式に「KiroRank」と呼ばれる社内ランキングを作り、AIのトークン消費量を追跡した。AIを全く使わない人を把握する点では当初一定の合理性があったが、順位上昇そのものを目指す利用が発生した。上級副社長のデイブ・トレッドウェル氏は、AI利用自体を目的にしないよう求めた。

結果・効果

KiroRankでは、順位を上げるために成果に結び付かないタスクをAIへ依頼する「トークンマキシング」が起きたため、ランキングは2026年5月下旬に廃止された。従量課金ではトークン消費量が増えるほどコストも増える。打鍵数はAI活用が進むほど減るため、どちらも単独の生産性評価指標にはならない。