メインコンテンツへスキップ
見出し画像

AmazonのAI水増し問題〜グッドハートの法則と評価指標の限界

    tokenmaxxingという茶番〜AI活用指標が壊れるまで

    Amazonの社内で「tokenmaxxing」という言葉が生まれた。 社内AIツール「MeshClaw」を使って不要なタスクを自動化し、トークン消費量のランキングを上げる行為だ。開発者の80%以上が週次でAIを使うという目標が課され、チームごとの消費量がリーダーボードに表示される。評価には関係ないと会社は言う。現場は「マネージャーが見ている」と感じている。

    MetaとMicrosoftでも同じ現象が確認された。Metaでは一人の社員が独自に「Claudeonomics」というダッシュボードを作り、85,000人のトークン使用量を可視化した。会社公式ではなく、草の根で生まれた競争だ。30日間の総消費量は60.2兆トークンを超えた。その数字が何を意味するか、誰も説明しなかった。Zuckerberg本人もBosworth CTOも、トップ250に入っていなかった。

     
     
    毎日更新。 医師の雑記コラム日記。AIは主にClaude。 分析記事は最初から有料が多め。 無料記事も後に有料マガジン入り(目安:医療・AI関連2週間、他1〜2ヶ月)。 定期マガジン月500円、医療および過去記事込みはメンバーシップ。 サイトマップ参照 Amazonアソシ参加中

    あなたへのおすすめ