AIの弱点、"どこ"じゃなく"なぜ"を暴く新技術

AIの評価って、これまで「どこが弱いか」を教えてくれるだけで、「じゃあどう直す?」は人間任せでした。今回はScale AIが発表した新手法「CRAFT」を紹介。採点基準（ルーブリック）を"能力の検査キット"として使い、AIの弱点を階層構造でマッピング → 一番はっきり見える粒度で弱点を特定 → そこを狙った学習データを自動生成、までを一気通貫でやってのける仕組みです。金融・法律の2分野・4モデルで検証し、金融は全モデルでトップの成績を記録。「評価を、次の改善アクションに変える」という発想の転換がテーマです。