Hugging Face、「Community Evals」を発表 ― ブラックボックスなリーダーボードからの脱却を掲げる

Hugging Faceが公式ブログで「Community Evals」という取り組みを発表しました。タイトルが示す通り、評価基準が非公開な「ブラックボックス」型リーダーボードへの依存から脱し、コミュニティ主導の評価へと軸足を移す方針を打ち出しています。今回参照できた原文情報は限定的で、具体的な仕組みや対象モデルの詳細は明らかにされていません。