リーダーボード

リーダーボードは、おちつきAIラジオのep.22「ベンチマークの読み方を知り『自分軸』で性能評価する技術」で整理された概念で、指標を使ってモデルを評価し並べたランキングのことを指す。番組では、ベンチマーク性能の用語を正確に理解するための区別として説明された。

番組での説明：指標とランキングの区別

しぶちょーは、「リーダーボードっていうのはその指標を使って評価したランキング、これをリーダーボードって呼ぶ」と説明した。番組内では、たとえば数学のテストのような「指標」そのものと、その指標で各モデルを評価して並べた「ランキング（リーダーボード）」とを区別している。指標は何を測るかの物差しであり、リーダーボードはその物差しで測った結果の順位表だ、という整理である。該当箇所を聴く

番組内での位置づけ

この区別は、ベンチマークの読み方を理解するうえでの基礎として語られた。番組では、日本語LLMの順位表であるNejumi Leaderboardや、人間評価によるLMアリーナのランキングなどが、いずれもこの「リーダーボード」にあたる具体例として扱われている。該当箇所を聴く

ここにも登場

• Nejumi Leaderboard