スケール則
AIモデル経験則モデル性能学習データ計算量
スケール則は、おちつきAIラジオではAIの経験則として紹介されたテーマである。DeepSeekをめぐる回の中で、モデル性能を考えるうえでは「モデルサイズ」「学習データ量」「計算量」の3つが大事だと説明されていた。該当箇所を聴く
番組で語られたスケール則の意味
おちつきAIラジオでは、スケール則について、AIにおける経験則として「モデル性能はモデルサイズ・学習データ量・計算量で決まる」と説明されていた。発話上も、この3要素について「その3つが大事だよっていう話」とまとめられている。該当箇所を聴く
このページでの位置づけ
このページでは、番組内でスケール則がどのように語られたかを蓄積していく。現時点では、スケール則はAIモデルの性能を理解するための基本的な見方として、モデルサイズ・学習データ量・計算量という3つの要素に結びつけて語られている。該当箇所を聴く
スケール則を発見した人物
ep.59「Claude躍進の理由は信念にあり！利益より社会貢献を選ぶ異端のAI企業、Anthropicの正体に迫る」では、スケール則が特定の人物と結びつけて語られた。番組では「このダリオっていうのがAIのスケーリング則っていうのを発見した人の一人なのね」と話され、ダリオ・アモデイがモデルを大きくすれば性能が上がるというAIのスケーリング則を発見した人の一人として紹介されていた。該当箇所を聴く
ここにも登場
出典エピソード
- 98a62a3ceaeb81eb57f9ba
- ca770a56b5ace84a888731
各セクションの「該当箇所を聴く」リンクから、番組の発話そのものを確認できます。