おちつきAIラジオ Wiki
🕸 グラフ

スケール則

AIモデル経験則モデル性能学習データ計算量AI理論LLMモデル開発計算資源

スケール則は、おちつきAIラジオではAIの経験則として紹介されたテーマである。DeepSeekをめぐる回の中で、モデル性能を考えるうえでは「モデルサイズ」「学習データ量」「計算量」の3つが大事だと説明されていた。該当箇所を聴く

番組で語られたスケール則の意味

おちつきAIラジオでは、スケール則について、AIにおける経験則として「モデル性能はモデルサイズ・学習データ量・計算量で決まる」と説明されていた。発話上も、この3要素について「その3つが大事だよっていう話」とまとめられている。該当箇所を聴く

「札束則」という呼び名

おちつきAIラジオでは、スケール則は「札束則」という呼び名でも語られており、「とにかく全てが大きければどんどん性能上がるよ」という考え方だと紹介されている。すべてを大きくしさえすれば性能が伸びていく、というシンプルな発想として番組で説明された。該当箇所を聴く

この発想の体現者としては、ChatGPTが引き合いに出された。番組では「モデルを大きくすることしか考えてない」と評され、あの時のトランクスのような状態だと例えられている。ひたすら大きさで押していく姿勢を、パワーアップに振り切ったキャラクターになぞらえる形で語られていた。該当箇所を聴く

スケール則を発見した人物

ep.59「Claude躍進の理由は信念にあり!利益より社会貢献を選ぶ異端のAI企業、Anthropicの正体に迫る」では、スケール則が特定の人物と結びつけて語られた。番組では「このダリオっていうのがAIのスケーリング則っていうのを発見した人の一人なのね」と話され、ダリオ・アモデイがモデルを大きくすれば性能が上がるというAIのスケーリング則を発見した人の一人として紹介されていた。該当箇所を聴く

このページでの位置づけ

このページでは、番組内でスケール則がどのように語られたかを蓄積していく。現時点では、スケール則はAIモデルの性能を理解するための基本的な見方として、モデルサイズ・学習データ量・計算量という3つの要素に結びつけて語られている。該当箇所を聴く

他との関係

おちつきAIラジオでは、スケール則(札束則)はあくまで一方の路線として位置づけられており、番組ではこれと対比する形で別の方向性も語られていた。すべてを大きくする発想に対して、用途を絞り込んで的確に使っていく産業特化モデル戦略(産業特化モデル戦略)が、もう一方の選択肢として並べて論じられていた。

ここにも登場

💬 この話題をAIに質問する(RAG検索へ)→

出典エピソード

  • 19328bc7c66ba9539b1f29
  • 98a62a3ceaeb81eb57f9ba
  • ca770a56b5ace84a888731

各セクションの「該当箇所を聴く」リンクから、番組の発話そのものを確認できます。