アーキテクチャマップ

コーパス全体を1枚のマップにしました。横軸は公開日、縦軸は対数スケールの総パラメータ、1モデル1点を開発元で色分けしています。右下へ向かう移動——時期が新しくなるほど活性がスパースに——が、Mixture-of-Expertsへの業界全体の軌跡です。