Rapports sur les modèles d'IA
Rapport sur les tendances de l'industrie des modèles d'IA
Échelle des modèles, coût d'entraînement, longueur du contexte, dépenses des entreprises et composition actuelle du marché des modèles.
Croissance de la puissance de calcul d'entraînement
Epoch AI4.5x/yr
taux de croissance
Croissance du coût d'entraînement de pointe
Epoch AI3.5x/yr
taux de croissance
Croissance de la fenêtre de contexte
Epoch AI30x/yr
taux de croissance
Croissance des dépenses des entreprises
Menlo Ventures3.2x YoY
croissance
Principales conclusions
Le marché évolue en termes d'échelle, de coût et de comportement des acheteurs
L'intensité de calcul, le coût d'entraînement, la longueur du contexte et les dépenses des entreprises évoluent de concert. Le choix d'un modèle doit être interprété au regard de ces pressions industrielles, et non uniquement par rapport à un score de référence unique.
01
La puissance de calcul pour l'entraînement des modèles d'IA notables a augmenté d'environ 4,5 fois par an depuis 2010, selon Epoch AI.
02
Le coût d'entraînement estimé des modèles de langage de pointe a augmenté d'environ 3,5 fois par an depuis 2020.
03
Les fenêtres de contexte des principaux modèles de langage se sont étendues d'environ 30 fois par an depuis 2023.
04
Ces trajectoires sont des estimations à long terme basées sur les caractéristiques des modèles divulguées publiquement, et non des chiffres audités ou standardisés.
Source : Tendances Epoch AI. Tous les chiffres sont des estimations dérivées des divulgations publiques sur les modèles et sont sujets à révision à mesure que de nouvelles données apparaissent.
Indicateurs de tendance du secteur
Signaux provenant de sources externes concernant l'échelle, la longueur du contexte, les dépenses des entreprises, la taille des études d'utilisation et l'adoption organisationnelle.
