TechniqueGlossaire de l'IA
Entraînement
La phase où le modèle « apprend » : on lui montre des milliards d'exemples et il ajuste ses paramètres pour prédire de mieux en mieux. Ça coûte des millions en calcul.
Autrement dit
Des années de gammes pour un musicien, sauf que ça prend des mois et des milliers de GPU.
Nos articles qui en parlent
- Les copies d'étudiants vont-elles entraîner l'IA ?
Turnitin voulait pouvoir utiliser les copies d'étudiants pour ses outils d'IA. Cambridge a refusé la première, et le logiciel a reculé. Ce que ça dit.
- Entraînement intermédiaire, ajustement final : ce qui se passe après le pré-entraînement
Entre un modèle de base et un modèle utilisable, il y a plusieurs phases d'entraînement distinctes. On explique ce que fait chacune et pourquoi c'est là que se situe désormais la valeur.
- Cloudflare bloque par défaut les robots d'IA à usage mixte
La politique de Cloudflare bloquant par défaut les robots d'IA mêlant indexation et entraînement est entrée en vigueur. On explique le mécanisme et ce qu'il change dans le rapport de force avec les éditeurs.
- Sony et Warner poursuivent Anthropic sur les paroles de chansons, et visent les fondateurs personnellement
Sony Music Publishing et Warner Chappell ont déposé une plainte contre Anthropic et ses fondateurs pour l'usage de paroles de chansons dans l'entraînement. On analyse la stratégie et ce que le précédent des livres change.
- Les lois d'échelle : pourquoi « plus gros » a marché, et pourquoi ça ralentit
Les lois d'échelle décrivent une relation prévisible entre taille, données, calcul et performance. On explique ce qu'elles disent réellement et pourquoi le secteur cherche aujourd'hui d'autres leviers.
- C'est quoi la distillation ? Faire tenir un grand modèle dans un petit
La distillation permet de transférer les capacités d'un grand modèle vers un modèle bien plus petit. On explique le principe, pourquoi ça marche mieux qu'un entraînement direct, et ses limites.
Pour aller plus loin à l'Académie
Voir aussi
Dans la même famille : Technique
Retrouver ce terme dans le glossaire complet →Tous les termes