La qualité et la diversité des données déterminent ce que le modèle sait faire. Les modèles de langage sont pré-entraînés sur des textes du web, des livres et du code, puis affinés sur des jeux plus petits et soigneusement choisis.
Questions fréquentes
Que signifie Jeu de données ?
Un ensemble d'exemples utilisé pour entraîner ou évaluer un modèle. La qualité et la diversité des données déterminent ce que le modèle sait faire. Les modèles de langage sont pré-entraînés sur des textes du web, des livres et du code, puis affinés sur des jeux plus petits et soigneusement choisis.