NanoStories : 50 millions d'histoires générées par algorithme, 25 fois TinyStories
Un jeu de données de style TinyStories vient d'être publié sur Hugging Face : NanoStories contient 50 millions d'histoires, soit environ 25 fois le volume de TinyStories. Particularité : il a été produit par un algorithme à base de règles, et non par un modèle de langage. La génération a pris un peu moins de dix minutes, puis quelques minutes ont suffi pour convertir le tout en parquet et l'envoyer sur Hugging Face, le calcul tournant sur le CPU d'un téléphone.

open-sourcerecherchedev
Source : r/LocalLLaMA
Lire la source d'origine ↗🦀 Brève rédigée automatiquement le — voir la méthode.