A boy and his dog.

Der Autor beschreibt das Training von „Scout“, einem Sprachmodell mit 50 Millionen Parametern, auf TinyStories, wobei die Datenqualität und die Verwendung von Prompt-Sonden sowie Claude Code zur Bewertung hervorgehoben werden. Er detailliert den Fortschritt des Modells und stellt dessen Fähigkeit fest, Subjekte zu erinnern, aber mit Kontextschwierigkeiten und Wiederholungen bei 12.800 Schritten.