Trials and tribulations fine-tuning & deploying Gemma-4 [P]
Une équipe ML a documenté les défis techniques rencontrés lors du fine-tuning et du déploiement de Gemma-4. Les problèmes majeurs comprenaient l'incompatibilité de PEFT avec les couches personnalisées de Gemma 4, SFTTrainer brisant silencieusement l'attention de partage KV, et DeepSpeed ZeRO-3 enregistrant des adaptateurs LoRA à moitié vides.
![Need feedback on my Senior Thesis: An automated MLOps pipeline for AI news classification & summarization [D]](/cdn-cgi/image/width=3840,quality=75,format=webp/https://preview.redd.it/wqv7mg1e1kvg1.png?width=140&height=77&auto=webp&s=03d8f38014e24bd3ba9837868280bafea56bb1b8)
![Thesis: an agent-native workspace for running and tracking ML experiments [P]](/cdn-cgi/image/width=3840,quality=75,format=webp/https://preview.redd.it/ni5g8i9zqfvg1.png?width=140&height=82&auto=webp&s=8f277f2eb016a16b31dc2a4b2f4fe8e3a242b319)
