open language models

Gemma 4: Byte for byte, the most capable open models

Gemma 4 est un modèle de langage ouvert très performant et économe en paramètres, atteignant des performances de pointe. Il utilise une architecture de transformateur avec des innovations telles que l'attention sparse et les optimisations FFN pour réduire les coûts de calcul et accélérer l'inférence.