Google a récemment publié Gemma, une nouvelle série de modèles de langage open source à grande échelle, dont les performances surpassent les modèles existants tels que Llama 2 et Mistral. Gemma utilise une fonction d'activation GeGLU unique et a réalisé des percées dans l'échelle des paramètres, démontrant un fort potentiel pour remplacer les modèles open source existants. Cette version marque un autre développement majeur dans le domaine de l’IA open source, offrant de nouvelles options aux développeurs et aux chercheurs.
Google a lancé une nouvelle série de modèles open source "Gemma". Gemma fonctionne bien par rapport à Llama 2 et Mistral et possède des principes de conception uniques. Gemma utilise la fonction d'activation GeGLU, qui a une grande échelle de paramètres mais peut remplacer d'autres modèles open source, montrant un fort potentiel.
L'émergence de Gemma a insufflé une nouvelle vitalité dans le domaine de l'IA open source, et ses avantages en termes de performances et sa conception unique méritent l'attention. À l’avenir, nous espérons que Gemma montrera son potentiel dans davantage de scénarios d’application et promouvra le développement de la technologie d’IA open source.