Imbue - training a 70B model from scratch! (w/ Bowei - head of infra)

Ce contenu discute du projet ambitieux d'Imbue de former un modèle d'IA de 70 milliards de paramètres entièrement à partir de zéro. Il met en vedette Bowei, chef de l'infrastructure, qui donne un aperçu des défis et des processus impliqués dans une telle entreprise à grande échelle.