1
«Яндекс» выложил YaLM 100B — сейчас это крупнейшая GPT-подобная нейросеть в свободном доступе
Может показаться, что если у вас уже есть суперкомпьютер, то с обучением больших моделей никаких проблем не возникнет. К сожалению, это заблуждение. Давайте узнаем, как удалось добиться стабильности обучения и при этом ускорить его в два раза.