Сатья Наделла продолжает диверсифицировать риски с OpenAI: Microsoft готовит еще одну новую ИИ-модель, чтобы конкурировать с Google и OpenAI
Напомним, что в октябре MSFT создали модель Phi, которая была выпущена чуть позже.
Новая модель MAI-1 создается в блоке у Мустафы Сулеймана, который месяц назад пришел корпорацию, покинув должность генерального директора в своем стартапе Inflection.
Говорят, что новая модель, не состоит из проекта Inflection, хотя может основываться на учебных данных и других технологиях стартапа.
MAI-1 будет больше, чем любая из небольших моделей с открытым исходным кодом, которые ранее обучила Microsoft, что потребует больше вычислительных мощностей и обучающих данных и, следовательно, будет она будет дороже.
MAI-1 будет иметь примерно 500 млрд параметров. Для сравнения, GPT-4 от OpenAI имеет более 1 трлн. параметров, в то время как более мелкие модели с открытым исходным кодом, выпущенные такими фирмами, как Meta (запрещенная в РФ) и Mistral, имеют 70 млрд параметров.
Чтобы обучить новую модель, Microsoft использовала различные наборы данных, которые ранее использовались для обучения небольших моделей, а также общедоступные данные в Интернете.
Напомним, что ранее Microsoft инвестировал в конкурента OpenAI с открытым исходным кодом Mistral.