Не ChatGPT єдиним. Microsoft створює власну потужну модель штучного інтелекту
IT-індустрія7 травня 2024, 12:35
Передбачувана модель MAI-1 — перший випадок з моменту інвестиції в OpenAI, коли Microsoft розробляє модель штучного інтелекту такого масштабу самостійно. Як пише The Information, розробку MAI-1 очолює Мустафа Сулейман, колишній керівник Google AI. Донедавна він обіймав посаду генерального директора стартапу Inflection, який Microsoft придбала за 650 мільйонів доларів. Попри те, що MAI-1 може базуватися на методах, перенесених колишніми співробітниками Inflection, це має бути абсолютно нова LLM. MAI-1 буде значно більшою, ніж попередні моделі Microsoft з відкритим кодом і матиме приблизно 500 мільярдів параметрів, тож вимагатиме більшої обчислювальної потужності та даних для навчання. Такий розмір поставить модель в один ряд з GPT-4 OpenAI, яка, за чутками, має понад 1 трильйон параметрів. Для порівняння, моделі Meta та Mistral мають 70 мільярдів параметрів.
Повідомляється, що точне призначення MAI-1 поки не визначено навіть у Microsoft. Подальше використання моделі залежатиме від її продуктивності. Для навчання моделі Microsoft виділила великий кластер серверів із графічними процесорами Nvidia та збирала навчальні дані з різних джерел, включаючи текст, згенерований OpenAI GPT-4, і публічні дані з Інтернету.
Microsoft давно розвиває власний чат-бот з ШІ Copilot, утім в його основі - та сама велика мовна модель GPT-4, що і в продуктах від OpenAI, в яку компанія інвестувала понад 10 мільярдів доларів США. Як писав NV Техно, раніше скандальне звільнення гендиректора OpenAI Сема Альтмана, його тимчасове приєднання до Microsoft та повернення до компанії змусили британську владу зацікавитися, чи не готуються техногіганти до злиття. Також співпраця Microsoft з OpenAI зацікавила Європейську комісію.