Meta створила власну мовну модель штучного інтелекту LLaMA

LLaMA від Meta (скорочено від Large Language Model Meta AI) буде доступна за некомерційною ліцензією для дослідників і організацій, які пов’язані з урядом, громадянським суспільством і науковими колами.

Про це повідомили у блозі компанії.

Модель, яка, як стверджують у Meta, вимагає «набагато менших» обчислювальних потужностей, ніж попередні пропозиції, навчається на 20 мовах з акцентом на мови з латинським і кириличним алфавітами.

Компанія також заявила, що LLaMA може перевершити конкурентів, які вивчають більше параметрів або змінних, які враховує алгоритм.

Версія LLaMA з 13 мільярдами параметрів може перевершити GPT-3, недавнього попередника моделі, на якій побудований ChatGPT.

Представник Meta пояснив продуктивність більшою кількістю «чистіших» даних і «архітектурними поліпшеннями» в моделі, які підвищили стабільність навчання.