Компания Meta* выпустила самую большую на сегодняшний день языковую модель искусственного интеллекта Llama 3.1, она включает 405 млрд различных параметров. Llama 3.1 превосходит продукты GPT-4o от OpenAI и Claude 3.5 Sonnet от Anthropic по многим показателям. Стоимость разработки составила сотни миллионов долларов.
Llama 3.1 значительно сложнее предыдущей модели Llama 3, которая вышла несколько месяцев назад. Она имеет 405 миллиардов параметров и была обучена на более чем 16000 сверхдорогих графических процессорах H100 от Nvidia.
Для разработки Llama 3.1 Meta* сотрудничает с более чем двумя десятками компаний, включая Microsoft, Amazon, Google, Nvidia и Databricks.
Хотя самая продвинутая модель Llama 3.1 с 405 млрд параметров бесплатна, помощник переключит пользователя на модель с 70 млрд после превышения определенного количества запросов.
В Llama 3.1 расширены возможности вывода, длина контекста выросла до 128 тысяч токенов.
Новая функции «Imagine Me» в Meta AI позволит создавать изображения на основе имеющихся фотографий и текстового запроса (например, «представь меня с зелеными волосами).
Теперь Meta AI поддерживает английский, французский, немецкий, хинди, итальянский, португальский и испанский языки, доступен в 22 странах.
* признана экстремистской организацией и запрещена в РФ
Источник: www.theverge.com