Meta AI — исследовательское подразделение компании Meta, занимающееся разработкой передовых моделей искусственного интеллекта, включая семейство языковых моделей Llama, предназначенных для обработки и генерации текста.
Meta AI (ранее известная как Facebook AI Research) — подразделение Meta, сосредоточенное на исследованиях и разработках в области искусственного интеллекта. Одним из ключевых проектов является семейство больших языковых моделей Llama (Large Language Model Meta AI). Первая версия Llama была представлена в феврале 2023 года и включала модели с количеством параметров от 7 до 65 миллиардов.
В июле 2023 года Meta анонсировала Llama 2, представленную в трех вариантах: 7B, 13B и 70B параметров. Эти модели были обучены на 40% большем объеме данных по сравнению с первой версией, что улучшило их производительность. Llama 2 была выпущена с открытым исходным кодом, что позволяет использовать ее в коммерческих целях при соблюдении политики допустимого использования.
В апреле 2024 года Meta представила Llama 3, доступную в версиях с 8 и 70,6 миллиардами параметров. Эти модели были обучены на 15 триллионах токенов и показали улучшенные возможности в генерации текста и понимании контекста. В июле 2024 года была выпущена версия Llama 3.1, включающая модели с 8B, 70,6B и 405B параметров, с увеличенным контекстным окном до 128 000 токенов.
В сентябре 2024 года Meta представила Llama 3.2, добавив мультимодальные возможности, позволяющие обрабатывать текст и изображения. Это расширило применение моделей в различных областях, включая анализ изображений и генерацию описаний.
В ноябре 2024 года Meta разрешила использование Llama в национальных службах безопасности и оборонных подрядчиках США, Великобритании, Канады, Австралии и Новой Зеландии, подчеркивая важность ИИ в обеспечении национальной безопасности.