Llama 3.2 добавляет в Meta AI такие функции, как синхронизация видео по губам, голоса знаменитостей и многое другое.

Сегодня (25) произошло Мета Коннект 2024, мероприятие компании, ответственной за Facebook, Instagram и WhatsApp, с анонсом технологических новостей, представленных самой компанией. Марк Цукерберг. За пределами голографических очков Orion, мы все еще видели новости о Лама 3.2 и Мета ИИ — который объединяет все социальные сети компании. Посмотрите сейчас основные моменты об искусственном интеллекте Meta

Новые функции, добавленные в Llama 3.2.

Две самые большие новые модели в коллекции Llama 3.2с 11B и 90B (11 и 90 миллиардов соответственно) параметры, выделяются своей поддержкой задач визуального мышления, таких как понимание сложных документов, включая таблицы и графики, а также подписей к изображениям и идентификация объектов в визуальных сценах на основе описаний на естественном языке.

Практический пример включает в себя способность Llama 3.2 анализировать графики быстро ответить на вопросы об эффективности продаж компании за определенный месяц. В другом случае модель может интерпретировать карты, указывая, когда тропа становится круче или на расстояние определенного маршрута. Эти усовершенствованные модели также подключаются зрение и язык, имея возможность извлекать детали из изображения и создавать подписи для описания сцены.

Meta также анонсировала более легкие модели. Параметры 1B и 3B, для небольших устройств, таких как смартфоны и умные очки. Они были сделаны, чтобы многоязычная генерация текста и выполнение автоматизированных команд. Они позволяют разрабатывать настраиваемые приложения, которые работают непосредственно на устройствах, обеспечивая полную конфиденциальность, поскольку данные не отправляются в облако. Эти приложения могут суммировать входящие сообщения и определять важные элементы для прямой отправки приглашений из календаря с помощью функции вызова инструментов.

Локальный запуск моделей имеет два основных преимущества: почти мгновенные ответы, из-за прямой обработки на устройстве, и большая конфиденциальность, избегая отправки конфиденциальных данных в облако. Это позволяет контролировать, какие запросы остаются на устройстве, а какие могут быть обработаны более крупными моделями в облаке понятным и безопасным способом.

Эту работу поддержали наши партнеры из сообщества искусственного интеллекта. Мы хотели бы поблагодарить и выразить признательность (в алфавитном порядке): Accenture, AMD, Arm, AWS, Cloudflare, Databricks, Dell, Deloitte, Fireworks.ai, Google Cloud, Groq, Hugging Face, IBM watsonx, Infosys, Intel, Kaggle, Lenovo, LMSYS, MediaTek, Microsoft Azure, NVIDIA, OctoAI, Ollama, Oracle Cloud, PwC, Qualcomm, Sarvam AI, Scale AI, Snowflake, Together AI и UC Berkeley — Project vLLM.

Мета-спасибо на вашем сайте

Новые возможности мета-ИИ

И новости на этом не заканчиваются! Meta AI получит следующие новые функции:

Голоса в WhatsApp, Instagram, Facebook и Messenger

Марк Цукерберг объявила о новом обновлении ИИ-помощников Meta, в котором теперь будут голоса знаменитостей, таких как Дама Джуди Денч, Джон Сина, Аквафина, Киган Майкл Ки и Кристен Белл. Идея состоит в том, чтобы сделать взаимодействие более естественным и увлекательным, предлагая персонализированный опыт на таких платформах, как Facebook, Messenger, WhatsApp e Instagram.

Помимо новых голосов, одним из наиболее значительных нововведений является способность моделей ИИ интерпретировать фотографии и другую визуальную информацию от пользователей, расширяя возможности взаимодействия и предлагая еще более контекстуальные и релевантные ответы для каждого пользователя.

Просмотр, объяснение и редактирование изображений

Возможности редактирования Meta AI также были расширены, что позволяет ему обрабатывать визуальная информация. Теперь можно будет сфотографировать цветок во время прогулки и попросить Meta AI сделать это. Определите его и/или объясните подробнее об этомили сделайте загрузить изображение блюда и получите соответствующий рецепт.

Пользователи также смогут делать детальная обработка ваших реальных фотографий использование команд повседневного языка, например добавление или удаление элементов. Раньше эта функция работала только с изображениями, созданными Meta AI, но теперь она доступна для фотографии, сделанные пользователями, что облегчает персонализированную настройку.

с функцией Представить Meta AI, вы сможете вставлять себя в истории, публикации в ленте и даже фотографию своего профиля на Facebook и Instagram, делюсь Селфи, созданные искусственным интеллектом интерактивным способом. ИИ также может предлагать подписи для ваших историй в Instagram и Facebook. Просто выберите изображение, и Meta AI предложит несколько вариантов подписи, что облегчит выбор того, который лучше всего подходит для вашего сообщения.

Дубляж с синхронизацией губ на Reels

В настоящее время Meta также тестирует автоматическое перезапись видео с синхронизацией губ в Instagram и Facebook Reels, начиная с языков английский и испанский. Эта функция позволит пользователям смотреть контент на своем родном языке, что облегчит его понимание и взаимодействие.

Изначально эта функция доступна небольшой группе авторов, но есть планы расширить ее до больше авторов и включить другие языки в ближайшее время. Это достижение может значительно расширить охват создателей контента, позволяя их продукции преодолевать языковые барьеры и связываться с глобальной аудиторией, независимо от того, на каком языке они говорят.

доступность

Компания утверждает, что Llama 3.2 теперь доступно на платформах Meta, за исключением голосовых обновлений Meta AI. Они доступны в Австралии, Канаде, Новой Зеландии и США только на английском языке.

А ты, что ты думаешь об этой новости? Расскажи нам Комментировать!

См. также:

Мета шоу Голографические очки Орион, которые отображают изображения на экране.

С информацией от: Цель [1] e [2].

Текст проверен: Даниэль Коутиньо (25 / 09 / 24)