Meta представила низку нововведень у сфері ШІ на щорічному заході Meta Connect 2024. Серед них нові версії великої мовної моделі Llama 3.2, голосовий ШІ-помічник Meta AI, оновлення смартокулярів Ray-Ban та інші розробки.
Сімейство великих мовних моделей Llama оновлено до версії 3.2. Нейромережі стали мультимодальними — вони здатні обробляти текст і зображення.
Компактна Llama 3.2 11B і більша 90B можуть аналізувати графіки та діаграми, підписувати зображення, визначати об’єкти на картинках. Наприклад, маючи графік доходу компанії за рік, моделі можуть швидко виділити найбільш результативні місяці. Проаналізувавши карту парку, ШІ підкаже довжину стежки або зміну рельєфу.
Інші дві версії моделі — Llama 3.2 1B і 3B — більш стислі. Вони створені для роботи на смартфонах і застосовуються для простих завдань на кшталт резюмування і переписування абзаців.
ШІ-помічник Meta AI отримав голос. Користувачі можуть ставити запитання та отримувати голосові відповіді в Messenger, Facebook, WhatsApp і Instagram.
Смартокуляри від Ray-Ban і Meta отримали оновлення — обробку відео в реальному часі із застосуванням штучного інтелекту. Завдяки цьому можна ставити запитання окулярам про те, що вони бачать. Також додані функції нагадування, перекладу та інтеграція з музичними додатками.
Meta AI навчили редагувати фотографії, відповідати на запитання щодо зображень і ділитися ними в чатах. Функціонал став доступний завдяки мультимодальності Llama 3.2.
Робота Meta AI із зображеннями. Джерело: Meta.
Відправивши зображення ШІ-помічнику, його можна попросити внести зміни, наприклад видалити об’єкт або оновити фон.
Редагування картинки за допомогою Meta AI. Джерело: Meta.
Meta AI доступний в Instagram.
На заході презентували окуляри Orion. Вони мають легку вагу і нейронний інтерфейс для управління, а також можуть відстежувати руки й очі. У них використовуються маленькі проєктори, вбудовані в дужки. Продукт позиціонується як продовження розумних окулярів від Ray-Ban і поки що допрацьовується.
Окуляри Orion. Джерело: Meta.
Ще один новий гаджет — Meta Quest 3S. Це дешевша альтернатива Quest 3. Нова гарнітура для змішаної реальності коштує $300, що на $200 дешевше за стандартну версію. У базовому виконанні модель постачається з 128 ГБ пам’яті та дисплеєм нижчої якості.
Компанія тестує режим перекладача, в якому ШІ бере оригінальний контент, перекладає його іншою мовою і відповідним чином синхронізує губи творця.
Нагадаємо, у липні Meta представила колекцію нових ШІ-систем Llama 3.1, включно з «довгоочікуваною» 405B — «першою моделлю з відкритим вихідним кодом передового рівня».
