Meta Connect 2024: AR-очки Orion, Quest 3S и LLaMA 3.2 — главные анонсы

Meta Connect 2024 — это ежегодное событие для разработчиков, на котором генеральный директор Марк Цукерберг презентует новейшие разработки компании в области аппаратного и программного обеспечения, направленные на развитие двух ключевых направлений: искусственного интеллекта и метавселенной. В этом году Meta продемонстрировала множество инноваций, включая обновления ИИ-модели Llama, прототип очков с полной поддержкой дополненной реальности (AR) и, конечно, новые гарнитуры Quest и AR-очки Orion.

AR-очки Orion

Компания Meta презентовала свои новые очки дополненной реальности под названием Orion. Разработка этих очков длилась пять лет, и теперь они представляют собой одно из самых передовых решений на рынке. Orion выглядят как обычные очки, но имеют встроенные функции AR, позволяя накладывать цифровые элементы на реальный мир и взаимодействовать с ними.

Особенности и технологии

Очки оснащены дисплеями с Micro LED-проекторами, которые проецируют изображение на линзы через волноводы. Это обеспечивает широкое поле зрения — 70°, что является одним из лучших показателей среди современных AR-устройств. Orion легкие (98 граммов) и удобны как для использования дома, так и на улице.

В устройстве используется искусственный интеллект Meta AI, который адаптируется к окружающей среде и помогает пользователям, например, составлять рецепты по содержимому холодильника или переводить речь в режиме реального времени. Управление очками осуществляется с помощью отслеживания взгляда, голоса и жестов при помощи нейронного браслета.

Для кого и когда

На данный момент Orion тестируют сотрудники Meta и избранные пользователи, но компания планирует усовершенствовать устройство и снизить его стоимость перед массовым выпуском. Пока точная дата выхода на рынок не определена, однако утечки указывают на возможный релиз в 2027 году.

Гарнитура Quest 3S

Meta подтвердила слухи о выпуске более доступной версии Quest 3, представив устройство с ценами от 299 долларов за версию на 128 ГБ и 399 долларов за 256 ГБ. Полностью беспроводная гарнитура поддерживает существующие приложения и игры Quest, а также обладает возможностями смешанной реальности, что делает её привлекательной для широкой аудитории.

Основные характеристики Quest 3S:

• Процессор: Qualcomm Snapdragon XR2 Gen 2, как и у старшей модели Quest 3.
• Разрешение: 1920x1832 пикселей на каждый глаз, аналогично Quest 2.
• Угол обзора: 96 на 90 градусов.
• Время работы: до 2,5 часов от одного заряда.

В дополнение к этим характеристикам, Quest 3S оснащена линзами Френеля, которые улучшают качество изображения, и новой «Кнопкой действия», позволяющей быстро переключаться между режимами изображения. Гарнитура также поддерживает технологии отслеживания движений глаз и рук для более точного взаимодействия с виртуальной реальностью.

Новые возможности экосистемы Meta:

• Remote Display — возможность подключаться к ПК с Windows 11 для работы с контентом.
• Фотореалистичные пространства в метавселенной — теперь пользователи могут создавать и сканировать собственные пространства.
• Обновления в Horizon Worlds — добавлены порталы для перемещения между виртуальными мирами.
• Нативные игры и приложения — такие как Batman, Just Dance, Supernatural для фитнеса, и многие другие.

Предзаказы на Quest 3S уже открыты, а официальные продажи начнутся 15 октября. В связи с выходом этой модели, цена на Quest 3 будет снижена до 499 долларов. Meta также объявила о прекращении продаж Quest 2 и Quest Pro, которые будут доступны до конца года или до исчерпания запасов.

Meta и Ray-Ban обновили смарт-очки с новыми ИИ-функциями

Ray-Ban Meta продолжают эволюционировать и получают ключевые обновления, выводя взаимодействие с устройством на новый уровень. Очки теперь оснащены дополнительными ИИ-функциями, что делает их более удобными и функциональными для повседневного использования.

Основные обновления:

• Голосовое взаимодействие стало проще. Теперь пользователи могут использовать более короткие фразы и естественный язык. Например, больше не нужно начинать каждое взаимодействие с фразы «Hey, Meta» — достаточно один раз активировать команду, а дальше вести беседу.
• Контекстные действия: очки теперь могут запоминать информацию на основе того, что вы видите. Например, достаточно посмотреть на парковочное место и попросить устройство запомнить его. Или при просмотре объявления можно сразу попросить очки позвонить по номеру телефона или отсканировать QR-код.
• Видео-мультимодальность: очки получили возможность анализа видео в реальном времени. Это означает, что очки могут не только делать снимки, но и анализировать видео для предоставления информации в моменте. Марк Цукерберг отметил, что это только начало, и качество этой функции будет улучшаться.
• Реальный перевод речи: очки поддерживают перевод услышанного в режиме реального времени, а также могут озвучивать вашу речь на другом языке. В демонстрации Цукерберг общался на английском с испаноязычным чемпионом UFC Брэндоном Морено, показывая, как легко происходит перевод.
• Партнёрство с Be My Eyes: это приложение соединяет незрячих людей или людей с нарушениями зрения с добровольцами, которые помогают им в различных ситуациях.

Кроме того, были представлены разные типы линз от партнёров Meta — рецептурные, оптические, фотохромные и солнцезащитные. Meta также анонсировала ограниченную серию очков с прозрачной оправой.

Интеграции с популярными сервисами:

• Управление музыкой: скоро пользователи смогут управлять такими сервисами, как Spotify и Amazon Music, исключительно с помощью голоса.
• Новые приложения: в ближайшее время появятся интеграции с Audible и iHeart Radio, что сделает использование очков еще более универсальным.

Обновления Meta AI

На выставке Meta Connect 2024 компания анонсировала значительные обновления своего AI-ассистента, который теперь интегрирован в такие популярные приложения, как Instagram, WhatsApp, и Messenger. Meta AI ежемесячно используется более 500 миллионами активных пользователей, и теперь, благодаря новым возможностям, взаимодействие с искусственным интеллектом станет ещё удобнее и более естественным.

Ключевые обновления Meta AI:

• Использование LLaMA 3.2: под капотом ассистента теперь работает новая версия модели LLaMA 3.2, которая делает AI быстрее и умнее. Она также стала мультимодальной, что позволяет ассистенту распознавать и анализировать изображения, как и другие продвинутые модели, например GPT-4.
• Голосовое взаимодействие: пользователи могут задавать вопросы ассистенту не только текстом, но и голосом. Meta AI теперь поддерживает несколько голосов, включая знаменитостей, таких как Джон Сина, Джуди Денч, Кристен Белл и Киган-Майкл Ки, что добавляет интерактивности и уникальности взаимодействию.
• Meta AI Translation: функция автоматического дубляжа позволяет переводить рилсы на другой язык в реальном времени, что делает международное взаимодействие более доступным и простым.
• Визуальный поиск и редактирование: Meta AI теперь может отвечать на запросы, основанные на изображениях, и даже редактировать фотографии. Это упрощает создание контента и его интеграцию в Instagram Stories.

Помимо новых функций ассистента, Meta представила AI Studio — инструмент для создания собственных AI-ассистентов, который позволит разработчикам и компаниям настраивать помощников под свои нужды.

Эти нововведения делают Meta AI не просто полезным инструментом, а универсальным цифровым помощником, который меняет правила взаимодействия с технологиями и контентом.

LLaMA 3.2: мультимодальные AI-модели нового поколения

На выставке Meta Connect 2024 компания Meta анонсировала новую версию своих многоязычных AI-моделей — LLaMA 3.2, которые теперь поддерживают мультимодальные возможности. Это значит, что модели могут не только работать с текстом, но и интерпретировать визуальные данные, такие как изображения, диаграммы и графики, что открывает новые горизонты для их использования.

Ключевые особенности LLaMA 3.2:

• Мультимодальность: теперь модели могут не только читать и генерировать текст, но и анализировать изображения. Например, они могут подписывать картинки, определять объекты по описанию, анализировать диаграммы и графики. Это делает взаимодействие с моделью более гибким и универсальным.
• Модели с увеличенным количеством параметров: LLaMA 3.2 представлена в версиях с 11 и 90 миллиардами параметров, что является значительным улучшением по сравнению с предыдущей версией (LLaMA 3.1) с 8 и 70 миллиардами параметров.
• Примеры использования: LLaMA 3.2 может анализировать карту и сообщать длину тропинки или сложность рельефа. Модель также может быстро оценить графики, например, выделить наиболее успешные месяцы по доходам компании.

Meta также объявила, что вскоре модели LLaMA 3.2 можно будет запускать на очках дополненной реальности компании, что значительно расширит их функциональность. Эти нововведения делают LLaMA 3.2 мощным инструментом для обработки как текстовой, так и визуальной информации, помогая пользователям быстрее и точнее анализировать данные.