Очки Orion, гарнитура Quest 3S, нейросеть Llama 3.2: что показали на Meta* Connect 2024

Корпорация Meta* провела ежегодное мероприятие Meta* Connect 2024, на котором представила свои последние разработки. Все продукты компании относятся к двум ключевым направлениям: искусственному интеллекту и метавселенным.

Очки Orion AR

На презентации Meta* представила прототип умных очков с дополненной реальностью Orion. Одна из ключевых особенностей устройства — использование миниатюрных MicroLED-проекторов, которые проецируют голограммы на стёкла очков, сделанных из карбида кремния. По словам компании, в очках можно работать как в помещении, так и на улице.

Orion AR менее громоздкие, чем Magic Leap, Microsoft HoloLens или Google Glass. Новые очки не закрывают окружающий мир от пользователя, в отличие от VR-гарнитур. Кроме того, у новинки самый большой угол обзора (около 70 градусов) среди подобных продуктов.

С помощью умных очков от Meta* можно совершать видеозвонки, просматривать и отправлять сообщения в Messenger «Фейсбука»* и в WhatsApp. А ещё пользователю будет доступен ряд других приложений, таких как Spotify, YouTube и Pinterest.

В новинку интегрировали искусственный интеллект Meta* AI, который поможет владельцу с рядом задач, будь то приготовление ужина или синхронный перевод речи. Кроме того, с очками поставляется беспроводной модуль, который обрабатывает большую часть данных и передаёт приложения и контент на устройство.

В компании заявляют, что это один из самых проработанных прототипов, которые Meta* когда-либо создавала. Точной даты выхода Orion компания не назвала, однако, по словам инсайдеров, возможная дата релиза — 2027 год.

Гарнитура Quest 3S

Новая VR-гарнитура от Meta* содержит такие же функции смешанной и виртуальной реальности и показывает тот же уровень производительности, что и её предшественница Quest 3. В комплект поставки входит пара контроллеров Touch Plus. Заявленное время автономной работы Quest 3S — 2,5 часа против 2,2 часа у Quest 3.

Новинку отличает больший размер и немного иное расположение сенсоров на фронтальной панели. Разрешение дисплеев стало 1832 × 1920 пикселей на каждый глаз, в то время как у Quest 3 — 2064 × 2208 пикселей. У новинки нет датчика расчёта глубины пространства и более узкий угол обзора.

У Quest 3S есть физическая кнопка Action Button, которая позволяет через визор видеть окружающее пространство впереди пользователя. Устройство поступит в продажу с 15 октября. Версия на 128 ГБ будет стоить 299 долларов, версия на 256 ГБ — 399 долларов, на 512 ГБ — 499 долларов.

Нейросеть Llama 3.2

Новая версия ИИ-модели Llama 3.2 теперь работает как с текстом, так и с изображениями. Нейросеть предоставляет разработчикам новые возможности для создания приложений с ИИ. Например, они смогут разрабатывать AR-платформы с распознаванием видео или визуальные поисковые системы с сортировкой изображений на основе содержимого.

Ранее мультимодальные модели запустили OpenAI и Google, теперь и Meta* пытается догнать конкурентов. В июле компания выпустила ИИ-модель Llama 3.1 с 405 миллиардами параметров. В качестве генерации текста она до сих пор превосходит новую.

У новой ИИ-модели две версии: одна поддерживает работу с изображениями (с 11 и 90 миллиардами параметров), другая — облегчённая текстовая (с 1 и 3 миллиардами параметров). Меньшие версии предназначены для работы на чипах Qualcomm, MediaTek и других ARM-процессорах. Таким образом, Meta* рассчитывает на использование Llama 3.2 в мобильных устройствах.

Что ещё показала Meta*

Помимо флагманских решений, компания представила ряд нововведений в своих продуктах:

• Новые ИИ-функции в очках Meta* Ray-Ban. Теперь встроенный помощник позволит устанавливать напоминания на основе объектов, которые видит пользователь. Очки могут сканировать QR-коды и набирать телефонные номера из текста, который они распознают. Также помощник реагирует на более естественные команды и лучше переводит синхронно.
• Новая ИИ-функция в «Фейсбуке»* и «Инстаграме»*, которая позволит добавлять генеративные изображения. ИИ-контент с пометкой «Imagined for You» будет создаваться на основе интересов пользователя, его фотографий и текущих трендов. Платформа будет создавать изображения с лицом пользователя, только если он подключит функцию Imagine yourself.
• Meta* AI теперь может редактировать фотографии с помощью текстовых подсказок. ИИ компании будет делать это при выполнении задач вроде добавления или удаления объектов или изменения деталей — фона или одежды. ИИ-редактирование будет доступно во всех приложениях Meta*.
• Магазин для гарнитур Meta* включил поддержку 2D- и пространственных приложений. Пользователи Quest теперь смогут запускать их и размещать в любой точке виртуального пространства — одновременно может работать до шести приложений.

* Решением суда запрещена «деятельность компании Meta Platforms Inc. по реализации продуктов — социальных сетей Facebook и Instagram на территории Российской Федерации по основаниям осуществления экстремистской деятельности».