Google представляет будущее умных очков: три новых проекта с ИИ

На недавней демонстрации обозреватель столкнулся с необычным опытом: парящая 3D-молекула с забавными глазами, появившаяся из обычной вазы, рассказывала о своих свойствах в керамическом материале. Этот диалог, сгенерированный искусственным интеллектом Gemini, отображался как голографическая графика на очках, подключенных к устройству размером со смартфон, на котором работало приложение, разработанное, по всей видимости, за считанные дни.

Эта передовая система AR-очков, известная как Project Aura, является лишь одним из трех продуктов Google в категории умных очков, ожидаемых в этом году. Кроме того, к осени планируется выпуск беспроводных ИИ-очков, разработанных в сотрудничестве с Samsung, Gentle Monster и Warby Parker, которые составят конкуренцию умным очкам Ray-Ban и Oakley от Meta*. Представителям прессы продемонстрировали все эти устройства, включая прототип беспроводных очков с двумя дисплеями, в кампусе Google в Маунтин-Вью. Хотя ранее уже проводились демонстрации, недавнее углубленное изучение показало расширенные возможности всех этих очков, произведя большое впечатление.

Вопрос в том, сможет ли Google сделать умные очки более повседневными и полезными, или решить проблему отталкивающего и потенциально угрожающего восприятия их камер и технологий ИИ у некоторых людей. Последние демонстрации на кампусе Google, проведенные в рамках конференции разработчиков I/O, посвященной ИИ, убедили обозревателя в том, что эти очки могут стать лучшими на рынке. Они могут даже помочь переосмыслить возможности умных очков. Это первые очки, которые кажутся по-настоящему готовыми к работе с уже существующими приложениями и сервисами для смартфонов.

За последние годы рынок заполнили умные очки — категория продуктов, которые большинство людей не носят, и к которым многие относятся с опаской. Однако очки Google с поддержкой Gemini могут значительно расширить их возможности, превосходя многие аналоги. Причина очевидна – это искусственный интеллект и программное обеспечение, а также усилия Google по подготовке почвы для того направления, в котором, по слухам, движется и Apple. Это стало еще более очевидным после встречи с Шахрамом Изади, руководителем отдела XR в Google, и Джеем Кимом, главой подразделения MX по работе с клиентами в Samsung.

Очки Google готовы превзойти Meta* по возможностям ИИ

Были протестированы несколько версий умных очков, которые Google и Samsung выпустят позднее в этом году. Хотя представленные модели являются прототипами, их функции, связанные со смарт-часами и телефонами, обладают более широкими возможностями ИИ, чем последние модели очков Meta*. Однако их цена и официальное название пока не объявлены.

В настоящее время эти устройства именуются «Интеллектуальными очками». По словам Изади, выступившего в штаб-квартире Google, Warby Parker, Gentle Monster и Samsung позднее присвоят им собственные названия к осеннему релизу.

Все очки будут оснащены камерами, микрофонами и встроенными динамиками, подобно линейке умных очков от Meta*, а также будут доступны в версиях без дисплея и с одним дисплеем. Режим Gemini Live, работающий постоянно, может отслеживать перемещения пользователя по комнате, описывать растения или объяснять правила настольной игры. Подобные функции уже демонстрировались ранее. Однако преимущество Google перед Meta* заключается в интеграции этих ИИ-инструментов с уже существующими приложениями для смартфонов, такими как Google Keep и Google Calendar, а также в отображении информации на смарт-часах.

Демонстрация перевода показала, как автоматическое распознавание языка может идентифицировать французский или португальский язык, на котором говорят люди в помещении. На очках с дисплеем отображались субтитры, а аудиоперевод воспроизводился с небольшой задержкой, подстраиваясь под темп речи и предполагаемый пол говорящего.

Очки также могут отображать виджеты, генерируемые ИИ, функционирующие как мини-приложения для вывода быстрой информации, например, о погоде, прокручиваемой в виде стопки.

Легкие, в разнообразных дизайнах

Эти очки ощущаются легче, чем Ray-Ban Displays от Meta*: при весе 49 граммов они были сравнимы по весу с Ray-Ban от Meta* без дисплеев. Дизайны Warby Parker и Gentle Monster еще не были представлены для тестирования, но прототип, который был продемонстрирован, призван обеспечить аналогичный размер и комфорт. Отмечается, что они ощущались комфортно, несмотря на наличие одного дисплея внутри одной линзы. Они определенно меньше, чем аналогичные, более крупные Ray-Ban Displays с дисплеями.

Дизайны Warby Parker и Gentle Monster выглядят интересно, по крайней мере, на фотографиях. Закругленные края Warby выглядят привлекательно, хотя оправа кажется немного толстой. Овальные оправы Gentle Monster явно стремятся к иному стилю, и возникает вопрос, насколько гибкими будут другие типы дизайна. По словам Изади и Кима, будет представлено больше вариантов.

Прототипы, представленные обозревателю, выглядели скорее как Ray-Ban: универсальные, в черной оправе, но функциональные.

Совместимость со смарт-часами и телефонами

Фотографии, сделанные с помощью очков, мгновенно появлялись на смарт-часах Pixel Watch, которые носил один из членов команды Google, демонстрируя, как смарт-часы на WearOS могут выступать в качестве видоискателя камеры. Была сделана попытка сфотографировать комнату с помощью очков и применить эффекты «Нано Банана»: стиль Дэвида Линча и мультяшных персонажей 1930-х годов, поедающих суши. Изображение обновилось на очках менее чем за минуту, а также появилось на часах и телефоне.

Очки оснащены тачпадом на одной из дужек, который реагирует на угловые и двойные касания, а также свайпы (одно долгое касание для Gemini, двойной свайп двумя пальцами для регулировки громкости), а также кнопкой спуска затвора камеры сверху на другой дужке. Их также можно управлять в некоторой степени с помощью смарт-часов, хотя эта функция не была продемонстрирована. Жесты на часах были бы полезны, особенно учитывая, что у Google пока нет аналога нейронного браслета Meta*.

Двойные дисплеи тоже появятся

Google также разрабатывает очки с двумя дисплеями, которые могут появиться не ранее 2027 года. Прототипы, продемонстрированные повторно, были заметно тяжелее. Хотя эта демонстрация уже проводилась в прошлом году, на этот раз качество воспроизведения фрагмента «Человека-паука», конвертированного YouTube в 3D, и 3D-моделей, которыми можно было управлять наклонами и поворотами головы (почти как в дополненной реальности), выглядело лучше. Прокручиваемые виджеты также перемещались в 3D.

Модель с двумя дисплеями все еще дорабатывается, и Изади и Ким подтвердили, что точных сроков выпуска пока нет. Это следующий этап разработки: возможно, в следующем году или через год. Однако Изади ожидает, что в будущем очки с двумя, одним и без дисплея будут продаваться одновременно, вероятно, в разных ценовых категориях.

Вопросы конфиденциальности ИИ остаются открытыми

Команды Samsung и Google признают, что мир носимых устройств представляет собой сложную задачу, и что опасения общественности по поводу технологий распознавания лиц и очков с камерами еще предстоит решить. Meta* уже сталкивалась с многочисленными проблемами конфиденциальности и имеет неясные положения в своей политике конфиденциальности ИИ. По словам Изади, Google планирует раскрыть более подробную информацию о конфиденциальности данных в своих очках на осеннем мероприятии.

По словам Изади, компания уделяет большое внимание вопросам конфиденциальности с самого начала разработки таких устройств. «Учитывая аспекты конфиденциальности, вы должны разрабатывать с учетом конфиденциальности с самого начала и использовать некоторые стандарты, установленные в мире ИИ», — заявил он, добавив, что индикатор активности для окружающих (LED), обнаружение мошенничества с ИИ и другие функции являются частью очков.

Однако ожидается, что правила конфиденциальности для Gemini будут работать аналогично тому, как Gemini функционирует на смартфонах, хотя очки будут иметь больше сценариев, где они смогут работать в режиме постоянной активности. Изади отметил, что одной из задач является «обучение пользователей», но в вопросах конфиденциальности «необходимо, безусловно, повышать планку».

Ким из Samsung добавил, что «рыночные ожидания в отношении нас выше. Мы много изучаем этот вопрос и долго над ним размышляем, с самого начала разработки».

Рецептурные линзы не проблема

Демонстрации всех этих очков проводились с использованием специальных вставок, соответствующих высокой степени миопии обозревателя, но Google и Samsung уверены, что их линейка умных очков для повседневного ношения, разработанная совместно с Warby Parker и Gentle Monster, будет поддерживать широкий диапазон диоптрий, включая высокую миопию, даже в моделях с дисплеями.

По словам Изади, «мы очень глубоко работаем в этом направлении. Здесь партнерства с производителями очков оказались по-настоящему важными». Изади привел в качестве «доказательства существования» возможность создания таких очков, указывая на очки Even Realities G2 с дисплеем, которые ранее использовались обозревателем с его рецептом.

Обозреватель выразил надежду на такую возможность, поскольку планирует использовать очки Google в качестве повседневной пары. В отличие от Ray-Ban Displays от Meta*, где поддержка рецептурных линз ограничена, похоже, что с очками Google это действительно осуществимо.

Google Health? Возможно, в будущем

Новые Fitbit Air от Google и ИИ-тренер здоровья на базе Gemini, которые сейчас проходят тестирование, уже заставили задуматься о том, как фитнес и здоровье могут стать частью следующего поколения очков. Изади признал, что очки смогут получать доступ к таким данным и взаимодействовать с ними, но не сразу.

Ким указал на возможность триангуляции данных между кольцами, часами, очками и телефоном.

По его словам, «все объединится таким образом, чтобы дополнять друг друга», но при этом добавил: «Вы не хотите перегружать потребителя, это должно быть очень естественно и интегрировано в ваше тело».

На июльском мероприятии Unpacked Samsung представит более подробную информацию об очках и продемонстрирует новые дизайны Gentle Monster и Warby Parker, где, вероятно, станет известно больше о фитнес-функциях. Очевидно, что Samsung и Google намерены реализовать эти планы. Учитывая акцент Meta* на фитнесе в своих очках совместно с Garmin, а также общую концепцию активного образа жизни для таких устройств, это выглядит логичным развитием.

Project Aura: карманный компьютер Gemini плюс очки

Вернемся к демонстрации говорящей молекулы, которая произвела сильное впечатление. Представленная в рамках Project Aura от Google и Xreal, она является одним из самых интригующих продуктов, показанных за последнее время. Хотя это не первая демонстрация, по мере подготовки Aura к запуску позднее в этом году, новая серия показала еще более впечатляющие возможности. Во многом эта комбинация очков и процессора-шайбы предлагает функциональность VR-гарнитуры, и, возможно, даже больше, в компактном форм-факторе, совместимом со смартфоном, ноутбуком или Steam Deck.

Устройство не работает напрямую со смартфоном. Вместо этого, оно оснащено процессором-шайбой, который запускает Android XR и Android-приложения, передавая изображение на очки. Это наглядный пример того, к чему стремился прототип AR-очков Project Orion от Meta* два года назад, когда они были протестированы, но с уже доступным аппаратным обеспечением и отслеживанием рук с помощью камер вместо нейронного браслета для управления жестами, как у Meta*.

Те, кто когда-либо пробовал проводные очки с дисплеями, такие как Xreal, Viture или TCL, знают, насколько впечатляющим может быть изображение в этих «наушниках для глаз». Project Aura превосходит их, расширяя поле зрения своих microOLED-дисплеев до 70 градусов, что фактически достаточно для заполнения всего поля зрения в очках, не создавая ощущения недостатка.

Как отмечалось ранее, Aura способна выполнять все функции 6-месячной гарнитуры смешанной реальности Samsung Galaxy XR, но в более компактном корпусе. Процессор-шайба размером со смартфон оснащен сенсорной поверхностью и кнопкой сканера отпечатков пальцев, а также запускает все Android-приложения и VR/AR-функции, доступные в Galaxy XR. Очки имеют камеры и датчики глубины, обеспечивающие отслеживание рук, жесты масштабирования, прокрутку приложений и игру в VR-игры.

Однако это компактное устройство способно выполнять множество задач, требующих интенсивного использования ИИ. Gemini Live может работать совместно с любым приложением, а также позволяет подключать другие устройства через USB-C/DisplayPort. Подключение Steam Deck позволило играть в Hollow Knight на очках на большом экране, а также открывать окно YouTube и перемещать его рядом с игрой в любом положении, просматривая прохождения. Устройство поддерживает одновременную работу пяти приложений, а Gemini Live может отслеживать игровой процесс на Steam Deck и давать советы по прохождению. Также можно было подключить iPhone, MacBook или любое другое устройство и наложить на него анализ Gemini Live.

Aura как путь к ИИ-кодированию для XR?

Особенно впечатлила демонстрация приложения, разработанного с помощью инструментов Google и запущенного в Aura через WebXR, что показало потенциал Aura для создания ИИ-кода и предварительного просмотра 3D-опыта, невиданного ранее. Одно из опробованных приложений, для 3D-рисования под названием 3D Paint (позволяющее рисовать пальцами в воздухе, как в старом VR-приложении Tilt Brush), было «эмоционально закодировано» в Chrome на Project Aura с использованием Gemini Canvas. Сообщается, что это заняло всего несколько минут.

Два других приложения — музыкальный опыт Gemini Melody, где обозреватель рисовал линии в воздухе, а Gemini превращал их в музыкальные тона и интерактивные треки, а также опыт с говорящей молекулой под названием Gemini Molecule — были самостоятельными XR-приложениями, созданными за неделю с использованием Google Antigravity и Gemini API. Все это — демонстрации того, какие ИИ-приложения для XR могут быть созданы и протестированы с помощью Project Aura. Если это так же просто, как представляет Google, Project Aura может кардинально изменить ландшафт VR/AR. Это вызывает желание попробовать свои силы в «эмоциональном кодировании».

Aura показывает будущее очков и телефонов

Aura поступит в продажу как полноценный продукт позднее в этом году, но по пока неизвестной цене. Ожидается, что продукт может оказаться дороже, чем хотелось бы, но при этом это уменьшенная версия тех же компонентов, к которым стремились Vision Pro и Galaxy XR, в форм-факторе, более подходящем для использования в дороге. Это отчасти комплект разработчика, отчасти портативная замена VR и предвестник того, как могут развиваться AR-очки, подключаемые к нашим телефонам.

Представьте, что процессор-шайба размером со смартфон, используемый Aura, станет самим смартфоном в наших карманах. Современные телефоны на это пока не способны, но Aura дает представление о возможностях будущего.

По словам Изади, относительно интеграции Aura в очки, работающие напрямую со смартфонами: «Планов пока нет, но это очевидный следующий шаг, я бы сказал, логичный следующий шаг». Однако это может занять некоторое время.

Ким добавил: «Я думаю, что телефон, вероятно, останется своего рода центральным хабом на многие годы вперед», отметив, что телефоны и часы в будущем останутся связанными с ними.

Смотрите также:

Рейтинг кофе из супермаркета: экспертный выбор для идеальной чашки http://kupidonchik.org/reyting-kofe-iz-supermarketa-ekspertnyiy-vyibor-dlya-idealnoy-chashki/.

Интересности на тему: Можно ли использовать материнский капитал для погашения кредита после официального расторжения брака: подробный правовой и практический разбор

Классные советы в статье "Сколько стоят услуги адвоката в суде и как формируется гонорар за ведение дела" здесь.

Однако очевидно, что возможности этих подключений только начинают раскрываться. Project Aura появится позднее в этом году вместе с беспроводными очками Warby Parker и Gentle Monster, но это более продвинутый предварительный взгляд на полноценный компьютер с Gemini… и, по сути, на AR-очки, которых давно ждали.

* — деятельность компании запрещена на территории РФ