На WWDC 2023 Apple представила новый для себя тип устройства – гарнитуру смешанной реальности под названием Vision Pro. Исследователь нейротехнологических прототипов Стерлинг Криспин после дебюта новинки поделился некоторой информацией о процессе разработки.

Стерлинг Криспин проработал исследователем прототипов нейротехнологий в группе разработки технологий в Apple более трёх лет, что является самым продолжительным периодом, когда он «когда-либо работал над одним проектом». Работа Криспина заключалась в определении психического состояния пользователей на основе данных, собранных «из их тела и мозга, когда они находились в условиях «‎погружения» в виртуальную реальность.

Используя отслеживание взгляда, электрическую активность, сердцебиение, мышечную активность, кровяное давление, проводимость кожи и другие показатели, модели ИИ могут попытаться открыть мысли пользователя. «Модели искусственного интеллекта пытаются предсказать, испытываете ли вы любопытство, блуждаете в мыслях, боитесь, обращаете внимание, вспоминаете прошлый опыт или какое-то другое когнитивное состояние», – заявил Криспин.

Одним из самых поразительных результатов стала возможность спрогнозировать, что пользователь нажмёт до того, как он это сделал. Как пояснил Криспин, наблюдая за поведением глаз пользователя, и переделывая пользовательский интерфейс в режиме реального времени, можно создать биологическую обратную связь с его мозгом. Исследователь сравнивает это с «грубым компьютерным интерфейсом мозга через глаза».

В ходе другого эксперимента при определении состояния пользователям могут показываться визуальные эффекты или воспроизводиться звуки способами, которые они не воспринимают, а затем измерять реакцию на этот стимул. Также Стерлинг Криспин рассказал, как можно использовать машинное обучение и сигналы тела для прогнозирования концентрации внимания пользователя, расслабленности или для определения того, насколько хорошо он учится. Используя эту информацию и состояние, система может адаптировать виртуальную среду для улучшения требуемого состояния.

Подпишись вTelegram
Fortnite вернулся в App Store после 5 лет судов из Apple

Fortnite вернулся в App Store после 5 лет судов из Apple

Представлена AMD Radeon RX 9060 XT – 16 ГБ памяти и трассировка лучей

Представлена AMD Radeon RX 9060 XT – 16 ГБ памяти и трассировка лучей

Google представил расширенный поиск AI Mode

Google представил расширенный поиск AI Mode

Представлены iQOO Pad 5 и 5 Pro – мощные планшеты на чипах MediaTek

Представлены iQOO Pad 5 и 5 Pro – мощные планшеты на чипах MediaTek

Представлен iQOO Neo 10 Pro+ – 6800 мАч, 120 Вт, Snapdragon 8 Elite

Представлен iQOO Neo 10 Pro+ – 6800 мАч, 120 Вт, Snapdragon 8 Elite

Huawei выпустила первый ПК на HarmonyOS

Huawei выпустила первый ПК на HarmonyOS

Ноутбуки с NVIDIA GeForce RTX 5060 появились в продаже – цена от $1099

Ноутбуки с NVIDIA GeForce RTX 5060 появились в продаже – цена от $1099

Выпущена видеокарта Intel Arc Pro B60 Dual Turbo с 48 ГБ памяти

Выпущена видеокарта Intel Arc Pro B60 Dual Turbo с 48 ГБ памяти

Huawei показала ноутбук MateBook Fold с гибким экраном

Huawei показала ноутбук MateBook Fold с гибким экраном

Huawei выпустила смартфоны Nova 14 Pro и 14 Ultra

Huawei выпустила смартфоны Nova 14 Pro и 14 Ultra

Представлен ZTE Axon 50 – недорогой камерофон на Snapdragon 8+ Gen 1

Представлен ZTE Axon 50 – недорогой камерофон на Snapdragon 8+ Gen 1

Acer представила новые игровые мониторы с частотой до 500 Гц

Acer представила новые игровые мониторы с частотой до 500 Гц