Разработка Project Gameface от Google позволяет управлять игровым персонажем мимикой — моргая, хмурясь и улыбаясь
В последнее время ведётся всё больше работ над созданием контроллеров для людей с ограниченными возможностями, и Google работает над собственным решением, позволяющим вообще устранить контроллеры из игрового процесса. Как сообщают СМИ, в рамках инициативы Project Gameface можно будет управлять персонажами и процессами с помощью движений головы, а также мимики.
Источник изображения: Google
Основным механизмом, как и следует из названия, служит управление с помощью мимики. Хотя контроллеры вроде Microsoft Xbox Adaptive Controller значительно упрощают участие в игровом процессе благодаря особому дизайну и большим кнопкам и иным элементам управления, решение Google обеспечивает принципиально новые возможности.
Отслеживающая движения головы «мышь» придумана довольно давно, но в основном такие технические решения регистрируют отчётливые движения головой или отслеживают моргание. Примерное такое оборудование известный стример Лэнс Карр (Lance Carr), страдающий от мышечной дистрофии, использовал до того, как пожар уничтожил его игровое железо. При этом происшествие имело и положительный эффект — именно после этого инженеры Google всерьёз занялись совершенствованием технологии.
Результатом стал Project Gameface. «Игровая мышь» — ПО с открытым кодом, не требует управления руками и использует для подачи команд обычную веб-камеру, направленную на лицо пользователя. Машинное обучение позволяет отслеживать на лице 468 уникальных точек, что даёт возможность GameFace точно распознавать не только движения головы, но и мимику. Например, то или иное выражение лица преобразуется в клик мышью или другие команды. Project Gameface позволяет даже настраивать управление под индивидуальную мимику, поэтому воспользоваться преимуществами технологии смогут даже те, кто с трудом может управлять даже лицевыми мышцами.
Источник изображения: Google
В Google заявляют, что Project GameFace нуждается в доработке и пока не готов к массовому использованию. Однако исходники уже доступны на GitHub тем, кто желает сделать вклад в продолжающуюся работу. Не исключено, что возможность подобного управления может пригодиться и здоровым людям — в дополнение к классическим контроллерам.
Источник:
Похожие записи:
- «Аж мурашки по спине»: российский художник показал, как мог бы выглядеть психологический хоррор про советский поезд с жутко реалистичной графикой
- CD Projekt RED подтвердила дату выхода улучшенной The Witcher 3: Wild Hunt на дисках и готовит первый полноценный патч
- Ролевая головоломка Puzzle Quest 3 появится в раннем доступе Steam с началом весны
- Студия-разработчик отменённой королевской битвы Halo Infinite провела сокращения — впервые за свою 17-летнюю историю
- «Понятия не имею, как так получилось»: игрок GTA Online попросил Rockstar вернуть ему $75 тысяч, а получил $32 миллиона
- «Будет лучше, чем Elden Ring»: амбициозный мод Archthrones для Dark Souls 3 получил сроки выхода демоверсии и интригующий тизер
- Британские чарты: ремейк Pokemon Diamond и Pearl стартовал лучше других игр для Switch в этом году, но чуть хуже Sword и Shield
Свежие комментарии