Разработка системы взаимодействия с физическими кнопками в играх
Нажать кнопку в VR пальцем — это не то же самое, что кликнуть мышью или нажать X на геймпаде. Физическая кнопка должна уходить под нажатием, сопротивляться, возвращаться обратно. Палец не должен проваливаться сквозь поверхность. И срабатывать кнопка должна ровно в тот момент, когда пользователь ожидает — не раньше, не позже.
Это три отдельных технических задачи, и каждая имеет свои грабли.
Физика нажатия: почему коллайдеры не решают задачу сами
Первый инстинкт — поставить на кнопку Collider, поймать OnTriggerEnter и активировать кнопку. Проблема: триггер срабатывает при любом прохождении через зону, не при нажатии. Если палец входит в коллайдер сбоку — кнопка нажата. Если рука проходит мимо с касанием края — тоже нажата.
Физическая кнопка требует направленного нажатия. Логика: кнопка активируется только при движении в направлении оси нажатия (обычно локальный -Y). Это означает проверку не OnTriggerEnter, а позиции «пальца» вдоль оси кнопки в каждом Update.
В XR Interaction Toolkit подход: кнопка — это XRBaseInteractable с кастомным компонентом PhysicalButton. Отслеживается float pressDepth = Vector3.Dot(fingerPosition - buttonSurface, buttonAxis). Пока pressDepth < threshold — pressed state. При pressDepth > releaseThreshold — released. Гистерезис между двумя порогами предотвращает bouncing.
Визуальная и тактильная обратная связь
Кнопка должна двигаться. Простой способ — Lerp позиции кнопки между restPosition и pressedPosition на основе pressDepth. Но простой Lerp не даёт физического ощущения сопротивления — кнопка движется линейно независимо от усилия.
Более правильный подход: spring-damper симуляция. Кнопка — Rigidbody с isKinematic = false, на неё действует spring force от ConfigurableJoint с линейным motion по одной оси. JointDrive.positionSpring и JointDrive.positionDamper определяют характер отклика. Это позволяет пальцу буквально «толкать» кнопку с физическим сопротивлением — кнопка не уходит мгновенно на максимум, а требует усилия.
При активации — XRBaseController.SendHapticImpulse(0.8f, 0.03f) для короткого «щелчка» в контроллере. Без haptics физические кнопки ощущаются немыми.
Проблема «призрачного пальца»
В Meta Quest без Hand Tracking (с контроллерами) «палец» — это виртуальный луч или небольшая sphere attached к позиции контроллера. Реального пальца нет. Кнопку нажимают кончиком контроллера или указательным пальцем в hand-model.
С Hand Tracking (Meta Hand Tracking SDK / OpenXR Hand Interaction Extension) пальцы есть — и это лучше, но и сложнее. Каждый палец — joint position, без физического коллайдера. Нужно добавлять маленькие sphere коллайдеры на fingertip joints (ThumbTip, IndexTip) и правильно настраивать их physics layer — чтобы они взаимодействовали с кнопками, но не конфликтовали между собой и не с телом аватара.
Layer матрица — обязательна: HandColliders vs. PhysicalButtons = Detect, HandColliders vs. HandColliders = Ignore, HandColliders vs. Environment = Ignore (иначе пальцы застревают в стенах).
Масштабирование системы
Когда кнопок в сцене много (панель управления, клавиатура), оптимизация важна. Не держать Update() на каждой кнопке — использовать Physics.OverlapSphere в менеджере, который раз в кадр проверяет ближайшие кнопки к позиции рук и активирует проверку только на них.
Для клавиатур — отдельный подход: PhysicalKeyboard менеджер с grid-based detection, без индивидуальных коллайдеров на каждой клавише.
Сроки: одна физическая кнопка с full feedback — 1–2 дня; система из 10–20 кнопок с Hand Tracking интеграцией — 1–2 недели. Стоимость рассчитывается индивидуально.