Компанія HTC представила доповнення для VR-шоломів - датчик, що відстежує руху частин нижньої половини обличчя. Разом зі шоломом, що відстежує напрямок погляду, він дозволяє створювати в реальному часі анімований аватар користувача, що копіює його руху і міміку обличчя.
Зараз VR-шоломи в основному використовують для гри, перегляду кіно та інших розваг. Разом з цим розробники VR-шоломів і програмного забезпечення для них вже давно працюють над програмами для самостійної і спільної роботи, а особливо сильно вони звернули на це увагу після початку пандемії коронавірусу, через яку багато перейшли на віддалену роботу. В останніх моделях VR-шоломів для цього є режим passthrough, який в реальному часі транслює користувачеві відео з камер на шоломі. Також у них є режим, в якому люди з різних місць можуть проводити спільну конференцію. Виглядає це так: користувач сидить у своїй кімнаті і бачить на екрані як її, так і накладених на неї людей і віртуальні предмети. Проблема полягає в тому, що аватарам співрозмовників не вистачає реалістичності, тому що поки в VR-пристроях майже немає датчиків для захоплення рухів обличчя.
HTC представила додатковий датчик для своїх шоломів, що дозволяє їм відстежувати міміку обличчя і в реальному часі переносити її на віртуальний аватар. Датчик кріпиться на нижню частину шолома так, щоб він знаходився перед ротом. У ньому є дві камери, що працюють з частотою 60 герц та інфрачервоне підсвічування. Затримка датчика становить 10 мілісекунд, тому рухи 1916, розпізнані ним, синхронізуються з голосом.
Компанія адаптувала датчик для роботи зі своїми шоломами і двома популярними ігровими движками: Unity и Unreal Engine. Крім того, його можна використовувати разом з моделлю Vive Pro Eye, в якій є датчики відстеження рухів очей. У такому випадку в аватарі будуть в реальному часі анімуватися всі частини особи.
Інші компанії теж все чаші оснащують свої пристрої новими датчиками. Наприклад, HP вбудувала в свій шолом датчики, які відстежують рухи м'язів обличчя, розмір зіниць і частоту серцевих скорочень, щоб через їх показання відстежувати когнітивне навантаження на користувача, а Varjo оснастила VR-шолом лідаром, щоб більш якісно «» прив'язувати «» віртуальні об'єкти до підлоги або стін в режимі доповненої реальності.