Розробники з компанії Microsoft запропонували метод, що дозволяє непомітно змінювати віртуальне середовище при використанні VR-шолома. Для цього автори пропонують відстежувати напрямок погляду користувача, а також відволікати його увагу, і в цей час змінювати середовище в області периферичного зору. Автори запропонували кілька застосувань системи. Наприклад, вони пропонують визначати, картини якого стилю приваблюють користувача, і непомітно підлаштовувати експонати на віртуальній виставці відповідно до цього. Розробка була представлена на конференції UIST 2019, стаття опублікована на сайті Microsoft.
У кінематографі режисер і оператор задають ракурс зйомки так, як вважатиме за потрібне. Це дозволяє, наприклад, знімати сцени, в яких за камерою змінюється обстановка. У комп'ютерних іграх і віртуальній реальності розробники більш обмежені в засобах вираження, тому що користувач може майже миттєво поміняти ракурс на інший, причому в будь-який момент.
Дослідники з Microsoft придумали метод, що дозволяє частково вирішити цю проблему, а також використовувати зміну віртуального навколишнього середовища для підвищення зацікавленості користувача. Зміни, внесені системою у віртуальне середовище, відбуваються в полі зору користувача, однак він не помічає їх. Це відбувається завдяки тому, що система відстежує напрямок погляду і змінює середовище тільки в області периферійного зору.
Інженери використовували VR-шолом HTC Vive Pro і айтрекер PupilLabs. Крім відстеження напрямку погляду, система дозволяє оцінювати когнітивне навантаження на користувача і його увагу на підставі діаметра зіниць, частоти саккад та інших факторів. Це дозволяє підлаштовувати оточення під реакцію людини.
Розробники створили кілька програм для демонстрації. В одній з них користувач перебуває у віртуальному музеї. Система відстежує до яких картин прикута увага користувача, і може непомітно поміняти одну з картин на краю поля зору відповідно до переваг. В іншій демонстрації система привертає увагу людини на кота, що рухається, і в цей же час змінює розташування елементів пазла таким чином, щоб частини розташовувалися ближче один до одного.
Раніше відстеження напрямку погляду вже використовували незвичним чином. Мабуть, найпримітніший приклад - торішня робота американських дослідників, які запропонували вирішувати за допомогою датчиків напрямку погляду проблему обмеженості розмірів віртуального світу розмірами приміщення, в якому знаходиться користувач. Розроблена ними система реєструє саккади (різкі мимовільні рухи очей) людини і в цей момент трохи повертає зображення, змушуючи користувача мимоволі повертатися у відповідну сторону. Це дозволяє перенаправляти користувача і непомітно для нього водити колами по невеликому приміщенню.