Дослідники з Корнельського і Стенфордського університетів створили робота, який за допомогою лазерної указки здатний самостійно нагадувати людям про різні дії, які вони забули виконати. Доповідь була представлена на конференції, коротко про роботу пише IEEE Spectrum.
Пристрій являє собою штатив, на який встановлено датчик глибини Kinect і рухома камера з лазерною указкою. Обробляє дані з Kinect і камери, а також керує вказівкою ноутбук. Якщо в полі зору робота людина робить якусь стандартну дію, то пристрій здатний відстежити пропущені етапи і вказати лазерною указкою на предмет, пов'язаний з відсутньою дією.
Спочатку робот був встановлений на тиждень для спостереження за повсякденною діяльністю семи добровольців на п'яти різних кухнях і у восьми офісах. На підставі відзнятого матеріалу дослідники описали 458 відеороликів, в яких люди здійснювали 21 різну дію з 23 типами об'єктів. Також автори використовували 222 ролики, де люди в кадрі навмисно пропускали якусь частину стандартної дії і йшли.
На прикладі роликів алгоритм самостійно навчився розпізнавати пропущену дію і виявляти об'єкт, пов'язаний з ним. Як відзначають дослідники, в експериментах робот в 60 відсотках випадків успішно визначав пропущену частину в дії і вказував на необхідний об'єкт за допомогою указки. Зокрема, робот світив лазерною указкою на мікрохвильовку, якщо в ній забули розігріту їжу; на молоко, яке не прибрали в холодильник; на книгу, яку після читання не повернули на полицю; на монітор, який не було вимкнено після вимикання комп'ютера. При цьому, за словами авторів, велика частина випробовуваних визнала такого робота корисним.