Додаток від Google розповість сліпим про навколишню обстановку

Компанія Google випустила додаток Lookout, що дозволяє сліпим дізнаватися про об'єкти поруч з ними. Воно в реальному часі розпізнає на зображенні з камери об'єкти і повідомляє користувача як про сам об'єкт, так і про напрямок, в якому він знаходиться. Крім того, додаток вміє зачитувати текст, знаки, штрих-коди та інші візуальні об'єкти.


Сучасні смартфони під управлінням Android і iOS оснащені системними сервісами, що дозволяють людям з обмеженими можливостями, в тому числі сліпим, взаємодіяти з пристроєм. Наприклад, вони вміють озвучувати інтерфейс системи і програм. Крім того, деякі подібні системи в останні роки почали використовувати алгоритми комп'ютерного зору для розпізнавання об'єктів на зображеннях. Наприклад, VoceOver в iOS вміє переказувати фотографії, зачитуючи об'єкти на них і їх властивості. Однак ці сервіси придатні лише для статичного контенту і не дозволяють використовувати їх для реального світу через камеру смартфона.


Розробники з Google анонсували додаток Lookout на конференії I/O 2018, проте випустили його лише в березні 2019 року. Програма працює в трьох режимах: вивчення, шопінг і читання. В основному режимі (вивчення) програма використовує дані з камери для розпізнавання об'єктів перед пристроєм в реальному часі. При цьому додаток озвучує знайдені об'єкти і текст, а також повідомляє їх напрямок у вигляді годинникової позиції, наприклад, «комп'ютер на дві години». У режимі шопінгу додаток працює аналогічно, але налаштований на розпізнавання штрих-кодів і цінників. У режимі читання тексту програма розпізнає не об'єкти, а текст на них, і відразу ж зачитує його. Також програма дозволяє розпізнавати об'єкти не постійно, а зробити один знімок і отримати його докладний опис. Крім того, користувач може налаштувати, наскільки детально алгоритми будуть описувати об'єкти в кадрі.

Програма сумісна з системною службою TalkBack, що дозволяє взаємодіяти з інтерфейсом за допомогою жестів на екрані. Крім того, додаток можна використовувати не тільки тримаючи смартфон в руці, але і повісивши його в чохлі на шию. У такому випадку користувач може призупинити роботу алгоритму розпізнавання, закривши камеру рукою на пару секунд, а також запустити його заново, стукнувши два рази по задній поверхні смартфона. Крім того, керувати режимами роботи можна за допомогою жестів на сканері відбитків пальців, який зазвичай розташовується на задній поверхні смартфона.

Додаток опублікований в Google Play і доступний власникам смартфонів Google Pixel з операційною системою Android 8.0 і вище, що проживають в США. Однак фактично воно працює і з іншими смартфонами, що мають версію Android 5.0 або вище, і доступно поза Google Play.

Нещодавно Huawei представила додаток Facing Emotions, здатний розпізнавати емоції людей перед камерою смартфона і повідомляти про них користувачеві зручним способом. Воно може зачитувати розпізнану емоцію, а також відображати на екрані відповідне їй зображення, виконане в контрастних кольорах.

COM_SPPAGEBUILDER_NO_ITEMS_FOUND