Над технологией работала группа под руководством Юты Сигиура из Университета Кэйо. Они предположили, что, когда пользователь держит смартфон, его палец не пропускает свет и, соответственно, заслоняет часть экрана. Тень от пальца, которую можно различить в глазах пользователя, можно использовать для того, чтобы менять элементы интерфейса в удобном для пользователя ключе — например, приближать иконку приложения или ползунка громкости.
Тестирование показало точность определения положения пальца в 85%, но при дальнейшем использовании технологии пользователям предлагают отработать алгоритм под себя и сделать несколько снимков, которые помогли бы нейросети делать более точные прогнозы.
