Система способна распознавать вводимые цифры, даже если они закрыты рукой.
Группа исследователей из Нидерландов и Италии обучила нейросеть подсматривать PIN-коды в банкоматах. Метод работает на базе свёрточной нейронной сети, и использует модуль долгой краткосрочной памяти LSTM.
Нейросети обучали по видеозаписям вводов PIN-кода, прикрытых рукой. Система отслеживала движения рук. Исследователи сообщают, что система способна распознать 41% четырёхзначных и 30% пятизначных PIN-кодов за три попытки. Новую программу уже протестировали на 58 добровольцах.
Система использует запись с камер, на которых видны экраны банкоматов. На них видны «звёздочки», которые появляются при нажатии на клавишу. Система сопоставляет время появления этих «звёздочек» с движениями рук.
Зарубежные разработчики считают, что в мире пока что не существует действенных средств защиты от подобных видов атак.