Команда дослідників з Корнельського університету в США опублікувала докладне пояснення навчання штучного інтелекту зчитувати інформацію зі звуку натискання клавіш на клавіатурі. Штучний інтелект зміг передбачити результат набору тексту з точністю до 95%, навчаючись на натисканні клавіш. Коли систему навчали за допомогою Zoom, точність впала до 93%.
Для досягнення високої точності розпізнавання потрібне навчання для конкретного пристрою; це неможливо зробити з будь-якою випадковою клавіатурою. Це можна зробити або локально за допомогою мікрофона, або віддалено через мережу за допомогою Zoom або подібної програми для захоплення звуку.
В рамках проекту АІ навчався на Apple MacBook Pro. Після 25 натискань модель навчилася розпізнавати звуки 36 різних клавіш. Точність розпізнавання можна легко знизити, використовуючи сенсорну клавіатуру, джерело шуму або навіть просто змінивши техніку набору тексту.
Штучний інтелект найлегше розпізнає введення з механічних клавіатур, але він працює і з іншими типами: мембранна клавіатура також може генерувати достатньо даних для розпізнавання.
