Tim istraživača s britanskih sveučilišta istrenirao je deep learning model koji može ukrasti podatke iz pritisaka tipki na tipkovnici snimljenih pomoću mikrofona s točnošću od 95%.
Kada je Zoom korišten za treniranje algoritma za klasifikaciju zvuka, točnost predviđanja pala je na 93%, što je još uvijek opasno visoko i rekordno za taj medij.
Takav napad ozbiljno utječe na sigurnost podataka mete jer bi zlonamjernim pojedincima mogao otkriti nečije lozinke, rasprave, poruke ili druge osjetljive informacije.
Štoviše, za razliku od drugih napada sa strane kanala koji zahtijevaju posebne uvjete i podliježu ograničenjima brzine prijenosa podataka i udaljenosti, akustični napadi postali su puno jednostavniji zbog obilja uređaja koji nose mikrofone i koji mogu postići visokokvalitetne audio snimke.
To, u kombinaciji s brzim napretkom u strojnom učenju, čini napade na kanalima temeljenim na zvuku izvedivim i puno opasnijim nego što se ranije očekivalo.
Prvi korak napada je snimanje pritisaka tipki na ciljnoj tipkovnici, jer su ti podaci potrebni za treniranje algoritma predviđanja. To se može postići putem obližnjeg mikrofona ili ciljanog telefona koji je možda zaražen zlonamjernim softverom koji ima pristup njegovom mikrofonu.
Alternativno, pritisci tipki mogu se snimiti putem Zoom poziva gdje sudionik lažnog sastanka pravi korelacije između poruka koje je upisao cilj i njihovog zvučnog zapisa.
Istraživači su prikupili podatke o vježbanju pritiskom na 36 tipki na modernom MacBooku Pro 25 puta i snimanjem zvuka koji proizvodi svaki pritisak.
Zatim su proizveli valne oblike i spektrograme iz snimaka koji vizualiziraju prepoznatljive razlike za svaku tipku i izveli specifične korake obrade podataka kako bi povećali signale koji se mogu koristiti za prepoznavanje pritisaka na tipke.
Slike spektrograma korištene su za treniranje ‘CoAtNet’, koji je klasifikator slika, dok je proces zahtijevao eksperimentiranje s epohom, brzinom učenja i parametrima dijeljenja podataka dok se ne postignu najbolji rezultati točnosti predviđanja.
Istraživači su u svojim eksperimentima koristili isto prijenosno računalo, čija se tipkovnica koristi u svim Appleovim prijenosnim računalima zadnje dvije godine, iPhone 13 mini postavljen 17 cm od mete i Zoom.
