Новая технология позволяет подслушивать телефонные разговоры через вибрации экрана

Исследователи из Пенсильванского государственного университета создали технологию, позволяющую расшифровывать телефонные разговоры на расстоянии до 3 метров без прямого доступа к устройству. Технология основана на комбинации радара миллиметрового диапазона и специально адаптированной модели искусственного интеллекта.

Система работает, улавливая микроскопические вибрации динамика телефона во время разговора. Радарный датчик миллиметрового диапазона — такой же, что используется в беспилотных автомобилях и сетях 5G — регистрирует эти колебания с расстояния до 3 метров. Затем полученные данные обрабатываются адаптированной версией модели распознавания речи Whisper.

Для адаптации Whisper к работе с радиолокационными данными исследователи применили метод машинного обучения с адаптацией низкого ранга, переобучив всего 1% параметров модели. Это позволило системе расшифровывать речь из зашумлённых радиолокационных данных с точностью около 60% при использовании словаря объёмом до 10 000 слов.

Разработка является существенным прогрессом по сравнению с предыдущим исследованием команды от 2022 года, когда система могла распознавать только 10 заранее определённых слов с точностью до 83%.

Первый автор исследования Сурёдай Басак отметил, что даже при неполной точности система представляет потенциальный риск для конфиденциальности, поскольку частичное распознавание ключевых слов в сочетании с контекстной информацией может раскрыть содержание важных разговоров.

Исследование было поддержано Национальным научным фондом США. Учёные подчеркивают, что их работа направлена на выявление потенциальных уязвимостей до того, как ими смогут воспользоваться злоумышленники, и надеются, что их открытие послужит стимулом для разработки защитных мер против подобного удалённого наблюдения.

Источник: Interestingeng Iineering