С чего все началось
2 марта террористы вошли в село Сушаны Брянской области. В телеграм-каналах появилась аудиозапись разговора с одной из местных жительниц, которая рассказала, что члены ДРГ несли с собой гранатометы, автоматы и якобы «листовки». Тезис про листовки активно был подхвачен украинскими спикерами и телеграм-каналами для информационных провокаций
Как на самом деле
По результатам оценки алгоритмами системы «Зефир», разработанной и используемой «Лапша Медиа», в оригинальной аудиодорожке звучит слово не «листовки», а «винтовки». Подобное искажение звука в опубликованной дорожке может быть обусловлено низким качеством аудиозаписи, акцентом спикера, подкреплением искажения восприятия субтитрами.
Что такое «Зефир»? Это система мониторинга аудиовизуальных материалов, таких как дипфейки на основе алгоритмической оценки и анализа с помощью ИИ. Оценка звуковой дорожки в данном конкретном случае происходит на основе модели Whisper, архитектура Transformers. Входной звук разбивается на фрагменты, преобразуется в спектрограмму log-Mel, а затем передается в кодировщик. Декодер обучен определять соответствующий текстовый отрезок, дополнительно используя специальные токены, которые направляют единую модель для выполнения таких задач, как идентификация языка, временные метки на уровне фраз, транскрипция многоязычной речи.
