В настоящей работе рассматривается подход, который позволяет в режиме реального времени аппроксимировать мимику лица используя ключевые точки. В этом подходе первый кадр кодируется традиционным кодеком видеоинформации, например, H.264/AVC. Для второго и следующего кадров вычисляется и передается относительно небольшое количество ключевых точек. Декодер, используя принятый ключевой кадр и ключевые точки, генерирует новый кадр при помощи нейронной сети. В случае смены сцены вместо ключевых точек снова передаётся ключевой кадр.
Шутов В.В. (науч. рук. Беляев Е.А.) Сжатие изображения лица с использованием переноса геометрии на основе ключевых точек для систем видеоконференцсвязи // Сборник тезисов докладов конгресса молодых ученых. Электронное издание. – СПб: Университет ИТМО, [2022]. URL: https://kmu.itmo.ru/digests/article/5253