В работе рассматривается использование метода Attention Fusion для мультимодального анализа личности по модели Big Five (OCEAN). Данный подход позволяет динамически адаптировать вклад аудио, видео и текстовых данных в процесс предсказания личностных характеристик, повышая точность интеграции модальностей в сравнении с традиционными методами (Fixed Weighted Fusion). Разработанная модель протестирована на мультимодальных датасетах First Impressions V2 и MuPTA. Экспериментальные результаты показали повышение точности предсказаний с 85% до 88%, что подтверждает эффективность предложенного метода. Внедрение Attention Fusion делает модель перспективной для автоматизированных систем анализа личности.

Алибеков О.О. (науч. рук. Горлушкина Н.Н.) Мультимодальный анализ личности с использованием attention fusion // Сборник тезисов докладов конгресса молодых ученых. Электронное издание. – СПб: Университет ИТМО, [2025]. URL: https://kmu.itmo.ru/digests/article/14380