В решении задач из области обработки естественного языка и, в частности, генерации текста в последние годы хорошо себя зарекомендовали нейронные сети архитектуры Transformer. Обучаясь на больших корпусах, они строят точные модели языка и показывают лучшие на сегодняшний день результаты в задаче генерации правдоподобной речи. В настоящей работе мы показываем, как, дообучив такую модель на сравнительно небольшом корпусе из конкретной предметной области, можно добиться от модели усвоения стилистики текстов данной области и использовать её в дальнейшем для генерации новых текстов.
Ларькин В.Д., Поволоцкий В.А. (науч. рук. Пановский В.) Построение системы генерации стилизованных текстов с использованием алгоритмов искусственного интеллекта и нейронных сетей // Сборник тезисов докладов конгресса молодых ученых. Электронное издание. – СПб: Университет ИТМО, [2022]. URL: https://kmu.itmo.ru/digests/article/9133