В работе представлена разработка системы управления роботизированным манипулятором посредством голосовых команд с использованием компьютерного зрения и технологий искусственного интеллекта. Аппаратная часть включает манипулятор, полигон 80×80 см, камеру и четыре цветовые целевые зоны. Система реализует конвейер обработки: транскрибация голосового запроса, семантический анализ команды (NLP), визуальная локализация объекта, расчёт траектории и исполнение машинных команд. Разработана собственная модель обработки естественного языка, что позволяет отказаться от сторонних API.

Автайкин А.А., Матлахов В.А. (науч. рук. Вишняков Р.Ю.) Разработка системы управления роботизированным манипулятором посредством голосовых команд с использованием компьютерного зрения и технологий искусственного интеллекта // Сборник тезисов докладов конгресса молодых ученых. Электронное издание. – СПб: Университет ИТМО, [2026]. URL: https://kmu.itmo.ru/digests/article/18160