В работе представлена платформа для сравнительной оценки Retrieval-Augmented Generation (RAG) архитектур по метрикам качества извлечения и задержек. Эксперименты задаются декларативной конфигурацией, обеспечивающей воспроизводимость и фиксацию параметров запуска. Поддерживаются сценарии retrieval со стратегиями single и fanout_merge, а также методы объединения результатов на основе Reciprocal Rank Fusion и дедупликации документов. Реализован сбор метрик Recall@k, MRR@k и процентильных характеристик задержек, включая end-to-end сетевые задержки. Платформа предназначена для выявления компромиссов качество–производительность и последующей оптимизации RAG-систем в распределённой среде.

Салимов Ш.К. (науч. рук. Жуков Н.Н.) Разработка платформы сравнительной оценки rag-архитектур по качеству и задержкам // Сборник тезисов докладов конгресса молодых ученых. Электронное издание. – СПб: Университет ИТМО, [2026]. URL: https://kmu.itmo.ru/digests/article/17951