Новый фреймворк CriticGen переводит процесс оценки LLM в формат управляемой коррекции ответов. Система генерирует специфичные для каждого запроса критерии, на основе которых модель выставляет оценки, обосновывает их и предлагает конкретные правки. Согласно результатам тестов, метод позволяет улучшить 73,17% ответов при уровне отсутствия деградации в 93,28%.
Представлен фреймворк CriticGen для оценки и улучшения ответов LLM
Исследователи предложили CriticGen — систему оценки LLM, которая создает индивидуальные критерии для анализа ответов и формирования конкретных рекомендаций по их улучшению.
