Экономист

Оценка качества генерации ответов ИИ
— проведение комплексного анализа ответов языковых моделей по критериям:
релевантность, безопасность, фактологическая точность, соответствие пользовательскому
запросу;
— присвоение рейтинговых оценок на основе детальных гайдлайнов проекта.
Фактчекинг и верификация информации
— проверка достоверности фактов в ответах нейросети с использованием поисковых
систем (Google, Yandex) и авторитетных источников;
— проверка ответов через сравнение с данными от альтернативных генеративных
моделей.
Выявление и классификация ошибок ИИ
— идентификация «галлюцинаций» модели, логических несоответствий, этических
нарушений и потенциально вредоносного контента.
Аннотирование и разметка данных
— формирование обоснований для каждой выставленной оценки.
Работа с нормативной документацией
качества проекта;
— Строгое соблюдение внутренних гайдлайнов, политик безопасности и стандартов
— Своевременное обновление знаний при изменении методологии оценки.