В своём докладе Мария Акопян, руководитель команды end-to-end качества AI-ассистента Алисы, поделилась опытом переосмысления оффлайн оценки интегрального качества Алисы. Сосредоточила внимание на сборе сложных срезов, включая анализ пользовательских сессий, а также обсудила переход на гибридную разметку с помощью языковых моделей.