Стал бронзовым призёром Sber AI Tech. В составе команды DESTINY (@elaylama и @apihunter) разрабатывал Coordination Referee — модель для анализа совместной работы AI-агентов.
Какую задачу решали
Когда несколько AI-агентов работают над общей целью, они могут потерять передачу задачи, дублировать работу, зациклиться, зайти в тупик, начать конфликтовать или отклониться от цели. По завершённому журналу модель должна определить тип сбоя, указать сообщение, с которого он начался, и отдельно оценить, достигнута ли цель.
Что делали при разработке
Превращали сообщения агентов, передачи задач, созданные артефакты и изменения общего состояния в признаки. Объединили нейросети, учитывающие последовательность и связи сообщений, с моделями LightGBM. Для типа сбоя, достижения цели и поиска начала сбоя использовали отдельные предсказания.
Сравнивали варианты на отложенных данных, проверяли разбиения на утечки и разбирали ошибки. Подготовили автономный пакет решения с обученными весами и проверили его запуск на CPU без доступа к сети.
Python · NumPy · LightGBM · ансамбли нейросетей
Обсудить AI-проект