Обучение с подкреплением для рекомендательных систем вынесли в офлайн: конференция ICONIP 2023, журнал Springer

10.01.2024

 

В ушедшем году сотрудники 71 отдела вместе с коллегами из Центра когнитивного моделирования МФТИ успели посетить, кажется, все части света, очно или заочно. Одной из последних остановок стала 30-я Международная конференция по обработке нейронной информации ICONIP 2023, для которой Азиатско-Тихоокеанское нейросетевое общество облюбовало Чаншу, столицу небольшой китайской провинции Хунань с населением в пол-России. О масштабах мероприятия вы можете судить и по трудам конференции, опубликованных издательством Springer уже в новом году в количестве аж 15 томов.

 

Делегация в составе Зои Воловиковой, Петра Кудерова и Александра Панова попала в самый эпицентр события, в секцию «Когнитивная нейробиология». Для неё и была задумана презентация-«Интерпретация процесса принятия решений в обучении с подкреплением офлайн для интерактивных рекомендательных систем» (ссылка). Фреймворк с инновационными метриками для оценки поведения RL-агента в реальном времени и его адаптивности к нестационарным пользовательским предпочтениям Зоя с коллегами доводила до ума несколько лет, для чего пришлось разбираться с целым комплексом проблем. Вот, разобрались.

Испытания проводились на датасете LastFM в расширенной динамической среде, с калибровкой настроек внутри синтетического окружения для интерпретации результатов метрики и тестирования гипотез настройки Марковского процесса принятия решений и алгоритмов выбора. Результаты были озвучены на конференции. Но если вы по какой-то нелепой причине пропустили её, то скорее переходите по ссылке выше — 15 томов, доверху набитых нейродокладами, ждут своего читателя!

P. S. А вот и отчёт команды о поездке:


Ссылки по теме:

сайт ICONIP 2023