Модель рекомендаций переобучается на кликах по своим же рекомендациям
Рекомендательная модель еженедельно переобучается на кликах пользователей. Клики возможны только по показанным товарам, а показываются товары из топа модели. За полгода разнообразие рекомендаций упало вдвое, новые товары почти не получают показов, офлайн-метрики растут.
Что происходит и как это исправить?
- Петля обратной связи — нужно исследование
- Модель улучшается, раз офлайн-метрики растут
- Нужно переобучать модель каждый день
- Стоит убрать новые товары из каталога