Назад к ленте

Как CauterRule увеличил recall с 0.087 до 0.174 за счет изменения подхода

Как CauterRule увеличил recall с 0.087 до 0.174 за счет изменения подхода
🛠 У CauterRule был серьезный кризис: recall застрял на уровне 0.087, несмотря на усилия команды. После анализа оказалось, что не сам матчер, а методология оценки результатов создает ложное впечатление о бесполезности хороших правил. Команда решила изменить подход и ограничить референсный пул по домену. В результате новой версии 0.3.0 удалось удвоить recall до 0.174. Теперь инструмент способен более точно выделять полезные правила и избегать шумов. CauterRule доступен на GitHub и PyPI, чтобы каждый мог улучшить свою работу с агентами.
Источник: dev.to

Похожие проекты