Готовимся к собеседованию ML/DS. Каверзные вопросы по ROC AUC

[@dsmlenjoyer]

Вопросы, разобранные на стриме: 1. интерпретация ROC AUC, вероятностный смысл 2. что будет с метрикой, если умножить скоры на 2? 3. что будет с метрикой, если умножить скоры на -2? 4. как изменится roc auc, если удвоить (задублировать) позитивы? 5. как изменится roc auc, если удалить случайный процент позитивов?

[@dsmlenjoyer]

Блог Александра Дьяконова (must read) - alexanderdyakonov.wordpress.com/2017/07/28/auc-roc-площадь-под-кривой-ошибок/