知识卡片
评价先于模型
内容
分类和预测任务要先定义评价方式,再选择模型。准确率、召回率、精确率、AUC、混淆矩阵各自服务不同风险;类别不平衡时,高准确率可能只是模型学会了多数类。发散:评价指标是业务风险的翻译器,翻译错了,模型越强越危险。
参考来源
《图灵程序设计丛书:数据科学从入门到实战(套装全8册)》第04章《面向数据科学家的实用统计学》
知识卡片
分类和预测任务要先定义评价方式,再选择模型。准确率、召回率、精确率、AUC、混淆矩阵各自服务不同风险;类别不平衡时,高准确率可能只是模型学会了多数类。发散:评价指标是业务风险的翻译器,翻译错了,模型越强越危险。