ROC曲线的基本思想是把敏感度和特异性看作一个连续变化的过程，用一条曲线描述诊断系统的性能，其制作原理是在连续变量中不同界值点处计算相对应的灵敏度和特异度，然后以敏感度为纵坐标、1-特异性为横坐标绘制一条真阳性率与假阳性率的曲线。
文章来源：LinkLab微信公众号引言上一期我们已学习了诊断性试验的常用评价指标，不难看出，在这些指标中，Sen、Spe、+LR 和 -LR属于稳定的指标，Acc为相对稳定指标，而PPV和NPV为不稳定指标。
【作者介绍】李志辉，长期从事各类统计软件应用研究，主编或参编SPSS、MINITAB、STATISTICA多个统计软件教材共8本。代表作：电子工业出版社《SPSS常用统计分析教程(SPSS 22.0中英文版)(第4版)》（2015年）。
做了生信分析，拿到一堆数据，看不懂图怎么办?Youden index = Sensitivity + Specificity − 1=TRP-FRP，范围取值介于0-1之间，约登指数越大，表示分类模型性能越好。
准确度 accuracy=TP + TNTP + TN + FP + FN。我们的目标是求概率对，假设预测值为 0.8 的正样本有 10 个，那么低于 0.8 的负样本总数乘以 10 即为这一预测值的概率对，此外，我们还应该计算预测值等于 0.8 的负样本数，假设为 8，这种情况下，此时正负样本概率相等，需要取一半，即 8 * 10 / 2。
在监督学习建模中有一个重要的模块是模块的检测，就是怎样判断一个模型的好坏？那么常用的的检测的指标有P值、R值、F值、ROC曲线、AUC值等，今天来学习他们都是怎么来的，有什么用处。这里为二分类问题，即只有正例（为1）和负例（为0）。 1、TP为正例中正确预测的值。
ROC曲线首先是由二战中的电子工程师和雷达工程师发明的，用来侦测战场上的敌军载具，也就是信号检测理论，后面广泛应用于医学、无线电、生物学、犯罪心理学领域中，而且最近在机器学习和数据挖掘领域也得到了很好的发展。
导语:随着AI产品近年在市场上的热门，AI产品经理也变得抢手了。这些年大家都常常听到人工智能有三大马车，即:数据、算法和算力，其实这个是拆解任何一个人工智能项目或者是问题非常有效的方法，大家务必记住这三个要素，缺一不可，我们后面的实战章节会拿来反复进行验证使用。
性能指标往往使我们做模型时的最终目标，如准确率，召回率，敏感度等等，但是性能指标常常因为不可微分，无法作为优化的loss函数，因此采用如cross-entropy，rmse等“距离”可微函数作为优化目标，以期待在loss函数降低的时候，能够提高性能指标。y_pred= [0,
