新人求教ROC曲线确定划界分的问题

相似文件 换一批

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

因为实验设计时出了纰漏，没有定“金标准”。现在从网上找到两个别人确定的cut-off（一个5分，一个8分），试图用ROC曲线对这两个cut-off进行比较，以得出最佳cut-off。


方法用的是四格表，列出的四格表如下：




求出的ROC分析结果：

Case Processing Summary
阳性阴性	Valid N (listwise)
	Unweighted	Weighted
Positivea	2	243.00
Negative	2	2815.00
Larger values of the test result variable(s) indicate stronger evidence  for a positive actual state.
a. The positive actual state is 阳性.

Area Under the Curve
Test Result Variable(s):   分类
Area	Std. Errora	Asymptotic Sig.b	Asymptotic 95% Confidence Interval
			Lower Bound	Upper Bound
.347	.017	.000	.314	.380
The test result variable(s): 分类 has at least  one tie between the positive actual state group and the negative actual state  group. Statistics may be biased.
a. Under the nonparametric assumption
b. Null hypothesis: true area = 0.5

Coordinates of the Curve
Test Result Variable(s):   分类
Positive if Greater Than or Equal Toa	Sensitivity	1 - Specificity
4.0000	1.000	1.000
6.5000	.218	.524
9.0000	.000	.000
The test result variable(s): 分类 has at least  one tie between the positive actual state group and the negative actual state  group.
a. The smallest cutoff value is the minimum observed test value minus 1,  and the largest cutoff value is the maximum observed test value plus 1. All  the other cutoff values are the averages of two consecutive ordered observed  test values.

从上表来看，比较的结果似乎是6.5分为最佳CUT-OFF，但导师表示表中未显示5分和8分的灵敏度和特异度没显示出来，还不太满意。


求问：


1.ROC曲线中能否没有“金标准”，直接把另一CUT-OFF作为假想金标准，两者进行比较。


2.如果可以比较的话，我采取的方法是否错误。如果错误求问分析方法。


3. 6.5分在表中显示的特异度和灵敏度，是相对5分和8分而言的，还是它自己本身的灵敏度。


半路转行，在统计学上还是新人。希望能得到诸位前辈的指点，不甚感激！！！

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏0 回帖

关键词：ROC曲线 新人求教 ROC Coordinates Sensitivity positive evidence indicate stronger 金标准

没有金标准的情况下是可以用别人的标准做参考，但一定要保证用于对比的标准的可靠性。
如果是有两个参考cut-off值的话，就应该做两条ROC分别对应5和8，可能会得出两个不同的最优阈值。
从你给的资料里无法知道那张表里的灵敏度和特异度是对应的哪个。

峰天暗地 发表于 2014-6-27 12:45
没有金标准的情况下是可以用别人的标准做参考，但一定要保证用于对比的标准的可靠性。
如果是有两个参考cu ...

谢谢您的解答！

但现在的问题是，若用5分和8分做两条ROC曲线，就另需要另一个cut-off。我这几天上网找了一下，发现这一方面在中国大陆研究的论文很少，目前只能找到5分和8分两个cut-off，找不到具有权威性的第三个CUT-OFF。

我那个表格的情况是直接把8分当成金标准，然后用5分与其进行比较的，请问是否错了？如果不正确的话，是否还有别的方法可以处理这种只有两个cut-off，还要相互比较的情况？

再三麻烦您真是不好意思，万分感谢！

levil0411 发表于 2014-7-1 12:10
谢谢您的解答！

但现在的问题是，若用5分和8分做两条ROC曲线，就另需要另一个cut-off。我这几天上网找 ...

比较5和8的ROC曲线只能得出在你的数据里这两个cut-off值诊断效果的一致性，对于确定最佳cut-off是没有帮助的。
用别人的cut-off来确定cut-off的方法行不通，因为两者的数据在同一个维度，也就意味着只要你选取与其一致的cut-off就能达到灵敏度和特异性都为100%。
建议重新设计实验区分样本，或者请教行业内专家的意见来区分，只要保证你的参考标准是可靠的，并且和你需要确定的cut-off不在同一维度。

首先cut-point 和金标准不是一回事。ROC曲线只是在金标准诊断的前提下，寻找最佳切点(cut-point)，使灵敏度和特异度都达到最高。任何的诊断指标评价都离不开金标准。

没有金标准是不可以滴！SPSS做ROC是坑爹滴。