（平均值±3倍标准差）方法剔除异常值，是不是需要循序反复进行多次？

是 否 +2 论坛币

k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群

赵安豆老师微信：zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

立即领取

感谢您参与论坛问题回答

经管之家送您两个论坛币！

+2 论坛币

请教一个问题：在一组测量数据中（有几百个）剔除异常值，是采用（平均值±3倍标准差）的方法，为什么在进行异常值剔除后的数据中进行检验，还是有异常值存在呢？是不是需要再进行多次的这样的操作呢，直至达到不再有异常值存在？

扫码加我 拉你入群

请注明：姓名-公司-职位

以便审核进群资格，未注明则拒绝

分享0 收藏3 回帖

关键词：标准差 平均值 异常值 异常 标准差 平均值

通常要逐次剔除的——剔除一个后，方差就变了。每次剔除通常都会变化——就是因为这个。

噢，是需要逐次进行异常值的剔除的，我知道了。谢谢你的解答！非常感谢！

异常值的处理是个慎重问题吧？除非知道异常原因，否则凭什么剔除呢？

好郁闷啊

chyshl 发表于 2012-8-7 16:51
异常值的处理是个慎重问题吧？除非知道异常原因，否则凭什么剔除呢？

很有道理

楼主这个异常值处理方法是平均值±3倍标准差，那其实平均值±2.9倍左右标准差在你剔除前面的平均值±3倍标准差数据后再做异常值检验时就可能成为新的异常值，在这种情况下我不建议纯粹的以平均值±3倍标准差来剔除异常值。因为还可能存在很多数据标准差在平均值±（2.8-3.0）倍标准差之间，这些也可能是异常值呢。那么在这种情况下应该怎么办呢？我个人的经验是如果要做回归，可以考虑做分位数回归，这个就不要考虑异常值的影响，可以直接做。还有就是可考虑使用缩尾或者截尾处理，或者对数据进行变换（如偏正态分布数据用取对数处理）。总之，异常值处理要慎重，还需结合专业知识具体判断。

xddlovejiao1314 发表于 2015-2-1 11:45
楼主这个异常值处理方法是平均值±3倍标准差，那其实平均值±2.9倍左右标准差在你剔除前面的平均值±3倍标准 ...

如果是做二分类的logistic回归时，自变量取对数了，并且做了平均值±3倍标准差，还是有很多异常值怎么办？怎么改成分位数回归？

xddlovejiao1314 发表于 2015-2-1 11:45
楼主这个异常值处理方法是平均值±3倍标准差，那其实平均值±2.9倍左右标准差在你剔除前面的平均值±3倍标准 ...

前辈，我也在遇到异常值处理的问题了。第一，用箱图做，删除异常，又出现新的异常；第二，用均值±3倍标准差也是删除异常出现异常值。在网上查的方法就这两种，请前辈分享一下异常值处理的经验。

情怀研究员 发表于 2017-10-15 20:47
前辈，我也在遇到异常值处理的问题了。第一，用箱图做，删除异常，又出现新的异常；第二，用均值±3倍标准 ...

我上面的回答里说得很清楚啦，我个人的解决思路。祝好运~