楼主: weizhoukkk
32275 12

[其他] 关于stata剔除异常值 [推广有奖]

  • 0关注
  • 0粉丝

讲师

58%

还不是VIP/贵宾

-

威望
0
论坛币
50 个
通用积分
0.6153
学术水平
3 点
热心指数
1 点
信用等级
0 点
经验
224 点
帖子
103
精华
0
在线时间
970 小时
注册时间
2006-3-26
最后登录
2024-4-15

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
向各位请教一个问题:
stata如何提出若干个标准差之外的异常值,winsorize的方法似乎不适合处理自变量异常值问题,所以我认为自变量的一些异常值最好指定为“.”缺损值,有命令能够按照“标准差”生成缺损值吗?
十分感谢
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:Stata tata 异常值 Winsorize winsor 标准差 自变量 如何 最好

沙发
denver 发表于 2009-7-1 23:52:28 |只看作者 |坛友微信交流群
可能的解决办法:
1、剔除正负3倍标注差之外的数据(用stata实现的方法我现在也在找,希望牛牛们能够给予指点)
2、用rreg命令

使用道具

藤椅
weizhoukkk 发表于 2009-7-2 00:39:50 |只看作者 |坛友微信交流群
rreg是有偏回归,应该慎用呀

使用道具

板凳
sungmoo 发表于 2009-7-2 10:18:38 |只看作者 |坛友微信交流群
denver 发表于 2009-7-1 23:52 剔除正负3倍标注差之外的数据
如果总体不服从正态分布,以上作法有意义吗?

使用道具

报纸
sungmoo 发表于 2009-7-2 10:27:54 |只看作者 |坛友微信交流群
分布函数总以方差为参数吗?

(有些分布并没有方差)

使用道具

地板
denver 发表于 2009-7-2 11:13:55 |只看作者 |坛友微信交流群
sungmoo 发表于 2009-7-2 10:18
denver 发表于 2009-7-1 23:52 剔除正负3倍标注差之外的数据
如果总体不服从正态分布,以上作法有意义吗?
看来版主应该不是做公司金融的,在公司金融中,这是一个标准的做法。当然,对于做统计的人来说,这种做法很显然存在诸如版主所说的分布问题,但是不同的领域有不同的style,就跟麻将有上千种打法,在不同的地方就要按照当地的习惯打,这点我在读了很多不同领域的paper后才有所体会。

使用道具

7
sungmoo 发表于 2009-7-2 11:44:22 |只看作者 |坛友微信交流群
denver 发表于 2009-7-2 11:13 看来版主应该不是做公司金融的,在公司金融中,这是一个标准的做法。当然,对于做统计的人来说,这种做法很显然存在诸如版主所说的分布问题,但是不同的领域有不同的style,就跟麻将有上千种打法,在不同的地方就要按照当地的习惯打,这点我在读了很多不同领域的paper后才有所体会。
个人以为,“不同领域”中不同的style也要遵循一些共同的原则。

个人猜想,公司金融里之所以这么做,其根据还是通过对样本(独立同分布的一组随机变量)进行一定的设计(或构造),可以得到一个服从(或近似服从)某个以标准差为参数的分布的随机变量。

麻将虽有上千种打法,但一般来说,学会一种打法,应该会很容易学会其他多种打法。

使用道具

8
sungmoo 发表于 2009-7-2 12:06:48 |只看作者 |坛友微信交流群
Lindeberg定理给出了方差存在的独立随机变量序列“服从中心极限定理”的充分条件。

独立且不全退化的随机变量序列{v1,v2,……}若满足Lindeberg条件,则(Sn-Mn)/Dn依分布收敛于标准正态分布,其中,Sn=v1+v2+……+vn,Mn=E(v1)+E(v2)+……+E(vn),Dn=sqrt[Var(v1)+Var(v2)+……+Var(vn)]。
已有 1 人评分学术水平 热心指数 信用等级 收起 理由
Stakiny + 3 + 3 + 3 精彩帖子

总评分: 学术水平 + 3  热心指数 + 3  信用等级 + 3   查看全部评分

使用道具

9
denver 发表于 2009-7-2 14:15:53 |只看作者 |坛友微信交流群
weizhoukkk 发表于 2009-7-2 00:39
rreg是有偏回归,应该慎用呀
请教一下,为什么说是有偏的呢。本人对这方面确实不是很清楚,还请赐教,谢谢。

使用道具

10
mingchei 发表于 2009-7-2 17:18:05 |只看作者 |坛友微信交流群
通常要不要去除極端值端看你的研究,
先跑reg 再predict 再sort key
找出極端值,
但個人觀點僅會去除 影響整體迴歸方程式的data 點.

使用道具

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注jltj
拉您入交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-5-1 19:49