发帖
雷达卡
[img=1080,607][/img]
引言:
邢不行的系列帖子“量化小讲堂”，通过实际案例教初学者使用python进行量化投资，了解行业研究方向，希望能对大家有帮助。
【必读文章】:《10年400倍策略分享-附视频逐行讲解代码》[/url]
《EOS期现套利，一周时间，15%无风险收益》[/url]
【历史文章汇总】:[/url]
个人微信：xbx9585，有问题欢迎交流
这是邢不行第 55 期量化小讲堂的分享
作者 | 贾真假、邢不行
经常有人跟我说他发现了一个很厉害的策略，年化收益有多高云云；或者看到策略研报、金融论文上面展现某结论非常非常显著等等。
但是对于这些，我一般是持怀疑态度的。其中很重要的一个原因是，它们用来产生结论的原始数据可能是有问题的。
因为我自己知道，整理一份干净、可用的历史数据有多么的难、有多少坑。
还有很多人在量化投资过程中会发现自己的策略明明历史回测表现很好，但实盘却不理想。这也很有可能是因为底层数据有问题导致的。
俗话说：rubbish in，rubbish out。原始数据都是垃圾，策略怎么能不是垃圾呢？
本文就讲讲在整理股票历史数据中经常遇到的坑，来帮大家避免这些问题。
国内最有名的商业金融数据库是万得Wind。[img=680,80][/img]
在万得客户端的股票行情序列中，可以导出全部A股每天的行情数据：
截止目前A股共有3699只股票
很多没有经验的同学下载了这个数据，就兴冲冲的开始研究量化策略，甚至写学术论文了。
但其实这是有问题的。
因为这些股票当中没有包含那些已经退市的股票。比如图中000001、000002之后就是000004了，那请问怎么没有000003？因为它已经退市了。
当你策略的回测是基于这样不完整的股票数据做出的，就会存在误差。因为在今天我们知道这些股票已经退市，但在当时，我们选股时并不知道哪些股票未来会退市。
并且往往退市的股票表现会很差，所以不包含退市股票，相当于提前开“天眼”删除了部分垃圾股，间接的用到了“未来函数”，会让你的策略表现的“更好”。
关于这种偏差， 有个专业术语叫做“幸存者偏差”。
A股目前退市股票有一百多只，比例不高。但在美股、港股中，退市情况就非常普遍，如果没有加入退市股票的数据，那么策略结果会严重失真。
所以我们不管从哪里获取股票数据，都一定要去检查下它是否包含退市的股票。
二战期间，人们发现幸存的飞机中，机翼中弹数量多，而机身中弹的却很少，因此认为应该加固机翼。但其实刚好相反，因为机身中弹的飞机都没能飞回来，所以应该加强的是机身。这也是典型的“幸存者偏差”
A股的上市公司经常会变更名字。更名常见的一个原因是当业绩不达标时，被动在名字前冠上ST，简称ST股。
下图是600053这个股票，从上市以来的更名历史。其中很长一段时间被叫做ST江纸，后来陆续改名为中江地产、九鼎投资。
下面是从万得客户端的行情序列中下载的600053从2003-5-12到30日之间的股票数据。可以看到这段时间股票名称应该为“*ST江纸”，但是万得只是简单的用下载数据时的最新名称“九鼎投资”代替。
万得江西纸业的数据截图
那么这样的数据就是有问题的。
股票如果名称中带有ST字样，每日涨跌停限制就会由10%降为5%。但是Wind的行情数据中，600053股票名称一直是九鼎投资，并没有标记出哪天是ST。
那用这样的数据统计涨跌停情况，都只会按照10%来算。那么有些时候，明明5%触发了ST涨停，仍然会被当做没涨停来对待。
这就会导致我们的一些交易策略失真。比如选中了某个股票，以为当时可以买入，但其实当时该股票处于ST涨停状态，其实根本无法买入。
我之前就看到过有些策略的选股记录，选择的全是连续涨停的ST股，这样的策略结果看上去“很美丽”，但实际根本无法实现。
所以我们在获得一份股票数据的时候，一定要看下它的历史名称是否正确，不然策略回测结果的真实性就要大打折扣。
上市公司一年要发四次财报，交易所规定了发布的时间段:
1季报：4月1日——4月30日。
2季报(中报)：7月1日——8月30日。
3季报：10月1日——10月31日
4季报 (年报)：1月1日——4月30日。
比方说2018年第二季度财报。最早的博腾股份在7月31日就发布了，而最晚的格力电器在8月31日才发布。
[img=677,120]
再比如目前2019年10月，是发布三季报的时候。可以发现还没有出报告的企业是没有办法获得相关财务数据。
万得数据数据界面截图
但是去看历史数据会怎么样呢？在万得的行情序列中下载万科的每股收益数据，会发现在2019-01-02的时候就已经更改了每股收益。
万德的行情序列中下载的万科数据截图
但是万科的年报上可以看到，万科2018年的年报在2019-03-26才发年报。所以万得数据比年报发布的数据足足早了2个月！
万科的2018年年报发布时间截图
那这样的数据就有相当大的问题！
如果我用这个数据来进行回测，相当于我在2019年1月2日，就知道了万科在2019年3月26日才发布的年报数据。我能预测这么久的未来，开发的策略能“不赚钱”吗？
所以我们在使用财报数据的时候一定要注意财报发布的时间。不然策略的年化结果再高也没用。
[img=680,80]
提升卡
置顶卡
沉默卡
变色卡
抢沙发
千斤顶
显身卡
京公网安备 11010802022788号
