有时这些网站会提供历史数据,有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为后来的分析只用。现在我拿 获取 http://www.shibor.org/ 主页上海银行间同业拆放利率 作为案例进行演示。
可以看到,主页上每日更新的数据是在网页上。而且次数据可以在html原代码中找到。那我们就可以通过获取次网页的全部内容,然后再进行数据清洗以获得想要的两个字段:期限和利率。
高手看了,有什么更优秀的案例请多多分享。
本帖隐藏的内容
http://www.daaata.com/?p=218本例对于高手稍许简单,只是给大家一个思路。没涉及到网页post 后的信息,此贴会有后续,望关注。
补充内容 (2012-12-30 06:18):
云哦。。不能编辑帖子了。 原来网站已挂。请登陆新网址查看
http://zhaocl.com/code/2012/12/30/web-crawler-1.html
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/
补充内容 (2013-12-30 22:21):
这次再也不更新连接了 http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/
补充内容 (2013-12-30 22:23):
系统bug 了。。不是我的错。。。 http://www.statalks.com/index.ph ... 网页数据总结及案例/