楼主: numman
76501 1393

[原创博文] 教你怎样利用SAS抓取网页数据   [推广有奖]

  • 0关注
  • 5粉丝

博士生

29%

还不是VIP/贵宾

-

威望
0
论坛币
3161 个
通用积分
0
学术水平
14 点
热心指数
15 点
信用等级
9 点
经验
2977 点
帖子
200
精华
0
在线时间
276 小时
注册时间
2009-12-8
最后登录
2016-9-18

相似文件 换一批

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
有时我们常常需要保存备份某些网上的数据,如银行利率,股票行情,抑或统计局、各种金融机构或其他类型网站的数据。
有时这些网站会提供历史数据,有的则不会。但是我们可以通过SAS每天跑下程序获取累积历史数据作为后来的分析只用。现在我拿 获取 http://www.shibor.org/ 主页上海银行间同业拆放利率 作为案例进行演示。
可以看到,主页上每日更新的数据是在网页上。而且次数据可以在html原代码中找到。那我们就可以通过获取次网页的全部内容,然后再进行数据清洗以获得想要的两个字段:期限和利率。



高手看了,有什么更优秀的案例请多多分享。


本帖隐藏的内容

http://www.daaata.com/?p=218






本例对于高手稍许简单,只是给大家一个思路。没涉及到网页post 后的信息,此贴会有后续,望关注。



补充内容 (2012-12-30 06:18):
云哦。。不能编辑帖子了。 原来网站已挂。请登陆新网址查看
http://zhaocl.com/code/2012/12/30/web-crawler-1.html

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     [link]http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/[/link]

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:21):
这次再也不更新连接了     http://www.statalks.com/index.php?/topic/10-利用sas抓取网页数据总结及案例/

补充内容 (2013-12-30 22:23):
系统bug 了。。不是我的错。。。     http://www.statalks.com/index.ph ... 网页数据总结及案例/
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:抓取网页数据 SHIBOR Index Talks Stata 网页

已有 8 人评分经验 论坛币 学术水平 热心指数 信用等级 收起 理由
狂热的爱好者 + 60 + 2 + 2 + 2 精彩帖子
flsean + 1 + 1 + 1 观点有启发
eatea + 100 + 1 + 1 对论坛有贡献
lance0108 + 20 奖励积极上传好的资料
lovelybetty1208 + 1 + 1 + 1 精彩帖子
数据分析师3K + 80 + 20 + 3 + 3 + 3 精彩帖子
hcy_2587758 + 1 + 1 + 1 精彩帖子
denver + 1 + 1 观点有启发

总评分: 经验 + 260  论坛币 + 20  学术水平 + 10  热心指数 + 10  信用等级 + 8   查看全部评分

本帖被以下文库推荐

  • · sas|主题: 9, 订阅: 2
沙发
zqllqz2009 发表于 2011-10-29 11:46:18 |只看作者 |坛友微信交流群
牛人

使用道具

藤椅
邢不行 在职认证  发表于 2011-10-29 11:50:51 |只看作者 |坛友微信交流群
想学!
不管去哪里 只要在路上

使用道具

板凳
laomm002 发表于 2011-10-29 11:52:19 |只看作者 |坛友微信交流群
来围观一下

使用道具

报纸
tanghao1229 发表于 2011-10-29 11:53:12 |只看作者 |坛友微信交流群
thank you!
我思故我在!

使用道具

地板
tanghao1229 发表于 2011-10-29 11:53:25 |只看作者 |坛友微信交流群
thank you!
我思故我在!

使用道具

7
woyudengxian 发表于 2011-10-29 11:56:24 |只看作者 |坛友微信交流群
看看

使用道具

8
qnsz 发表于 2011-10-29 12:08:42 |只看作者 |坛友微信交流群
有时我们常常需要保存备份某些网上的数据,如银行利率,股票行情,抑或统计局、各种金融机构或其他类型网站的数据。

本文来自: 人大经济论坛 SAS专版 版,详细出处参考: https://bbs.pinggu.org/forum.php? ... &from^^uid=859611

使用道具

9
rwalker 发表于 2011-10-29 12:11:52 |只看作者 |坛友微信交流群
围观。。。。

使用道具

10
275769263 发表于 2011-10-29 12:19:10 |只看作者 |坛友微信交流群
膜拜。。。
求工作..求工作..求工作..求工作...

使用道具

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-4-25 12:28