关于本站
人大经济论坛-经管之家:分享大学、考研、论文、会计、留学、数据、经济学、金融学、管理学、统计学、博弈论、统计年鉴、行业分析包括等相关资源。
经管之家是国内活跃的在线教育咨询平台!
经管之家新媒体交易平台
提供"微信号、微博、抖音、快手、头条、小红书、百家号、企鹅号、UC号、一点资讯"等虚拟账号交易,真正实现买卖双方的共赢。【请点击这里访问】
论文
- 毕业论文 | 写毕业论文
- 毕业论文 | 为毕业论文找思路
- 毕业论文 | 可以有时间好好写 ...
- 毕业论文 | 毕业论文如何选较 ...
- 毕业论文 | 毕业论文选题通过 ...
- 毕业论文 | 还有三人的毕业论 ...
- 毕业论文 | 毕业论文答辩过程 ...
- 毕业论文 | 本科毕业论文,wi ...
考研考博
- 考博 | 南大考博经济类资 ...
- 考博 | 考博英语10000词汇 ...
- 考博 | 如果复旦、南大这 ...
- 考博 | 有谁知道春招秋季 ...
- 考博 | 工作与考博?到底 ...
- 考博 | 考博应该如何选择 ...
- 考博 | 考博失败了
- 考博 | 考博考研英语作文 ...
留学
- 日本留学 | 在日本留学心得
- 日本留学 | 日本留学生活必需 ...
- 日本留学 | 【留学日本】2015 ...
- 日本留学 | 日本海外留学8年来 ...
- 日本留学 | 日本留学费用_日本 ...
- 日本留学 | 求在日本留学的师 ...
- 日本留学 | 日本留学的有没有 ...
- 日本留学 | 日本留学
TOP热门关键词
扫码加入金融交流群![]() |
写在前面:此笔记是张梦根据李玉玺老师在CDA LEVEL II 数据建模师培训的上课内容整理而成的。
———————————–作者说明—————————————
CDA level 2 前4天笔记。
重点在操作和老师口述的无关内容。由于开始没安装成功EM,所以没有截图。
有讲义的笔记都记录在讲义上。复习参考讲义。
2015/9/20
————————————老师简介—————————————
李御玺
国立台湾大学咨询工程博士
铭传大学咨询工程学系教授(2000~)
CDA协会高级会员=数据分析专家
铭传大学大数据研究中心主任
中华资料采矿协会理事
中国人民大学数据挖掘中心顾问
厦门大学数据挖掘中心顾问
SPSS、SAS、微软(Reporting service power view power map)
专长:数据挖掘、文本挖掘
MY DATA MINING IN TAIWAN
http://file:///C:/Users/GeiLi/AppData/Local/Temp/msohtmlclip1/01/clip_image001.pnghttp://www.ppvke.com/Blog/wp-content/uploads/2015/09/120.jpg
台新银行案例
2004年营销案:提案:139件;成案:103件;效益:10亿
中华航空公司案例
常旅客分群模型建置;高仓促销模型:怎么能让高舱等多人坐;华航精致旅游促销模型
中国东方航空公司
会员贡献度分析;会员乘机率分析;会员流失及挽留分析
特立和乐HOLA公司
客户贡献度分析;型录效益分析;客户流失及挽留
中国工商局
企业注销吊销模型;PEVC投资价值评估模型;12315消费者投诉与维权预防的模型
-台湾有联合征信中心,受到启发。为企业建立信用等级。
泥石流预测结合GIS系统
————————-以下为正文—————————–
LEVEL II 数据挖掘/大数据-软件安装.SPSS
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/220.jpg
建议不要更改安装路径。建议使用英文版。分配内存会影响最大读入数据量。
win8找不到延长使用的目录。–不但要显示文,还是设置
.SAS更改EM语言:
建立一个专门存放SAS PROJECT的目录。
尝试修改时间;尝试以管理员身份运行
.SPSS基本使用
.数据集:银行评分卡
- 分析数据分析字段:哪些有用,怎么用,为什么
- 读入
- 分类(type:IT人员给的数据很可能有错,十之八九,要特别确认)数值型有的需要改为nominal/flag
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/310.jpg
4.描述性统计画图(数值型用直方图/NOMINAL用distribution分布图)看
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/48.jpg
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/59.jpg
说明这个字段OK,有趋势性
.EM基本使用新建PROJECT
新建LIBRARY
查看lib
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/67.jpg
数据导入-数据源
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/76.jpg
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/87.jpg
基本跟modeler的判断依据类似。
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/97.jpg
类别型超过8个就不好,所以就自己去想办法group
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/107.jpg
如果想导入CSV,用EG去转。
新建流程图
使用DMDB数据探索可以看到SPSS STAT才能看到的东西看DMDB result
skewness》0 右偏图在左边
Class variable
GRAPH EXPLORE
StatExplore chi-square Plot 卡方检定 Cramer’s V
worth 类别卡方数值方差 P log取-则越大越好,排序
使用帮助文档:
http://www.ppvke.com/Blog/wp-content/uploads/2015/09/1111.jpg
.MINING MODELS分类.老师的分类法
- 描述性Descriptive data minding(unsupervised learning)
Association Rules关联规则
Cluster Analysis 聚类分析
Sequential Patterns序列型样
- 预测性Predictive data mining (supervised learning)
2.1 CLASSIFICATION 分类 ->预测数据所属的类别
Bayes Net 贝叶斯网络
Decision Tree 决策树
Neural Network 神经网络
Logistic Regression 逻辑回归
2.2 PREDICTION 预测
Decision Tree 决策树
Neural Network 神经网络
Linear Regression 线性回归
Time Series时间序列(听说LEVEL I 会讲)
.SAS的分类法- PATTERN DISCOVERY
1.1 CLUSTER ANALYSISI 聚类分析
1.2 Market BASKET ANALYSIS:
Association Rules关联规则
Sequential Patterns序列型样
- Predictive Modeling
- 1Decisions 决策:Classification
- 2Rankings 排序:Credit Scoring;Decision
- 3Estimates估计:Prediction
绩效的增益
Accuracy
Gain Chart
Lift Chart :Gain Chart 中计算Lift=比随机乱猜命中增加的倍数
坐标轴 DEPTH VS LIFT
Profit Chart: 转化成Profit给领导展示<- 成本矩阵
.介绍2个网站www.kdnuggets.com
有别人发布的软件算法;
www.kaggle.com
比赛:老师曾参与Acquire valued shoppers challenge 有30万客户,3亿5千万数据。用JAVA写处理数据的程序,然后30万的数据用modeler处理就很容易。如果仅用modeler则每次处理输入读入时间25分钟。老师用的是本地电脑,不是服务器。服务器肯定会快一点。
以面积为评判标准。(GAIN CHART)
华硕库存预测,以绝对误差为评判依据。
有些公司会去找题目,看看是不是试用自己的公司->培养找题目的能力也很重要。
在建模分析师中,数据挖掘技术无疑是他们最强有力的核心竞争力。数据挖掘强调与现有信息系统的整合,以提供决策者做决策时所需的情报,或转化成经营智慧,以作为调整营运策略方针的辅助工具。以顾客关系管理(CRM)为例,数据挖掘是整个顾客关系管理的核心。其不但可以准确的定位目标市场,进行精准营销,还可以帮助业务人员了解客户深层需求,针对大量客户进行客制化,也就是所谓的一对一营销。课程目的就是要针对数据挖掘整套流程,以金融、电信、电商和零售业为案例背景,结合SAS Enterprise Miner和SPSS Moderler深入讲授数据挖掘的主要算法。并将SAS语言和SQL进行有效的结合,讲授如何在实际工作中搭建数据挖掘环境,制定分类数据挖掘的标准流程,让学员胜任全方位的数据挖掘运用场景。
免流量费下载资料----在经管之家app可以下载论坛上的所有资源,并且不额外收取下载高峰期的论坛币。
涵盖所有经管领域的优秀内容----覆盖经济、管理、金融投资、计量统计、数据分析、国贸、财会等专业的学习宝库,各类资料应有尽有。
来自五湖四海的经管达人----已经有上千万的经管人来到这里,你可以找到任何学科方向、有共同话题的朋友。
经管之家(原人大经济论坛),跨越高校的围墙,带你走进经管知识的新世界。
扫描下方二维码下载并注册APP
![](static/2016/reg/jgewm.png)
您可能感兴趣的文章
本站推荐的文章
- 哲学名言 | 【独家发布】经典哲学名言
- 哲学书籍 | 求推荐一本讲人生目标的哲学书籍 ...
- 哲学书籍 | 20部必读的哲学书籍
- 哲学书籍 | 经济人,开拓你逻辑思维的哲学书 ...
- 哲学书籍 | 哲学书籍
- 哲学书籍 | 哲学书籍
- 哲学书籍 | 哲学书籍
- 哲学书籍 | 经典的哲学书籍
人气文章
2.转载的文章仅代表原创作者观点,与本站无关。其原创性以及文中陈述文字和内容未经本站证实,本站对该文以及其中全部或者部分内容、文字的真实性、完整性、及时性,不作出任何保证或承若;
3.如本站转载稿涉及版权等问题,请作者及时联系本站,我们会及时处理。