楼主: CDA网校
1192 0

[数据] 如何做好数据分析的数据采集工作?——CDA人工智能学院 [推广有奖]

管理员

大师

62%

还不是VIP/贵宾

-

威望
3
论坛币
31793 个
通用积分
3041.6696
学术水平
260 点
热心指数
268 点
信用等级
235 点
经验
194804 点
帖子
5108
精华
19
在线时间
3693 小时
注册时间
2019-9-13
最后登录
2024-4-29

初级热心勋章

相似文件 换一批

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
CDA人工智能学院致力于以优质的人工智能在线教育资源助力学员的DT职业梦想!课程内容涵盖数据分析、机器学习、深度学习、人工智能、TensorFlow、PyTorch、知识图谱等众多核心技术及行业案例,让每一个学员都可以在线灵活学习,快速掌握AI时代的前沿技术。PS:私信我即可获取《银牌会员》1个月免费试听机会

数据分析离不开数据采集。数据采集包括历史数据的采集和当前市场数据的采集,是科学进行数据分析的基础。数据采集准确性决定了数据分析的价值。那么数据采集是怎么做的呢?一般来说,是需要制定市场研究的计划、明确数据的来源、明确抽样方案、明确数据采集方法、做好数据处理分析工作这四项工作。

1.制定市场调研的计划

在进行数据分析之前,数据采集工作是一项最重要的工作,数据采集的工作能够解决企业经营中在数据分析中的决策问题。因此很多企业非常重视数据采集,但是数据采集是需要花费大量的金钱人力以及物力,不过数据采集能够给数据带来极大的好处,这是因为数据采集能够给大数据分析带来极大的好处。所以,在数据采集工作的时候一定要让资金花到有用的地方,对于每一分钱都有一个清楚的去向。所以,在数据采集的时候一定要控制好成本,在做数据采集工作之前一定要控制到成本,只有做好周密的市场调研计划,才能够好好的做好数据采集这一个工作。


2.明确数据来源

在数据采集前,就需要选择好数据,选择一些干净的数据才能够使得数据分析工作变得更加精准。通常来说,数据的资料一般分为第一手资料和第二手资料。这是根据数据资料的来源不同来决定。什么是第一手资料呢?第二手资料是什么呢?第一手资料就是未来某种目的采集所得的原始材料。一般来说,采集第一手资料所需要的费用比较高,但是第一手的资料的准确性很高,这是因为第一手资料的针对性强。第二手资料是指采集的现成资料。现成资料就是包括互联网上面的信息,各种报刊书本上的资料,还有各类权威机构发布的统计和研究报告等。



3.明确抽样方案

在一手数据的采集中,许多数据可以直接采集,由于对于成本费用等可控制的要素,以及数据的采集范围很广,这样很难直接获取全部数据。这时,我们常用抽样技术对样本进行调查,并根据样本统计量估计总量。


4.明确数据采集方法

数据采集方法现在常见的有三种,分别是访问调查法、实验法和观察法。访问调查法通过访问代表性的样本而获得数据,而观察法强调非语言方式,这一点和访问调查法不一样。观察法是通过调查人员在进行时和过去时记录中采集信息。而实验法可以有效控制调查的环境。这样在实际项目数据采集中可以根据项目特点、成本费用、时间及精度的要求,从而使用不同的方法。


5.数据处理及分析

在进行数据处理工作时,原始数据收集回来很大概率会出现虚假、错误、冗余等现象,如果直接把这些数据进行预测分析,极大概率会带来错误的分析结论,那么数据分析就完全没有了意义。不过只要做好数据处理以及数据分析,就能避免上面出现的现象。而数据的处理是需要运用科学正确客观的方法,将调查所得的原始资料按调查目的来去粗取精,这样才能够做好数据分析。


通过上面的内容,大家已经知道了数据采集是怎么做的了吧?数据采集程序就是上面提到的5点,分别是制定市场研究的计划、明确数据的来源、明确抽样方案、明确数据采集方法、做好数据处理分析工作。只要集齐这些步骤一步一步走下去,那么数据采集工作就可以更高效率地完成了。希望阅读完的朋友对你们的职业生涯有一些帮助,这将是我莫大的荣幸!

QQ图片20200825093354.jpg

关注“CDA人工智能学院”,回复“录播”获取更多人工智能精选直播视频!


二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:人工智能 数据分析 数据采集 CDA Tensor

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-4-30 19:20