楼主: 胖胖小龟宝
3920 8

[Hadoop] 【Big Data】万能的大数据却不适合处理这10件事 [推广有奖]

大师

21%

还不是VIP/贵宾

-

TA的文库  其他...

龟宝的档案室

威望
3
论坛币
793110 个
通用积分
21961.2355
学术水平
2211 点
热心指数
2133 点
信用等级
1424 点
经验
978980 点
帖子
10001
精华
25
在线时间
4757 小时
注册时间
2012-7-27
最后登录
2020-12-21

+2 论坛币
k人 参与回答

经管之家送您一份

应届毕业生专属福利!

求职就业群
赵安豆老师微信:zhaoandou666

经管之家联合CDA

送您一个全额奖学金名额~ !

感谢您参与论坛问题回答

经管之家送您两个论坛币!

+2 论坛币
许多企业领导人开始接纳大数据处理并期待神奇和奇迹,但却发现大数据带来新的复杂性——且从中获益所需要付出的努力要预计中的多得多。每个组织机构都对大数据应用寄予厚望,期待它可以解答长期存在的业务问题,让他们在市场集中镇南关,在产品、服务交付中更具竞争力。这种对于大数据获益的预期很难实现,除非给予足够的指导和帮助。 这里列举不适合大数据的10件事情,除非你能够采取正确步骤优化其价值。

1:解决你的业务问题

大数据不会处理业务问题。人们可以做的,就是要坐下来,在开始使用大数据之前,讨论决定放弃大数据,就使用商业智能取得共识。

2:帮助你管理数据

IBM公司宣称:每一天都会产生 250万字节的数据,其中大部分属于大数据。不出预料,世界范围内企业所需要管理的数据量呈现指数级增长,由于缺乏清晰有效地数据存储和使用策略,数据将不断堆积,每个企业都陷于数据管理的工作。

3:缓解减轻你的安全忧虑

对于许多公司来说,确保大数据的安全访问仍然是一个开放式的课题。这是因为对于大数据安全实践的定义远没有系统数据和记录保护这样明确。我们正处在这样的一个时间点上,也就是IT与最终用户一起来​​确定:谁可以访问哪些级别的大数据,并可以进行相应地分析。

4:关键IT技能缺乏

大数据处理数据库管理、服务器管理、软件开发、业务分析技能短缺,许多IT部门关键IT技能的缺失会不断成为企业的负担。

5:减少遗留系统的价值

如果有的话,遗留系统记录会较之任何大数据更具有价值。通常情况下,正是这些遗留系统可以为大数据分析提供重要线索,用于回答重要的业务问题。

6:简化数据中心

大数据分析需要并行处理计算机集群和传统IT事务处理和数据仓库系统等不同风格的系统管理,这就意味着能量、冷却、软件硬件消耗,运转这些系统所需要的技巧也不尽相同

7:提高数据质量

传统事务处理系统美妙之处在于其拥有固定长度的数据字段以及全面的数据编辑和验证发方式,这有助于得到一个相对干净的表格呈现。大数据不是这样,他们是非结构化的数据,可以表现为几乎任何形式。这让大数据的质量成为一个令人头痛的难题。数据质量至关重要,如果你没有它,就不能信任数据查询的结果。

8:验证当前的投资回报率(ROI)

衡量系统投资回报率最常用的方法是监测交易速度,然后推断其获利能力(例如酒店每分钟有多少新的预订)。对于大数据处理来说,交易速度不是好的衡量指标,大数据缓存和运行分析可能需要数小时甚至数天才可以杀青。衡量大数据处理有效性的一个最好的指标应该是利用率,它应该保持在90%以上(相比于交易系统,其利用率可能只有20%)。对于大数据来说,确定新的ROI指标尤为重要,因为你还有说服CFO以及其他业务部门的领导。

9:减小“噪音”

95%以上的大数据属于“噪音”,对于商业智能的贡献很小或几乎没有。通过数据筛选来进行企业掘金,帮助企业业务进步,这是一个非常艰巨的任务。

10:每天工作时间

多年来,大学和研究中心一直运用大数据实验,试图解答基因组、药物研究以及是否有其他星球生命等令人难以捉摸问题的答案。虽然其中一些算法和查询产生结果更多还是不确定的,大学和研究对于环境的研究也尚无定论,但这不是企业可以接受的,因此,IT和企业关键决策者需要对预期进行调整和管理。

via:比特网

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

关键词:Big data Data 大数据 投资回报率 大数据分析 大数据 数据质量 数据处理 数据安全

本帖被以下文库推荐

沙发
sdzy 在职认证  学生认证  发表于 2014-5-18 10:01:06 |只看作者 |坛友微信交流群
最近读了一下《大数据时代:生活、工作与思维的变革》,作者对大数据的特点的总结是三点:一、样本=总体;二、接受混乱而非精确;三、寻找相关而非因果关系。大数据时代之所以能够出现,是因为人类可以获得大量的数据,通过云计算获得了处理大数据的能力。我认为对企业而言,最大的挑战是数据挖掘与处理分析的能力。数据已经很好找到,其中的筛选、锤炼过程是看企业家自己的意愿而非技术层面的东西。而云计算则为企业提供了便宜的处理平台。最核心的需要企业自己掌握的是数据处理的能力。
只是自己的粗浅看法,请指正。
已有 1 人评分论坛币 热心指数 收起 理由
胖胖小龟宝 + 10 + 2 鼓励积极发帖讨论

总评分: 论坛币 + 10  热心指数 + 2   查看全部评分

使用道具

藤椅
sabin 发表于 2014-5-18 16:46:01 |只看作者 |坛友微信交流群
个人认为大数据技术更注重数据获取而非算法,更注重开发而非统计分析,更注重时效性而非精确性,感觉效益的产生会更为直接,但这个过程中如果不加以控制和管理可能会造成信息泛滥,用户不堪其扰
已有 1 人评分论坛币 热心指数 收起 理由
胖胖小龟宝 + 10 + 2 鼓励积极发帖讨论

总评分: 论坛币 + 10  热心指数 + 2   查看全部评分

使用道具

板凳
jgchen1966 发表于 2014-5-18 16:50:42 |只看作者 |坛友微信交流群
现在对BIG DATA 的梦想 ,让人想起十九世纪的科学界的二大人类永远不可能现实的梦想:
一是化学中的万能溶剂
二是物理中的永动机!!
已有 1 人评分论坛币 热心指数 收起 理由
胖胖小龟宝 + 10 + 2 鼓励积极发帖讨论

总评分: 论坛币 + 10  热心指数 + 2   查看全部评分

鹑居鷇食,鸟行无彰

使用道具

报纸
JiaBinXu 发表于 2014-5-18 16:50:44 |只看作者 |坛友微信交流群
大数据只是一个概念,其实”大数据“不能分析的事情有很多,生活中总不能”马后炮“吧
已有 1 人评分论坛币 热心指数 收起 理由
胖胖小龟宝 + 10 + 2 鼓励积极发帖讨论

总评分: 论坛币 + 10  热心指数 + 2   查看全部评分

晴朗天空的云彩。

使用道具

地板
pkq511 发表于 2014-5-28 09:03:33 |只看作者 |坛友微信交流群
就目前来说,几乎大部分企业和科研单位的主要力量都集中在数据的存储及访问上,真正的做分析不多。至少去年和最近Hadoop都很火。虽然R也很火,但是要让R融进大数据这个圈子,目前看见的似乎都是在坐等如甲骨文,大象去支持R在上面的允许运行。

使用道具

7
胖胖小龟宝 发表于 2014-5-28 09:31:29 |只看作者 |坛友微信交流群
pkq511 发表于 2014-5-28 09:03
就目前来说,几乎大部分企业和科研单位的主要力量都集中在数据的存储及访问上,真正的做分析不多。至少去年 ...
感觉现在的大数据还在算法里爬行,没有跳出算法这个框子,真正用到统计的还是很少(统计应该就是数据分析部分了),算法更多的还是在挖掘上

使用道具

8
sabin 发表于 2014-7-3 16:34:07 |只看作者 |坛友微信交流群
JiaBinXu 发表于 2014-5-18 16:50
大数据只是一个概念,其实”大数据“不能分析的事情有很多,生活中总不能”马后炮“吧
斗胆一句,个人感觉“大数据”这个概念其实本身就是个马后炮,里面的不少技术早已经在使用,比如亚马逊的个性化推荐、淘宝对用户的视图描述和基于此的商品推荐,网站对于论坛关键字的发掘等等。。。个人感觉不用管它是大数据还是小数据,能够用的我们先用起来,过程中再去完善。

使用道具

9
lawrence1992 学生认证  发表于 2014-7-9 04:57:12 |只看作者 |坛友微信交流群
謝謝分享

使用道具

您需要登录后才可以回帖 登录 | 我要注册

本版微信群
加好友,备注cda
拉您进交流群

京ICP备16021002-2号 京B2-20170662号 京公网安备 11010802022788号 论坛法律顾问:王进律师 知识产权保护声明   免责及隐私声明

GMT+8, 2024-4-27 23:28