自2011年以来,大数据旋风以“迅雷不及掩耳之势”席卷中国。毋庸置疑,大数据已然成为继云计算、物联网之后新一轮的技术变革热潮,不仅是信息领域,经济、政治、社会等诸多领域都“磨刀霍霍”向大数据,准备在其中逐得一席之地。那么大数据到底是什么?下面两个小故事来告诉我们。

醉汉路灯下找钥匙——大数据的研究方法

一天晚上,一个醉汉在路灯下不停地转来转去,

警察就问他在找什么。醉汉说,我的钥匙丢了。

于是,警察帮他一起找,结果路灯周围找了几遍都没找到。

于是警察就问,你确信你的钥匙是丢到这儿吗?

醉汉说,不确信啊,我压根就不知道我的钥匙丢到哪儿。

警察怒从心中来,问,那你到这里来找什么?

醉汉振振有辞:因为只有这里有光线啊!

 

在这里浩瀚的黑夜就是数据量非常巨大的数据,“钥匙”就好比是大数据分析中我们要找到的价值目标,而“路灯”就好比我们要达到这个目标的测量“标尺”,大数据分析就是要顺着这个标尺的导引,找到目标“钥匙”,但是如果没有大数据的支撑,想要找到目标是非常困难的!如果在黑暗中丢失的钥匙,是大数据中的价值, 那么这个价值体现在哪里呢?

针对大数据的价值,有这样一则寓言故事:

有父子二人,居山村,营果园。父病后,子不勤耕作,园渐荒芜。一日,父病危,谓子曰:园中有金。子翻地寻金,无所得,甚怅然。是年秋,园中葡萄、苹果之属皆大丰收。子始悟父言之理。

我们总是期望,能从大数据中挖掘出意想不到的“大价值”。可实际上,大数据的价值,主要体现在它能实现数据的外部化价值,打破固有的思维边界,大数据对经济的贡献,并不完全反映在大数据公司的直接收入上,还有他对其他行业效率和质量提高的贡献。大数据的价值就如同蜜蜂采蜜,蜜蜂的最大效益,并非是自己酿造的蜂蜜,而是蜜蜂传粉对农林业的贡献。回到前文的小故事,儿子翻地的价值,不仅在于翻到园中的金子,更是在于翻地之后,促进了秋天果园的丰收。在前一个小故事中,醉汉黑暗中寻找的钥匙,亦非最终的价值,通过钥匙打开的门才是。用斯坦福大学统计学教授Trevor Hastie的话来说,大数据价值就是在数据的大干草垛中,发现有意义的“针”。

如果把“大数据”比作农夫父子院后的那片土地,那么土地的面积越大,会不会能挖掘出的“金子”就越多呢?

最后,大数据不是放在那里就能产生价值的,还要采用人工智能中的算法,譬如机器学习、数据挖掘等等,获得简单数据分析中不能得到的洞见,再来指导进行高效的决策。

好了,现在对于大数据大家应该有一些简单的认识了吧!如果想要了解更多关于大数据的知识,就来学习CDA大数据课程吧!

无论你是否有大数据的思维,无论你曾经是否接触过大数据的技术,在此有一个既有专业的团队,又有行业高质量的课程的选择——CDA大数据就业班。带你重新审视互联网行业,不再局限于传统的IT技能,理解未来市场发展趋势。CDA数据分析研究院拥有专注、专业的师资,科学、系统的学习,以提升职业素养和强化应用能力为方向,为学生打造一站式大数据分析服务平台。

课程简介

课程共三部分内容

1. 数据分析基础部分

2. Python机器学习部分

3. 大数据分析工具和方法部分

艰苦而不乏味的学习,无从上手转为实际操作,从思维到技术,从入门到精通,从而实现:

1)能够使用Excel、PowerBI进行商业可视化数据分析

2)熟练掌握Python编程语言,熟练进行数据清洗和网络爬虫

3)以数据化、商业智能、算法思维解决实际商业问题,挖掘数据信息。

4)熟练使用SPSS软件,并能够实现SPPS制图和统计建模。

5)熟练掌握机器学习常用算法,熟悉不同模型对输入数据的不同要求,能够对模型输出结果进行合理解释。

6)能够运用机器学习方法,解决各种数据探索、分类、聚类、关联规则、回归预测、协同过滤等问题。

7)熟悉Hadoop生态系统

8)熟练使用Spark大数据处理框架

9)能够在大数据平台上进行海量数据分析

文章来源: CDA数据分析师

原文链接: https://www.cda.cn/

AIU人工智能学院 以数据分析、机器学习、深度学习、人工智能、TensorFlow、Keras、知识图谱等前沿技术为主题,致力于成为国内前沿的人工智能、数据科学领域在线教育品牌。

加关注
喜欢 | 0

登陆后发表文章

  • 0条回应给“两个小故事告诉你什么是大数据”的评论