科多大数据培训
全国24小时免费热线
15328019568
联系QQ
3048661160
开班时间
当前位置:首页 > 学习资讯 >

大数据培训资讯:大数据时代是怎么来的?大数据是什么?

大数据是当前IT产业又一次划时代的技术发明。近年来,随着移动互联网的快速崛起和云计算技术的日趋成熟,输入源数目以及所生成的数据类型正在呈几何级数增长。有资料显示,全

  大数据是当前IT产业又一次划时代的技术发明。近年来,随着移动互联网的快速崛起和云计算技术的日趋成熟,输入源数目以及所生成的数据类型正在呈几何级数增长。有资料显示,全球每年新增数据量占到40%,而全球信息总量每两年就可以翻番。科多大数据带大家来了解一下,大数据时代是怎么来的?大数据的详细定义是什么?
大数据培训资讯:大数据时代是怎么来的?大数据是什么?
大数据时代的缘起
早在20世纪80年代,美国著名的未来学家阿尔文·托夫勒就在其《第三次浪潮》一书中做出预测,21世纪人类社会将迎来信息时代,信息将与物质和能量一起成为世界三大构成要素。在当时大多数人都只是将这一论断视作是一个遥不可及的乌托邦。然而,自20世纪80年代以来,计算机硬件开始遵循摩尔定律迅速发展。随着计算机硬件的体积越来越小和功能的越来越强大,计算机得到迅速普及,并逐渐渗透到社会生产和生活的方方面面。由于计算机和其他“普适计算”设备的广泛应用,由其采集的各类海量数据也正以铺天盖地之势爆发而来。
2007年,计算机图灵奖获得者吉姆·格雷(JimGrey)在美国计算机科学和远程通讯委员会(CSTB)的一次演讲中提出,数据密集型科学正在从计算科学中分离出来,成为科学研究的“第四范式”。他指出,像理论科学、实验科学和计算科学一样,以数据为中心,以协同进化、数据驱动和网络化成长为主要特征的数据密集型科学必将深刻影响人们的思维模式和科学研究方式。吉姆·格雷的这一论断无疑预示了大数据时代的来势汹汹。
大数据是相对于一般数据而言的,目前学界尚未形成统一、公认、权威的严格定义。美国国家科学基金会(NSF)对大数据的定义是:“由科学仪器、感应设备、电子邮件、富媒体软件、网络点击流和移动互联交易等多种数据源生成的大规模、多元化、长期的和复杂的分布式数据集”。维基百科指出,“大数据由巨型数据集组成,这些数据集常超出人类在可接受时间下的收集、利用、管理和处理能力,”这些数据集“几乎无法使用大多数的数据库管理系统处理,而必须使用同时在几十、几百甚至上千台服务器上平行运行的软件”。
国内学者涂子沛认为,大数据是指那些规模己经超出传统意义上的尺度,常规软件工具无法抓取、管理、分析和处理的大容量数据。而且,大数据之大不仅在于它的大容量,更要挖掘海量数据中的大价值。中国工程院院士邬贺铨也提出,大数据是指使用一般的软件工具难以对其内容进行捕捉、存储和处理的数据集合。但是,“仅仅从难处理的角度来定义大数据还不够,应该强调的是处理后所获得结论的数据可信度,即大数据指规模大到(或者变量复杂到)从中可以挖掘出事物发展客观规律性的数据集”。综合国内外各机构和学者的观点,我们认为:大数据是基于云计算等新处理模式才能快速捕获、处理和分析的规模巨大、种类繁多和更替迅速的信息资源集合。
一般说来,大数据的基本特征可以归纳为4个“V”。
第一,大量化(volumebig),即数据规模庞大。大数据是大型数据集,不再像之前TB级别的数据那么简单,而是PB甚至是EB级别的数据,其容量和规模远远超过传统数据。全网流量累计达到1EB(即10亿GB或1000PB)的时间从2001年的一年,减少到2004年需要一个月,再到2013年则仅需一天。
第二,多样化(varietytype),即数据类型繁多。大数据所包含的数据类型多种多样,既有不同的媒体形态,也有不同的编码结构。除了结构化编码数据之外,还包括图片、视频、报表、地理位置信息和XML、HTML等半结构化或非结构化数据。而且,相较于以往便于存储的结构化数据,各种半结构化和非结构化数据越来越多,这么多新的数据类型也对数据处理能力提出了更高要求。
第三,快速化(velocityfast),即处理速度快。“大数据”时代,数据生成无时不刻,其规模正在以指数级速度增长,对于数据的分析和处理也需要快速,这样才能满足实时性的需求。因此,即时处理己是大数据时代的趋势之一。
第四,价值化(value),即价值密度较低,数据总量与其产生的价值密度呈反比例函数。大数据本身的价值密度相对较低,需要不断从海量数据中挖掘分析真正有用的信息才能真正实现“用户价值”。怎样能够更加迅速地完成海量数据的价值“提纯”,成为当前大数据技术亟需解决的一个核心问题。
大数据时代已经到来,但是随着大数据的不断发展,各种问题也随之而来。想要了解更多的大数据学习相关资讯,可上科多大数据官网领取哦~
 
最新资讯更多+
内容推荐更多+
在线课堂
猜你喜欢