我们当前正处在大数据的时代背景下,大数据的发展和应用将对我们的生活带来全方位的影响,那么如何理解大数据呢?在我看来,理解大数据要先从大数据的概念入手。
大数据的概念随着大数据的发展,也在产生着变化,要想理解大数据不仅要知道大数据的5个特点(数据量大、结构多样性、速度快、价值密度低、真假难辨),还要知道大数据所代表的产业链。
大数据的第一个特点就是数据量大,但是并不是说数据量小就不是大数据了,大数据也是由小数据汇集起来的。数据自身具备的特点包括广度、深度和历史几个重要的方面,这是理解大数据的第一步。
数据结构多样性主要是由于数据来源的多样性决定的,通常情况下大数据的来源包括传统信息系统、Web数据和物联网数据,这其中Web数据属于半结构化数据,而物联网数据则更多的是非结构化数据。
速度快是大数据的一个重要特性,大数据与传统的数据挖掘有一个重要的区别在于大数据往往有实时性要求,这就要求大数据的速度一定要快。而速度快,则往往会降低数据的精确性,也就是说大数据更注重速度。
价值密度低(稀疏),大数据往往属于全样本数据,在进行数据分析时,其中涉及到的数据在数据的整体占比量并不高,这也是大数据的一个重要特征。
真假难辨也是大数据的一个重要特征,对于每时每刻都在增加的Web数据中,有很多数据存在真假难辨的情况,这是大数据广泛记录带来的必然问题。
大数据时代与传统的小数据时代,在思维方式上有几个重要的区别,具体体现在大数据重预测、小数据重决定,大数据重相关、小数据重因果,大数据重感知、小数据重精准。
目前的大数据不仅仅代表以上几个特征,更代表了一个产业链,这个产业链包括数据的采集、整理、存储、安全、分析、呈现和应用,这其中还涉及到物联网和云计算的相关内容。
大数据是我的主要研究方向之一,目前我也在带大数据方向的研究生,我会陆续在头条写一些关于大数据方面的文章,感兴趣的朋友可以关注我,相信一定会有所收获。
如果有大数据方面的问题,也可以咨询我。
谢谢!
其实对一般的老百姓是感觉不到大数据的作用,在政府部门 中是做认为大数据是一个很大的产业,数据至上,是不是会造成一种错觉,其实现在很多的事情也不是以大数据做为决策和判断的依据的,如何看待大数据,我觉得也应该以一种平常心态,是一种决策的参考,而不是唯一。