很多人都好奇,网上天天流传大数据,大数据,到底什么是大数据呢?大数据又对我们有什么影响呢?
大数据:(big data),IT行业术语,是指无法在一段时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
简而言之,大数据是指大数据集,这一些数据集经过计算分析以揭示与数据的某个方面相关的模式和趋势。首先,还是要重新审视大数据的定义。行业里对大数据的定义有很多,有广义的定义,也有狭义的定义。
广义的定义,有点哲学味道——大数据,是指物理世界到数字世界的映射和提炼。通过发现其中的数据特征,从而做出提升效率的决策行为。
狭义的定义,是技术工程师给的——大数据,是通过获取、存储、分析,从大容量数据中挖掘价值的一种全新的技术架构。
是在于发现之前在没有大数据时候发现不了的关联关系。但是注意哇,这不是因果关系,而是关联关系,但光是这样就已经有很好的经济价值了。
例如:石油在没有开发之前,没人知道有啥用甚至会认为是废水变质了。后来发现石油可以燃烧,于是有人用它来做燃料。等燃油发动机成熟之后石油成了发动机的血液。现在很多学术机构或权威人士就是把大数据比作石油的
另外,单纯的大数据并不能发挥太大的作用,只有把各种大数据交叉之后才会产生意想不到的效果。
对未来、对未知领域,每个人、每个组织都会面临不确定。然而,尽管有各种不确定,每个人、每个组织、在天天都会作出决策;很多决策是明显错误的。
现有人类的决策,大多数是靠感觉,靠跟风,靠个人经验,只有很少部分是客观数据分析。海量数据,提供了一种更为可靠的决策依据。
如果有一个神器,可以显著消除不确定性,明显提高决策正确率,它有多大价值?
想想,全球有几千万家公司、有70亿人,这几千万公司、这70亿人天天都会决策。天天都会决策。拥有一些数据,能避免给商业带来多大的损失,增加多少盈利?
2015年1月31日,国务院印发了《关于促进云计算创新发展培育信息产业新业态的意见》,其中对于大数据的规划如下:
充分的发挥云计算对数据资源的集聚作用,实现数据资源的融合共享,推动大数据挖掘、分析、应用和服务。开展公共数据开放利用改革试点,出台政府机构数据开放管理规定,在保障信息安全和个人隐私的前提下,积极探索地理、人口、知识产权及其他有关管理机构数据资源向社会开放,推动政府部门间数据共享,提升社会管理和公共服务能力。重点在公共安全、疾病防治、灾害预防、就业和社会保障、交通物流、教育科研、电子商务等领域,开展基于云计算的大数据应用示范,支持政府机构和企业创新大数据服务模式。充分发挥云计算、大数据在智慧城市建设中的服务支撑作用,加强推广应用,挖掘市场潜力,服务城市经济社会发展。
根据前瞻产业研究院发布的《中国大数据产业高质量发展前景与投资战略规划分析报告》显示,2013年中国产生的数据总量超过0.8ZB(相当于8亿TB),2倍于2012年,相当于2009年全球的数据总量。预计到2020年,中国产生的数据总量将是2013年的20倍,达到16ZB。
随着数据量的快速增加,对于大数据的存储和大数据的开发需求必然快速增加。从2014年中国大数据行业的表现来说,中国大数据行业慢慢的开始了快速地发展发展的步伐。2014年5月15日,上海市自今年起推动各级政府部门将数据对外开放,并鼓励社会对其来加工和运用。支付宝对外发布十年对账单,为用户梳理自支付宝诞生至今的购物、理财、生活缴费等全套数据等事件已经说明,大数据开发和应用已经逐渐进入线年大数据行业市场规模约为24亿元,同比上年增长100%,预计2015至2017年,大数据市场规模将维持100%以上的增速,详见大数据研究报告。
1.你可知道,你想听一首好听的歌,杂乱无章的音乐海洋,推荐音乐常常挺准的。
2.你可知道,你想出行看天气,天气预报不知道计算了多少数据才帮你总结明天或将来一周的天气情况,虽然总会把大太阳的日子预测成大暴雨,别太认线.你可知道,当你在为你的约会吃饭发愁时,某应用为你推荐XX餐馆有百分之几的人吃了给好评。
4:在用打车软件出行时,数据为你搜索附近的司机,为你规划路线,收集实时路况信息?
其实,早在很早以前大数据就见怪不怪了。以麦当劳为例,麦当劳等连锁快餐店需要大量的人流量量来实现利益最大化,那么他们是怎么统计的呢?最早是根据路口的红绿灯数车数,后来发展了专门的数据勘察员。
洛杉矶警察局和加利福尼亚大学合作利用大数据预测犯罪的发生。6:Google流感趋势(Google Flu Trends)利用搜索关键词预测禽流感的散布。
7:统计学家内特·西尔弗(Nate Silver)利用大数据预测2012美国选举结果。
9:梅西百货的实时定价机制。依据需求和库存的情况,该公司基于SAS的系统对多达7300万种货品进行实时调价。
10:医疗行业早就遇到了海量数据和非结构化数据的挑战,而近年来很多国家都在积极地推进医疗信息化发展,这使得很多医疗机构有资金来做大数据分析。