1.1 大数据的兴起与发展
“大数据”概念的提出可以追溯至20世纪90年代，最初只是对一些在一定时间内无法用传统方法进行抓取、管理和处理的数据的统称a 1997年，美国宇航局研究员迈克尔•考克斯和大卫•埃尔斯沃斯首次使用“大数据”这一术语来描述超级计算机模拟飞机周围的气流而生成的大量信息。
2002年起，美国政府开始采用大规模数据挖掘技术来阻止恐怖主义活动。美国国防部通过整合各政府部门的数据库，建成一个通过筛选通信、犯罪、教育、金融、医疗和旅行等记录从而识别出可疑人的大数据平台。到2010年，美国国家安全局的30000名员工共拦截和存储了17亿封可疑电子邮件、电话和其他信息。
从2009年开始，互联网数据以毎年50%，毎两年翻一番的速 度增长。截至2012年，全世界每天产生2.5艾(2.5X1018)字节的数据。全球互联网企业都意识到“大数据”时代的来临.数据对于企业基于着重要意义。
2011年5月，麦肯锡全球研究院发布题为《大数据：创新、竞争和生产力的下一个新领域》的报告。报告发布后，“大数据”迅速成为计算机行业的热门概念。
2012年1月，达沃斯论坛发布的名为《大数据，大影响》的报告称：就像货币或黄金一样，数据已成为一种新的经济资产类别。同年3月，奥巴马政府发布了《大数据研究和发展倡议》，并投资2亿美元启动了“大数据研究和发展计划”，希望通过大数据技术提高收集海量数据、分析萃取信息的能力，加快改革美国国家安全、科学和研究的步伐，以及引发教育和学习的变革。同年7月，时任美国国务卿希拉里•克林顿宣布了一个名为“数据2X”的公私合营企业，用来收集统计世界各地的妇女和女童在经济、政治和社会地位方面的信息。与此同时，联合国发布政务白皮书《大数据促发展：挑战和机遇》，建议联合国成员国开发大数据潜在价值。
2014年4月，世界经济论坛以“大数据的回报与险”为主题 发布了《全球信息技术报告》。报告认为，全球大数据产业的日趋活跃，技术演进和应用创新的加速发展，使各国政府逐渐认识到大数据在推动经济发展、改善公共服务，乃至保障国家安全方面的重大意义。
然而，大数据究竞是什么?
麦肯锡公司认为，大数据是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处现的数据集合。
维基万科认为，大数据由巨型数据集组成，所涉及的数据量規模巨大到无法通过人工，在合理时间内达到截取、管理、处理，并整理成为人类所能解读的信息。
Gartne公司认为，大数据是大量、高速及(或)多变的信息资产，它需要新型的处理方式去促成更强的决策能力、洞察力与优化处理：大数据具基于3V特征;量( Volume )、速(Vefcity )与多变(Variety )的特点。 另外，基于些机构在3V之外还定义了第4个V:真实性 (Veracity )为第四特征。
随着时间的推移,人们对于大数据这一概念基于了普遍的认知。 现今，大数据的广义定义是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合。
随着信息通信技术的不断进步，数字化、信息化已经渗透进我们生活的各个方面，成为重要的生产因素。IDC编制的年度数字宇宙研究报告《从混沌中提取价值》表明，当前，大数据在公共管理、零售、互联网、电信、金融等众多行业快速推广，市场规模迅速扩大：2012年我国大数据市场规模已达7760万美元，预计到2016年将达 6.17亿美元，而全球规模将达238亿美元，世界已进入“数字摩尔时期”，全球数据量大约每两年翻一番：从人类文明出现到2003年，人类总共产生了 5EB (百亿亿字节)数据，而这仅是当前人类社会两天的数据量。我们正处于数据世界一个重要历史爆发期的边缘，数据是资产与财富的观念已深入人心，人们对于海量数据的挖掘和运用，预示着新一波生产率增长和消费者盈余浪潮的到来。大数据超过了传统数据库系统的处理能力，为了获得数据中的价值，必须选择新的方式进行处理，大数据应用已是大势所趋，“大数据时代”已然到来。
图1-1 全球数据量
大数据产业发展将呈现出三大趋势：第一，应用软件泛互联网化;第二，行业垂直整合，越靠近终端用户的公司，在产业链上将拥基于更大的发言权;第三，数据成为资产a三大趋势都是围绕数据展开的。泛互联网化是收集数据的重要渠道，没基于泛互联网化的应用软件，公司就难以获得用户的行为数据：行业垂直整合趋势在数据运用层面，通过搜集大量的用户数据，更贴近用户，更理解用户，为其提供更适用的服务;数据成为资产，更强调数据的战略意义。
图1-2大数据的发展历程
随着数据资源在各行各业所发挥的重要作用口益凸显，其价值已经得到了广泛认可，数据在为商业和消费者创造价值方面具基于巨大的发展潜力。数据已经成为可以与物质资产和人力资本相提并论的重要的生产要素，大数据的发展将与生产力的提高产生直接关系， 它将是继传统IT之后下一个提高生产率的技术前沿。未来，大数据的使用必将成为提高竞争力、生产力、创新能力以及创造消费者盈余的关键要素。
书名：电力大数据：能源互联网时代的电力企业转型与价值创造
ISBN：978-7-111-51693-4
作者：赖征田
出版日期：2016-01
出版社：机械工业出版社
