下载掌阅APP，畅读海量书库
立即打开
大数据作为一个专有名词迅速成为全球的热点，主要是因为近年来互联网、云计算、移动通信和物联网的迅猛发展。无所不在的移动设备、无线传感器、智能设备和科学仪器每分每秒都在产生数据，面向数以亿计用户的互联网服务时时刻刻在产生巨量的交互数据，要处理的数据量实在是太大，增长速度实在太快，而业务需求和竞争压力对数据处理的实时性、有效性又提出了更高要求，传统的常规技术手段根本无法应付。
图1-1展示了大数据的发展历程。
从2009年开始，“大数据”逐渐成为互联网信息技术行业的关注热点。2011年5月，麦肯锡全球研究院发布题为《大数据：创新、竞争和生产力的下一个前沿领域》的报告 [3] ，正式提出了“大数据”这个概念。该报告描述了已经进入每个部门和经济领域的数字型数据的状态和成长中的角色，并提出充分的证据表明大数据能显著地为国民经济作出贡献，为整个世界经济创造实质性的价值。
图1-1 大数据的发展历程
该报告深入研究了5个领域来观察大数据是如何创造出价值的和研究大数据的变革潜力，这5个领域包括美国医疗卫生、欧洲联合公共部门管理、美国零售业、全球制造业和个人地理位置信息。
这5个领域不仅代表了全球经济的核心领域，也能说明一系列区域性的观点。通过对这5个领域的详细分析，该研究提出了以下5个可广泛适用的方法，来利用大数据的变革潜力创造价值。
（1）创造透明度，让相关人员更容易地及时获得大数据，能创造巨大的价值。
（2）通过实验来发现需求、呈现可变性和增强绩效。越来越多的公司在以数字化的形式收集和存储大量非常详细的商业交易数据。因为这样不仅可以访问这些数据，有时还可以控制数据生成的条件，所以最终的决策就可以截然不同，也就是说将更加科学的方法引入管理中。特别是决策者现在可以设计和实施实验，经过严格地定量分析后再作出决策。
（3）细分人群，采取灵活的行动。利用大数据，可以创建更窄的细分段、更精确地精简服务来满足顾客的需求。这种方法在市场和风险管理方面比较知名，也可以借鉴到像公共部门管理这样的地方。
（4）用自动算法代替或帮助人工决策。精密的分析能够实质性地优化决策，减少风险，发掘有价值的观点，而大数据能提供用于开发精密分析算法或算法需要操作的原始数据。
（5）创新商业模式、产品和服务。因为有了大数据，所以所有类型的企业都可以创建新产品和服务，改善现有的产品和服务，并开发全新的商业模式。
这份报告在互联网上引起了强烈的反响。报告发布后，“大数据”迅速成为计算机行业的热门概念。在此之后，包括IBM、微软、EMC等在内的国际IT巨头公司纷纷通过收购大数据相关的厂商来实现技术整合，积极部署大数据战略。2011年5月，EMC举办了主题为“云计算遇上大数据”的全球会议，IBM则发布了大数据分析软件平台InfoSphere BigInsights和Streams，将开源Hadoop平台与IBM系统整合起来。2011年7～8月，Yahoo、EMC及微软先后推出了基于Hadoop的大数据处理产品。
2012年1月，大数据成为瑞士达沃斯全球经济论坛的主题，论坛发布了一份题为《大数据，大影响》 [4] 的报告，宣称数据已经成为一种新的经济资产类别，就像货币或黄金一样。
2012年3月22日，奥巴马政府宣布2亿美元投资大数据领域，并把大数据定义为“未来的新石油”。白宫科技政策办公室在2012年3月29日发布《大数据研究和发展计划》 [5] ，并组建“大数据高级指导小组”。此举标志着美国把应对大数据技术革命带来的机遇和挑战，提高到国家战略层面，形成全体动员格局，随之在全球掀起了一股大数据的热潮。
2012年7月，联合国“全球脉动”计划发布了《大数据促发展：挑战与机遇》 [6] 的白皮书，该计划旨在通过对互联网实时数据的分析，更及时地了解人们所面临的困难和挑战，并提出改善决策，为宏观经济的发展决策提供支持。
2012年10月，中国计算机学会成立了大数据专家委员会，委员会宗旨包括3个方面：探讨大数据的核心科学与技术问题，推动大数据学科方向的建设与发展；构建面向大数据产学研用的学术交流、技术合作与数据共享平台；对相关政府部门提供大数据研究与应用的战略性意见与建议。委员会还成立了5个工作组，分别负责大数据相关的会议（学术会议、技术会议）组织、学术交流、产学研用合作、开源社区与大数据共享联盟等方面的工作。这标志着大数据在我国信息技术领域的确立。