麦肯锡——大数据：创新、竞争和生产力的下一个前沿(原文翻译)

麦肯锡——数据：创新、竞争和生产力的下一个前沿（原文翻译）数据已成为流入全球经济各个领域的激流。

公司制造了数量庞大的交易数据，捕获了数万亿字节的有关其客户、供应商和公司运营的信息。

数百万的网络传感器被嵌入在诸如移动、智能电表、汽车和工业机器等实体设备中，它们在物联网时代感知、创建和传送着数据。

事实上，随着公司和组织开展他们的业务并与个人进行互动，他们正在产生大量的“排放数据”，即作为其他活动的副产品而产生的数据。

社交媒体、智能手机和其他消费设备，包括PC和笔记本电脑，使世界上数十亿的个人能够贡献大量数据。

而且越来越多的多媒体容在大数据的指数增长中发挥了重要作用（见插文1，“大数据”是什么？）。

例如，每秒的高清视频生成的字节数量是存储单页文本所需的2000倍。

在数字世界中，消费者每天都在进行通信、浏览、购买、共享和搜索——创建自己巨大的数据流。

“大数据”是指数据量级超过传统数据库软件工具捕获、存储、管理和分析能力的数据集。

这个定义是主观的，并且包含了一个数据集量级的动态定义（超过这个大小才会被认为是大数据）——也就是说，我们没有定义一个确定的值（比如多少TB）。

我们认为随着技术的进步，被认定为“大数据”的数据集的大小数量级也将增加。

还要注意，这个数据集大小的定义会因行业而异，它取决于这些行业中普遍使用的软件工具不同以及通常的数据集的大小。

基于这些认知，今天许多行业的大数据的数据集大小围将从几十TB到几PB（几千TB）。

数据量激增本身是一个全球现象，但它是意味着什么呢？全球围有许多人对这种信息收集持深深的怀疑态度，认为数据泛滥只不过是对他们隐私的侵犯。

但有证据表明，大数据不仅惠及商业，而且在国民经济及民生方面，都会发挥重要的经济价值。

我们的研究发现，数据可以为世界经济创造巨大的价值、提高公司和公共部门的生产力和竞争力，并为消费者创造显著的经济附加值。

例如，如果美国医疗保健行业能够创造性地、有效地使用大数据来提高效率和质量，我们估计，该行业从数据获取的潜在价值可能超过每年3000亿美元，其中三分之二将体现在减少了国民医疗保健约8％的支出。

在商业世界里，我们估计，例如，充分使用大数据的零售商有可以将其营业利润率增加60％以上。

在欧洲发达经济体，我们预计政府行政部门可以通过使用大数据，在运营效率提升上节省1000亿欧元以上（1 940亿美元）。

这个估计不包括大数据杠杆带来的收益，比如减少欺诈、错误和税收差距（即潜在税收和实际税收收入之间的差距）。

现在数字化数据无处不在——存在于每个行业、每个经济体以及每个使用数字技术的组织和用户中。

虽然大数据这个话题可能只有一些数据极客在提及，但大数据现在与每个领域的领导者都相关，而且消费者已经从其被应用的产品和服务中受益。

存储、聚合和组合数据，并将其结果进行深入分析的能力，经历着像摩尔定律在计算领域的趋势一样：数字存储介质、云计算持续地在降低成本和技术障碍。

不到600美元，你就可以购买一个磁盘用来存储世界上所有的音乐。

从数据中获取洞察的方法也得到显著提升，这得益于应用了复杂技术的软件和强大的计算能力在一起进步。

此外，由于现在通过网络连接的人、设备和传感器的数量的增加，生成、传播、共享和访问数据的能力得到了革命性的提升。

2010年，超过40亿人（占世界人口的60％）使用手机，其中约12％的人使用智能手机，其渗透率还在以每年超过20％的速度增长。

目前在交通、汽车、工业、公用事业和零售行业有超过3000万个网络传感器节点。

这些传感器的数量以每年超过30％的速度增长。

有很多方法可以使大数据在全球经济的各行业中创造价值。

事实上，我们的研究表明，我们正处在创新、生产效率和经济增长的巨大浪潮中，伴随着新的竞争和价值获取模式——完全由大数据驱动，这些大数据需要消费者、企业和各行业充分开发其潜力。

但为什么是现在这样呢？难道数据不是信息、通信技术影响的一部分？是的，但我们的研究表明，大数据所带来的变化的规模和围处于一个拐点，随着一系列技术趋势的加速和趋同，它将大大扩展。

由于这种趋同，我们已经看到经济格局在明显变化。

许多先驱公司已经在使用大数据来创造价值，其它的需要探索他们需要如何做才能去竞争。

政府也面临一个重要的机会，在公共财政预算有限的情况下，提高他们的效率并给公民带来的价值，而且很可能由于世界许多国家的人口老龄化，财政预算一直持续吃紧。

我们的研究表明，公共事业领域可以通过有效利用大数据来显著提高其生产力。

然而，如果公司和其他组织和政策制定者要获取大数据的全部潜力，需要面对相当大的挑战。

能够充分利用大数据的分析和管理人才的短缺是一个重大而紧迫的挑战，公司和政策制定者可能很快就会遇到。

仅美国就面临14万至19万具备深厚的分析能力的人才缺口，更不用说还需要150万名管理人员和分析人员要分析数据并根据上述人的发现做出决策。

人才短缺只是开始。

我们在本报告中探讨的其他挑战包括：建立相应的基础设施；鼓励持续创新的激励和竞争机制；用户、组织和经济体对于经济效益的正确理解；保障措施到位以应对公众对大数据的顾虑。

本报告旨在了解大数据的现状，不同领域如何使用大数据来创造价值，对利益相关者的潜在价值，以及对私营公司和公共事业领域的领导人，也就是决策者的影响。

我们对大数据作为一个整体进行了分析，详细分析了五个领域（美国的卫生保健，欧洲的公共事业领域，美国的零售业，全球的制造和个人位置数据）。

这项研究绝不是大数据的盖棺定论，相反它仅仅是一个开始。

我们确信，随着使用大数据的技术和方法的发展，以及数据、数据应用、数据应用所带来的经济效益的增长（伴随着挑战和风险），这将是一个持续发展的故事。

就目前来说，我们的研究涵盖了以下七个核心观点：1. 数据已经渗透到每个行业和商业功能之中，是生产的重要因素。

已经有几个研究团队对世界围生成、存储和消费的数据总量进行研究。

尽管由于研究围不同，所带来的结果各不相同，但都表明未来会呈指数级增长。

MGI估计，2010年，全球企业在磁盘驱动器中存储超过7 EB 的新数据，与此同时，消费者在PC和笔记本电脑等设备上存储超过6 EB的新数据。

1 EB的数据相当于4000多倍于美国国会图书馆的存储信息。

事实上，我们今天所收集的海量数据，物理存储无法实现。

例如，医疗保健提供者会丢弃其90%的生成数据（例如，几乎所有在手术期间所创建的实时视频）。

大数据现已覆盖全球经济中的各个部门，一如有形资产和人力资本这样的重要生产要素，现代经济活动根本离不开大数据。

我们估计，到2009年，美国经济中几乎所有领域拥有1000名以上员工规模的企业，平均至少有200 TB的存储数据（这是1999年美国零售商沃尔玛数据仓库规模的两倍）。

在许多行业，每个公司的平均存储数据都超过1 PB。

总的来说，欧洲组织大约是整个美国存储容量的70％，接近11 EB，而美国在2010年超过16 EB。

鉴于欧洲各经济体发展阶段彼此类似，因此，我们认为，欧洲大多数行业的公司都有足够的能力来存储和操纵大数据。

其他地区的人均数据容量相较更低。

这表明，至少在短期，通过大数据创造价值的最大潜在地区是在最发达经济体。

然而长远来看，只要条件成熟，发展中经济体也同样潜力巨大。

例如，目前亚洲已经是个人位置数据的领先地区，因为人口众多，移动普及。

2010年，手机使用率还会更高——仅仅在中国就预计有8亿台设备。

此外，发展中国家的个别公司，在使用大数据方面表现强劲。

还有的组织将充分利用远程存储和数据处理能力。

由于基础技术、平台和数据分析能力的创新，并且越来越多的用户行为在虚拟的数字世界展现出来，大数据的可能性将持续迅猛发展。

2. 大数据在众多领域创造价值我们发现了五种广泛适用的途径，通过利用大数据发现潜在的转型可能来创造价值，并对组织如何设计、运营和管理产生重要影响。

例如，在可以开展大规模试验的环境中，企业如何开展营销活动？企业流程如何调整，企业如何评估和利用他们的资产（特别是数据资产）？公司对数据的访问和分析能力能否具有高于品牌的价值？现有的商业模式会被什么取代？例如，基于信息不对称的行业——例如，各种类型的经纪人——在数据充分透明度的世界，将会有何改变？在原有商业模式和基础架构之上的现任人员，如何与新晋攻击者竞争，这些攻击者能够快速处理并利用详实的消费者数据，例如，他们在社交媒体中说了些什么，他们在使用哪种设备？当大量数据开始从供应商转移到消费者端，消费者可以自主的访问数据，比如对比各竞争对手间的价格和质量，那又会发生什么呢？创建透明度使利益相关者的及时访问更加便捷，仅凭这一点就可以创造巨大的价值。

例如，在公共部门，使那些独立部门获取数据更为容易，可以大大减少搜索和处理时间。

在制造过程中，整合来自研发、工程和制造单元的数据，以实现并行处理，可显著缩短产品推向市场的时间并提高其质量。

通过实验来发现需求，揭示可变性并提高性能当他们以电子形式创建和存储更多交易数据时，组织可以收集到更为准确和详细的绩效数据（实时或接近实时），从产品库存到员工病假情况。

IT信息技术使组织能够使生产过程仪表化，然后设置控制实验。

使用数据来分析性能的变化——可能是自然产生的，或通过受控实验产生——究其根因，可以提高领导者的绩效管理水平。

根据个性化行为，划分客户群大数据可以使组织进行更为具体的市场细分，精确地定制产品和服务以满足不同需求。

这种方法在营销和风险管理中广泛应用，在其他领域则是革命性的——例如，在公共部门，一视则是通常做法。

在市场划分方面，即便是颇有渊源的消费品和服务公司，也开始部署更精密的大数据技术，例如对客户进行实时的微观层面的细分，以准确制定促销活动和广告。

用自动算法替代/辅助人类决策精密的分析能够大大改善决策，最大程度地降低风险，并发掘隐含价值。

这样的方式适用于税务机构、零售商等各类组织，税务机构可以通过自动风险引擎来识别候选者，以进一步检查，零售商可以通过算法优化决策过程，诸如存货的自动微调和根据商店和网上商店的实时定价调整。

有时候，决策不一定是自动化的，而是通过使用大数据技术，分析整个庞大的数据集，而非个人就能解读并处理的电子表格小样本。

决策可能各不相同；有的组织已经能够通过对客户、员工，甚至嵌入在产品中的传感器所获取的整个数据集来做出更好的决策。

创造新的模式、产品和服务大数据使公司能够创造新的产品和服务，改进现有的数据，并发明全新的商业模式。

制造商正通过从实际产品的使用表现中获取数据，以改善下一代产品，并提供富于创新的售后服务产品。

实时定位数据的出现，创造了一套全新的基于位置的服务，从导航到财产定价，以及基于何时何地驾驶汽车的伤亡保险赔付。

3. 对每个公司而言，大数据应用会成为核心竞争力和增长驱动力大数据应用正成为领先企业超越同行的关键手段。