1、在数字世界中, 消费者每天都在进行通信、浏览、购买、共享和搜索 一一创建自己巨大 的数据流。大数据”是指数据量级超过传统数据库软件工具捕获、存储、管理 和分析能力的数据集。这个定义是主观的,并且包含了一个数据集量 级的动态定义(超过这个大小才会被认为是大数据) 也就是说,我们没有定义一个确定的值(比如多少 TB)。我们认为随着技术的进步, 被认定为 大数据”的数据集的大小数量级也将增加。还要注意,这个数 据集大小的定义会因行业而异, 它取决于这些行业中普遍使用的软件工具不同以及通常的数据集的大小。 基于这些认知,今天许多行业的大数 据的数据集大小范围将从几十 TB到几PB (几千TB )。数据
2、量激增本身是一个全球现象, 但它是意味着什么呢?全球范围 内有许多人对这种信息收集持深深的怀疑态度,认为数据泛滥只不过是 对他们隐私的侵犯。但有证据表明,大数据不仅惠及商业,而且在国民 经济及民生方面,都会发挥重要的经济价值。我们的研究发现,数据可 以为世界经济创造巨大的价值、 提高公司和公共部门的生产力和竞争力, 并为消费者创造显著的经济附加值。例如,如果美国医疗保健行业能够 创造性地、有效地使用大数据来提高效率和质量,我们估计,该行业从 数据获取的潜在价值可能超过每年 3000亿美元,其中三分之二将体现 在减少了国民医疗保健约 8%的支出。在商业世界里,我们估计,例如, 充分使用大数据的零
3、售商有可以将其营业利润率增加 60 %以上。在欧洲发达经济体,我们预计政府行政部门可以通过使用大数据, 在运营效率提升上节省1000亿欧元以上(1 940亿美元)。这个估计不包括大数 据杠杆带来的收益,比如减少欺诈、错误和税收差距(即潜在税收和实 际税收收入之间的差距)。现在数字化数据无处不在一一存在于每个行业、每个经济体以及每个使 用数字技术的组织和用户中。虽然大数据这个话题可能只有一些数据极 客在提及,但大数据现在与每个领域的领导者都相关, 而且消费者已经 从其被应用的产品和服务中受益。 存储、聚合和组合数据,并将其结果进行深入分析的能力,经历着像摩 尔定律在计算领域的趋势一样:数字存储介
4、质、云计算持续地在降低成 本和技术障碍。不到600美元,你就可以购买一个磁盘用来存储世界上 所有的音乐。从数据中获取洞察的方法也得到显著提升, 这得益于应用了复杂技术的软件和强大的计算能力在一起进步。此外,由于现在通过网络连接的人、设备和传感器的数量的增加,生成、 传播、共享和访问数据的能力得到了革命性的提升。 2010年,超过40亿人(占世界人口的60 %)使用手机,其中约12%的人使用智能手机, 其渗透率还在以每年超过 20 %的速度增长。目前在交通、汽车、工业、 公用事业和零售行业有超过 3000万个网络传感器节点。这些传感器的 数量以每年超过30 %的速度增长。有很多方法可以使大数据在
5、全球经济的各行业中创造价值。 事实上,我们的研究表明,我们正处在创新、生产效率和经济增长的巨大浪潮中, 伴随着新的竞争和价值获取模式 一一完全由大数据驱动,这些大数据需 要消费者、企业和各行业充分开发其潜力。但为什么是现在这样呢? 难道数据不是信息、通信技术影响的一部 分? 是的,但我们的研究表明,大数据所带来的变化的规模和范围处于一个拐点,随着一系列技术趋势的加速和趋同,它将大大扩展。由于这种趋同,我们已经看到经济格局在明显变化。许多先驱公司已经在使用大数据来创造价值, 其它的需要探索他们需要如何做才能去竞争。政府也面临一个重要的机会, 在公共财政预算有限的情况下, 提高他们 的效率并给公民
6、带来的价值,而且很可能由于世界许多国家的人口老龄 化,财政预算一直持续吃紧。我们的研究表明,公共事业领域可以通过 有效利用大数据来显著提高其生产力。然而,如果公司和其他组织和政策制定者要获取大数据的全部潜力,需要面对相当大的挑战。能够充分利用大数据的分析和管理人才的短缺是一个重大而紧迫的挑战,公司和政策制定者可能很快就会遇到。仅美国就面临 14万至19 万具备深厚的分析能力的人才缺口, 更不用说还需要150万名管理人员 和分析人员要分析数据并根据上述人的发现做出决策。 人才短缺只是开 始。我们在本报告中探讨的其他挑战包括: 建立相应的基础设施;鼓励持续创新的激励和竞争机制;用户、组织和经济体对
7、于经济效益的正确理解; 保障措施到位以应对公众对大数据的顾虑。本报告旨在了解大数据的现状,不同领域如何使用大数据来创造价值, 对利益相关者的潜在价值,以及对私营公司和公共事业领域的领导人, 也就是决策者的影响。我们对大数据作为一个整体进行了分析, 详细分析了五个领域(美国的卫生保健,欧洲的公共事业领域,美国的零售业,全球的制造和个人位 置数据)。这项研究绝不是大数据的盖棺定论, 相反它仅仅是一个开始。我们确信, 随着使用大数据的技术和方法的发展,以及数据、数据应用、数据应用 所带来的经济效益的增长(伴随着挑战和风险),这将是一个持续发展 的故事。就目前来说,我们的研究涵盖了以下七个核心观点:1
8、.数据已经渗透到每个行业和商业功能之中,是生产的重要因素。已经有几个研究团队对世界范围内生成、 存储和消费的数据总量进行研究。尽管由于研究范围不同,所带来的结果各不相同,但都表明未来会 呈指数级增长。MGI估计,2010年,全球企业在磁盘驱动器中存储超 过7 EB的新数据,与此同时,消费者在 PC和笔记本电脑等设备上存 储超过6 EB的新数据。1 EB的数据相当于4000多倍于美国国会图书 馆的存储信息。事实上,我们今天所收集的海量数据,物理存储无法实 现。例如,医疗保健提供者会丢弃其 90%的生成数据(例如,几乎所有 在手术期间所创建的实时视频)。大数据现已覆盖全球经济中的各个部门, 一如有
9、形资产和人力资本这样 的重要生产要素,现代经济活动根本离不开大数据。我们估计,到2009年,美国经济中几乎所有领域拥有 1000名以上员 工规模的企业,平均至少有 200 TB的存储数据(这是1999年美国零 售商沃尔玛数据仓库规模的两倍)。在许多行业,每个公司的平均存储 数据都超过1 PB。总的来说,欧洲组织大约是整个美国存储容量的 70%, 接近11 EB,而美国在2010年超过16 EB。鉴于欧洲各经济体发展阶段彼此类似,因此,我们认为,欧洲大多数行 业的公司都有足够的能力来存储和操纵大数据。 其他地区的人均数据容量相较更低。这表明,至少在短期内,通过大数据创造价值的最大潜在 地区是在最
10、发达经济体。然而长远来看,只要条件成熟,发展中经济体也同样潜力巨大。例如,目前亚洲已经是个人位置数据的领先地区,因为人口众多,移动电话普 及。2010年,手机使用率还会更高 一一仅仅在中国就预计有8亿台设 备。此外,发展中国家的个别公司,在使用大数据方面表现强劲。还有 的组织将充分利用远程存储和数据处理能力。由于基础技术、平台和数据分析能力的创新, 并且越来越多的用户行为在虚拟的数字世界展现出来,大数据的可能性将持续迅猛发展。2.大数据在众多领域创造价值 我们发现了五种广泛适用的途径, 通过利用大数据发现潜在的转型可能 来创造价值,并对组织如何设计、运营和管理产生重要影响。例如,在可以开展大规
11、模试验的环境中, 企业如何开展营销活动?企业 流程如何调整,企业如何评估和利用他们的资产(特别是数据资产)? 公司对数据的访问和分析能力能否具有高于品牌的价值?现有的商业 模式会被什么取代?例如,基于信息不对称的行业 一一例如,各种类型的经纪人一一在数据 充分透明度的世界,将会有何改变?在原有商业模式和基础架构之上的 现任人员,如何与新晋攻击者竞争,这些攻击者能够快速处理并利用详 实的消费者数据,例如,他们在社交媒体中说了些什么,他们在使用哪 种设备?当大量数据开始从供应商转移到消费者端, 消费者可以自主的访问数据,比如对比各竞争对手间的价格和质量, 那又会发生什么呢?创建透明度使利益相关者的
12、及时访问更加便捷, 仅凭这一点就可以创造巨大的价值。例如,在公共部门,使那些独立部门获取数据更为容易,可以大 大减少搜索和处理时间。在制造过程中,整合来自研发、工程和制造单 元的数据,以实现并行处理,可显著缩短产品推向市场的时间并提高其 质量。通过实验来发现需求,揭示可变性并提高性能当他们以电子形式创建和存储更多交易数据时, 组织可以收集到更为准确和详细的绩效数据(实时或接近实时),从产品库存到员工病假情况。IT信息技术使组织能够使生产过程仪表化,然后设置控制实验。使用数 据来分析性能的变化 一一可能是自然产生的,或通过受控实验产生 一一 究其根因,可以提高领导者的绩效管理水平。根据个性化行为
13、,划分客户群大数据可以使组织进行更为具体的市场细分, 精确地定制产品和服务以 满足不同需求。这种方法在营销和风险管理中广泛应用,在其他领域则 是革命性的一一例如,在公共部门,一视同仁则是通常做法。在市场划 分方面,即便是颇有渊源的消费品和服务公司,也开始部署更精密的大 数据技术,例如对客户进行实时的微观层面的细分,以准确制定促销活 动和广告。用自动算法替代/辅助人类决策精密的分析能够大大改善决策,最大程度地降低风险,并发掘隐含价值。 这样的方式适用于税务机构、 零售商等各类组织,税务机构可以通过自 动风险引擎来识别候选者,以进一步检查,零售商可以通过算法优化决 策过程,诸如存货的自动微调和根据
14、商店和网上商店的实时定价调整。 有时候,决策不一定是自动化的,而是通过使用大数据技术,分析整个 庞大的数据集,而非个人就能解读并处理的电子表格小样本。 决策可能 各不相同;有的组织已经能够通过对客户、员工,甚至嵌入在产品中的传感器所获取的整个数据集来做出更好的决策。创造新的模式、产品和服务大数据使公司能够创造新的产品和服务, 改进现有的数据,并发明全新的商业模式。制造商正通过从实际产品的使用表现中获取数据,以改善 下一代产品,并提供富于创新的售后服务产品。实时定位数据的出现, 创造了一套全新的基于位置的服务,从导航到财产定价,以及基于何时 何地驾驶汽车的伤亡保险赔付。3.对每个公司而言,大数据应用会成为核心竞争力和增长驱动力大数据应用正成为领先企业超越同行的关键手段。例如,我们估计,拥 抱大数据的零售商有可能提高 60%以上的营业利润率。许多零售巨头, 诸如英国Tesco则通过使用大数据从本地竞争对手获取市场份额, 金融服务和保险等行业也屡见不鲜。我们认为,在各个行业,大数据的先驱应用者价值会上升,恰恰以牺牲 落后者为代价,这种趋势逐渐被印证。 有前瞻性的领导者可以逐步建立 强大的数据能力。这项工作需要时间,但利用大数据的发展优势将在长 期内显现,无疑是值得投资的。反之亦然,难以充分发挥大数据能力的 竞争对手将被甩在后面。大数据还有助于创造新的增长机会和全新类型的公
copyright@ 2008-2022 冰豆网网站版权所有
经营许可证编号:鄂ICP备2022015515号-1