过去几年间,可用于大数据分析任务的平台数量激增。
开源 Hadoop 框架可免费使用,但设置起来技术要求很高,也未针对任何特定工作或行业进行专门优化。要在企业中使用它,你需要一个可供操作的平台。
这些平台是商业服务(需持续支付服务费用),其中大多数以 Hadoop 框架为基础进行扩展,从而为企业和组织提供实用的分析服务。
下面按不分先后的顺序,介绍十个最优秀、使用最广泛的此类服务。与竞争激烈市场中的任何商业产品一样,每种服务都有其优缺点,你需要确保选对适合这项工作的工具。
Cloudera 由曾任职于 Google、Yahoo、Facebook 和 Oracle 的员工创立,提供开源及商业化的 Hadoop 大数据解决方案,统称为 Cloudera Distribution including Hadoop,即 CDH。其发行版采用了 Impala 分析引擎;该引擎也被 Amazon 和 MapR 等竞争对手采用并纳入其产品包。
与其他所有大型分析平台不同,HDP 完全由开源代码构成,其所有组件均通过 Apache Software Foundation 构建。该公司通过提供部署服务和支持来盈利,帮助用户运行平台并获得所需结果。
Microsoft 的旗舰分析产品 HDInsight 基于 Hortonworks Data Platform,但经过定制,可与其 Azure 云服务和 SQL Server 数据库管理系统协同工作。对企业而言,它的一大优势是可与 Excel 集成,这意味着即使只有基础 IT 技能的员工,也能初步尝试大数据分析。
IBM 提供一系列产品和服务,旨在让企业更容易进行复杂的大数据分析。该公司还提供自有的 Hadoop 发行版 InfoSphere BigInsights。
该平台专为通过自有机器设备生成大量数据的企业打造。其宣称的目标是“将机器数据转化为运营智能”。物联网是其战略的核心;在其多种产品中,该公司提供了 Nest 支持 Wi-Fi 的智能恒温器背后的分析技术。其分析技术也支持 Domino’s Pizza 在美国开展优惠券活动。
尽管人们都把 Amazon 看作一家在线商店,但它也通过向其他公司出售让自身业务顺畅运转的“秘诀”获利。其商业模式从一开始就建立在大数据之上——利用个人信息提供个性化购物体验。Amazon Web Services 包含 Elastic Cloud Compute 和 Elastic MapReduce 服务,可在云端提供大规模数据存储和分析。
Pivotal 的大数据套件由其自有 Hadoop 发行版 Pivotal HD 和分析平台 Pivotal Analytics 组成。其商业模式允许用户存储无限量的数据,并按分析数据的数量支付浮动订阅费。该公司大力投入“数据湖”理念,即为组织的所有数据建立统一的、基于对象的存储库。
这是另一种数据库管理系统,同样提供开源免费版和付费专有版。该产品面向希望参与物联网领域的用户。付费用户可选择三个服务等级;等级越高,可使用帮助台的用户越多,电子邮件支持的响应时间也越短。
MapR 提供自有的 Hadoop 发行版。它与其他发行版显著不同:以自有的 MapR Data Platform 取代常用的 Hadoop File System,并声称这样能带来更好的性能和易用性。
与这里介绍的许多其他系统一样,该平台从 Hadoop 或基于云的存储网络获取数据,并让用户使用一系列高级分析功能。BT 使用 Kognitio 协助制定通话资费;忠诚度计划 Nectar 则用它进行客户分析。
一如既往,希望这篇文章对你有所帮助。欢迎告诉我你对这个话题有何看法或评论。例如,你会推荐其他平台吗?对于如何挑选适合自己的平台,你有什么实用建议?
本文与 Linkedin合作发布。本文的发布并不代表世界经济论坛认可其中的观点。
如需持续关注 Agenda, 请订阅我们的每周简报。
作者:Bernard Marr 是一位享誉全球的专家,专长包括战略、绩效管理、分析、关键绩效指标(KPI)和大数据。
图片:2014年4月29日,在一场信息展示厅开幕仪式期间,参观者站在莫斯科市中心的信息二维码展板前。路透社/Maxim Shemetov

