英特尔与SAP共建大数据实时分析平台

林伯海

如果说2013年是大数据元年，那么2014年则是大数据落地之年。随着大数据应用种类不断增加，并且数据实时访问与海量数据处理的需求都呈现快、杂、多的特点。传统的基于磁盘存储的关系型数据所能提供的处理能力已无法满足需求。

“传统的商务智能系统侧重于纵向对比，而操作性分析系统和实时监控系统、投诉系统更侧重于系统的横向数据比对。”英特尔（中国）有限公司数据中心及云计算业务产品市场总监贺晓东表示。比如你在广州出差时用信用卡刷了一笔钱，结果三分钟后手机短信提示你的信用卡在北京又刷了一笔钱，这肯定是有问题的。如果数据存储在硬盘上，这样的处理速度是无法让人接受的。

英特尔（中国）有限公司数据中心及云计算业务产品市场总监贺晓东
大数据实时分析要的就是快。在过去几年实现对海量复杂结构数据的存储、清洗、处理、查询与基本的分析功能后，如何对这些数据价值进行深度挖掘成为厂商与用户关注的焦点。

为此，英特尔与SAP综合双方在计算力与数据分析应用上的优势，一起构建了大数据实时分析平台。在英特尔开放硬件平台上部署SAP基于内存的数据库与商业智能技术。“在我们的英特尔云创新中心搭建了一个HANA的平台和Hadoop的平台，让企业进行一些测试与调优。”贺晓东说，“比如说从数据的源头到数据的管理与应用，不管什么结构的数据，通过如SAP及时的处理，还有标准的至强，再加上Hadoop可扩展的业务挖掘分析，形成各种各样的用户报告，完成整体上的测试。”

英特尔云创新中心解决方案架构师告诉TechTarget中国，该平台今年五月已经成型，很多大型企业已经在其上完成测试。例如电信行业使用OSS进行性能分析，传统ERP客户进行实时BI，此外还有能源与制造业这种数据量比较大的企业进行大数据测试。

数据处理分析市场的发展趋势除了速度要更快，支持的数据量更大，并且具有更有高性价比。很多客户积累了数十年的数据需要进行价值挖掘，探讨构建可扩展的存储支撑大数据分析。同时，“我们把传统的RISC架构挪到英特尔更加廉价、开放、标准化的标准的服务器平台上来降低成本。”贺晓东表示。

如何让大数据更具有时效性？结合HANA和Hadoop可能是一种不错的方式。“内存的扩展目前还达不到PB级这样的水准。我们现在着重在以HANA为核心，加上Hadoop的应用领域来做一些和大数据有关的内容。”SAP公司数据库及技术平台部售前总监宋一平表示。Hadoop和HANA的结合，和SAP的数据管理、数据库结合有很多种方式，有在线、离线方式、联邦方式。“结合最新的一些内存的数据存储技术，比如可以将电话费详单个人查询从六个月延长到两年或更长，提升服务质量。”他补充。

SAP公司数据库及技术平台部售前总监宋一平
SAP HANA的内存实时计算环境可以加速大数据处理能力。宋一平表示SAP是从三个方面看大数据的：大数据平台要实时、大数据分析与应用要有实值、大数据科学要实效。“作为企业管理软件解决方案提供商，我们一直在聆听企业用户在大数据应用方面的需求和困难，并对自身产品和技术不断进行相应的优化与改进，使之能够符合企业用户日益提升的在计算性能与大数据实时分析方面的需求。”宋一平表示。

那么该平台的主要应用场景有哪些呢？比如某省用户两天的移动设备上网记录在Hbase上存储了40亿条，并通过Hadoop Map/Reduce计算出轻度汇总数据4亿条左右，存储在SAP HANA上。那么，客户可以给予HANA的任意维度组合查询，响应时间都在秒级，这体现了实时商务智能。同时，利用手机号与实践可以查询Hbase中的详单记录，主要用于投诉处理、客户自服务等业务场景，这体现出Hbase主键查询的秒级响应与横向可扩展架构。此外，还能用移动设备访问后台BI系统，响应当前流行的移动办公模式。

程从超表示，每个产品都有自己的适用场景，并不是每个产品都能解决企业内部的所有的问题，可以结合使用开源和企业级软件，以及将scale-out和scale-up两种架构结合使用。

英特尔与SAP将继续致力于大数据解决方案的研发与拓展，并将一些关键的大数据革新技术贡献到Hadoop开源社区及相应生态圈内部的大数据合作伙伴，推动大数据技术的落地与数据分析领域的进一步发展。

贺晓东表示，在大数据领域，用户的价值会让IT部门从原来的费用中心转变为真正的运营中心。“我们要加速复杂的、相对比较新的解决方案的落地，为用户节省时间并降低成本。”

宋一平补充，SAP会加快与国际国内厂商的HANA认证工作。而在与英特尔数据中心发展的方向方面，他表示一是要在SAP德国总部验证对HANA与英特尔芯片在中国落地的问题，二是在此基础上寻找电信与能源等不同行业的典型用户，三是将HANA与E7等芯片打包成各种不同的产品与解决方案组合提供给行业客户。