英特尔与SAP共建大数据实时分析平台

日期: 2014-08-24 作者:唐琼瑶 来源:TechTarget中国

如果说2013年是大数据元年,那么2014年则是大数据落地之年。随着大数据应用种类不断增加,并且数据实时访问与海量数据处理的需求都呈现快、杂、多的特点。传统的基于磁盘存储的关系型数据所能提供的处理能力已无法满足需求。

“传统的商务智能系统侧重于纵向对比,而操作性分析系统和实时监控系统、投诉系统更侧重于系统的横向数据比对。”英特尔(中国)有限公司数据中心及云计算业务产品市场总监贺晓东表示。比如你在广州出差时用信用卡刷了一笔钱,结果三分钟后手机短信提示你的信用卡在北京又刷了一笔钱,这肯定是有问题的。如果数据存储在硬盘上,这样的处理速度是无法让人接受的。

英特尔(中国)有限公司数据中心及云计算业务产品市场总监贺晓东

大数据实时分析要的就是快。在过去几年实现对海量复杂结构数据的存储、清洗、处理、查询与基本的分析功能后,如何对这些数据价值进行深度挖掘成为厂商与用户关注的焦点。

为此,英特尔与SAP综合双方在计算力与数据分析应用上的优势,一起构建了大数据实时分析平台。在英特尔开放硬件平台上部署SAP基于内存的数据库与商业智能技术。“在我们的英特尔云创新中心搭建了一个HANA的平台和Hadoop的平台,让企业进行一些测试与调优。”贺晓东说,“比如说从数据的源头到数据的管理与应用,不管什么结构的数据,通过如SAP及时的处理,还有标准的至强,再加上Hadoop可扩展的业务挖掘分析,形成各种各样的用户报告,完成整体上的测试。”

英特尔云创新中心解决方案架构师告诉TechTarget中国,该平台今年五月已经成型,很多大型企业已经在其上完成测试。例如电信行业使用OSS进行性能分析,传统ERP客户进行实时BI,此外还有能源与制造业这种数据量比较大的企业进行大数据测试。

数据处理分析市场的发展趋势除了速度要更快,支持的数据量更大,并且具有更有高性价比。很多客户积累了数十年的数据需要进行价值挖掘,探讨构建可扩展的存储支撑大数据分析。同时,“我们把传统的RISC架构挪到英特尔更加廉价、开放、标准化的标准的服务器平台上来降低成本。”贺晓东表示。

如何让大数据更具有时效性?结合HANAHadoop可能是一种不错的方式。“内存的扩展目前还达不到PB级这样的水准。我们现在着重在以HANA为核心,加上Hadoop的应用领域来做一些和大数据有关的内容。”SAP公司数据库及技术平台部售前总监宋一平表示。Hadoop和HANA的结合,和SAP的数据管理、数据库结合有很多种方式,有在线、离线方式、联邦方式。“结合最新的一些内存的数据存储技术,比如可以将电话费详单个人查询从六个月延长到两年或更长,提升服务质量。”他补充。

SAP公司数据库及技术平台部售前总监宋一平

SAP HANA的内存实时计算环境可以加速大数据处理能力。宋一平表示SAP是从三个方面看大数据的:大数据平台要实时、大数据分析与应用要有实值、大数据科学要实效。“作为企业管理软件解决方案提供商,我们一直在聆听企业用户在大数据应用方面的需求和困难,并对自身产品和技术不断进行相应的优化与改进,使之能够符合企业用户日益提升的在计算性能与大数据实时分析方面的需求。”宋一平表示。

那么该平台的主要应用场景有哪些呢?比如某省用户两天的移动设备上网记录在Hbase上存储了40亿条,并通过Hadoop Map/Reduce计算出轻度汇总数据4亿条左右,存储在SAP HANA上。那么,客户可以给予HANA的任意维度组合查询,响应时间都在秒级,这体现了实时商务智能。同时,利用手机号与实践可以查询Hbase中的详单记录,主要用于投诉处理、客户自服务等业务场景,这体现出Hbase主键查询的秒级响应与横向可扩展架构。此外,还能用移动设备访问后台BI系统,响应当前流行的移动办公模式。

程从超表示,每个产品都有自己的适用场景,并不是每个产品都能解决企业内部的所有的问题,可以结合使用开源和企业级软件,以及将scale-out和scale-up两种架构结合使用。

英特尔与SAP将继续致力于大数据解决方案的研发与拓展,并将一些关键的大数据革新技术贡献到Hadoop开源社区及相应生态圈内部的大数据合作伙伴,推动大数据技术的落地与数据分析领域的进一步发展。

贺晓东表示,在大数据领域,用户的价值会让IT部门从原来的费用中心转变为真正的运营中心。“我们要加速复杂的、相对比较新的解决方案的落地,为用户节省时间并降低成本。”

宋一平补充,SAP会加快与国际国内厂商的HANA认证工作。而在与英特尔数据中心发展的方向方面,他表示一是要在SAP德国总部验证对HANA与英特尔芯片在中国落地的问题,二是在此基础上寻找电信与能源等不同行业的典型用户,三是将HANA与E7等芯片打包成各种不同的产品与解决方案组合提供给行业客户。

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

电子邮件地址不会被公开。 必填项已用*标注

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

相关推荐

  • Xeon至强E5系列V4工作负载和管理员升级建议

    数据中心的主力服务器均采用X86处理器,英特尔会定期调整自己的处理器产品使之适应新的应用场景、系统架构以及竞争威胁。目前,这种方式正在为超大规模云、纵向扩展以及关键任务企业工作负载进行优化……

  • 高性能计算快速落地 应用与解决方案层出不穷

    在“大众创业 万众创新”的趋势下,高性能计算技术的不断发展,也开始影响着更多行业竞争力的提升。

  • 英特尔分享新一代存储技术蓝图

    在题为“把握数据经济,重塑商业变革”的2015中国存储峰会上,英特尔公司数据中心事业部副总裁兼存储事业部总经理Bev Crair介绍了英特尔在存储领域带来的革命性技术。

  • 2015全国并行应用挑战赛奖项出炉

    在本届高性能计算学术年会中,来自英特尔高性能计算平台部门的总经理Barry Davis不仅解析了对未来高性能计算技术发展趋势的洞察与相应的策略。