IBM Platform Computing:云计算与大数据的智慧粘合剂

简介:
ZDNet至顶网软件频道消息: 对于大数据战略,IBM一直把它看做公司整体战略极其重要组成部分,不久前更是与苹果公司达成一项排他性合作,把大数据和分析能力引入苹果的iPhone和iPad。在IBM大数据战略及解决方案中,Platform Computing处于什么地位?它的特点和优势对于IBM大数据战略的影响是什么?ZDNet记者近日采访了IBM大中华区系统与科技部研发中心总监谢东。

谢东表示,IBM的大数据理念是提供一个完整的解决方案,其中包括硬件系统、硬件管理、大数据运算平台、大数据分析软件。Platform一如它的名字——平台,核心任务是负责对资源进行整合、调度,确保上层应用能够访问底层资源,Platform Computing处于中间层。

作为一个平台,Platform Computing实际上跨越了好几个环节,包括数据的采集、数据的存储以及在这之上的大数据运算。在这之中,Platform Computing要充当管理职能,为这些系统提供快速响应以及合理、高效的应用。

Platform助力大数据与云计算结合
对于Platform Computing应用来说,哪里数据多、对大数据需求旺盛,哪里就是Platform Computing的用武之地。金融、电信、气象、公共安全都是Platform Computing迅速发展的领域。在应用方面谢东特别强调,大数据与云计算的结合是Platform Computing非常显著的一个应用场景。大数据和云计算并不是割裂开的,很多用户需要的,是在云上构建一个大数据解决方案,而Platform Computing提供多租户的概念,使得客户可以在云的平台上构建几个大数据集群,不仅灵活使用,而且可以更高效地利用硬件资源。

为进一步介绍大数据与云计算结合的典型应用,谢东还列举了Platform Computing与SoftLayer的结合实例。如果某一个用户用Platform Computing建立了大数据方案,但是它在某一个阶段运算资源不够,不需要额外购买硬件。实际上IBM的Platform Computing可以给用户提供一个与SoftLayer结合的解决方案,使运算资源无缝扩展,不需要对应用、体验进行任何修改,用完以后还可以退租回来。

Platform成为软硬件优化调和剂
在IBM收购Platform之后,其实已经改变了Platform Computing单纯作为一个软件产品的产业形态,IBM把Platform Computing并入硬件部门,这也就意味着Platform Computing在软硬件优化方面有着极大的优势,也被赋予重大的责任。

对于此,谢东提到了几个月前IBM发布的Power 8服务器。Power8有一个显著的特点,那就是从硬件平台的角度为大数据应用而设计,反过来思考,IBM也需要从软件平台的角度把硬件性能充分利用起来。为了实现这一目的,Platform Computing起到了关键作用,它对Power 8服务器与其他存储设备的资源整合进行了深度融合。

在这种融合当中,其实应用场景是不同的,有的是运算密集型,有的是存储密集型,有的要求高带宽,有的需要大内存和快速响应。针对不同的应用,实际有不同的优化方案,在这方面Platform Computing都可以根据用户不同的需求,根据应用所选用的硬件平台做出适当的优化,使整个系统在一个最优的状态下运行。

大数据平台与已有系统无缝对接
其实在国内,最近一两年已经出现众多Platform Computing的成功案例,对此,谢东也进行了详细介绍。以电信为例,话费详单查询的应用需要考虑不同的查询条件以及历史查询的需求,导致数据量很大,而且这些数据还处于快速增长的态势下,这时候可以采用IBM的大数据平台进行查询。解决方案可以跟电信部门当前业务系统进行连接,让业务系统得到实时数据,然后为用户提供实时的详单查询。

而气象领域更是一个非常典型的应用场景。气象领域需要做数据收集、转换、分析的工作,实际上就需要大数据的处理能力。比如从卫星上获取的数据,如何把这些数据进行更好的处理,同时更快为用户提供查询访问,并进行预报,这也是一个典型的大数据应用。

在这些应用场景中,IBM的大数据平台解决方案会尽量让用户采用已有的系统进行无缝连接,使用户在原有业务基础上拓展到大数据平台,这点已被IBM重点考虑。另外,当用户建立的大数据系统面对持续不断的数据量增长的时候,系统仍然能够无缝的随着业务需求扩展能力和能量。这也是谢东特别强调的一点。而因为同时具有与类似SoftLayer公有云结合的能力,谢东也表示,用户部署的大数据系统与自身的云系统也可以紧密结合。

在采访的最后,谢东也再一次强调了Platform Computing的三大优势:首先,完整性,整个大数据平台从设计开始是一套完整的系统,是集成化的;其次,性能。IBM的大数据平台在实时响应、快速处理等方面有严苛的要求;最后,是容易被大家所忽略的,那就是整个系统的开放性和兼容性。Platform Computing的设计理念就是一个跨平台的、面向不同应用的产品,既有IBM的应用,众多应用场景、分析软件都跑在Platform Computing平台上,系统的开放性、兼容性非常好。
原文发布时间为:2014年07月31日
本文作者:张晓楠
本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
目录
相关文章
|
1月前
|
存储 大数据 数据挖掘
云计算与大数据:从基础设施到实际应用
云计算与大数据:从基础设施到实际应用
111 0
|
1月前
|
存储 大数据 数据挖掘
python数据分析——大数据和云计算
大数据和云计算作为当代信息技术的两大核心驱动力,正在以前所未有的速度改变着我们的生活、工作和思维方式。它们不仅为各行各业的创新提供了强大的技术支持,更是推动了整个社会的数字化转型。 从大数据的角度来看,它的核心价值在于通过对海量数据的收集、存储、分析和挖掘,发现其中的关联性和趋势,从而为决策提供更为科学、精准的依据。无论是商业领域的市场预测、消费者行为分析,还是公共服务领域的城市规划、交通管理,大数据都发挥着不可或缺的作用。同时,随着物联网、传感器等技术的普及,大数据的来源和种类也在不断扩展,这使得我们能够更全面地认识世界,把握规律。
47 0
|
2月前
|
监控 物联网 大数据
智慧工地管理平台系统源码基于物联网、云计算、大数据等技术
智慧工地平台APP通过对施工过程人机料法环的全面感知、互联互通、智能协同,提高施工现场的生产效率、管理水平和决策能力,实现施工管理的数字化、智能化、精益化。
53 0
|
4月前
|
资源调度 分布式计算 大数据
【云计算与大数据技术】资源管理、调度模型策略的讲解
【云计算与大数据技术】资源管理、调度模型策略的讲解
103 0
|
4月前
|
资源调度 大数据 调度
【云计算与大数据技术】集群资源统一管理系统YARN、Mesos、Omega讲解(图文解释 超详细)
【云计算与大数据技术】集群资源统一管理系统YARN、Mesos、Omega讲解(图文解释 超详细)
70 2
|
4月前
|
消息中间件 大数据 Apache
【云计算与大数据技术】流计算讲解及集群日志文件实时分析实战(附源码)
【云计算与大数据技术】流计算讲解及集群日志文件实时分析实战(附源码)
47 1
|
4月前
|
机器学习/深度学习 分布式计算 大数据
【云计算与大数据技术】Spark实战项目之判别西瓜好坏(附源码和数据集)
【云计算与大数据技术】Spark实战项目之判别西瓜好坏(附源码和数据集)
46 0
|
4月前
|
存储 缓存 分布式计算
【云计算与大数据技术】Spark的解析(图文解释 超详细必看)
【云计算与大数据技术】Spark的解析(图文解释 超详细必看)
91 0
|
4月前
|
分布式计算 Hadoop 大数据
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep(附源码 )
【云计算与大数据计算】Hadoop MapReduce实战之统计每个单词出现次数、单词平均长度、Grep(附源码 )
149 0
|
4月前
|
存储 分布式计算 Hadoop
【云计算与大数据技术】Hadoop MapReduce的讲解(图文解释,超详细必看)
【云计算与大数据技术】Hadoop MapReduce的讲解(图文解释,超详细必看)
86 0