MaxCompute 2.0—从ODPS到MaxCompute

简介: 本文PPT来自大数据计算平台开发负责人关涛于10月15日在2016年杭州云栖大会上发表的《MaxCompute 2.0—从ODPS到MaxCompute》。

ODPS到MaxCompute-阿里大数据的进化之路是一个商用大数据系统发展史,一个商业大数据系统要解决的问题有可靠性,高性能,安全性等等六个方面。内部产品名ODPS的MaxCompute,是阿里巴巴内部发展的一个高效能、低成本,完全托管的“EB级”大数据计算服务。从2009年9月阿里云成立,愿景就是做运算/分享数据第一平台;2010年4月,伴随阿里金融的贷款业务上线,ODPS正式投入生产运行,2012年建立统一数据平台,2013年具备超大规模海量数据处理能力,2014~2015年大数据平台开始日趋成熟,2016 MaxCompute 2.0的诞生,成立之初的愿景经过一步步努力逐步实现。

领略MaxCompute 2.0 的魅力,实现了高性能,新功能,富生态。全新的SQL 2.0引擎在编译器,优化器,运行时提供的新技术实现高性能与低成本,非结构化数据处理框架与生态连接能力,MaxCompute 2.0还是一个基于CPU/GPU的高性能异构算法平台


MaxCompute 2.0地址为https://www.aliyun.com/product/odps


7b6daca16752cc860705fc23910819cd1893558e6c6e737b66cc6cd4fb0927988ca29313f26681f925f2c02669a7be6ee5fc629df2a3ae52046a8659e18434437329f730d4e3b4f8dc48f72251977570f1a7b183121407772f5ad05be6de793f1e7b03246faf1f4fef646563c0118cb0e28bdd2a04d8e4623bbc4c523a789e20be95e18440bf1d9eff04ed0a87e0d0db8b4d02a0955ea8a7f09751eaa5abe1de4db024412c0d7339cae5e121790ec155a2e93cc25f4cd3af4569117eb1206d5f6e2107ed81420b07a98661b3b366e05fae13d66f25f61015e480499fe5583c6aaf3663d8c29dabaa272574b0abc2364a2cbc0eceb49931c0617c6b9d47bd44d730b13820a134817d57954e072caa6bf6c467886cebcd8cbd9b9fbaa09ba22a7d7977bd396134e65dd3df8d62a86db9c29917ada47ef9663d66f2c332dabf09f1


欢迎加入MaxCompute钉钉群讨论

35a12d1cfb9f44bb6eead5bf43e9e0ca60393eff

相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
6月前
|
SQL 分布式计算 大数据
MAXCOMPUTE和ODPS的区别是什么?
MAXCOMPUTE和ODPS的区别是什么?
233 1
|
6月前
|
存储 分布式计算 大数据
|
6月前
|
存储 SQL 分布式计算
maxcompute
maxcompute优势
30 5
|
6月前
|
分布式计算 安全 大数据
MAXCOMPUTE和ODPS的区别2
MAXCOMPUTE和ODPS的区别2
84 1
|
分布式计算 MaxCompute
|
存储 SQL 分布式计算
阿里云 MaxCompute
阿里云 MaxCompute自制脑图, MaxCompute 是一种全新的大数据计算服务。它能提供快速完全托管的 PB 级仓库解决方案,让你不用花费大量成本建数据中心,就能分析处理高达 PB 级的海量数据。
763 0
阿里云 MaxCompute
|
分布式计算 MaxCompute
|
存储 分布式计算 DataWorks
【MaxCompute 常见问题】 MaxCompute Spark
如何将开源 Spark 代码迁移到 Spark on MaxCompute?分以下三种情形: 作业无需访问 MaxCompute 表和 OSS。您的 Jar 包可直接运行,具体步骤请参见搭建开发环境。注意,对于 Spark 或 Hadoop 的依赖必须设成 provided。
【MaxCompute 常见问题】 MaxCompute Spark
|
SQL JSON 分布式计算
【MaxCompute 常见问题】 外部表
使用 OSS 外部表怎么样将多个小文件,输出为一个文件? 查看 Logview 日志,看 SQL 的执行计划,看最后一个是 Reducer 还是 Joiner, 如果是 Reducer 则设置参数为 set odps.stage.reducer.num=1, 如果是 Joiner,则设置为 set odps.stage.joiner.num =1。
【MaxCompute 常见问题】 外部表
|
分布式计算 IDE BI
MaxCompute-使用分享
MaxCompute(原名ODPS)-使用分享
1337 0

相关产品

  • 云原生大数据计算服务 MaxCompute