备案控制台
探索云世界
开发者社区 大数据与机器学习 大数据计算 MaxCompute 文章 正文

MaxCompute SQL 2.0全新的计算引擎

2016-11-15 2852
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 本文PPT来自阿里云数据事业部专家少杰于10月15日在2016年杭州云栖大会上发表的《MaxCompute SQL 2.0全新的计算引擎》。

MaxCompute2.0 SQL是一个重大更新，新版本相较于旧版本有很大的更新，我们有全新的解析器，全新的基于代价的优化器，全新的运行时库。新版本性能的增长有长足的进步，查询优化减少了大部分人工干预自动统计信息收集也是一个方面。

a8dc808d9d69cbba6525bccd152d13971cbbdc78745c9e87d2cfd0e91f52ad0d54bd0f2a887dfdd248188259682e2180eb5a400fd87af89043d4fbaf8b22a2ac3102c81c09d759b5c915c007cb79b17577b082b855a8af1a767b1ffcbd4d67cf1cfacb58ea9862643b7835b00d7466571a799f23717cb35b7c36329448cc58e6f9b3aa4841757d87c43507e8f671e87cfbee02a7f36da01c6c5014da281e2340a989ecb4a576f48104103ca5672ad18bcd157241232b47cd543efcda15fd38beea754b2640f5e7e85126d8269e7004673cf14d1682f8eba4b2bc80cf946278a2b516a3c7e2a30ab2ec530c7a7eaaab7cbdb39b133932789c4d04865886e5d3f704ad67e66fbf801f8c74a52f8d0faf14191d7666c204332d24fc2afecaf7d7e6b21e37bc042cad22a00fe1c7


欢迎加入MaxCompute钉钉群讨论

35a12d1cfb9f44bb6eead5bf43e9e0ca60393eff

文章标签：
云原生大数据计算服务 MaxCompute
SQL
分布式计算
MaxCompute
关键词：
SQL MaxCompute
云原生大数据计算服务 MaxCompute sql
maxcompute SQL
SQL计算引擎
云原生大数据计算服务 MaxCompute计算引擎
相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景，如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品，是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法，从场景到实践，体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库，助力开发者学习了解先进的技术栈，并能在实际业务中敏捷的进行大数据分析，赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景，可应用MaxCompute实现数仓搭建，快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理，需要搭建数据仓库？学它！ 没有足够人员和经验来运维大数据平台，不想自建IDC买机器，需要免运维的大数据平台？会SQL就等于会大数据？学它！ 想知道大数据用得对不对，想用更少的钱得到持续演进的数仓能力？获得极致弹性的计算资源和更好的性能，以及持续保护数据安全的生产环境？学它！ 想要获得灵活的分析能力，快速洞察数据规律特征？想要兼得数据湖的灵活性与数据仓库的成长性？学它！ 出品人：阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
云计算小粉
目录
相关文章
长梦
|
27天前
|
SQL 存储 NoSQL
SQL vs. NoSQL：如何根据大数据需求选择合适数据库
【4月更文挑战第8天】本文对比分析了SQL与NoSQL数据库在大数据项目中的应用。SQL数据库适合结构化数据、强一致性和复杂事务处理，如金融系统，而NoSQL则适用于半结构化和非结构化数据、高并发及大数据场景，如社交网络。选择时应考虑业务需求、技术栈、团队经验和成本效益，以找到最佳解决方案。随着技术发展，NewSQL和Multi-model数据库也提供了更多选择。
长梦
26 0
热烈的马
|
5月前
|
SQL 分布式计算 数据库
【大数据技术Spark】Spark SQL操作Dataframe、读写MySQL、Hive数据库实战（附源码）
【大数据技术Spark】Spark SQL操作Dataframe、读写MySQL、Hive数据库实战（附源码）
热烈的马
110 0
热烈的马
|
5月前
|
SQL 分布式计算 大数据
【大数据技术Hadoop+Spark】Spark SQL、DataFrame、Dataset的讲解及操作演示（图文解释）
【大数据技术Hadoop+Spark】Spark SQL、DataFrame、Dataset的讲解及操作演示（图文解释）
热烈的马
69 0
三分钟热度的鱼
|
9天前
|
SQL 分布式计算 DataWorks
MaxCompute产品使用合集之大数据计算MaxCompute即使用相同的SQL语句在DataWorks和Tunnel上执行，结果却不同，如何解决
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
20 0
xin在这
|
8天前
|
SQL 分布式计算 DataWorks
DataWorks操作报错合集之在DataWorks中使用ODPS SQL时遇到"该文件对应引擎实例已失效，请重新选择可用的引擎实例"的错误提示”，是什么导致的
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
xin在这
32 0
xin在这
|
8天前
|
分布式计算 DataWorks 调度
DataWorks产品使用合集之DataWorks中，填写ODPS SQL任务中的参数和分区信息如何解决
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
xin在这
23 0
三分钟热度的鱼
|
9天前
|
SQL 分布式计算 DataWorks
MaxCompute产品使用合集之阿里云MaxCompute对SQL语句的长度的长度限制是多少
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
三分钟热度的鱼
19 0
三分钟热度的鱼
|
9天前
|
SQL 分布式计算 大数据
MaxCompute操作报错合集之在sql 里嵌套查询时，查询条件带有instr时报错，如何解决
MaxCompute是阿里云提供的大规模离线数据处理服务，用于大数据分析、挖掘和报表生成等场景。在使用MaxCompute进行数据处理时，可能会遇到各种操作报错。以下是一些常见的MaxCompute操作报错及其可能的原因与解决措施的合集。
三分钟热度的鱼
27 1
阿里开发者
|
16天前
|
SQL 分布式计算 资源调度
一文解析 ODPS SQL 任务优化方法原理
本文重点尝试从ODPS SQL的逻辑执行计划和Logview中的执行计划出发，分析日常数据研发过程中各种优化方法背后的原理，覆盖了部分调优方法的分析，从知道怎么优化，到为什么这样优化，以及还能怎样优化。
阿里开发者
103479 1
你鞋带开了~
|
2月前
|
SQL 弹性计算 分布式计算
Dataphin常见问题之执行 ODPS Sql 时抛出异常如何解决
Dataphin是阿里云提供的一站式数据处理服务，旨在帮助企业构建一体化的智能数据处理平台。Dataphin整合了数据建模、数据处理、数据开发、数据服务等多个功能，支持企业更高效地进行数据治理和分析。
你鞋带开了~
27 1
大数据与机器学习

大数据计算 MaxCompute

热门文章

最新文章

  • 1
    阿里巴巴飞天大数据平台MaxCompute（原名ODPS）全套攻略（持续更新20200109）
  • 2
    阿里云开源离线同步工具DataX3.0介绍
  • 3
    盘古：阿里云飞天分布式存储系统设计深度解析
  • 4
    odps是什么?
  • 5
    阿里云数加大数据计算服务MaxCompute学习路线图 (持续更新中)
  • 6
    美柚：最懂女性App背后的混合云架构与大数据服务
  • 7
    MaxCompute执行作业慢的原因排查
  • 8
    阿里云MaxCompute（大数据）公开数据集---带你玩转人工智能
  • 9
    优酷背后的大数据秘密
  • 10
    2017杭州云栖大会FAQ（持续更新中）
  • 1
    MaxCompute产品使用合集之大数据计算MaxCompute底层加速查询的原理是什么
    252
  • 2
    MaxCompute产品使用合集之大数据计算MaxCompute如何实现通过离线同步脚本模式
    249
  • 3
    MaxCompute产品使用合集之MaxCompute项目的数据是否可以被接入到阿里云的Quick BI中
    200
  • 4
    MaxCompute产品使用合集之怎样可以将大数据计算MaxCompute表的数据可以导出为本地文件
    189
  • 5
    MaxCompute产品使用合集之大数据计算MaxCompute是否支持直接在多个节点之间进行批量复制
    212
  • 6
    MaxCompute产品使用合集之大数据计算MaxCompute对于某个特定表该怎么获取，特定分区的instances id
    191
  • 7
    MaxCompute产品使用合集之怎么将事务表改为普通分区表
    178
  • 8
    MaxCompute产品使用合集之要查看MaxCompute Studio中的项目中的计算任务代码，我该怎么操作
    138
  • 9
    MaxCompute产品使用合集之MaxCompute的性能受到哪些因素的影响
    120
  • 10
    MaxCompute产品使用合集之大数据计算MaxCompute是否支持递归
    125

    • 相关产品

  • 云原生大数据计算服务 MaxCompute
    文档详情 产品详情

    • 相关课程

    更多
  • 2020版大数据实战项目之DMP广告系统（第二阶段）
  • 2020版大数据实战项目之DMP广告系统（第三阶段）
  • 2020版大数据实战项目之DMP广告系统（第四阶段）
  • 2020版大数据实战项目之DMP广告系统（第五阶段）
  • 2020版大数据实战项目之DMP广告系统（第六阶段）
  • 2020版大数据实战项目之DMP广告系统（第七阶段）

    • 相关电子书

    更多
  • 大数据AI一体化的解读
  • 极氪大数据 Serverless 应用实践
  • 大数据&AI实战派 第2期

    • 相关实验场景

    更多
  • SQL的增删改查及函数应用
  • PolarDB MySQL自动SQL限流
  • 如何开通SQL Server的专属集群
  • 通过FastMR自动拉起大数据集群并运行TPCDS任务
  • 使用DAS实现数据库自动SQL优化
  • 使用DAS实现数据库自动SQL限流
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）