1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. O>
  5. odps sql partition

当前主题:odps sql partition

odps sql partition相关的博客

查看更多 写博客

MaxCompute(原ODPS)使用总结-初级篇

转载自jiyi 引言 本文面向的读者是要使用ODPS sql进行一些数据查询和挖掘,或者要使用ODPS udf自定义函数的用户。本文试图达到三个目标:(1)针对应用管理者来讲,看完本文后可以比较清晰的去管理自己的应用;(2)针对ODPS sql使用者来讲,本文

阅读全文

ODPS 功能介绍之SQL

ODPS 提供了SQL功能, 为BI工程师提供了大数据分析能力。ODPS的SQL语法与HQL非常相似,入手也非常容易。接下来就给大家介绍一下SQL的使用及一些优化技巧。 SQL 语句分为三种:DDL、DML及SELECT 操作。 DDL 用于表的定义及维护。

阅读全文

ODPS到ODPS数据迁移指南

1. 工具选择与方案确定 目前,有两种方式可用于专有云环境下的从MaxCompute到MaxCompute整体数据迁移。 (1)使用DataX工具进行迁移,迁移所需的作业配置文件及运行脚本,可用DataX批量配置工具来生成; (2)通过大数据开发套件(Dat

阅读全文

ODPS数据迁移指南

1. 背景调研 1.1 ODPS源与目的集群 调研项 内容 ODPS源集群版本 ODPS目的集群版本 ODPS源与目的是否在一个集群/可使用相同账号 ODPS源集群AccessKeyId ODPS源集群AccessKeySecret ODPS目的集群Acce

阅读全文

MaxCompute 费用暴涨之新增SQL分区裁剪失败

现象:因业务需求新增了SQL任务,这SQL扫描的表为分区表,且SQL条件里表只指定了一个分区,按指定的分区来看数据量并不大,但是SQL的费用非常高。费用比预想的结果相差几倍甚至10倍以上。 若只知道总体费用暴涨,但是没明确是什么任务暴涨,可以可以参考查看账单

阅读全文

自建Hadoop迁移阿里云MaxCompute实践-持续更新2018/9/13

Hadoop迁移MaxCompute的文章教程应该不少,比如前不久刚刚发布的 《Hadoop数据迁移到MaxCompute最佳实践》https://help.aliyun.com/video_detail/88429.html 理论与实践:如何从Hadoop迁

阅读全文

Oracle存储过程迁移ODPS-02(专有云):循环逻辑修改一例(构造代码表)

总有同学提问,说我原来在oracle的存储过程中的循环现在maxcompute支持了,我的程序怎么迁移。这个问题其实非常难以回答,一般来说99%的oracle的代码都可以通过maxcompute的SQL和函数来替代,这个也包括一般的循环语句要解的问题。 下面

阅读全文

MaxCompute SQL与Hive对比分析及使用注意事项

摘要:一个使用过Hadoop的Hive框架的大数据开发工程师,往往基本掌握了阿里云的大数据计算服务MaxCompute的90%。本次分享主要通过详细对比MaxCompute和Hive各个方面的异同及开发使用的注意事项,方便用户来开发使用MaxCompute,

阅读全文

odps sql partition相关问答

查看更多 提问题

数据同步时出现以下error,要怎么解决?

数据同步时出现以下error,要怎么解决? 经DataX智能分析,该任务最可能的错误原因是: com.alibaba.datax.common.exception.DataXException: Code:[OdpsWriter-13], Descript

阅读全文

odps单表分区超过10000,执行sql异常

![JOPJMUGEVUTA_TH98_C_7L](https://yqfile.alicdn.com/0a002857111258ecd94dd121ea0de2432c00ef26.png) odps执行sql的时候报图片中的异常,但是单表并没有超过60

阅读全文

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded limit of 1000. 是什么原因呢?

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded l

阅读全文

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded limit of 1000. 是什么原因呢?

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded l

阅读全文

MaxCompute百问集锦(持续更新20171011)

![fd7e5655f16e03d1198dc492cead625bbfb9af58_jpeg](https://yqfile.alicdn.com/ee78085f2e6a147c3fffcc95038b11a73c609bf1.jpeg) 大数据计算服务

阅读全文

在执行MaxCompute的sql查询时遇到这样的错误:

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded l

阅读全文

o.execute_sql 报错

from odps import ODPS o = ODPS(·········) o.execute_sql("select * from girls") # girls我项目下的一张表 结果报了个错误 odps.errors.ODPSErro

阅读全文

在执行MaxCompute的sql查询时遇到这样的错误:

在执行MaxCompute的sql查询时遇到这样的错误: FAILED: ODPS-0130111:Subquery partition pruning exception -records returned from subquery exceeded l

阅读全文