1. 云栖社区>
  2. 全部标签>
  3. #odps#
odps

#odps#

已有7人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

MaxComputer-Pyodps之使用pyodps实现sql的循环

用过MaxComputer的同学,都知道MaxComputer SQL只支持常用DDL\DML语句,不支持存储过程的开发,但我们常常为解决业务逻辑的时候需要使用循环或递归,那这个在MaxComputer里面该怎么实现呢?

python SQL odps PyOdps string Create 存储过程 Mobile 循环 MaxCompute MaxComputer

MaxComputer - ODPS访问OSS非结构化数据

MaxCompute访问OSS的数据,在此主要介绍下面两种方式: 1、创建odps外部表,直接访问OSS非结构化数据 2、创建odps内部表,通过节点任务同步OSS 非结构化数据

OSS 配置 数据仓库 odps Image 同步 aliyun string 数据同步 应用服务器 csv DataWorks

MaxComputer-Pyodps之mysql ddl 批量生成odps ddl

批量将mysql 的DDL语句转化为odps ddl,潦草之作,可用即可。。。

python mysql SQL windows 数据库 odps 系统环境 utf-8 MaxComputer

[MaxCompute MapReduce实践]通过简单瘦身,解决Dataworks 10M文件限制问题

用户在DataWorks上执行MapReduce作业的时候,文件大于10M的JAR和资源文件不能上传到Dataworks,导致无法使用调度去定期执行MapReduce作业。 解决方案: jar -resources test_mr.

odps aliyun 解决方案 Mapreduce MaxCompute

开箱即用的安全方案:MaxCompute数据安全方案介绍

MaxCompute 是一个支持多租户的统一大数据处理平台,不同的用户对数据安全需求不尽相同。为了满足不同租户对数据安全的灵活需求,MaxCompute 支持项目空间级别的安全配置,ProjectOwner 可以定制适合自己的外部账号支持和鉴权模型并且在某种程度上保障Project的数据安全。

安全 odps 数据安全 Image aliyun JDBC html MaxCompute

MaxCompute Tunnel上传典型问题场景

分别描述使用MaxCompute Tunnel命令行工具上传数据的数据类、网络类、计费类问题,长期更新,欢迎大家拍砖~~

大数据 java 性能 sdk 配置 odps aliyun 分区表 session html MaxCompute

MaxCompute UDF配置汇总

MaxCompute UDF为数据开发人员提供了较SQL更加灵活的数据处理方式,使得在数据处理过程中,不再只是局限在SQL提供的能力,可以根据自己的需求对功能进行定制,也可以引入其他优秀的程序包简化开发的难度和工作量。

大数据 函数 SQL 配置 odps aliyun string class UDF file MaxCompute

自建Hadoop迁移阿里云MaxCompute实践-持续更新2018/9/13

Hadoop迁移MaxCompute的文章教程应该不少,比如前不久刚刚发布的《Hadoop数据迁移到MaxCompute最佳实践》https://help.aliyun.com/video_detail/88429.

hadoop 函数 SQL odps 数据迁移 脚本 Hive timestamp

如何在DataWorks V2.0 的 ODPS SQL任务中使用调度参数

DataWorks提供了系统调度参数,调度系统会根据调度参数的配置,结合当前的业务日期,将调度参数转换为具体的时间。

云栖社区 SQL 数据仓库 odps Image 数加 钉钉 表达式 空格 MaxCompute DataWorks 测试运行 调度参数

Hadoop迁移MaxCompute神器之DataX-On-Hadoop使用指南

DataX-On-Hadoop即使用hadoop的任务调度器,将DataX task(Reader->Channel->Writer)调度到hadoop执行集群上执行。这样用户的hadoop数据可以通过MR任务批量上传到ODPS、RDS等,不需要用户提前安装和部署DataX软件包,也不需要另外为DataX准备执行集群。

hdfs hadoop 配置 odps 同步 aliyun string 分布式文件系统 Hive 数据同步 type 数据类型 MaxCompute

MaxCompute - ODPS重装上阵 第五弹 - SELECT TRANSFORM

MaxCompute(原ODPS)是阿里云自主研发的具有业界领先水平的分布式大数据处理平台, 尤其在集团内部得到广泛应用,支撑了多个BU的核心业务。 MaxCompute除了持续优化性能外,也致力于提升SQL语言的用户体验和表达能力,提高广大ODPS开发者的生产力。

python java 性能 SQL shell odps 测试 脚本 awk MaxCompute

大数据计算成都峰会—开启西南大数据新洞察

你的业务数据还在沉睡吗? 如何让数据发挥更大的价值? 数据是企业无价之宝,上云真能保证安全吗? 如何省去自建环境、省去运维,快速实现大数据平台落地,更多聚焦于业务? 我的业务离数据智能有多远?

大数据 算法 监控 高可用 人工智能 数据仓库 odps 数据安全 钉钉 aliyun 高性能 MaxCompute 海量数据

【即将开启】大数据计算技术共享计划 — MaxCompute技术公开课(第三季)

MaxCompute(原ODPS)是一项大数据计算服务,它能提供快速、完全托管的PB级数据仓库解决方案,使您可以经济并高效的分 析处理海量数据。欢迎加入钉钉交流群11782920。

大数据 hadoop 数据仓库 odps aliyun MaxCompute

利用MaxCompute内建函数及UDTF转换json格式日志数据

本文介绍了如何使用MaxCompute UDF对JSON格式的日志进行信息提取和转换。

大数据 函数 日志 Json 数据仓库 odps aliyun string session list MaxCompute

阿里云MaxCompute技术共享计划 首波技术公开课干货集锦

MaxCompute(原ODPS)是一项大数据计算服务,它能提供快速、完全托管的PB级数据仓库解决方案,使您可以经济并高效的分析处理海量数据。

云栖社区 大数据 性能优化 Cloud 线下活动 数据仓库 odps 钉钉 aliyun MaxCompute bigdata

品《阿里巴巴大数据实践-大数据之路》一书(下)

今天继续谈阿里的这本书,包括数据服务平台、数据挖掘平台、数据建模、数据管理及数据应用,希望于你有启示。 1、数据服务平台 数据服务平台可以叫数据开放平台,数据部门产出海量数据,如何能方便高效地开放出去,是我们一直要解决的难题,在没有数据服务的年代,阿里的数据开放的方式简单、粗暴,一般是直接将数据导出给对方,我想,现在大多公司的开放应该也是如此吧,虽然PaaS喊了这么多年,但真正成就的又有几个? 即使如阿里,在数据开放这个方向上的探索和实践,至今也有7个年头了,任何关于数据开放毕其功于一役的做法都将失败,任何一次数据开放的改进都是伴随着对于业务理解的深入而成长起来的。

大数据 架构 算法 阿里巴巴 数据仓库 odps 数据挖掘 MaxCompute

如何理解maxcompute常见报错信息?【阿里云MVP月度分享】

貌似大部分人在遇到报错的时候,都懒得用翻译软件翻译报错信息,一般直接抛出来问,甚至连报错信息都懒得复制,直接截图出来。所以这里特地总结了一下,最近一段时间有人经常在群里问到的报错信息。 ODPS-0130252:Cartesian product is not allowed “不允许笛卡尔积”主要是为了防止用户误操作,不小心漏了关联条件,造成大量的资源的耗费。

odps 分区表 MaxCompute

阿里云MaxCompute(大数据)公开数据集---带你玩转人工智能

目前阿里云大数据产品已经免费向全部用户开放了多种公用数据集。开放的数据类别包括:股票价格数据,房产信息,影视及其票房数据。

大数据 阿里云 code odps 排序 数加 string 报表 MaxCompute 数据集 免费大数据集 免费数据

MaxCompute全表扫描新功能,给你“失误”的机会

MaxCompute提供了在不修改代码的前提下,在MapReduce或自定义函数(UDF) 代码中,通过某个固定的资源名读取不同资源(数据)的需求。

分布式 大数据 SQL odps 数据分析 钉钉 分布式计算 分区表 MaxCompute 海量数据 海量数据处理

14
GO