海清 + 关注
阿里云数加培训讲师, 最擅长MaxCompute、大数据开发套件。

海清 发表了文章:

【转载】MaxCompute full outer join改写left anti join实践

发布时间:2020-09-25 14:20:00 浏览:2 回帖 :0

ods层数据同步时经常会遇到增全量合并的模型,即T-1天增量表 + T-2全量表 = T-1全量表。可以通过full outer join脚本来完成合并,但是数据量很大时非常消耗资源。本文将为您介绍在...

SQL Image Core MaxCompute

海清 发表了文章:

持续定义Saas模式云数据仓库+BI

发布时间:2020-09-03 10:32:36 浏览:54 回帖 :0

简介:阿里云技术专家海清为大家带来持续定义Saas模式云数据仓库+BI的介绍。内容包括云数据仓库概述,BI使用场景与趋势,基于MaxCompute云数仓+BI的特性,以及实践案例。

大数据 安全 数据仓库 SaaS 数据安全 Image 高性能 BI MaxCompute

海清 发表了文章:

MaxCompute资源管理—— 包年包月资源组隔离

发布时间:2020-08-31 10:21:12 浏览:31 回帖 :0

使用基于MaxCompute云数据仓库的企业,由于业务的差异,会创建多project进行数据隔离。同时也因为业务的差异,每个project需要跑的任务量、业务紧急程度等也有差异,因此不同project...

算法 监控 配置 aliyun 运营 MaxCompute

海清 发表了文章:

MaxCompute资源管理—— 包年包月资源分时

发布时间:2020-07-27 23:51:01 浏览:11 回帖 :0

2020年7月23日开始,MaxCompute 管家陆续对各个区域进行升级新版本,新版本支持的功能之一——分时配额,将支持对预留计算资源(预留CU)进行按时段切分,满足时段的差异化资源需求,满足对资源...

配置 MaxCompute

海清 发表了文章:

MaxCompute - ODPS重装上阵 第九弹 - 脚本模式与参数视图

发布时间:2020-03-09 16:47:57 浏览:1428 回帖 :0

MaxCompute提供了新的脚本模式与参数化视图,可以明显提高开发者的编程效率,提高代码的可重用性,与此同时,也提高了性能!

性能 SQL Image aliyun 脚本 string view MaxCompute

海清 发表了文章:

MaxCompute项目子账号做超级管理员

发布时间:2020-02-11 14:46:32 浏览:4736 回帖 :0

MaxCompute的admin role可以进行比较基础的权限管理,本文主要介绍可以替代project owner进行project管理的超级管理员角色——super_administrator r...

配置 数据安全 RAM aliyun 权限管理 html MaxCompute

海清 发表了文章:

MaxCompute - ODPS重装上阵 第八弹 - 动态类型函数

发布时间:2020-01-14 10:27:35 浏览:1807 回帖 :0

MaxCompute自定义函数的参数和返回值不够灵活,是数据开发过程中时常被提及的问题。Hive 提供给了 GenericUDF 的方式,通过调用一段用户代码,让用户来根据参数类型决定返回值类型。Ma...

java 函数 odps aliyun string Create input MaxCompute

海清 发表了文章:

MaxCompute - ODPS重装上阵 第七弹 - Grouping Set, Cube and Rollup

发布时间:2019-12-31 15:18:08 浏览:3961 回帖 :0

MaxCompute中的GROUPING SETS功能是SELECT语句中GROUP BY子句的扩展。允许采用多种方式对结果分组,而不必使用多个SELECT语句来实现这一目的。这样能够使MaxComp...

函数 SQL windows os odps Image aliyun Group MaxCompute

海清 发表了文章:

MaxCompute - ODPS重装上阵 第六弹 - User Defined Type

发布时间:2019-12-13 16:18:47 浏览:2016 回帖 :0

MaxCompute中的UDT(User Defined Type)功能支持在SQL中直接引用第三方语言的类或者对象,获取其数据内容或者调用其方法 。

java 函数 SQL odps aliyun 表达式 UDF session type list arraylist 数组 MaxCompute

海清 发表了文章:

MaxCompute按量计费计算任务消费监控告警

发布时间:2019-11-25 19:42:44 浏览:1531 回帖 :0

如何通过云监控配置MaxCompute按量计费计算任务消费监控告警

监控 SQL 配置 弹性伸缩 钉钉 控制台 aliyun Mapreduce MaxCompute 按量计费

海清 发表了文章:

MaxCompute 项目子账号做权限管理

发布时间:2019-07-03 14:22:28 浏览:8739 回帖 :0

场景: 一个企业使用多款阿里云产品,MaxCompute是其中一个产品,用的是同个主账号,主账号不是由使用MaxCompute的大数据同学管理,  大数据同学使用的是子账号。大数据同学日常需要给Ma...

大数据 aliyun 解决方案 grant 权限管理 html MaxCompute 子账号授权 子账号权限管理 子账号做权限管理

海清 发表了文章:

MaxCompute 费用暴涨之新增SQL分区裁剪失败

发布时间:2019-06-26 15:27:01 浏览:2976 回帖 :0

现象:因业务需求新增了SQL任务,这SQL扫描的表为分区表,且SQL条件里表只指定了一个分区,按指定的分区来看数据量并不大,但是SQL的费用非常高。费用比预想的结果相差几倍甚至10倍以上。 若只知道...

函数 SQL odps aliyun Annotation 分区表 UDF MaxCompute 大数据服务平台

海清 发表了文章:

MaxCompute 费用暴涨之存储压缩率降低导致SQL输入量变大

发布时间:2019-06-25 19:28:41 浏览:3270 回帖 :0

现象:同样的SQL,每天处理的数据行数差不多,但是费用突然暴涨甚至会翻数倍。 分析: 我们先明确MaxCompute SQL后付费的计费公式:一条SQL执行的费用=扫描输入量 ️ SQL复杂度 ️ ...

加密 SQL aliyun 存储 数据存储 MaxCompute 计量计费

海清 发表了文章:

MaxCompute预付费套餐(计算资源+存储资源)发布

发布时间:2019-06-17 14:21:08 浏览:2767 回帖 :0

信息摘要: MaxCompute的预付费新增套餐规格类型,购买套餐即包含计算资源和存储资源。适用客户: 适用于使用MaxCompute包年包月资源,同时存储量比较大的企业大数据开发用户,通过套餐使用...

大数据 aliyun 存储 MaxCompute

海清 发表了文章:

MaxCompute 预付费标准版VS套餐版

发布时间:2019-05-24 15:05:44 浏览:1463 回帖 :0

MaxCompute 于5月7日正式售卖预付费(包年包月)套餐资源,主打存储密集型套餐,一共三个套餐: 存储密集型160套餐 存储密集型320套餐 存储密集型600套餐 本文主要给大家...

按量付费 MaxCompute 标准版 套餐版 售卖

海清 发表了文章:

MaxCompute预付费套餐(计算资源+存储资源)发布

发布时间:2019-05-17 16:26:49 浏览:9261 回帖 :0

信息摘要: MaxCompute的预付费新增套餐规格类型,购买套餐即包含计算资源和存储资源。适用客户: 适用于使用MaxCompute包年包月资源,同时存储量比较大的企业大数据开发用户,通过套餐使用...

大数据 aliyun 存储 MaxCompute

海清 发表了文章:

MaxCompute Studio使用心得系列7——作业对比

发布时间:2019-05-08 16:01:01 浏览:3616 回帖 :0

在数据开发过程中,我们通常需要将两个作业进行对比从而定位作业运行性能或者结果有差异的问题,但是对比作业时需要同时打开两个studio 的tab页,或者两个Logview页,不停切换进行对比,使用起来非...

studio MaxCompute 作业对比

海清 发表了文章:

基于MaxCompute的数仓数据质量管理

发布时间:2019-04-11 12:07:05 浏览:3159 回帖 :0

数据对一个企业来说已经是一项重要的资产,既然是资产,肯定需要管理。随着业务的增加,数据的应用越来越多,企业在创建的数仓过程中对数据的管理也提出了更高的要求,而数据质量也是数仓建设过程不容忽视的环节。本...

监控 配置 数据仓库 MaxCompute 数据质量管理

海清 发表了文章:

MaxCompute SQL 使用正则表达式选列

发布时间:2019-04-08 15:29:50 浏览:1697 回帖 :0

编辑MaxCompute SQL 时,经常会需要在某个表N个列中指定一些列。若需要指定的列比较少,编写SQL时一个个输入既可。当遇到列多的时候,一个个输入就会非常费劲。本文将介绍如何在编写MaxCo...

SQL 正则表达式 MaxCompute

海清 发表了文章:

MaxCompute安全管理指南-案例篇

发布时间:2019-01-14 15:31:46 浏览:3069 回帖 :0

通过《MaxCompute安全管理-基础篇》了解到MaxCompute和DataWorks的相关安全模型、两个产品安全方面的关联,以及各种安全操作后,本篇主要给出一些安全管理案例,给安全管理的成员作为...

2
阿里云数加培训讲师, 最擅长MaxCompute、大数据开发套件。

感兴趣or擅长的领域:

更多>
云攻略小攻
云攻略小攻
文章:446丨 粉丝:20172丨 话题:13
隐林
隐林
文章:253丨 粉丝:81603丨 话题:1
更多>
游客hz5cjzaegkw5o
游客hz5cjzaegkw5o
文章:0丨 粉丝:0丨 话题:0
游客5lk5wlkxywcpy
游客5lk5wlkxywcpy
文章:0丨 粉丝:0丨 话题:0
游客mp5uxnfcju4b4
游客mp5uxnfcju4b4
文章:0丨 粉丝:0丨 话题:0
游客fokiyzt57ovbm
游客fokiyzt57ovbm
文章:0丨 粉丝:0丨 话题:0
游客sjebs76yvtrbi
游客sjebs76yvtrbi
文章:0丨 粉丝:0丨 话题:0
游客xienfdi7psxwu
游客xienfdi7psxwu
文章:0丨 粉丝:0丨 话题:0