海清 + 关注
阿里云数加培训讲师, 最擅长MaxCompute、大数据开发套件。

海清 发表了文章:

第九弹 - 脚本模式与参数视图

发布时间:2020-03-09 16:47:57 浏览:830 回帖 :0

MaxCompute提供了新的脚本模式与参数化视图,可以明显提高开发者的编程效率,提高代码的可重用性,与此同时,也提高了性能!

性能 SQL Image aliyun 脚本 string view MaxCompute

海清 发表了文章:

MaxCompute项目子账号做超级管理员

发布时间:2020-02-11 14:46:32 浏览:4051 回帖 :0

MaxCompute的admin role可以进行比较基础的权限管理,本文主要介绍可以替代project owner进行project管理的超级管理员角色——super_administrator r...

配置 数据安全 RAM aliyun 权限管理 html MaxCompute

海清 发表了文章:

MaxCompute - ODPS重装上阵 第七弹 - Grouping Set, Cube and Rollup

发布时间:2019-12-31 15:18:08 浏览:2206 回帖 :0

MaxCompute中的GROUPING SETS功能是SELECT语句中GROUP BY子句的扩展。允许采用多种方式对结果分组,而不必使用多个SELECT语句来实现这一目的。这样能够使MaxComp...

函数 SQL windows os odps Image aliyun Group MaxCompute

海清 发表了文章:

MaxCompute按量计费计算任务消费监控告警

发布时间:2019-11-25 19:42:44 浏览:1246 回帖 :0

如何通过云监控配置MaxCompute按量计费计算任务消费监控告警

监控 SQL 配置 弹性伸缩 钉钉 控制台 aliyun Mapreduce MaxCompute 按量计费

海清 发表了文章:

MaxCompute 项目子账号做权限管理

发布时间:2019-07-03 14:22:28 浏览:8411 回帖 :0

场景: 一个企业使用多款阿里云产品,MaxCompute是其中一个产品,用的是同个主账号,主账号不是由使用MaxCompute的大数据同学管理,  大数据同学使用的是子账号。大数据同学日常需要给Ma...

大数据 aliyun 解决方案 grant 权限管理 html MaxCompute 子账号授权 子账号权限管理 子账号做权限管理

海清 发表了文章:

MaxCompute 费用暴涨之新增SQL分区裁剪失败

发布时间:2019-06-26 15:27:01 浏览:2620 回帖 :0

现象:因业务需求新增了SQL任务,这SQL扫描的表为分区表,且SQL条件里表只指定了一个分区,按指定的分区来看数据量并不大,但是SQL的费用非常高。费用比预想的结果相差几倍甚至10倍以上。 若只知道...

函数 SQL odps aliyun Annotation 分区表 UDF MaxCompute 大数据服务平台

海清 发表了文章:

MaxCompute 费用暴涨之存储压缩率降低导致SQL输入量变大

发布时间:2019-06-25 19:28:41 浏览:3002 回帖 :0

现象:同样的SQL,每天处理的数据行数差不多,但是费用突然暴涨甚至会翻数倍。 分析: 我们先明确MaxCompute SQL后付费的计费公式:一条SQL执行的费用=扫描输入量 ️ SQL复杂度 ️ ...

加密 SQL aliyun 存储 数据存储 MaxCompute 计量计费

海清 发表了文章:

MaxCompute预付费套餐(计算资源+存储资源)发布

发布时间:2019-06-17 14:21:08 浏览:2605 回帖 :0

信息摘要: MaxCompute的预付费新增套餐规格类型,购买套餐即包含计算资源和存储资源。适用客户: 适用于使用MaxCompute包年包月资源,同时存储量比较大的企业大数据开发用户,通过套餐使用...

大数据 aliyun 存储 MaxCompute

海清 发表了文章:

MaxCompute 预付费标准版VS套餐版

发布时间:2019-05-24 15:05:44 浏览:1245 回帖 :0

MaxCompute 于5月7日正式售卖预付费(包年包月)套餐资源,主打存储密集型套餐,一共三个套餐: 存储密集型160套餐 存储密集型320套餐 存储密集型600套餐 本文主要给大家...

按量付费 MaxCompute 标准版 套餐版 售卖

海清 发表了文章:

MaxCompute预付费套餐(计算资源+存储资源)发布

发布时间:2019-05-17 16:26:49 浏览:9117 回帖 :0

信息摘要: MaxCompute的预付费新增套餐规格类型,购买套餐即包含计算资源和存储资源。适用客户: 适用于使用MaxCompute包年包月资源,同时存储量比较大的企业大数据开发用户,通过套餐使用...

大数据 aliyun 存储 MaxCompute

海清 发表了文章:

MaxCompute Studio使用心得系列7——作业对比

发布时间:2019-05-08 16:01:01 浏览:3238 回帖 :0

在数据开发过程中,我们通常需要将两个作业进行对比从而定位作业运行性能或者结果有差异的问题,但是对比作业时需要同时打开两个studio 的tab页,或者两个Logview页,不停切换进行对比,使用起来非...

studio MaxCompute 作业对比

海清 发表了文章:

基于MaxCompute的数仓数据质量管理

发布时间:2019-04-11 12:07:05 浏览:2709 回帖 :0

数据对一个企业来说已经是一项重要的资产,既然是资产,肯定需要管理。随着业务的增加,数据的应用越来越多,企业在创建的数仓过程中对数据的管理也提出了更高的要求,而数据质量也是数仓建设过程不容忽视的环节。本...

监控 配置 数据仓库 MaxCompute 数据质量管理

海清 发表了文章:

MaxCompute SQL 使用正则表达式选列

发布时间:2019-04-08 15:29:50 浏览:1318 回帖 :0

编辑MaxCompute SQL 时,经常会需要在某个表N个列中指定一些列。若需要指定的列比较少,编写SQL时一个个输入既可。当遇到列多的时候,一个个输入就会非常费劲。本文将介绍如何在编写MaxCo...

SQL 正则表达式 MaxCompute

海清 发表了文章:

MaxCompute安全管理指南-案例篇

发布时间:2019-01-14 15:31:46 浏览:2463 回帖 :0

通过《MaxCompute安全管理-基础篇》了解到MaxCompute和DataWorks的相关安全模型、两个产品安全方面的关联,以及各种安全操作后,本篇主要给出一些安全管理案例,给安全管理的成员作为...

海清 发表了文章:

MaxCompute安全管理指南-基础篇

发布时间:2019-01-14 15:15:22 浏览:3440 回帖 :0

背景及目的 方便和辅助MaxCompute的project owner或安全管理员进行project的日常安全运维,保障数据安全。 MaxCompute有安全模型,DataWorks也有安全模...

安全 项目管理 MaxCompute MaxCompute数据安全管理

海清 发表了文章:

MaxCompute Studio使用心得系列6——一个工具完成整个Python UDF开发

发布时间:2017-12-21 17:55:26 浏览:6570 回帖 :0

2017/12/20 北京云栖大会上阿里云MaxCompute发布了最新的功能Python UDF,万众期待的功能终于支持啦,我怎么能不一试为快,今天就分享如何通过Studio进行Python udf...

python 函数 云栖大会 配置 studio UDF MaxCompute 大数据计算服务

海清 发表了文章:

MaxCompute Studio 2.8.2 新版本发布啦!

发布时间:2017-12-12 10:25:30 浏览:4089 回帖 :0

MaxCompute Studio 2.8.2 新版本,主要新增可视化建表、保存/查看历史job日志、查看历史执行sql脚本,重点优化Editor性能解决大脚本文件实时编译卡顿问题等等~

studio MaxCompute 可视化建表 保存历史作业 查看历史sql

海清 发表了文章:

MaxCompute Studio使用心得系列5——一个工具完成整个JAVA UDF开发

发布时间:2017-12-06 15:06:24 浏览:5147 回帖 :0

一个JAVA UDF要想发布到MaxCompute服务端供生产使用,要经历JAVA相关工具编码、打包 -> 上传 -> 注册几个步骤,跨至少2个工具(平台)。对此,通过MaxCOmpute Stud...

大数据 函数 studio UDF MaxCompute 大数据计算服务 自定义函数 dide

海清 发表了文章:

MaxCompute Studio使用心得系列4——可视化查看所有job并分析运行情况

发布时间:2017-11-14 17:05:59 浏览:5257 回帖 :0

“通过`show p -all;`命令查看所有执行过的job,再通过`wait instanceid;`查看这个job的logview,最后通过logview再查看具体的执行日志。” 这样的方式查看所...

HTTPS Image aliyun 脚本 studio html MaxCompute 历史job 可视化查看所有job并分析运行情况

海清 发表了文章:

MaxCompute Studio使用心得系列3——可视化分析作业运行

发布时间:2017-11-09 10:37:35 浏览:3093 回帖 :0

我们很熟悉的是通过Logview 去分析作业的执行情况,logview上有很详细的执行日志,而Studio不仅仅提供可视化的信息,还会明确给出一些分析结论如job是有否长尾或数据倾斜情况。

大数据 HTTPS SQL 日志 odps Image 钉钉 aliyun 脚本 studio html MaxCompute 大数据计算服务 可视化分析日志

2
阿里云数加培训讲师, 最擅长MaxCompute、大数据开发套件。

感兴趣or擅长的领域:

更多>
云攻略小攻
云攻略小攻
文章:355丨 粉丝:17229丨 话题:13
隐林
隐林
文章:238丨 粉丝:72423丨 话题:1
更多>
游客ycmrcqm23nwc4
游客ycmrcqm23nwc4
文章:0丨 粉丝:0丨 话题:0
游客hjc33zgszfvqy
游客hjc33zgszfvqy
文章:0丨 粉丝:0丨 话题:0
杨朋
杨朋
文章:0丨 粉丝:0丨 话题:0
游客lnqfsn2l36wvc
游客lnqfsn2l36wvc
文章:0丨 粉丝:0丨 话题:0
游客pwkpy4ltlxzzk
游客pwkpy4ltlxzzk
文章:0丨 粉丝:0丨 话题:0
游客ntrnw7g6qw3ru
游客ntrnw7g6qw3ru
文章:0丨 粉丝:0丨 话题:0