1. 云栖社区>
  2. 全部标签>
  3. #MaxCompute#
MaxCompute

#MaxCompute#

已有10人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

阿里云MVP Meetup 《云数据·大计算:海量日志数据分析与应用》之《数据质量监控》篇

本手册为阿里云MVP Meetup Workshop《云计算·大数据:海量日志数据分析与应用》的《数据质量监控》篇而准备。主要阐述在使用大数据开发套件过程中如何将已经采集至MaxCompute上的日志数据质量进行监控,学员可以根据本实验手册,去学习如何创建表的监控规则,如何去订阅表等。

大数据 监控 日志 配置 Image 数据分析 数加 aliyun 表达式 异构数据 MaxCompute DataWorks 数据质量

玩转MaxCompute studio SQL编辑器

SQL因其简单易学的特点,是用户与MaxCompute服务交互的主要手段。如何帮助用户高效愉快的编写SQL是MaxCompute studio的核心使命,下面就让我们来一探究竟: 忘记语法 相信大家都有过忘记SQL怎么写的时候,一旦忘记,恐怕只能到处去找文档和代码示例,被迫离开全神贯注的SQL editor,十分影响效率。

函数 SQL windows Image editor MaxCompute

如何使用表格存储控制台进行数据监控

### 摘要 2018年5月10号,表格存储新版控制台的监控功能正式上线,优化后的监控功能,不仅可以为用户提供自定义时间段的监控信息查看,增加了对错误率的展示,还提供了更丰富的监控指标,能够清晰的看到指定时间段内诸如总访问量、CU总消耗、请求行数、流量等监控指标,同时,对监控的粒度也进行了提升,从5分钟提高到60秒。

前端与交互设计 java 监控 阿里技术协会 Image 控制台 表格存储 MaxCompute

5月18日云栖精选夜读丨阿里与珠海横琴新区达成战略合作,阿里云助力打造横琴智能岛

5月17日,阿里巴巴集团、蚂蚁金服集团与珠海横琴新区管理委员会签署战略合作协议,三方将围绕云计算、政务民生服务、城市治理、电子商务等领域展开深入合作,推动横琴产业发展,共同建设新型智慧城市。 (阿里巴巴集团、蚂蚁金服集团与珠海横琴新区管理委员会签约现场) 据了解,横琴是第三个国家级新区、广东自贸试验区三大片区之一,港珠澳大桥通车后,还是全国唯一与港澳两地陆桥相连的自贸区。

编程语言 大数据 java 淘宝 MaxCompute

使用cu管家管理Maxcompute多项目

使用Maxcompute管家管理Maxcompute多项目 我们在maxcompute的实际使用中,采用了多项目的方式,具体可参看之前写的一篇博客:MaxCompute多团队协同数据开发项目管理最佳实践 虽然有很多优点,但是实际使用过程中还需要maxcompute管家来配合管理这些项目: 各个项.

性能 集群 项目管理 MaxCompute

MaxCompute Studio 使用入门

MaxCompute Studio 是MaxCompute 平台提供的安装在开发者客户端的大数据集成开发环境工具,是一套基于流行的集成开发平台 IntelliJ IDEA 的开发插件,可以帮助您方便地进行数据开发。下面我们一起来看一看Studio的简单用法。

SQL odps 同步 脚本 studio 机器人 MaxCompute

MaxCompute携手ofo小黄车与阿里妈妈—邀你共赴大数据计算北京高端峰会

ofo小黄车如何通过MaxCompute轻松处理每天千万订单,提升线下运营效率50%以上,提升整体运行效率76%? 阿里妈妈在搜索广告、定向广告、达摩盘、报表和BI分析等常见场景下是如何使用MaxCompute的? Noxmobi自建业界领先的DSP、SSP、ADX等广告系统,其中最重要的底层数.

大数据 aliyun 云服务 数据存储 MaxCompute 沙龙

MaxCompute助力OSS支持EB级计算力

一、 MaxCompute是什么 你的OSS数据是否作堆积在一旁沉睡已久存储成本变为企业负担你是否想唤醒沉睡的数据驱动你的业务前行MaxCompute可以帮助你高效且低成本的解决这些问题通过对海量数据进行分析和计算来实现勾勒用户画像、提升营销转化、挖掘产品优化方向、预测业务发展等丰富的业务场景。

大数据 OSS 数据仓库 string 余额宝 存储 MaxCompute 海量数据

New Product Launch: Alibaba Cloud AnalyticDB

If data is the new corporate currency, it is worthless without the effective use of analytics to extract that value, and yet, some 59 percent of org.

OLAP MaxCompute AnalyticDB Big_data OLTP Data_Analytics

一探究竟:善用 MaxCompute Studio 分析 SQL 作业

头疼的问题 MaxCompute 用户一个常见的问题是:同一个周期任务,为什么最近几天比之前慢了很多?或者为什么之前都能按时产出的作业最近经常破线? 通常来说,引起作业执行变慢的原因有:quota 组资源不足、输入数据量变动、数据分布情况变动、平台硬件故障引发重跑等。

云栖社区 大数据 SQL Image cdn 脚本 MaxCompute

三分钟教你学会分析MaxCompute消费明细

很多用户经常被MaxCompute收费所困扰,比如执行了一条 select xxx from yyy 然后扣费1元 ,不知道如何查询到明细,也无法做优化。 接下来,我来教大家学习如何通过控制台消费功能查看你在MaxCompute(DataWorks/Studio)中的每一条SQL/MR计算、存储、下载的消费明细。

大数据 HTTPS SQL 问答 控制台 aliyun MaxCompute

阿里云首个全球数据中心开始运营,将协助印尼企业转型和发展

首个全球公共平台运营,预示着阿里云开始布局全球。 3月15日,阿里巴巴集团云计算部门阿里云宣布,其在印度尼西亚的首个数据中心开始运营。 该数据中心可以提供从弹性计算、数据库服务、网络、安全和中间件到分析和大数据的全套云产品和服务,将满足电子商务、媒体、金融科技、游戏、物流、运输和制造等各行业本地企业的急速需求。

云栖社区 大数据 安全 数据处理 布局 中间件 阿里云认证 弹性计算 运营 云服务 云平台 数据中心 数据存储 MaxCompute

New Product Launch: Alibaba Cloud Data Integration

Support online real-time & offline data exchange between all data sources, networks and locations with Alibaba Cloud Data Integration.

database MaxCompute Big_data Data_migration Data_Analytics

阿里云全球首批 MVP 杨绣专访 - 技术要坚持刨根问底

使用阿里云产品过程中,我提过很多工单,包括系统bug、易用性问题、功能建议。因为喜欢刨根问底,不满足于“重启一下”、“再试一次”之类的临时性解决方法,我会很认真地描述使用场景、异常现象和可能的原因,要求客服和后台研发继续分析给出明确原因。

架构 监控 性能优化 阿里云 Oracle 高并发 数据仓库 工单 可扩展性 odps 数加 钉钉 Hive 数据存储 MaxCompute

在 MaxCompute UDF 中运行 Scipy

新版 MaxCompute Isolation Session 支持 Python UDF。也就是说,Python UDF 中已经可以跑二进制包。刚才以 Scipy 为例踩了一下坑,把相关的过程分享出来。

python 函数 path 工单 odps 沙箱 UDF MaxCompute

在PyODPS DataFrame自定义函数中使用pandas、scipy和scikit-learn

背景 [PyODPS DataFrame]http://pyodps.readthedocs.io/zh_CN/latest/) 提供了类似 pandas 的接口,来操作 ODPS 数据,同时也支持在本地使用 pandas,和使用数据库来执行。

函数 aliyun PyOdps DataFrame pandas MD5 MaxCompute

基于OGG Datahub插件将Oracle数据同步上云

## 一、背景介绍 >随着数据规模的不断扩大,传统的RDBMS难以满足OLAP的需求,本文将介绍如何将Oracle的数据实时同步到阿里云的大数据处理平台当中,并利用大数据工具对数据进行分析。 OGG(Oracle GoldenGate)是一个基于日志的结构化数据备份工具,一般用于Oracle数据库之间的主从备份以及Oracle数据库到其他数据库(DB2, MySQL等)的同步。下面是Ora

Oracle 日志 阿里技术协会 数据库 配置 同步 数据同步 插件 database MaxCompute datahub 数据上云

你的数据安全么?Hadoop再曝安全漏洞| 黑客利用Hadoop Yarn资源管理系统未授权访问漏洞进行攻击

4月30日,阿里云发现,俄罗斯黑客利用Hadoop Yarn资源管理系统REST API未授权访问漏洞进行攻击。 Hadoop是一款由Apache基金会推出的分布式系统框架,它通过著名的 MapReduce 算法进行分布式处理,Yarn是Hadoop集群的资源管理系统。

分布式 安全 飞天 hadoop 加密 安全设计 数据流 集群 数据安全 控制台 沙箱 分布式计算 分布式文件系统 MaxCompute

DataWorks支持PyODPS类型任务

昨天,DataWorks推出了PYODPS任务类型,集成了Maxcompute的Python SDK,可在DataWorks的PYODPS节点上直接编辑Python代码操作Maxcompute,也可以设置调度任务来处理数据,提高数据开发效率。

python SQL 配置 odps MaxCompute

MaxCompute(ODPS)上处理非结构化数据的Best Practice

随着MaxCompute(ODPS)2.0的上线,新增的非结构化数据处理框架也推出一系列的介绍文章,包括 MaxCompute上如何访问OSS数据, 基本功能用法和整体介绍,侧重介绍读取OSS数据进行计算处理; 本文:MaxCompute(ODPS)上处理非结构化数据的Best Practice。

OSS 数据处理 数据流 集群 odps 分布式计算 分布式系统 存储 MaxCompute

36
GO