1. 云栖社区>
  2. 全部标签>
  3. #DataWorks#
DataWorks

#DataWorks#

已有1人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

【8.23更新--技术干货全家桶】大数据计算技术共享计划 — MaxCompute技术公开课第二季

5月底MaxCompute开启大数据计算技术共享计划,第一季,为大数据爱好者和企业客户带来了MaxCompute数据开发实战的四次主题分享,有1500多名用户线上参加了共享季直播。7月24日,MaxCompute开启第二季技术公开课,近6000名大数据爱好者和企业客户参加了第二季的5次主题直播,越来越多的大数据专家、技术牛人、爱好者参与到我们的技术共享活动中来,让我们一起玩大数据如烹小鲜吧。

大数据 数据仓库 MaxCompute DataWorks 云上数仓 技术共享

如何使用DataWorks的整库迁移给目标表名加上前缀

我们在搭建数仓的时候,有多个业务库需要将数据上云,如果手动来配置这些数据采集的任务,那将会是一个非常繁重的工作。DataWorks中的数据集成提供了整库迁移的功能,来方便大家快速进行数据上云,并可在配置任务的过程中,对目标表添加表前缀,助力于数仓的快速搭建。

云栖社区 mysql 配置 Image 同步 aliyun MaxCompute DataWorks

DataWorks是如何做到协同开发和版本控制

在开发过程中经常会遇到多人协同开发,那在DataWorks中如何保证多人协同开发下的版本唯一呢。

shell Image DataWorks

DataWorks V2.0 新一代智能大数据研发平台

在2018年7月12日,DataWorks将会发布一个新版本,DataWorks V2.0。DataWorks V2.0在V1.0的基础上,推出了很多强大的功能,以提升大数据研发、运维的效率。下面给大家讲解一下本次发布新增的功能点。

大数据 SQL 配置 项目开发 数据仓库 开发环境 MaxCompute 组件 智能运维 DataWorks 业务流程

阿里云MVP Meetup 《云数据·大计算:海量日志数据分析与应用》之《数据质量监控》篇

本手册为阿里云MVP Meetup Workshop《云计算·大数据:海量日志数据分析与应用》的《数据质量监控》篇而准备。主要阐述在使用大数据开发套件过程中如何将已经采集至MaxCompute上的日志数据质量进行监控,学员可以根据本实验手册,去学习如何创建表的监控规则,如何去订阅表等。

大数据 监控 日志 配置 数据仓库 数据分析 数加 aliyun 表达式 异构数据 MaxCompute DataWorks 数据质量

The Cloud and AI: A Marriage Made In Heaven For Big Data Analytics?

Cloud-based solutions are saving Big Data from itself with smart, secure and scalable offline data developments to realize impressive ROIs.

MaxCompute Big_data DataWorks

突破自我—一文看尽DataWorks全新升级以及在城市大脑的广泛应用

在2018年云栖大会·深圳峰会的专有云专场中,来自阿里云的大数据专家张辉(士诚)为现场的听众带来了题为《DataWorks全新升级以及在城市大脑的广泛应用》的技术分享。在本次分享中,士诚重点阐述DataWorks概述、DataWorks核心能力升级和DataWorks在城市大脑中的应用三个方面。

大数据 模块 数据库 数据安全 解决方案 API 数据同步 专有云 DataWorks 城市大脑

DataWorks+Maxcompute在云数据仓库上,获全球第二

本文基于Now Tech: Cloud Data Warehouse, Q1 2018 (Published: by Noel Yuhanna, March 13, 2018)进行了分析,文中内容仅代表个人观点。

云栖社区 大数据 安全 架构 公共云 数据流 数据仓库 数据安全 MaxCompute 数据集成 DataWorks Forrester 数据质量

DataWorks中如何将调度资源共享

很多同学经常会问我,我增加了一个自定义资源组,这个资源组能不能被其他项目共享呢?我用这台机器去别的项目注册的时候,报错了,我该怎么办呢。下面就给大家介绍一下自定义资源组的共享方法。

大数据 Image 控制台 aliyun 解决方案 资源共享 云服务器ECS DataWorks

介绍DataWorks快速构建数仓并应用到业务上的实例

用实例介绍使用dataworks快速创建数仓

大数据 数据同步 DataWorks

DataWorks中业务日期和定时时间的理解

很多同学不明白,业务日期和定时时间的区别。我们做离线统计,最常见的是今天处理昨天的数据。这里今天就是运行日期(也叫定时时间),昨天就是业务日期。

云栖社区 大数据 日志 配置 测试 钉钉 DataWorks

灵活运用DataWorks参数配置

大家好,本文中笔者要跟大家探讨一下众多DataWorks用户经常遇到的一类问题,就是在DataWorks中如何灵活运用参数配置这个功能。很多用户的需求场景是和时间有关的。为使周期运行的任务能根据运行时间的变化而变化,DataWorks提供了系统参数和自定义参数等两种参数,供用户来使用。

大数据 SQL 日志 配置 Image 工作流 BASE DataWorks 参数配置

解析DataWorks数据集成中测试连通性失败问题

大家好,这里和大家分享的是DataWorks数据集成中测试连通性失败的排查思路。与测试连通性成功与否的相关因素有很多,本文按照多个因素逐步排查,最终解决问题,希望大家以后再遇到此类问题,请参考此文,相信能够顺利解决您的问题。

大数据 mysql RDS 数据库 配置 测试 同步 数据同步 MaxCompute DataWorks

解析DataWorks数据集成中测试连通性失败问题

大家好,这里和大家分享的是DataWorks数据集成中测试连通性失败的排查思路。与测试连通性成功与否的相关因素有很多,本文按照多个因素逐步排查,最终解决问题,希望大家以后再遇到此类问题,请参考此文,相信能够顺利解决您的问题。

mysql 数据同步 云数据库RDS 数据集成 DataWorks

基于阿里云实现游戏数据运营(附Demo)

原作者:阿里云解决方案架构师,陆宝。通过阅读本文,您可以学会怎样使用阿里云的maxcompute搭建一套数据分析系统。

大数据 服务器 日志 配置 agent 数据分析 脚本 运营 数据同步 报表 demo source MaxComputer DataWorks 数据运营

跨私网传输用法解析

数加集成(Data Integration)是阿里集团对外提供的稳定高效、弹性伸缩的数据同步平台,为阿里云大数据计算引擎(包括关系型数据库、MPP数据库、大数据存储、非结构化存储、NoSql数据库等)提供互通的跨网络离线(批量)的数据进出通道。

数据集成 DataWorks 跨私网传输

解析Dataworks中的运行和测试运行的区别

DataWorks 中运行和测试运行的区别

云栖社区 大数据 离线计算 MaxCompute DataWorks

阿里云MVP Meetup 《云数据·大计算:海量日志数据分析与应用》之《数据采集:日志数据上传》篇

大数据workshop:《云数据·大计算:海量日志数据分析与应用》之《数据采集:日志数据上传》篇

云栖大会 workshop 数据采集 MaxCompute 大数据开发套件 数据集成 DataWorks

阿里数据仓库实践分享

数据仓库,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。为需要业务智能的企业,提供指导业务流程改进、监视时间、成本、质量以及控制。

大数据 架构 监控 个性化推荐 数据仓库 开发环境 工作流 MaxCompute DataWorks

实践 —— 亲测从 RDS MySQL 通过数据集成导入 MaxCompute

作者尝试了从RDS 的MySQL数据库到MaxCompute的 ODPS 的数据同步过程,并导入成功。有需要的同学赶紧试起来吧~~~

大数据 mysql RDS HTTPS 数据库 配置 odps Image aliyun 远程连接 数据同步 数据集成 MaxCompute最佳实践 DataWorks

4
GO