dataworks彭敏 + 关注
TA参与的回答 | TA的问题

dataworks日志问题

打开节点运行日志,出现connection reset问题 请求帮忙

在DataWorks中,读取mysql多表的时候,如何快速配置同步任务

在配置数据集成任务的时候,遇到了源端是mysql数据源,并且是分表的情况。由于表结构完全一致,而且表名的后缀满足1-1000自增的规则,配置同步任务时,需要去手动填写1-1000张表的详细表名吗?

分库的数据源表怎么一次性同步到maxCompute数据表中

目前我的方法是建N个数据同步任务,把分库数据源名称作为ODPS目标表的分区字段值,但是分库的比较多,要建N个同步任务,很麻烦,有没有更好的办法?

在DataWorks上创建项目的时候,无法选择MaxCompute服务

在DataWorks上创建项目时,无法选择MaxCompute服务,选择按钮都是置灰的,我该如何操作呢?

为什么子账号在DataWorks上设置了节点出错报警,但是并未收到报警短信

在DataWorks上给节点设置了报警,但是并未收到报警短信。

dataworks配置hybriddb for psql数据源,走外网jdbc是走公网流量还是内网?如果想走内网流量需要怎么配置?

现有业务需要,从dataworks配置hybriddb for postgresql的数据源。看到阿里的教程link是用公网IP配置的hybriddb。这样做走的流量是公网流量还是内网流量? 如果我想...

DataWorks中如何制定同步任务的资源组。

在使用DataWorks来完成数据上云时,经常会遇到网络不通的情况,在网络不通时,DataWorks支持使用自定义资源组,将任务运行在指定的机器上。当我们注册完自定义调度资源以后,如何将任务运行在指定...

DataWorks中的数据集成中的脚本模式是否支持多个不同数据源的同时数据同步?如图所示。

DataWorks中的数据集成中的脚本模式是否支持多个不同数据源的同时数据同步?如图所示。

dataworks彭敏 2人回复 2018-08-28 11:12:09

datawork无法支持在一个任务中将多个数据源中的数据同步到一个数据源中。无法支持将mysql的数据和oss的数据在一个任务中同步到odps中,你可以拆分成两个任务,mysql同步到odps,oss...更多>>

在DataWorks设置了告警以后,没有收到告警的短信,邮件,如何解决

在DataWorks设置了任务告警以后,没有收到告警的短信,邮件,如何解决。

如何在DataWorks中批量修改任务责任人

经常会有用户会问我,公司有同事离职了,如何在DataWorks中批量把他名下的任务转交给别人。

DataWorks如何修改项目服务

最近很多用户问我,数据集成是需要单独开通了吗,我需要去哪里开通呢?

数据集成功能通常与什么功能一起购买

了解一下,想要数据集成功能,怎么购买。

周月任务如何测试运行

我的调度配置如下,测试运行的时候,这个任务直接就成功了,是什么情况?

dataworks彭敏 0人回复 2018-01-06 18:20:21

周月任务是指:调度周期为每月运行一次,或者每周运行一次的任务。这种任务需要满足运行规则才会开始运行的,所以测试运行的时候,需要指定运行的日期,就像上图所指,每月2号开始运行这个任务,那么我们测试运行的...更多>>

Dataworks,想分正式环境和测试环境,来做数据开发的逻辑测试,怎么做?

新建测试库?建测试表?同样逻辑的sql怎么切换正式环境和测试环境?

dataworks彭敏 0人回复 2017-12-16 21:29:15

DataWorks 是建议使用两个项目关联做数据开发的,详细可以参考文档:https://help.aliyun.com/document_detail/61690.html?spm=5176.pro...更多>>

DataWorks的周期实例任务未运行如何排查?

经常有同学问我:“我的任务为什么还没开始跑”、“任务没有运行该怎么办”等等,有没有同学知道这种任务未运行的情况如何处理呢。

dataworks彭敏 0人回复 2017-12-06 17:13:35

实例的状态是有两种情况的:1、未运行:是因为该任务的上游任务没有跑完,或者该任务上周期的任务没有跑完2、等待运行:是因为任务实例的运行时间还没到,或者任务实例的运行资源还没准备好

补数据问题

肯定有很多同学有疑惑,为什么补小时类型的任务时,不能选择任务运行的区间呢?

补数据的实例补多了,如何终止?

补数据的时候,小手一抖,补了一个分钟级的任务,一下出现了几百个实例,现在资源都被这些补数据的实例给占据了,我要怎么办才能kill掉它们。

DataWorks的调度参数是怎么玩的

DataWorks 提供了调度参数,可以直接配置使用,简单的比较好用,但是我是一个五分钟一次的分钟调度,这样就导致了11.55-12:00 这个区间的数据,写到了第二天的分区里面去,我有什么办法可以让...

dataworks彭敏 0人回复 2017-12-04 15:01:25

任务的调度属性这样配置: 任务的调度参数这样配置: 测试运行的时候,补了两天的数据: 找到第一个周期看看,解析出来的实例结果:定时时间为:2017-11-30 00:00:00 解析出来的参数是...更多>>

DataWorks的业务日期是指什么?

DataWorks 常在测试运行前需要填写业务日期,这个业务日期是指什么呢?我有一个每周一要跑的任务,选择周一都跑不起来,这是为什么?

dataworks彭敏 0人回复 2017-11-28 10:56:50

业务日期是DataWorks的一个概念,大家可以这么理解:今天处理昨天的数据。举个例子:20171128号处理的是20171127号的数据,所以我们在选择测试运行和补数据业务日期的时候,得选择前一天。...更多>>

数据库链接不上提交工单一直没人回复?ftp和控制面板显示不一样?

数据库链接不上提交工单一直没人回复?ftp和控制面板显示不一样?内容都不一样 !控制面板又不能改东西ftp又不全部显示!我提交工单了半天还没人回复我阿里云这个是什么平台连个在线可以沟通的客服都没有吗?

2