隐林 + 关注
阿里云大数据产品专家,擅长MaxCompute、机器学习、分布式、可视化、人工智能等大数据领域

隐林 参与了问答:

tunnel分隔符有没有好的处理特殊字符策略

推荐引擎官方文档写的是用tunnel命令上传离线数据。但是对于新闻文稿来说里面可能会有各种奇奇怪怪的符号和分隔符发生冲突。分隔符的问题有没有好的解决策略?

“两种方法可以参考,1、opencsv(处理特殊字符)+tunnel sdk;2、自定义离线数据中分隔符,这样可以不冲突,比如$#@$@ 或者)$*#@$@$;”

隐林 发表了话题:

自建集群耗资百万?如何低成本搭建数据仓库?

发布时间:2017-09-13 09:19:16 参与人数:65

随着大数据、云计算等技术的应用和普及,互联网环境下数据处理呈现出新的特征:业务变化快;数据来源多;系统耦合多;应用深度深。业务变化加快导致数据来源增多,以前的数据大多来自于应用系统数据库,基本为结构化...

话题奖品:
已结束

隐林 参与了问答:

MaxCompute 2.0外表查询报错

错误码FAILED: ODPS-0123131:User defined function exception - Traceback:java.lang.RuntimeException: SCHE...

“创建了8个字段,但导入了4个字段数据,其他字段为空,所以查询报错。”

隐林 参与了问答:

MaxCompute (原odps)项目默认的分区最大值设置为60000,请问怎么更改这个默认值呢?

MaxCompute (原odps)项目默认的分区最大值设置为60000,请问怎么更改这个默认值呢?

“建议做两张表”

隐林 参与了问答:

E-MR spark对ODPS分区表的scala例子

有用scala写的,E-MR spark读取ODPS分区表的例子吗?

“看看这个 https://yq.aliyun.com/articles/71013?spm=5176.100240.searchblog.54.kNcaxu”

隐林 参与了问答:

上传数据,显示ODPS表[{0}]不存在,数据无法导入,请高人指教

算法平台中出现 ODPS表「{0}」不存在 这个错误,数据一直没法导进表中,请问怎么解决

“能截图?如何使用的?”

隐林 评论了文章:

一分钟了解阿里云产品:MaxCompute有哪些成功案例值得借鉴?

发布时间:2016-02-26 23:36:30 浏览:8449 回帖 :2

生于阿里,阿里云自然将阿里业务作为服务对象,甚至阿里巴巴的诸多业务都已经成为了MaxCompute的客户。   MaxCompute之前一直在阿里内部试用。第一个"小白鼠"是阿里小贷。现在,超过3...

MaxCompute

“阿里云数加大数据平台MaxCompute(原名ODPS)全套攻略 https://yq.aliyun.com/articles/78108”

隐林 参与了问答:

请帮忙统计一下数据,所有项目的数据量在哪里看?

请帮忙统计一下数据,所有项目的数据量在哪里看?

“大数据开发套件里可以看,https://help.aliyun.com/document_detail/30286.html?spm=5176.doc30284.6.593.tRDlwS”

隐林 参与了问答:

驻云主要做哪些业务?

“https://www.aliyun.com/support/quyu/zhuyun 参考”

隐林 参与了问答:

maxCompute 批量Insert问题

问题:ETL之后的批量数据,要添加到maxCompute相应的表上解决尝试:1.java多线程调用SQLTask.run(odps, strSql)添加 --结果maxCompute不支持并发...

“用大数据开发套件同步数据https://data.aliyun.com/product/ide?spm=a21gt.99266.765261.269.w1wiEw”

隐林 参与了问答:

StreamCompute和MaxCompute中的datahub区别?

在阿里云流计算(StreamCompute)产品中会用到datahub产品,而且MaxCompute中也会用到datahub产品,两个产品中的datahub有什么区别?

“datahub是相对独立的服务,没有区分版本;”

隐林 参与了问答:

我们的MYSQL数据库在ECS服务器上,不是RDS,ECS上使用了安全组,只允许内网访问以及特定的IP的访问。 现在要通过MaxCompute中建立数据源,连接上MYSQL,但是 通过不了连接测试。 请问该在mysql的ECS安全组上进行怎样的设置? 比如设置那些内网IP ?

我们的MYSQL数据库在ECS服务器上,不是RDS,ECS上使用了安全组,只允许内网访问以及特定的IP的访问。现在要通过MaxCompute中建立数据源,连接上MYSQL,但是 通过不了连接测试。请问...

“参考:https://yq.aliyun.com/articles/95316?spm=5176.100239.0.0.1SPdUO ECS安全组规则->设置网络入口访问权限,测试的话可以设置为...查看全部>

隐林 参与了问答:

maxcompute

这是什么了,怎么用,怎么学习,小白可以用吗

“亲可以看一下产品手册和案例:https://yq.aliyun.com/attachment/download/?id=1489”

隐林 参与了问答:

odps之udf说明中,只支持udf和udtf两种形式,不知道可否支持udaf?

odps之udf说明中,只支持udf和udtf两种形式,不知道可否支持udaf?

“UDAF支持java的,不支持python的https://help.aliyun.com/document_detail/27867.html?spm=5176.product27797.6.638...查看全部>

隐林 参与了问答:

关于阿里云产品更新过程中的概念区别

关于阿里云产品更新过程中的概念区别阿里云不断推出更新产品,比如说之前叫pai 现在叫PAI2.0请问DPC ODPS maxcompute 之间到底有什么区别那,还是其中有什么内...

“ODPS 去年正式更名为 MaxCompute,大数据开发套件是基于MaxCompute的产品(比裸用MaxCompute开发效率更高、MaxCompute比自建Hadoop平台更省钱),DPC好像已...查看全部>

隐林 评论了文章:

【Best Practice】基于阿里云数加·StreamCompute快速构建网站日志实时分析大屏

发布时间:2017-01-11 14:38:58 浏览:6199 回帖 :1

前几天在云栖社区上写了一篇普惠性的文章很粗偏向数据架构层面。具体可以进入【数据架构解读】基于阿里云数加StreamCompute和MaxCompute构建的访问日志统计分析但是在具体实操中肯定不会那么...

阿里云 日志 数加 阿里云大数据

“赞”

隐林 参与了问答:

在哪里可以看到ADS文档

在哪里可以看到ADS文档

“楼上答案正解”

隐林 参与了问答:

有没有MYSQL大数据随机查询高效SQL

MYSQL 从百W级数据表中随机查询N条记录,主键ID是非连续的长整型的(非自增),请问有什么高效的查询SQL语句吗?

“为什么不尝试 用MaxCompute”

隐林 参与了问答:

MaxCompute SQL中的Select语句最多只能返回10000条结果么?

通过Select查询返回的数据量,最多只能到10000条么?

“解决1万条查询限制的方法:https://yq.aliyun.com/articles/66825?spm=5176.100244.teamhomeleft.1.1JNA8G”

隐林 评论了文章:

MaxCompute应用限制整理

发布时间:2016-11-01 18:06:07 浏览:3962 回帖 :1

好多同学在使用MaxCompute时,对产品的应用限制并不了解。这里,我们将给出MaxCompute产品的详细应用限制列表。如有遗漏,还请大家补充: 命名规范:原则上,项目(Projec...

大数据 reduce odps 沙箱 分区表 MaxCompute

“好东西,Mark!”
5
阿里云大数据产品专家,擅长MaxCompute、机器学习、分布式、可视化、人工智能等大数据领域;

感兴趣or擅长的领域:

更多>
bigshi
bigshi
文章:0丨 粉丝:1丨 话题:0
云栖大讲堂
云栖大讲堂
文章:3890丨 粉丝:15340丨 话题:0
晋恒
晋恒
文章:141丨 粉丝:80180丨 话题:2
杰红
杰红
文章:2丨 粉丝:78353丨 话题:0
xiangel
xiangel
文章:1丨 粉丝:78353丨 话题:0
龙重
龙重
文章:1丨 粉丝:78377丨 话题:0
更多>
游客akzsjsdcx52xe
游客akzsjsdcx52xe
文章:0丨 粉丝:0丨 话题:0
游客h4233ozpozw32
游客h4233ozpozw32
文章:0丨 粉丝:0丨 话题:0
游客kvjz667j6m6xc
游客kvjz667j6m6xc
文章:0丨 粉丝:0丨 话题:0
游客wtlsl7wpf34xs
游客wtlsl7wpf34xs
文章:0丨 粉丝:0丨 话题:0
游客fd2nu3xzj6fw6
游客fd2nu3xzj6fw6
文章:0丨 粉丝:0丨 话题:0
游客a2zily5p3ydwy
游客a2zily5p3ydwy
文章:0丨 粉丝:0丨 话题:0