1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. O>
  5. OSS MR

当前主题:OSS MR

玩转阿里云EMR三部曲-中级篇 集成自有服务

作者:邓力,entobit技术总监,八年大数据从业经历,由一代hadoop入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 笔者近几年工作以架构为主,本系列文章旨在从系统架构层

阅读全文

HIVE优化浅谈

作者:邓力,entobit技术总监,八年大数据从业经历,由一代HADOOP入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 随着商务/运营同学执行的HQL越来越多,整体HIVE

阅读全文

玩转阿里云EMR三部曲-中级篇 集成自有服务

玩转阿里云EMR三部曲-中级篇 集成自有服务 作者:邓力,entobit技术总监,八年大数据从业经历,由一代hadoop入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 笔者近

阅读全文

玩转阿里云EMR三部曲-高级篇 交互式查询及统一数据源

作者:邓力,entobit技术总监,八年大数据从业经历,由一代HADOOP入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 笔者近几年工作以架构为主,本系列文章旨在从系统架构层

阅读全文

玩转阿里云EMR三部曲-高级篇 交互式查询及统一数据源

玩转阿里云EMR三部曲-高级篇 交互式查询及统一数据源 作者:邓力,entobit技术总监,八年大数据从业经历,由一代HADOOP入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引

阅读全文

HIVE优化浅谈

HIVE优化浅谈 作者:邓力,entobit技术总监,八年大数据从业经历,由一代HADOOP入坑,深耕云计算应用领域,由从事亚马逊EMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 随着商务/运营同学执行的HQL越来

阅读全文

为了让 AI 更快地融入生活,AutoML 提供了哪些帮助?

小叽导读:AI 应用在我们的生活中已经无处不在了。可是作为知识与人力密集型的 AI 应用,如果要获得更好的效果,目前仍然需要重度依赖算法科学家。如何帮助 AI 应用快速落地?减少对于人的依赖,AutoML 已经成为炙手可热的话题。今天,为你揭秘阿里巴巴人工智

阅读全文

玩转阿里云EMR三部曲-入门篇

作者:邓力,entobit技术总监,八年大数据从业经历,由一代hadoop入坑,深耕云计算应用领域,由从事AmazonEMR和阿里云EMR应用开发逐步转入大数据架构领域,对大数据生态及框架应用有深刻理解。 引言 笔者近几年工作以架构为主,本系列文章旨在从系统

阅读全文

OSS MR相关问答

提问题

如何在 MR/Spark 作业中指定 OSS 数据源文件路径

如何在 MR/Spark 作业中指定 OSS 数据源文件路径

阅读全文

需要把计算结果存成文件upload到oss,执行MR, 出现以下错误, 请问是什么原因? FAILED: ODPS-0123131:User defined function exception - Traceback: java.lang.NoClassDefFoundError: java/io/FileInputStream

需要把计算结果存成文件upload到oss,执行MR, 出现以下错误, 请问是什么原因? FAILED: ODPS-0123131:User defined function exception - Traceback: java.lang.NoClass

阅读全文

在e-mapreduce跑hadoop mr报错,com.aliyun.oss.OSSException: AccessDenied

```java Error: java.io.IOException: java.lang.reflect.InvocationTargetException at com.aliyun.fs.oss.utils.OSSClientAgent.handl

阅读全文

使用E-MapRedust的前提除了开通OSS还需要开通ECS?

想测试spark,看到阿里云的产品中好像只有开通了E-MR才行 我按照E-MR的说明开通了OSS,但是进入E-MR的控制台总是提示我:您已获取申请资格,结果已经以邮件或短信的方式发给你,请注意查收! 请问,我是不是还需要开通一台ECS,或者一套ECS的

阅读全文

MaxCompute百问集锦(持续更新20171011)

![fd7e5655f16e03d1198dc492cead625bbfb9af58_jpeg](https://yqfile.alicdn.com/ee78085f2e6a147c3fffcc95038b11a73c609bf1.jpeg) 大数据计算服务

阅读全文