1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. C>
  5. cdh yarn api

当前主题:cdh yarn api

Flink 与 Hive 的磨合期

有不少读者反馈,参考上篇文章《Hive 终于等来了 Flink》部署 Flink 并集成 Hive 时,出现一些 bug 以及兼容性等问题。虽已等来,却未可用。所以笔者增加了这一篇文章,作为姊妹篇。 回顾 在上篇文章中,笔者使用的 CDH 版本为 5.16.

阅读全文

Hive 终于等来了 Flink

作者:Jason Apache Spark 什么时候开始支持集成 Hive 功能?笔者相信只要使用过 Spark 的读者,应该都会说这是很久以前的事情了。 那 Apache Flink 什么时候支持与 Hive 的集成呢?读者可能有些疑惑,还没有支持吧,没用

阅读全文

面对业务增长,Uber是如何扩展HDFS文件系统的

3年前,Uber采用了Hadoop作为大数据分析的存储(HDFS)和计算(YARN)基础设施。借助于这套系统,Uber的服务能力得到了增强,用户体验也得到了提升。 Uber将基于Hadoop的批量和流式分析应用在了广泛的场景中,例如反作弊、机器学习和ETA计

阅读全文

最新消息!Cloudera 全球发行版正式集成 Apache Flink

翻译 | 邱从贤(山智) 摘要:近期 Cloudera Hadoop 大神 Arun 在 Twitter 上宣布 Cloudera Data Platform 正式集成了 Flink 作为其流计算产品,Apache Flink PMC Chair Steph

阅读全文

带你读《Flink原理、实战与性能优化》之二:环境准备

点击查看第一章点击查看第三章 第2章 环境准备 本章主要介绍Flink在使用前的环境安装准备,包括必须依赖的环境以及相应的参数,首先从不同运行环境进行介绍,包括本地调试环境、Standalone集群环境,以及在On Yarn环境上。另外介绍Flink自带的T

阅读全文

CDH 5.2.0 的改变

最近 CDH 5.2.0 发布了,想看看其做了哪些改进、带来哪些不兼容以及是否有必要升级现有的 hadoop 集群。 1. CDH 5.2.0 新特性 1.1. Apache Avro Avro 版本使用1.7.6,重要的一些改变: AVRO-1398。增加同

阅读全文

手动安装Cloudera Hive CDH

本文主要记录手动安装Cloudera Hive集群过程,环境设置及Hadoop安装过程见手动安装Cloudera Hadoop CDH,参考这篇文章,hadoop各个组件和jdk版本如下: hadoop-2.0.0-cdh4.6.0 hbase-0.94.

阅读全文

CDH 5 Beta 2 的新变化

本文是同事对CDH 5.0.0 Beta 2的翻译,仅供大家参考。 这是 CDH 5.0.0 Beta 2的初稿。鉴于 CDH 5 目前的发布版本是测试版,它不应用于生产环境中;它只是用来评估、测试的。对于生产环境,请使用 CDH 4,最近的文档在 CDH D

阅读全文

cdh yarn api相关问答

提问题

Flink上执行storm拓扑,在yarn模式提交job时,找不到jobmanager

>> 问题描述:Flink上执行storm拓扑,在yarn模式提交job时,找不到jobmanager -- 需求:storm的任务迁移到flink上,为了减少改动量,使用的flink兼容storm。 -- 参考:https://flink.ap

阅读全文