容器开启数据服务之旅系列(二):Kubernetes如何助力Spark大数据分析

  1. 云栖社区>
  2. 容器服务Docker&Kubernetes>
  3. 博客>
  4. 正文

容器开启数据服务之旅系列(二):Kubernetes如何助力Spark大数据分析

cu.eric.lee 2018-04-04 20:54:10 浏览2025
展开阅读全文

容器开启数据服务之旅系列(二):Kubernetes如何助力Spark大数据分析

(二):Kubernetes如何助力Spark大数据分析

概述

本文为大家介绍一种容器化的数据服务Spark + OSS on ACK,允许Spark分布式计算节点对阿里云OSS对象存储的直接访问。借助阿里云Kubernetes容器服务与阿里云OSS存储资源的深度整合,允许Spark分布式内存计算,机器学习集群对云上的大数据直接进行分析和保存结果。

先决条件

  1. 你已经通过阿里云容器服务创建了一个Kubernetes集群,详细步骤参见创建Kubernetes集群

从容器服务控制台创建一个Spark OSS实例

使用三次点击来创建一个1 master + 3 worker 的Spark OSS的实例

1 登录 https://cs.console.aliyun.com/
2

网友评论

登录后评论
0/500
评论
cu.eric.lee
+ 关注
所属云栖号: 容器服务Docker&Kubernetes