实时计算Flink —— 独享模式快速入门

  1. 云栖社区>
  2. 博客>
  3. 正文

实时计算Flink —— 独享模式快速入门

李博 bluemind 2018-11-14 12:52:08 浏览1202

已开通地域

目前共享模式仅在华东一(杭州),华东二(上海),华南一(深圳),华北二(北京)四个区域开通。如果对其他地域有开通需求,请联系阿里云技术支持。

准备工作

  1. 实时计算独享模式开通时,实时计算会为您在您的VPC内创建安全组以及申请弹性网卡。请勿删除此安全组和弹性网卡。

    • 如果已有专有网络VPC,请选择实时计算需要访问的VPC。
    • 如果没有VPC,请开通阿里云VPC服务。如何开通专有网络VPC请参看搭建专有网络

      注意:搭建专有网络时请确保以下两点。

      1. VPC内的ECS充足。
      2. vswitch内可用IP个数,要大于等于Flink集群节点个数。
  2. 为了保护您的数据安全,独享集群中您上传的UDF包,都会被保存到您的OSS bucket中。请选择已有OSS bucket,如果没有OSS bucket,请创建对象存储OSS

  3. 完成独享模式角色授权

集群创建

新建集群

  • 登录实时计算控制台项目管理>集群管理>新建集群
2.png | center | 747x370

基本信息

  • 填写集群名字集群备注
3.png | center | 747x340

集群配置

4.png | center | 747x577

OSS Bucket参数

OSS选择账号下保存用户UDF的OSS Bucket。如果没有,请创建对象存储OSS

注意:OSS创建Bucket时,存储类型请您务必选择标准存储读写权限推荐选择私有不能选择公共读。如下图。

标准储存

VPC参数

选择集群需要连接的VPC。

Zone参数

VPC参数正确选择后,可选用的Zone参数会自动显示。如无可选Zone或者VSwitch,有以下两种原因。

  1. 所选zone(可用区)内,ECS库存不足。
  2. 所选vswitch中,可用IP数小于申请的ECS数。

请解决以上问题后,刷新页面,重新新建集群。

确认信息和创建集群

点击创建

33.jpg | center | 746x4956.png | center | 747x359

说明:大概需要半个小时,如果长时间没有完成集群创建,请联系阿里云技术支持。

项目创建

  • 选择创建好的集群,创建项目。
  • 填写项目名称项目备注
1.png | center | 747x397
  • 点击项目就可以进入所创建的项目里开发作业了,剩余的步骤可以参考大集群的开发、运维文档!
2.png | center | 747x344

用户指南

独享模式环境搭建完成后,作业开发流程与共享模式完全相同。请参考共享模式文档。

快速入门

WebConsole手册

BlinkSQL手册

UDX文档

UDX简介

自定义标量函数(UDF)

自定义聚合函数(UDAF)

自定义表值函数(UDTF)


本文转自实时计算——独享模式快速入门