基于 SOFAArk 和 SOFADashboard 实现动态模块管控 | Meetup#2 回顾

本文涉及的产品
服务治理 MSE Sentinel/OpenSergo,Agent数量 不受限
简介: 本文根据 5月26日 SOFA Meetup#2上海站 《使用 SOFAStack 快速构建微服务》主题分享整理,着重分享如何使用 SOFADashboard 来管控 SOFAArk ,对于 SOFAArk 中的一些基础概念和知识不过多涉及;建议大家在阅读之前,先了解下 SOFAArk 的相关基本知

作者:卫恒(宋国磊)
SOFATracer 以及 SOFADashboard 开源负责人。

本文根据 5月26日 SOFA Meetup#2上海站 《使用 SOFAStack 快速构建微服务》主题分享整理,着重分享如何使用 SOFADashboard 来管控 SOFAArk ,对于 SOFAArk 中的一些基础概念和知识不过多涉及;建议大家在阅读之前,先了解下 SOFAArk 的相关基本知识。

现场回顾视频以及 PPT 见文末链接。

image.png

前言

SOFAArk [1] 是一款基于 Java 实现的轻量级类隔离容器,主要提供类隔离和应用(模块)合并部署能力,由蚂蚁金服开源贡献。SOFAArk 在 0.6.0 版本 [2] 提供了非常丰富的功能特性,其中最核心的当属多应用(模块)合并部署这个能力。SOFAArk 本身提供了多种方式来支持多应用(模块)合并部署 ,包括基于命令行的管控,基于 API 的管控等。本篇将结合 SOFA 开源的管控端组件 SOFADashboard [3],来实现 SOFAArk 提供的合并部署和动态模块推送的功能。

案例工程地址 [4]:
https://github.com/sofastack-guides/sofa-dashbaord-samples-parent

背景

复杂项目通常需要跨团队协作开发,各自负责不同的组件,而众所周知,协调跨团队合作开发会遇到不少问题;比如各自技术栈不统一导致的依赖冲突,又比如往同一个 Git 仓库提交代码常常导致 merge 冲突。因此,如果能让每个团队将负责的功能组件当成一个个单独的应用开发,运行时合并部署,通过统一的编程界面交互,那么将极大的提升开发效率及应用可扩展性。SOFAArk 提出了一种特殊的包结构 -- Ark Biz,用户可以使用 Maven 插件将应用打包成 Biz,允许多 Biz 在 SOFAArk 容器之上合并部署,并通过统一的编程界面交互。

image.png

2案例模型

本篇所演示案例是上图的一个简化版,从整体上可以体现 SOFAArk多应用合并部署的能力。主要包括已经几个工程:

  • sofa-dashboard-ark-hostapp : 宿主应用
  • sofa-dashboard-ark-facade : 提供接口 API
  • sofa-dashboard-ark-provider :提供接口 API 的具体实现,将发布一个 JVM 服务

sofa-dashboard-ark-hostapp 和 sofa-dashboard-ark-provider 均作为 SOFAArk 中的 ark-biz 存在;sofa-dashboard-ark-hostapp 作为宿主应用对外提供服务。

image.png

上图的模型中,在宿主应用不重启的情况下,实现 provider 模块的动态替换,从而实现版本升级。

在宿主应用启动时,provider 1.0.0 以静态合并部署方式“寄宿”到宿主应用中,这部分实际上与 SOFADashboard 管控是没有什么关系的,为了案例效果,在下面的案例中,关于静态合并部署的操作也会涉及到。
最终的工程结构图如下:

image.png

3环境准备

本文需要启动 SOFADashboard 服务端,具体请参考 : Quick Start [5] ;其他基础设施环境如 Zookeeper 、Mysql 等需提前准备。

4工程构建

本篇将通过 step by step 的方式来构建整个工程,为大家在实际的应用过程中提供一种简单的思路,同时也帮助大家更好的理解 SOFAArk 中的一些点。

sofa-dashboard-ark-facade
基础 API 提供模块,不需要依赖任何其他二方或者三方 JAR,这里仅提供一个接口。

public interface SofaJvmService{    
String  test();
}

sofa-dashboard-ark-provider
这个模块是 JVM 服务的提供方,也是后面需要在宿主应用中进行替换演示的模块包,这个模块本身也是一个 Web 应用。这里就来一步步分解下,如何将一个普通的 SpringBoot 工程改造成一个 ark-biz 工程。

1、新建一个 SpringBoot 工程
新建 SpringBoot 工程推荐的方式有两种,一种是在 https://start.spring.io/ 进行下载,另外一种是基于 IDEA 的 Spring 插件来生成;此处不在过多描述过程。

2、工程基本能力实现
引入 sofa-dashboard-ark-facade 依赖,先将需要提供的 JVM 服务实现:

@SofaService

@Service

public class SofaJvmServiceImpl implements SofaJvmService {
   
@Override
public String test() {
 return "first version biz" ;
 } 
}

NOTE: SofaService 的作用是将一个 Bean 发布成一个 JVM 服务, 所以这里需要加上 Spring 提供的 @Service 注解将 SofaJvmServiceImpl 标注为一个 Bean。

配置文件:

spring.application.name=biz-ark-test

server.port=
8800

logging.path=./logs

3、配置打包插件,将应用打包成 ark-biz
根据官方文档,可以使用 sofa-ark-maven-plugin 插件将一个普通的工程打包成一个 ark biz 包。这里直接给出本篇中工程的配置:

image.png

4、工程依赖
从前面背景介绍中的设计理念图中可以看出,动态合并部署需要依赖的插件核心有两个,一个是 runtime plugin,一个是 config plugin(没有涉及到 RPC 服务相关);由于 provider 并不是作为宿主应用,其本身不需要具备动态配置的能力,因此这里仅需要引入 runtime plugin 来为当前 ark-biz 工程提供运行时环境即可。

image.png

5、编译打包
执行 mvn clean package ,之后会在当前模块的 target 目录下生成 xxx-ark-biz.jar 的包。

image.png

sofa-dashboard-ark-host
前面已经构建好了所需要的一些基础工程,sofa-dashboard-ark-host 作为宿主应用,期望其具备的能力有以下几个:

提供可以直观的 check 模块变更后的结果

提供能够给 provider 1.0.0 版本 ark-biz 包运行的宿主环境

能够通过 SOFAArk 提供的状态 endpoint 查看插件状态

能够支持 Zookeeper 下发指令,控制 Biz 的生命周期

基于以上几点功能,下面来分步骤实现。

1、提供一个简单的 Rest 接口来 check 结果
sofa-dashboard-ark-host 本身也是一个 Web 应用,所以在这个提供一个 Rest 接口,具体实现是通过@SofaReference 调用 provider ark-biz 包中发布的 JVM 服务。

image.png

2、作为宿主应用
ARK 容器配置

这部分可以先参考阅读 SOFAArk 配置 [6] 。本案例中简单配置了一份 ARK 容器的配置文件。

# log 日志目录

logging.path=./logs

# 指定zookeeper 服务地址

com.alipay.sofa.ark.config.address=zookeeper:
//localhost:2181

# 指定宿主应用名

com.alipay.sofa.ark.master.biz=host-app

com.alipay.sofa.ark.master.biz 默认情况下是宿主应用的 artifactId。如果这里指定了名字,则在宿主应用的插件配置里面需要使用此名字。

依赖引入

引入 sofa-ark-springboot-starter 、web-ark-plugin 以及 provider ark biz 包。

image.png

插件配置

image.png

3、状态查看
SOFAArk 提供了 /bizState 这样一个 endpoint 用来获取当前插件的版本及状态信息。这里就在宿主应用中引入actuator 依赖并进行相关配置。

 
<!-- 引用 actuator -->

 
<dependency>

         
<groupId>
org.springframework.boot
</groupId>

         
<artifactId>
spring-boot-starter-actuator
</artifactId>

 
</dependency>



application.properties 中配置暴露所有端点。



management.endpoints.web.exposure.include=*

4、提供动态配置插件能力
SOFAArk 提供了 config-ark-plugin 对接 Zookeeper 配置中心,用于运行时接受配置,达到控制 Biz 生命周期,引入如下依赖:

<!-- 引用ark 配置推送扩展插件-->

<dependency>

        
<groupId>
com.alipay.sofa
</groupId>

        
<artifactId>
config-ark-plugin
</artifactId>

</dependency>

参考 SOFAArk 配置,在 SOFAArk 配置文件 conf/ark/bootstrap.properties 增加如下配置:

com.alipay.sofa.ark.config.address=zookeeper:
//localhost:2181

5静态合并部署演示
基于上述所有的配置,将 host-app 打包,然后运行。

  • mvn clean install
  • java -jar sofa-dashboard-ark-hostapp-1.0.0.jar

下面可以通过 SOFAArk 提供的 endpoint 来查看下当前应用的 biz state 信息:

image.png

这里只有宿主应用自身的 ark biz 状态信息,实际上我们使用了静态合并部署。但是貌似 ark-biz 合并部署的包插件没有在 bizState 中体现出来。访问下 http://localhost:8085/test 我们的 check rest 服务:

image.png

提示出来没有可用的 JVM 服务。

这里有个点是并不会去激活里面的 ark biz 包,需要通过通过 终端或者 API 的方式来进行激活,实际上只是激活了宿主应用本身的 ark-biz。

6 SOFADashboard 命令推送
SOFADashboard 进行推送的原理可以参考前面背景介绍中的描述。下面主要来介绍如何使用 SOFADashboard 进行动态模块切换。

注册插件
将 sofa-dashboard-ark-provider 这个 ark-biz 插件注册到 SOFADashboard:

image.png

填写插件的基本信息:

image.png

注册成功之后,模块列表如下:

image.png

增加版本
点击添加版本,弹出新增版本表单,输入版本信息及当前版本对应的 ark biz 包文件地址;支持从文件服务器(http 协议)上拉取,也支持从本地文件(File 协议)系统获取。下面为了方便,使用从文件系统中获取,配置如下:

image.png

添加成功之后,插件列表如下:

image.png

关联应用
image.png

点击插件列表后面的 关联应用案例,将插件与应用进行关联,如下:

image.png

详情查看
点击插件列表后面的详情按钮,可以查看当前插件下所有应用信息和应用实例信息。

image.png

命令推送
SOFADashboard 提供两种维度的命令推送:

基于应用维度,当前应用所有的实例都会监听到此命令变更;

基于 IP 维度,分组维度的单 IP 场景。

下面演示基于 IP 维度的推送:

1、安装
点击安装,安装过程中,插件状态会发生变化, RESOLVED 状态为正在解析。

image.png

延迟 1~3s 之后,状态变为 ACTIVATED 状态

image.png

再次访问下 http://localhost:8085/test 我们的 check rest 服务:
image.png

实现了在不重启宿主应用的情况下,实现了内部业务逻辑的变更。

2、版本切换
模块版本 1 运行一段时间之后,出现新的需求,希望更改下模块版本 1 中的一些逻辑。在未使用动态模块的情况下,一般就需要新拉一个迭代,然后将原有的逻辑修改,然后发布上线。可能是一个非常小的功能点,但是却需要走复杂的发布流程。

这个就可以借助动态模块的方式来实现版本的动态切换。修改 sofa-dashboard-ark-provider 模块逻辑实现,升级版本,重新打包 sofa-dashboard-ark-provider 。

在 SOFADashboard ,新增 2.0.0 版本,并且配置指定的版本 ark-biz 包的文件地址。添加成功之后如下:

image.png

进入详情界面,切换版本到 2.0.0:

image.png

执行安装,此时版本 2.0.0 状态将会变为非激活状态:

image.png

执行点击激活按钮进行激活,延迟 1~3s 之后,状态变更为激活状态:

image.png

再次访问下 http://localhost:8085/test 我们的 check rest 服务:

image.png

可以看到,版本 2.0.0 中的逻辑已经生效了;切回到 1.0.0 ,此时 1.0.0 的状态变成了非激活状态:

image.png

7小结
本文分享了基于 SOFAArk 和 SOFADashboard 实现动态模块管控的能力。动态模块在实际业务中有非常丰富的场景,对主应用不发版,不重启的情况下实现具体模块的功能变更;在此基础上也可以实现版本灰度的能力。

本案例中,provider 也是一个独立的应用,其作为一个子模块在宿主应用 hostapp 中启动,因此也可以基于 SOFABoot 这种能力来实现多 Web 应用的合并部署的能力。

以上就是本次分享的全部内容。


SOFA Meetup 上海站回顾资料

现场回顾视频以及 PPT 地址:

http://t.cn/AiKlmCmE

文中涉及相关链接
[1] SOFAArk:
https://www.sofastack.tech/sofa-boot/docs/sofa-ark-readme

[2] SOFAArk 0.6.0 版本:
https://github.com/alipay/sofa-ark/releases/tag/v0.6.0

[3] SOFADashboard:
https://github.com/sofastack/sofa-dashboard

[4] 案例工程地址:
https://github.com/sofastack-guides/sofa-dashbaord-samples-parent

[5] Quick Start:
https://www.sofastack.tech/sofa-dashboard/docs/QuickStart

[6] SOFAArk 配置:
https://www.sofastack.tech/sofa-boot/docs/sofa-ark-ark-config

相关实践学习
基于MSE实现微服务的全链路灰度
通过本场景的实验操作,您将了解并实现在线业务的微服务全链路灰度能力。
目录
相关文章
|
16天前
|
数据采集 运维 监控
DataphinV4.0来啦:自定义全局角色 ,实时研发覆盖全部署场景,个性化企业配置看本期
本次V4.0版本升级,Dataphin支持自定义全局角色、自定义逻辑表命名规范、Flink on K8s的部署模式,提升企业级适配能力,灵活匹配企业特色;将集成任务快速从组件模式切换为脚本模式、支持外部触发类型节点等,提升研发平台易用性,助力高效开发便捷运维。
90983 1
|
7月前
|
消息中间件 监控 Java
消息队列和应用工具产品体系-ARMS 监控种类简介(2)
消息队列和应用工具产品体系-ARMS 监控种类简介(2)
308 1
消息队列和应用工具产品体系-ARMS 监控种类简介(2)
|
7月前
|
存储 监控 前端开发
消息队列和应用工具产品体系-ARMS 监控种类简介(1)
消息队列和应用工具产品体系-ARMS 监控种类简介(1)
240 1
|
运维 Kubernetes Java
一站式动态多环境建设案例
作为创业团队来讲,能够快速具备一站式解决服务治理问题,是一件非常酷的事。这整个方案的讨论实施过程中,研发团队对于 K8s、Nginx Ingress、MSE 都有较深入的理解。“像我们部门研发团队,没有专门的运维团队,每个开发人员都可以深入了解每个产品的来龙去脉,想想就很有意义。”
248 2
一站式动态多环境建设案例
|
SQL 运维 监控
Dataphin产品核心功能大图:调度运维,为数据建设保驾护航
Dataphin运维中心支持任务调度配置、异常运行诊断、监控告警和重跑等运维操作,为数据有序产出和任务稳定运行保驾护航!
Dataphin产品核心功能大图:调度运维,为数据建设保驾护航
|
移动开发 前端开发 数据可视化
开源|优酷动态模板研发体系为分发提效30%
动态模板技术方案将客户端研发链路实现了串联,通过完备的工具化支撑体系,让开发者可以高效完成组件由原始设计稿到可运行代码的最短通路,本文将对研发体系中涉及到的核心模块就行介绍,希望对技术社区及广大开发者有一定帮助。
开源|优酷动态模板研发体系为分发提效30%
|
移动开发 前端开发 数据可视化
已开源,就等你来!优酷动态模板研发体系为分发提效30%
已开源,就等你来!优酷动态模板研发体系为分发提效30%
250 0
已开源,就等你来!优酷动态模板研发体系为分发提效30%
|
监控 BI
从0到1,搭建数据监控体系
大家好,我是爱学习的小熊妹。 上周五,阳光很好,微风很好,无惊无险又到六点,小xiong熊妹美美地在座位上补了个妆,拿起小包包,正打算去撸麻辣火锅的时候,听到了最怕听到的话—— 小熊妹,麻烦给个数,领导马上就要看…… 我整个人顿时就不好了!我的火锅,我的小伙伴,我的奶茶,我的电影!
346 0
从0到1,搭建数据监控体系
|
SQL 数据采集 安全
Dataphin产品核心功能大图(六)发布中心:生产和开发隔离模式下的保护伞
Dataphin,用中台方法论打造企业级好数据。Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出,一站式提供数据采、建、管、用全生命周期的大数据能力,以助力企业显著提升数据治理水平,构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin提供多种计算平台支持及可拓展的开放能力,以适应各行业企业的平台技术架构和特定诉求。
Dataphin产品核心功能大图(六)发布中心:生产和开发隔离模式下的保护伞
|
监控 弹性计算
将云资源导入部署平台进行系统基础指标监控
将云资源导入部署平台进行系统基础指标监控
378 0
将云资源导入部署平台进行系统基础指标监控