实时计算 Flink性能调优

  1. 云栖社区>
  2. 博客>
  3. 正文

实时计算 Flink性能调优

付帅 2018-11-05 12:26:23 浏览2580
展开阅读全文

自动配置调优

实时计算 Flink新增自动调优功能autoconf。能够在流作业以及上下游性能达到稳定的前提下,根据您作业的历史运行状况,重新分配各算子资源和并发数,达到优化作业的目的。更多详细说明请您参阅自动配置调优

首次智能调优

  1. 创建一个作业。如何创建作业请参看快速入门
  2. 上线作业。选择智能推荐配置指定使用CU数为系统默认,不填即可。点击下一步
    实践上线作业

  3. 数据检查,预估消耗CU数。
    实践数据检查

  4. 运维界面启动作业,根据实际业务需要指定读取数据时间
    实践启动

    说明:实时计算作业启动时候需要您指定启动时间。实际上就是从源头数据存储的指定时间点开始读取数据。指定读取数据时间需要在作业启动之前。例如,设置启动时间为1小时之前。

  5. 待作业稳定运行10分钟后,且以下状态符合要求,即可开始下一次性能调优。

    • 运行信息拓扑图中IN_Q不为100%。
      拓扑
    • 数据输入RPS符合预期。
      实践输入RPS

非首次性能调优









































网友评论

登录后评论
0/500
评论
付帅
+ 关注