基于flink任务指标监控实现任务资源弹性伸缩系统及方法

专利申请号：CN202211270756.9

公 开 号：CN115328667A

发 明 人：徐志钢 

代 理 人：张飙

代理机构：北京云科知识产权代理事务所(特殊普通合伙)

专利类型：发明专利

申 请 日：20221111

公 开 日：20221018

专利主分类号：G06F9/50

关 键 词：反压 内存 横向伸缩 内存使用 内存指标 启动成功 任务资源 纵向伸缩 算子 再启动 扩缩 判定 弹性伸缩 任务指标 纵向弹性 伸缩 并发 成功 监控 

摘      要：本发明公开了一种基于flink任务指标监控实现任务资源弹性伸缩系统及方法，所述系统包括内存指标纵向伸缩模块和算子反压横向伸缩模块；所述内存指标纵向伸缩模块通过计算内存使用占比判定是否需要调整内存，若为否则不做处理，若为是则停止任务，修改任务内存，再启动任务，若启动成功则扩缩容成功；所述算子反压横向伸缩模块计算内存使用占比的同时通过计算任务反压情况判定是否调整并发，若为否则不做处理，若为是则停止任务，修改任务内存，再启动任务，若启动成功则扩缩容成功，本发明能够实现对任务资源的横向和纵向弹性伸缩。