部署flink环境进行大数据流式数据处理,遇到了以下问题,

flink taskmanager 挂掉 报错No pooled slot available and request to ResourceManager for new slot failed

查询网上解决方案后:

1、解决办法:调大taskmanager.memory.process.size 参数的数值。

2、导致此问题的原因:

       taskmanager.memory.process.size 数值太小  task任务内存溢出导致 taskManager 挂掉,

       taskmanager 挂掉导致提交的任务没有可用的slot,所以报 No pooled slot available and                      request to ResourceManager for new slot failed  错误。

另一种解决方案是:


错误原因:
作业分配的CU太少。

解决方案:
作业指定CU数太少了,需要进行手动配置调优。

目前问题,暂时未能解决。

Logo

永洪科技,致力于打造全球领先的数据技术厂商,具备从数据应用方案咨询、BI、AIGC智能分析、数字孪生、数据资产、数据治理、数据实施的端到端大数据价值服务能力。

更多推荐