flink slot之间内存隔离问题

classic Classic list List threaded Threaded
2 messages Options
Reply | Threaded
Open this post in threaded view
|

flink slot之间内存隔离问题

Cayden chen
hi,all
 对于flink slot之间内存隔离有个疑问。就是slot中的task请求networkbufferpool的时候是否会限制为 1/slost数量(我看源码好像是没有限制)。如果没有限制的话,那么具体隔离的内存是什么内存,是否只是在批处理模式下的managed memory。
Reply | Threaded
Open this post in threaded view
|

Re: flink slot之间内存隔离问题

Xintong Song
slot 之间只有 managed memory 是隔离的。
取决于你的 flink 版本,1.10 之后 managed memory 除了用于 batch operator,还会用于 rocksdb
state backend。

Thank you~

Xintong Song



On Wed, Aug 12, 2020 at 3:55 PM Cayden chen <[hidden email]> wrote:

> hi,all
> &nbsp;对于flink slot之间内存隔离有个疑问。就是slot中的task请求networkbufferpool的时候是否会限制为
> 1/slost数量(我看源码好像是没有限制)。如果没有限制的话,那么具体隔离的内存是什么内存,是否只是在批处理模式下的managed memory。