yarn application -kill application_1565677682535_0431直接去kill任务,未正常关闭文件

classic Classic list List threaded Threaded
2 messages Options
Reply | Threaded
Open this post in threaded view
|

yarn application -kill application_1565677682535_0431直接去kill任务,未正常关闭文件

646208563
大家好,我flink任务运行在yarn上,然后sink里面是写hdfs文件,close方面关闭文件,然后我发现当我用yarn application -kill application_1565677682535_0431去kill任务的时候,sink的close方法未执行,导致我文件未正常关闭。请问下这个问题怎么去避免?
Reply | Threaded
Open this post in threaded view
|

Re: yarn application -kill application_1565677682535_0431直接去kill任务,未正常关闭文件

Biao Liu
不要用 yarn application kill,flink cancel 可以满足需求吗?

Thanks,
Biao /'bɪ.aʊ/



On Mon, 9 Sep 2019 at 11:54, 646208563 <[hidden email]> wrote:

> 大家好,我flink任务运行在yarn上,然后sink里面是写hdfs文件,close方面关闭文件,然后我发现当我用yarn application
> -kill
> application_1565677682535_0431去kill任务的时候,sink的close方法未执行,导致我文件未正常关闭。请问下这个问题怎么去避免?