Re:HistoryServer完成任务丢失的问题

[xiao cai]

是的，默认是10s一次，但是这个是去jobmanager的归档目录里拉取的间隔。
问题是cancel的那次job，并没有上传日志信息到归档目录里。


 原始邮件
发件人: Michael Ran<[hidden email]>
收件人: user-zh<[hidden email]>
发送时间: 2020年9月27日(周日) 16:45
主题: Re:HistoryServer完成任务丢失的问题


history 记得是定时拉取的，有延迟过去 在 2020-09-27 16:40:27，"xiao cai" <[hidden email]> 写道： >Hi: >flink 1.11.0 >我启动了一个任务，当这个任务进行checkpoint的时候，我在webui中点击了cancel，任务在yarn中的状态时killed，但是再到history server中却找不到这个任务。同时我尝试了再yarn中kill application的方式，也是无法发现。这个问题有点随机，不是每次都会出现，有时候执行cancel，在history server又能看到。希望了解history serve相关原理的同学给予帮助。 >非常感谢。 > > > > >best, >xiao.

[Michael Ran]

你的意思是，日志彻底消失了？完全找不到？ <br/>不会是你任务有问题，压根就没成功，没产生吧。 理论上日志不可能平白无故消失的
在 2020-09-27 17:03:45，"xiao cai" <[hidden email]> 写道：

>是的，默认是10s一次，但是这个是去jobmanager的归档目录里拉取的间隔。
>问题是cancel的那次job，并没有上传日志信息到归档目录里。
>
>
> 原始邮件
>发件人: Michael Ran<[hidden email]>
>收件人: user-zh<[hidden email]>
>发送时间: 2020年9月27日(周日) 16:45
>主题: Re:HistoryServer完成任务丢失的问题
>
>
>history 记得是定时拉取的，有延迟过去 在 2020-09-27 16:40:27，"xiao cai" <[hidden email]> 写道： >Hi: >flink 1.11.0 >我启动了一个任务，当这个任务进行checkpoint的时候，我在webui中点击了cancel，任务在yarn中的状态时killed，但是再到history server中却找不到这个任务。同时我尝试了再yarn中kill application的方式，也是无法发现。这个问题有点随机，不是每次都会出现，有时候执行cancel，在history server又能看到。希望了解history serve相关原理的同学给予帮助。 >非常感谢。 > > > > >best, >xiao.