flink job exception

classic Classic list List threaded Threaded
2 messages Options
Reply | Threaded
Open this post in threaded view
|

flink job exception

krislee
各位好:


我是flink的初学者。 今天在flink web UI 和后台的job 管理页面 发现很多
exception:

......

11:29:30.107 [flink-akka.actor.default-dispatcher-41] ERROR
org.apache.flink.runtime.rest.handler.job.JobExceptionsHandler -
Exception occurred in REST handler: Job 16c614ab0d6f5b28746c66f351fb67f8
not found

......

此时,登录flink web UI,  在"completed jobs"页面
找不到任何job的历史信息,但是当初提交job的时候 是能看到这些job 信息的。


环境信息:

flink: 1.12.4 for windows

启动flink和执行flink 作业使用的是 1.9.3版本的start-cluster.bat, flink.bat



我的疑问是:flink 是否有定期清理历史job的功能?

     如果有,在哪里(通过命令行或者配置文件)可以配置相关的参数 ?

     如果没有,这些错误信息是否正常 ?怎样解决这个问题 ?


Thanks,

Gang


day
Reply | Threaded
Open this post in threaded view
|

回复:flink job exception

day
你这边可以看一下关于 history server的介绍,看看是否能帮到你。

https://ci.apache.org/projects/flink/flink-docs-master/zh/docs/deployment/advanced/historyserver/




------------------ 原始邮件 ------------------
发件人:                                                                                                                        "user-zh"                                                                                    <[hidden email]&gt;;
发送时间:&nbsp;2021年5月31日(星期一) 中午1:55
收件人:&nbsp;"user-zh"<[hidden email]&gt;;

主题:&nbsp;flink job exception



各位好:


我是flink的初学者。 今天在flink web UI 和后台的job 管理页面 发现很多
exception:

......

11:29:30.107 [flink-akka.actor.default-dispatcher-41] ERROR
org.apache.flink.runtime.rest.handler.job.JobExceptionsHandler -
Exception occurred in REST handler: Job 16c614ab0d6f5b28746c66f351fb67f8
not found

......

此时,登录flink web UI,&nbsp; 在"completed jobs"页面
找不到任何job的历史信息,但是当初提交job的时候 是能看到这些job 信息的。


环境信息:

flink: 1.12.4 for windows

启动flink和执行flink 作业使用的是 1.9.3版本的start-cluster.bat, flink.bat



我的疑问是:flink 是否有定期清理历史job的功能?

&nbsp;&nbsp;&nbsp;&nbsp; 如果有,在哪里(通过命令行或者配置文件)可以配置相关的参数 ?

&nbsp;&nbsp;&nbsp;&nbsp; 如果没有,这些错误信息是否正常 ?怎样解决这个问题 ?


Thanks,

Gang