Flink On Yarn部署模式下,yarn能否实现自定义日志聚合策略而不是作业结束后才聚合。

classic Classic list List threaded Threaded
1 message Options
Reply | Threaded
Open this post in threaded view
|

Flink On Yarn部署模式下,yarn能否实现自定义日志聚合策略而不是作业结束后才聚合。

Bobby
在Flink On
Yarn部署模式下,发现只有当作业终止后,yarn才会对各个tm和jm的日志进行聚合放到hdfs里。这对实际生产查日志解决问题非常不方便。
有没有可以自定义日志聚合策略,如每间隔多久就聚合一次放到yarn里这种实现方式。
亦或者对Flink程序各位大佬在日常使用中是如何做到实时查询日志的。
感谢。





--
Sent from: http://apache-flink.147419.n8.nabble.com/