flink prometheus 无法上报accumulator类型监控吗

classic Classic list List threaded Threaded
7 messages Options
Reply | Threaded
Open this post in threaded view
|

flink prometheus 无法上报accumulator类型监控吗

nobleyd
如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
Reply | Threaded
Open this post in threaded view
|

Re: flink prometheus 无法上报accumulator类型监控吗

nobleyd
hi,有人回答下这个问题吗。

赵一旦 <[hidden email]> 于2020年8月21日周五 下午4:20写道:

> 如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
>
Reply | Threaded
Open this post in threaded view
|

Re: flink prometheus 无法上报accumulator类型监控吗

Yun Tang
Hi

没有名为 accumulator 的metrics类型数据,目前只有Counters, Gauges, Histograms 和 Meters [1] 这四种,如果你想要用累积型metrics,可以考虑counters

[1] https://ci.apache.org/projects/flink/flink-docs-stable/monitoring/metrics.html#metric-types

祝好
唐云

________________________________
From: 赵一旦 <[hidden email]>
Sent: Friday, August 28, 2020 10:53
To: [hidden email] <[hidden email]>
Subject: Re: flink prometheus 无法上报accumulator类型监控吗

hi,有人回答下这个问题吗。

赵一旦 <[hidden email]> 于2020年8月21日周五 下午4:20写道:

> 如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
>
Reply | Threaded
Open this post in threaded view
|

Re: flink prometheus 无法上报accumulator类型监控吗

Xiao Xu
accumulator 是聚合后的指标, metics 里是底层的指标, 据我所知没有办法打到监控里面

Yun Tang <[hidden email]> 于2020年8月28日周五 下午2:37写道:

> Hi
>
> 没有名为 accumulator 的metrics类型数据,目前只有Counters, Gauges, Histograms 和 Meters
> [1] 这四种,如果你想要用累积型metrics,可以考虑counters
>
> [1]
> https://ci.apache.org/projects/flink/flink-docs-stable/monitoring/metrics.html#metric-types
>
> 祝好
> 唐云
>
> ________________________________
> From: 赵一旦 <[hidden email]>
> Sent: Friday, August 28, 2020 10:53
> To: [hidden email] <[hidden email]>
> Subject: Re: flink prometheus 无法上报accumulator类型监控吗
>
> hi,有人回答下这个问题吗。
>
> 赵一旦 <[hidden email]> 于2020年8月21日周五 下午4:20写道:
>
> > 如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
> >
>
Reply | Threaded
Open this post in threaded view
|

Re: flink prometheus 无法上报accumulator类型监控吗

nobleyd
现在问题是我业务代码中添加的统计指标,部分被prometheus拿到了,部分拿不到。

当前比如有个 latenessInMillisGauge 是可以拿到的,在flink中用guage实现的。
但是我用的Counter类的都没被监测到。
比如:timeAheadDroppedCounter = getRuntimeContext().getLongCounter(
"timeAheadDroppedCounter");
这种就没被找到。

Xiao Xu <[hidden email]> 于2020年8月28日周五 下午2:40写道:

> accumulator 是聚合后的指标, metics 里是底层的指标, 据我所知没有办法打到监控里面
>
> Yun Tang <[hidden email]> 于2020年8月28日周五 下午2:37写道:
>
> > Hi
> >
> > 没有名为 accumulator 的metrics类型数据,目前只有Counters, Gauges, Histograms 和 Meters
> > [1] 这四种,如果你想要用累积型metrics,可以考虑counters
> >
> > [1]
> >
> https://ci.apache.org/projects/flink/flink-docs-stable/monitoring/metrics.html#metric-types
> >
> > 祝好
> > 唐云
> >
> > ________________________________
> > From: 赵一旦 <[hidden email]>
> > Sent: Friday, August 28, 2020 10:53
> > To: [hidden email] <[hidden email]>
> > Subject: Re: flink prometheus 无法上报accumulator类型监控吗
> >
> > hi,有人回答下这个问题吗。
> >
> > 赵一旦 <[hidden email]> 于2020年8月21日周五 下午4:20写道:
> >
> > > 如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
> > >
> >
>
Reply | Threaded
Open this post in threaded view
|

答复: flink prometheus 无法上报accumulator类型监控吗

范超
In reply to this post by Yun Tang
确实可以通过counter来实现[1]
相应的blog在[2]

[1] https://github.com/mbode/flink-prometheus-example
[2]https://flink.apache.org/features/2019/03/11/prometheus-monitoring.html


-----邮件原件-----
发件人: Yun Tang [mailto:[hidden email]]
发送时间: 2020年8月28日 星期五 14:37
收件人: [hidden email]
主题: Re: flink prometheus 无法上报accumulator类型监控吗

Hi

没有名为 accumulator 的metrics类型数据,目前只有Counters, Gauges, Histograms 和 Meters [1] 这四种,如果你想要用累积型metrics,可以考虑counters

[1] https://ci.apache.org/projects/flink/flink-docs-stable/monitoring/metrics.html#metric-types

祝好
唐云

________________________________
From: 赵一旦 <[hidden email]>
Sent: Friday, August 28, 2020 10:53
To: [hidden email] <[hidden email]>
Subject: Re: flink prometheus 无法上报accumulator类型监控吗

hi,有人回答下这个问题吗。

赵一旦 <[hidden email]> 于2020年8月21日周五 下午4:20写道:

> 如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
>
Reply | Threaded
Open this post in threaded view
|

Re: flink prometheus 无法上报accumulator类型监控吗

nobleyd
大概懂了,不过还是很奇怪。counter和accumulator究竟啥区别,干嘛要分开实现2套机制。

范超 <[hidden email]> 于2020年8月28日周五 下午4:14写道:

> 确实可以通过counter来实现[1]
> 相应的blog在[2]
>
> [1] https://github.com/mbode/flink-prometheus-example
> [2]https://flink.apache.org/features/2019/03/11/prometheus-monitoring.html
>
>
> -----邮件原件-----
> 发件人: Yun Tang [mailto:[hidden email]]
> 发送时间: 2020年8月28日 星期五 14:37
> 收件人: [hidden email]
> 主题: Re: flink prometheus 无法上报accumulator类型监控吗
>
> Hi
>
> 没有名为 accumulator 的metrics类型数据,目前只有Counters, Gauges, Histograms 和 Meters
> [1] 这四种,如果你想要用累积型metrics,可以考虑counters
>
> [1]
> https://ci.apache.org/projects/flink/flink-docs-stable/monitoring/metrics.html#metric-types
>
> 祝好
> 唐云
>
> ________________________________
> From: 赵一旦 <[hidden email]>
> Sent: Friday, August 28, 2020 10:53
> To: [hidden email] <[hidden email]>
> Subject: Re: flink prometheus 无法上报accumulator类型监控吗
>
> hi,有人回答下这个问题吗。
>
> 赵一旦 <[hidden email]> 于2020年8月21日周五 下午4:20写道:
>
> > 如题,没找到accumulator类型数据,metric之类找到了,但是accumulator类没找到。
> >
>