标签: monitoring

如何从java客户端正确使用Prometheus Histogram来跟踪大小而不是延迟?

我有一个处理集合的 API。这个API的执行时间与集合大小有关(集合越大,占用的时间越多)。

我正在研究如何使用 prometheus 执行此操作,但不确定我是否正确地做事(这方面的文档有点缺乏)。

我做的第一件事是定义一个摘要指标来衡量 API 的执行时间。我正在使用规范的 rate(sum)/rate(count) 解释here。

现在,由于我知道延迟可能受输入大小的影响,我还想在平均执行时间上叠加请求大小。由于我不想测量每个可能的尺寸,我想我会使用直方图。像这样:

Histogram histogram = Histogram.build().buckets(10, 30, 50)
        .name("BULK_REQUEST_SIZE")
        .help("histogram of bulk sizes to correlate with duration")
        .labelNames("method", "entity")
        .register();
Run Code Online (Sandbox Code Playgroud)

注意:术语“大小”与字节大小无关,而是与需要处理的集合的长度有关。2 件、5 件、50 件……

在执行中我做(简化):

@PUT
void process(Collection<Entity> entitiesToProcess, string entityName){
   Timer t = summary.labels("PUT_BULK", entityName).startTimer()

      // process...

   t.observeDuration();
   histogram.labels("PUT_BULK", entityName).observe(entitiesToProcess.size())
}
Run Code Online (Sandbox Code Playgroud)

题:

  • 后来当我查看 Grafana 中的 BULK_REQUEST_SIZE_bucket 时,我看到所有存储桶都具有相同的值,所以很明显我做错了什么。
  • 有没有更规范的方法来做到这一点?

performance monitoring prometheus

5
推荐指数
1
解决办法
5653
查看次数

如何使用 hawtio 在 Java 项目中监控 Apache 骆驼路线

通常,如果我们使用 Java DSL 开发 Java Camel 应用程序,则很难监控 Camel 路由。为了检查路由是否正在运行,我们需要开发一个额外的监控应用程序。

但是 Hawtio 在这方面减轻了我们的工作。如果您的项目是 Web 应用程序项目,那么 Hawtio 已经为它提供了骆驼组件。因此,无需任何额外的努力,它将直接工作。

但是对于 Java 应用程序,它没有显示路由。

java monitoring apache-camel hawtio

5
推荐指数
1
解决办法
5116
查看次数

如何使用 Prometheus 监控 Heroku 多 dynos 应用程序

我需要通过 Prometheus 监控系统部署到 Heroku 的监控应用程序。

问题是,如果你有更多的 dynos 应用程序,你需要知道你的 dynos 的所有 IP 地址才能从所有 dynos 中提取指标。

对于 K8s 或 AWS,我们可以获得完整的 POD/实例列表,因此您可以执行此操作。

所以问题是,您知道如何从 Heroku 获取所有 dynos 的 IP 吗?谢谢

monitoring heroku prometheus

5
推荐指数
1
解决办法
2201
查看次数

cAdvisor prometheus 集成将 container_cpu_load_average_10s 返回为 0

我已将 Prometheus 配置为从 cAdvisor 抓取指标。但是,指标“container_cpu_load_average_10s”仅返回 0。我能够在 cAdvisor Web UI 下正确看到 CPU 指标,但 Prometheus 仅收到 0。它适用于“container_cpu_system_seconds_total”等其他指标。如果我在这里遗漏了什么,有人可以指出吗?

普罗米修斯版本:2.1.0

普罗米修斯配置:

scrape_configs: - job_name: cadvisor scrape_interval: 5s metrics_path: /metrics scheme: http static_configs: - targets: - 172.17.0.2:8080

cAdvisor 版本:0.29.0

monitoring docker prometheus cadvisor

5
推荐指数
1
解决办法
3363
查看次数

GCP Stackdriver Monitoring 累积自定义指标开始和结束时间错误

编辑:我想我想出了这个问题。只有开始时间需要保持不变,直到需要重置累计数字,所以在我的情况下,一天的开始将在午夜之后重置,但结束时间将始终是当前时间。我仍在测试这个,所以我会在得到更多结果后立即关闭这个问题。

EDIT2:因此,将时间间隔设置为每天开始时开始并在发送时结束,图表仍然显示每次调用 client.create_time_series 时的峰值。这是我正在寻找的示例(忽略右轴,数字应该更高,但我的 photoshop 技能不是很好): 在此处输入图片说明 这就是我目前得到的: 在此处输入图片说明

在解释错误之前,以下是我尝试使用此自定义监控指标实现的目标。我的程序每隔一段时间记录一些处理过的数据,我想查看每天处理的总数。所以我认为累积指标是正确的选择,每天重置间隔。问题是我不确定如何实现这一目标。

这就是我正在做的事情。每次处理一些新数据时,我都会使用client.create_time_series(project_name, [series])where将其添加到指标中,其中[series]包含point.value.int64_value当时处理的数据数量中的一个。现在我的问题是间隔。我认为间隔应该是每天的开始和结束时间,我认为在一天结束时,指标会从 0 开始。所以我这样做了:

point                             = series.points.add()
point.value.int64_value           = num
startDay                          = time.mktime(datetime.datetime.now().replace(hour=0, minute=0, second=0, microsecond=0).timetuple())
endDay                            = time.mktime(datetime.datetime.now().replace(hour=23, minute=59, second=59, microsecond=0).timetuple())
point.interval.start_time.seconds = int(startDay)
point.interval.start_time.nanos   = int((startDay - point.interval.start_time.seconds) * 10**9)
point.interval.end_time.seconds   = int(endDay)
point.interval.end_time.nanos     = int((endDay - point.interval.end_time.seconds) * 10**9)
client.create_time_series(project_name, [series])
Run Code Online (Sandbox Code Playgroud)

我得到这个错误:

400 Field timeSeries[0].points[0].interval.end had an invalid value of \"2018-10-04T16:59:59-07:00\": The end time is too far in the future. A point cannot …
Run Code Online (Sandbox Code Playgroud)

monitoring metrics python-3.x google-cloud-stackdriver

5
推荐指数
0
解决办法
742
查看次数

从电报发送指标到普罗米修斯

我正在跑步prometheus和telegraf在同一台主机上。

我正在使用一些输入插件:

  • 输入.cpu
  • 输入.ntpq

我已经配置到prometheus_client输出插件向普罗米修斯发送数据

这是我的配置:

    [[outputs.prometheus_client]]
      ## Address to listen on.
      listen = ":9126"

      ## Use HTTP Basic Authentication.
      # basic_username = "Foo"
      # basic_password = "Bar"

      ## If set, the IP Ranges which are allowed to access metrics.
      ##   ex: ip_range = ["192.168.0.0/24", "192.168.1.0/30"]
      # ip_range = []

      ## Path to publish the metrics on.
      path = "/metrics"

      ## Expiration interval for each metric. 0 == no expiration
      #expiration_interval = "0s"

      ## …
Run Code Online (Sandbox Code Playgroud)

monitoring prometheus telegraf

5
推荐指数
1
解决办法
1万
查看次数

如何通过jmx监控kafka中的消费者滞后?

我有一个 kafka 设置,其中包含一个到 prometheus 的 jmx 导出器。我正在寻找一个指标,它根据主题和 groupid 给出偏移滞后。我正在运行 kafka 2.2.0。

一些在线资源指向一个名为 的指标kafka.consumer,但我的设置中没有这样的指标。

从我的 jmx 终端:

$>domains
#following domains are available
JMImplementation
com.sun.management
java.lang
java.nio
java.util.logging
jdk.management.jfr
kafka
kafka.cluster
kafka.controller
kafka.coordinator.group
kafka.coordinator.transaction
kafka.log
kafka.network
kafka.server
kafka.utils
Run Code Online (Sandbox Code Playgroud)

但是,我可以使用以下命令查看我需要的数据:

root@kafka-0:/kafka# bin/kafka-consumer-groups.sh --describe --group benchmark_consumer_group --bootstrap-server localhost:9092
Consumer group 'benchmark_consumer_group' has no active members.

TOPIC               PARTITION  CURRENT-OFFSET  LOG-END-OFFSET  LAG             CONSUMER-ID     HOST            CLIENT-ID
benchmark_topic_10B 2          2795128         54223220        51428092        -               -               -
benchmark_topic_10B 9          4               4               0               -               -               -
benchmark_topic_10B 6          7 …
Run Code Online (Sandbox Code Playgroud)

monitoring apache-kafka kafka-consumer-api

5
推荐指数
2
解决办法
7141
查看次数

在 Prometheus 中获取两个自定义时间戳之间的增量

我有一个名为device_number. 我想要的是显示现在和一天/一周/一个月前等之间的价值差异。这意味着用两个不同的时间戳减去两个值。检查周围我没有找到任何关于如何做的有用文档。

我会做但不起作用的是:

sum(device_number) - sum(device_number[$__range])
Run Code Online (Sandbox Code Playgroud)

monitoring grafana prometheus promql

5
推荐指数
1
解决办法
5226
查看次数

如何从代码在 Grafana 中配置 Cloudflare 应用程序?

我正在使用基于 helm chart 的 Grafana,目前我将所有配置作为代码,主要配置vales.yaml作为grafana.ini值的,仪表板和数据源被放入每个数据源或仪表板的配置映射中,并且Sidecar 容器负责根据标签取走它们。

现在我想使用应用程序,我尝试的第一个应用程序是来自此处的 Cloudflare 应用程序,该应用程序已使用图表中的插件部分正确安装,values.yaml但我没有看到任何有关如何传递电子邮件和令牌的文档CloudFlare API 通过 configMap 或 json。

是否可以?还是我必须在应用程序设置中手动配置它?

monitoring cloudflare grafana kubernetes kubernetes-helm

5
推荐指数
1
解决办法
214
查看次数

如何在 Dokku 中进行 Heroku 风格的应用程序监控?

我真的很喜欢 Heroku 的应用程序监控。但是我的 Dokku PaaS 中没有它。我想查看我的应用程序和插件 CPU、RAM、磁盘负载、网络 IO、...

有没有一种方法可以让我使用 Dokku 轻松收集和可视化这些统计数据?是否有现成的解决方案,或者我需要手动设置 Grafana 并将其集成到每个应用程序和插件?

您如何监控您的 Dokku 应用程序?

monitoring heroku dokku grafana

5
推荐指数
1
解决办法
214
查看次数