我有一个处理集合的 API。这个API的执行时间与集合大小有关(集合越大,占用的时间越多)。
我正在研究如何使用 prometheus 执行此操作,但不确定我是否正确地做事(这方面的文档有点缺乏)。
我做的第一件事是定义一个摘要指标来衡量 API 的执行时间。我正在使用规范的 rate(sum)/rate(count) 解释here。
现在,由于我知道延迟可能受输入大小的影响,我还想在平均执行时间上叠加请求大小。由于我不想测量每个可能的尺寸,我想我会使用直方图。像这样:
Histogram histogram = Histogram.build().buckets(10, 30, 50)
.name("BULK_REQUEST_SIZE")
.help("histogram of bulk sizes to correlate with duration")
.labelNames("method", "entity")
.register();
Run Code Online (Sandbox Code Playgroud)
注意:术语“大小”与字节大小无关,而是与需要处理的集合的长度有关。2 件、5 件、50 件……
在执行中我做(简化):
@PUT
void process(Collection<Entity> entitiesToProcess, string entityName){
Timer t = summary.labels("PUT_BULK", entityName).startTimer()
// process...
t.observeDuration();
histogram.labels("PUT_BULK", entityName).observe(entitiesToProcess.size())
}
Run Code Online (Sandbox Code Playgroud)
题:
通常,如果我们使用 Java DSL 开发 Java Camel 应用程序,则很难监控 Camel 路由。为了检查路由是否正在运行,我们需要开发一个额外的监控应用程序。
但是 Hawtio 在这方面减轻了我们的工作。如果您的项目是 Web 应用程序项目,那么 Hawtio 已经为它提供了骆驼组件。因此,无需任何额外的努力,它将直接工作。
但是对于 Java 应用程序,它没有显示路由。
我需要通过 Prometheus 监控系统部署到 Heroku 的监控应用程序。
问题是,如果你有更多的 dynos 应用程序,你需要知道你的 dynos 的所有 IP 地址才能从所有 dynos 中提取指标。
对于 K8s 或 AWS,我们可以获得完整的 POD/实例列表,因此您可以执行此操作。
所以问题是,您知道如何从 Heroku 获取所有 dynos 的 IP 吗?谢谢
我已将 Prometheus 配置为从 cAdvisor 抓取指标。但是,指标“container_cpu_load_average_10s”仅返回 0。我能够在 cAdvisor Web UI 下正确看到 CPU 指标,但 Prometheus 仅收到 0。它适用于“container_cpu_system_seconds_total”等其他指标。如果我在这里遗漏了什么,有人可以指出吗?
普罗米修斯版本:2.1.0
普罗米修斯配置:
scrape_configs:
- job_name: cadvisor
scrape_interval: 5s
metrics_path: /metrics
scheme: http
static_configs:
- targets:
- 172.17.0.2:8080
cAdvisor 版本:0.29.0
编辑:我想我想出了这个问题。只有开始时间需要保持不变,直到需要重置累计数字,所以在我的情况下,一天的开始将在午夜之后重置,但结束时间将始终是当前时间。我仍在测试这个,所以我会在得到更多结果后立即关闭这个问题。
EDIT2:因此,将时间间隔设置为每天开始时开始并在发送时结束,图表仍然显示每次调用 client.create_time_series 时的峰值。这是我正在寻找的示例(忽略右轴,数字应该更高,但我的 photoshop 技能不是很好):
这就是我目前得到的:

在解释错误之前,以下是我尝试使用此自定义监控指标实现的目标。我的程序每隔一段时间记录一些处理过的数据,我想查看每天处理的总数。所以我认为累积指标是正确的选择,每天重置间隔。问题是我不确定如何实现这一目标。
这就是我正在做的事情。每次处理一些新数据时,我都会使用client.create_time_series(project_name, [series])where将其添加到指标中,其中[series]包含point.value.int64_value当时处理的数据数量中的一个。现在我的问题是间隔。我认为间隔应该是每天的开始和结束时间,我认为在一天结束时,指标会从 0 开始。所以我这样做了:
point = series.points.add()
point.value.int64_value = num
startDay = time.mktime(datetime.datetime.now().replace(hour=0, minute=0, second=0, microsecond=0).timetuple())
endDay = time.mktime(datetime.datetime.now().replace(hour=23, minute=59, second=59, microsecond=0).timetuple())
point.interval.start_time.seconds = int(startDay)
point.interval.start_time.nanos = int((startDay - point.interval.start_time.seconds) * 10**9)
point.interval.end_time.seconds = int(endDay)
point.interval.end_time.nanos = int((endDay - point.interval.end_time.seconds) * 10**9)
client.create_time_series(project_name, [series])
Run Code Online (Sandbox Code Playgroud)
我得到这个错误:
400 Field timeSeries[0].points[0].interval.end had an invalid value of \"2018-10-04T16:59:59-07:00\": The end time is too far in the future. A point cannot …Run Code Online (Sandbox Code Playgroud) 我正在跑步prometheus和telegraf在同一台主机上。
我正在使用一些输入插件:
我已经配置到prometheus_client输出插件向普罗米修斯发送数据
这是我的配置:
[[outputs.prometheus_client]]
## Address to listen on.
listen = ":9126"
## Use HTTP Basic Authentication.
# basic_username = "Foo"
# basic_password = "Bar"
## If set, the IP Ranges which are allowed to access metrics.
## ex: ip_range = ["192.168.0.0/24", "192.168.1.0/30"]
# ip_range = []
## Path to publish the metrics on.
path = "/metrics"
## Expiration interval for each metric. 0 == no expiration
#expiration_interval = "0s"
## …Run Code Online (Sandbox Code Playgroud) 我有一个 kafka 设置,其中包含一个到 prometheus 的 jmx 导出器。我正在寻找一个指标,它根据主题和 groupid 给出偏移滞后。我正在运行 kafka 2.2.0。
一些在线资源指向一个名为 的指标kafka.consumer,但我的设置中没有这样的指标。
从我的 jmx 终端:
$>domains
#following domains are available
JMImplementation
com.sun.management
java.lang
java.nio
java.util.logging
jdk.management.jfr
kafka
kafka.cluster
kafka.controller
kafka.coordinator.group
kafka.coordinator.transaction
kafka.log
kafka.network
kafka.server
kafka.utils
Run Code Online (Sandbox Code Playgroud)
但是,我可以使用以下命令查看我需要的数据:
root@kafka-0:/kafka# bin/kafka-consumer-groups.sh --describe --group benchmark_consumer_group --bootstrap-server localhost:9092
Consumer group 'benchmark_consumer_group' has no active members.
TOPIC PARTITION CURRENT-OFFSET LOG-END-OFFSET LAG CONSUMER-ID HOST CLIENT-ID
benchmark_topic_10B 2 2795128 54223220 51428092 - - -
benchmark_topic_10B 9 4 4 0 - - -
benchmark_topic_10B 6 7 …Run Code Online (Sandbox Code Playgroud) 我有一个名为device_number. 我想要的是显示现在和一天/一周/一个月前等之间的价值差异。这意味着用两个不同的时间戳减去两个值。检查周围我没有找到任何关于如何做的有用文档。
我会做但不起作用的是:
sum(device_number) - sum(device_number[$__range])
Run Code Online (Sandbox Code Playgroud) 我正在使用基于 helm chart 的 Grafana,目前我将所有配置作为代码,主要配置vales.yaml作为grafana.ini值的,仪表板和数据源被放入每个数据源或仪表板的配置映射中,并且Sidecar 容器负责根据标签取走它们。
现在我想使用应用程序,我尝试的第一个应用程序是来自此处的 Cloudflare 应用程序,该应用程序已使用图表中的插件部分正确安装,values.yaml但我没有看到任何有关如何传递电子邮件和令牌的文档CloudFlare API 通过 configMap 或 json。
是否可以?还是我必须在应用程序设置中手动配置它?
我真的很喜欢 Heroku 的应用程序监控。但是我的 Dokku PaaS 中没有它。我想查看我的应用程序和插件 CPU、RAM、磁盘负载、网络 IO、...
有没有一种方法可以让我使用 Dokku 轻松收集和可视化这些统计数据?是否有现成的解决方案,或者我需要手动设置 Grafana 并将其集成到每个应用程序和插件?
您如何监控您的 Dokku 应用程序?
monitoring ×10
prometheus ×5
grafana ×3
heroku ×2
apache-camel ×1
apache-kafka ×1
cadvisor ×1
cloudflare ×1
docker ×1
dokku ×1
hawtio ×1
java ×1
kubernetes ×1
metrics ×1
performance ×1
promql ×1
python-3.x ×1
telegraf ×1