pyspark 从Spark发送到Graphite/Prometheus的过滤器指标

xoshrz7s  于 2023-10-15  发布在  Spark
关注(0)|答案(1)|浏览(129)

我在试着监控星火Spark将指标推送到Graphite和Prometheus,但似乎我无法选择它发送的指标,而且有这么多指标。
我不想让石墨和普罗米修斯示例过载。
有没有一种方法可以过滤这些指标?在Spark配置或石墨/普罗米修斯配置?

yqkkidmi

yqkkidmi1#

此配置将只发送适合所提供的正则表达式的度量。

"spark.metrics.conf.*.sink.graphite.regex"="optional_regex_to_send_matching_metrics"

你可以在文档中看到它。

相关问题