菜单
文档breadcrumb arrow Grafana Alloybreadcrumb arrow 参考breadcrumb arrow 组件breadcrumb arrow prometheusbreadcrumb arrow prometheus.operator.scrapeconfigs
实验性 开源

prometheus.operator.scrapeconfigs

实验性:这是一个实验性组件。实验性组件可能会频繁发生破坏性更改,并且可能在移除时没有等效的替代方案。必须将 stability.level 标志设置为 experimental 才能使用该组件。

prometheus.operator.scrapeconfigs 发现您的 Kubernetes 集群中的ScrapeConfig 资源并抓取它们引用的目标。此组件执行两个主要功能

  1. 从 Kubernetes 集群发现 ScrapeConfig 资源。
  2. 从目标抓取指标,并将其转发到接收器。

默认配置假定 Alloy 在 Kubernetes 集群内运行,并使用集群内配置访问 Kubernetes API。您可以通过在 client 块中提供连接信息,在集群外部运行 Alloy,但需要网络级别的访问权限才能从 scrapeconfigs 中抓取指标。

scrapeconfigs 可以引用密钥来对目标进行身份验证以进行抓取。在这些情况下,密钥仅在 ScrapeConfig 更新或此组件刷新其内部状态时(每 5 分钟刷新一次)加载和刷新。

用法

alloy
prometheus.operator.scrapeconfigs "<LABEL>" {
    forward_to = <RECEIVER_LIST>
}

参数

您可以将以下参数与 prometheus.operator.scrapeconfigs 一起使用

名称类型描述默认值必需
forward_tolist(MetricsReceiver)要将抓取的指标发送到的接收器列表。
informer_sync_timeoutdurationScrapeConfig 资源初始同步的超时时间。1m
namespaceslist(string)搜索 ScrapeConfig 资源的命名空间列表。如果未指定,则搜索所有命名空间。

您可以将以下块与 prometheus.operator.scrapeconfigs 一起使用

描述必需
client配置用于查找 scrapeconfigs 的 Kubernetes client。
client > authorization配置对 Kubernetes API 的通用授权。
client > basic_auth配置对 Kubernetes API 的 basic authentication。
client > oauth2配置 OAuth2 用于对 Kubernetes API 进行身份验证。
client > oauth2 > tls_config配置连接到 Kubernetes API 的 TLS 设置。
client > tls_config配置连接到 Kubernetes API 的 TLS 设置。
clustering配置组件在 Alloy 以集群模式运行时使用。
rule应用于发现的目标的 Relabeling 规则。
scrape应用于发现的目标的默认抓取配置。
selector用于发现哪些 scrapeconfigs 的标签选择器。
selector > match_expression用于发现哪些 scrapeconfigs 的标签选择器表达式。

> 符号表示更深的嵌套级别。例如,client > basic_auth 指的是在 client 块内定义的 basic_auth 块。

client

client 块配置用于发现 scrapeconfigs 的 Kubernetes client。如果未提供 client 块,则使用运行 Alloy Pod 的服务帐户的默认集群内配置。

支持以下参数

名称类型描述默认值必需
api_serverstringKubernetes API 服务器的 URL。
bearer_token_filestring包含用于认证的 Bearer token 的文件。
bearer_tokensecret用于认证的 Bearer token。
enable_http2bool请求是否支持 HTTP2。true
follow_redirectsbool是否应遵循服务器返回的重定向。true
kubeconfig_filestring连接到 Kubernetes 所使用的 kubeconfig 文件路径。
no_proxystring逗号分隔的 IP 地址、CIDR 表示法和域名列表,用于排除代理。
proxy_connect_headermap(list(secret))指定在 CONNECT 请求期间发送给代理的请求头。
proxy_from_environmentbool使用环境变量指示的代理 URL。false
proxy_urlstring发送请求所通过的 HTTP 代理。

最多只能提供以下之一

no_proxy 可以包含 IP、CIDR 表示法和域名。IP 和域名可以包含端口号。如果配置了 no_proxy,则必须配置 proxy_url

proxy_from_environment 使用环境变量 HTTP_PROXY、HTTPS_PROXY 和 NO_PROXY(或其小写版本)。请求使用与其方案匹配的环境变量中的代理,除非被 NO_PROXY 排除。如果配置了 proxy_from_environment,则不得配置 proxy_urlno_proxy

仅在配置了 proxy_urlproxy_from_environment 时才应配置 proxy_connect_header

authorization

名称类型描述默认值必需
credentials_filestring包含 secret 值的 文件。
credentialssecretSecret 值。
typestring授权类型,例如“Bearer”。

credentialcredentials_file 是互斥的,在一个 authorization 块内只能提供其中一个。

basic_auth

名称类型描述默认值必需
password_filestring包含 basic auth 密码的文件。
passwordsecretBasic auth 密码。
usernamestringBasic auth 用户名。

passwordpassword_file 是互斥的,在一个 basic_auth 块内只能提供其中一个。

oauth2

名称类型描述默认值必需
client_idstringOAuth2 客户端 ID。
client_secret_filestring包含 OAuth2 客户端 secret 的文件。
client_secretsecretOAuth2 客户端 secret。
endpoint_paramsmap(string)可选参数,用于附加到 token URL。
proxy_urlstring发送请求所通过的 HTTP 代理。
no_proxystring逗号分隔的 IP 地址、CIDR 表示法和域名列表,用于排除代理。
proxy_from_environmentbool使用环境变量指示的代理 URL。false
proxy_connect_headermap(list(secret))指定在 CONNECT 请求期间发送给代理的请求头。
scopeslist(string)用于认证的 scope 列表。
token_urlstring获取 token 的 URL。

client_secretclient_secret_file 是互斥的,在一个 oauth2 块内只能提供其中一个。

oauth2 块还可以包含一个单独的 tls_config 子块。

no_proxy 可以包含 IP、CIDR 表示法和域名。IP 和域名可以包含端口号。如果配置了 no_proxy,则必须配置 proxy_url

proxy_from_environment 使用环境变量 HTTP_PROXY、HTTPS_PROXY 和 NO_PROXY(或其小写版本)。请求使用与其方案匹配的环境变量中的代理,除非被 NO_PROXY 排除。如果配置了 proxy_from_environment,则不得配置 proxy_urlno_proxy

仅在配置了 proxy_urlproxy_from_environment 时才应配置 proxy_connect_header

tls_config

名称类型描述默认值必需
ca_pemstring用于验证服务器的 CA PEM 编码文本。
ca_filestring用于验证服务器的 CA 证书。
cert_pemstring用于客户端认证的证书 PEM 编码文本。
cert_filestring用于客户端认证的证书文件。
insecure_skip_verifybool禁用服务器证书验证。
key_filestring用于客户端认证的密钥文件。
key_pemsecret用于客户端认证的密钥 PEM 编码文本。
min_versionstring最低可接受的 TLS 版本。
server_namestringServerName 扩展,用于指示服务器名称。

以下参数对互斥,不能同时设置

  • ca_pemca_file
  • cert_pemcert_file
  • key_pemkey_file

配置客户端身份验证时,必须同时提供客户端证书(使用 cert_pemcert_file)和客户端密钥(使用 key_pemkey_file)。

如果未提供 min_version,则最低可接受的 TLS 版本继承自 Go 的默认最低版本 TLS 1.2。如果提供了 min_version,则必须设置为以下字符串之一

  • "TLS10" (TLS 1.0)
  • "TLS11" (TLS 1.1)
  • "TLS12" (TLS 1.2)
  • "TLS13" (TLS 1.3)

clustering

名称类型描述默认值必需
enabledbool启用与其他集群节点共享目标。false

当 Alloy 使用集群并且 enabled 设置为 true 时,此组件实例选择加入集群以在所有集群节点之间分配抓取负载。

集群假定所有集群节点都运行相同的配置文件,并且所有选择使用集群的 prometheus.operator.scrapeconfigs 组件实例在抓取间隔内具有相同的配置。

所有选择加入集群的 prometheus.operator.scrapeconfigs 组件实例使用目标标签和一致性哈希算法来确定每个目标在集群对等体之间的所有权。然后,每个对等体只抓取其负责的目标子集,从而分配抓取负载。当一个节点加入或离开集群时,每个对等体重新计算所有权并继续使用新的目标集进行抓取。这比 hashmod 分片表现更好,因为 hashmod 分片需要重新分配*所有*节点,而这里只转移了目标所有权的 1/N,并且是最终一致的(而不是像 hashmod 分片那样的完全一致)。

如果 Alloy *未*以集群模式运行,则该块不起作用,并且 prometheus.operator.scrapeconfigs 会抓取其参数中接收到的每个目标。

rule

rule 块包含可应用于输入指标的任何 Relabeling 规则的定义。如果定义了多个 rule 块,转换将按自上而下的顺序应用。

可以使用以下参数来配置 rule。所有参数都是可选的。省略的字段采用其默认值。

名称类型描述默认值必需
actionstring要执行的 relabeling 操作。replace
modulusuint一个正整数,用于计算哈希后的源标签值的模数。
regexstring一个有效的 RE2 表达式,支持括号捕获组。用于匹配从 source_labelseparator 字段组合中提取的值,或在 labelkeep/labeldrop/labelmap 操作期间过滤标签。(.*)
replacementstring如果正则表达式与提取的值匹配,则对其执行正则表达式替换的值。支持先前的捕获组。"$1"
separatorstring用于连接 source_labels 中存在的值的分隔符。;
source_labelslist(string)要选择值的标签列表。其内容使用 separator 连接,并与 regex 匹配。
target_labelstring将结果值写入到的标签。

您可以使用以下操作

  • drop - 丢弃通过 source_labelsseparator 提取的字符串与 regex 匹配的指标。
  • dropequal - 丢弃串联的 source_labelstarget_label *不*匹配的目标。
  • hashmod - 哈希串联的标签,计算其模数 modulus,并将结果写入 target_label
  • keep - 保留通过 source_labelsseparator 提取的字符串与 regex 匹配的指标。
  • keepequal - 丢弃串联的 source_labelstarget_label 匹配的目标。
  • labeldrop - 将 regex 与所有标签名称匹配。任何匹配的标签都将从指标的标签集中移除。
  • labelkeep - 将 regex 与所有标签名称匹配。任何不匹配的标签都将从指标的标签集中移除。
  • labelmap - 将 regex 与所有标签名称匹配。任何匹配的标签将根据 replacement 字段的内容重命名。
  • lowercase - 将 target_label 设置为串联的 source_labels 的小写形式。
  • replace - 将 regex 与串联的标签匹配。如果匹配,则使用 replacement 字段的内容替换 target_label 的内容。
  • uppercase - 将 target_label 设置为串联的 source_labels 的大写形式。

注意

可以使用 $CAPTURE_GROUP_NUMBER${CAPTURE_GROUP_NUMBER} 符号引用正则表达式捕获组。

scrape

名称类型描述默认值必需
default_scrape_intervalduration抓取目标的默认间隔。如果目标资源未提供抓取间隔,则用作默认值。1m
default_scrape_timeoutduration抓取请求的默认超时时间。如果目标资源未提供抓取超时时间,则用作默认值。10s

selector

selector 块描述了 scrapeconfigs 的 Kubernetes 标签选择器。

支持以下参数

名称类型描述默认值必需
match_labelsmap(string)用于发现资源的标签键和值。{}

match_labels 参数为空时,将匹配所有 ScrapeConfig 资源。

match_expression

match_expression 块描述了用于 scrapeconfigs 发现的 Kubernetes 标签匹配器表达式。

支持以下参数

名称类型描述默认值必需
keystring要匹配的标签名称。
operatorstring匹配时使用的运算符。
valueslist(string)匹配时使用的值。

operator 参数必须是以下字符串之一

  • "In"
  • "NotIn"
  • "Exists"
  • "DoesNotExist"

如果在 selector 块内有多个 match_expressions 块,它们将通过 AND 子句组合在一起。

导出的字段

prometheus.operator.scrapeconfigs 不导出任何字段。它将抓取的所有指标转发到使用 forward_to 参数配置的接收器。

组件健康状态

当给定无效配置、Prometheus 组件初始化失败或与 Kubernetes API 的连接未正确建立时,prometheus.operator.scrapeconfigs 会报告为不健康。

调试信息

prometheus.operator.scrapeconfigs 在组件的调试端点上报告每个已配置抓取作业的上次抓取状态,包括发现的标签和上次抓取时间。

它还为它发现的每个 ScrapeConfig 公开一些调试信息,包括在协调 ScrapeConfig 中的抓取配置时发现的任何错误。

调试指标

prometheus.operator.scrapeconfigs 不公开任何特定于组件的调试指标。

示例

此示例发现集群中的所有 scrapeconfigs,并将收集到的指标转发到 prometheus.remote_write 组件。

alloy
prometheus.remote_write "staging" {
  // Send metrics to a locally running Mimir.
  endpoint {
    url = "http://mimir:9009/api/v1/push"

    basic_auth {
      username = "example-user"
      password = "example-password"
    }
  }
}

prometheus.operator.scrapeconfigs "scrapeconfigs" {
    forward_to = [prometheus.remote_write.staging.receiver]
}

此示例将发现的 scrapeconfigs 限制为特定命名空间 my-app 中带有标签 team=ops 的那些。

alloy
prometheus.operator.scrapeconfigs "scrapeconfigs" {
    forward_to = [prometheus.remote_write.staging.receiver]
    namespaces = ["my-app"]
    selector {
        match_expression {
            key = "team"
            operator = "In"
            values = ["ops"]
        }
    }
}

额外的指标标签

prometheus.operator.scrapeconfigs 会为 ScrapeConfig 对象抓取的所有指标添加以下额外标签。

标签描述
__meta_kubernetes_scrapeconfig_namespaceScrapeConfig 对象的命名空间
__meta_kubernetes_scrapeconfig_nameScrapeConfig 对象的名称

兼容组件

prometheus.operator.scrapeconfigs 可以接受来自以下组件的参数

注意

连接某些组件可能不合理,或者组件可能需要进一步配置才能使连接正常工作。有关详细信息,请参阅相关文档。