prometheus.operator.scrapeconfigs
实验性:这是一个实验性组件。实验性组件可能会频繁发生破坏性更改,并且可能在移除时没有等效的替代方案。必须将
stability.level
标志设置为experimental
才能使用该组件。
prometheus.operator.scrapeconfigs
发现您的 Kubernetes 集群中的ScrapeConfig 资源并抓取它们引用的目标。此组件执行两个主要功能
- 从 Kubernetes 集群发现 ScrapeConfig 资源。
- 从目标抓取指标,并将其转发到接收器。
默认配置假定 Alloy 在 Kubernetes 集群内运行,并使用集群内配置访问 Kubernetes API。您可以通过在 client
块中提供连接信息,在集群外部运行 Alloy,但需要网络级别的访问权限才能从 scrapeconfigs
中抓取指标。
scrapeconfigs
可以引用密钥来对目标进行身份验证以进行抓取。在这些情况下,密钥仅在 ScrapeConfig 更新或此组件刷新其内部状态时(每 5 分钟刷新一次)加载和刷新。
用法
prometheus.operator.scrapeconfigs "<LABEL>" {
forward_to = <RECEIVER_LIST>
}
参数
您可以将以下参数与 prometheus.operator.scrapeconfigs
一起使用
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
forward_to | list(MetricsReceiver) | 要将抓取的指标发送到的接收器列表。 | 是 | |
informer_sync_timeout | duration | ScrapeConfig 资源初始同步的超时时间。 | 1m | 否 |
namespaces | list(string) | 搜索 ScrapeConfig 资源的命名空间列表。如果未指定,则搜索所有命名空间。 | 否 |
块
您可以将以下块与 prometheus.operator.scrapeconfigs
一起使用
块 | 描述 | 必需 |
---|---|---|
client | 配置用于查找 scrapeconfigs 的 Kubernetes client。 | 否 |
client > authorization | 配置对 Kubernetes API 的通用授权。 | 否 |
client > basic_auth | 配置对 Kubernetes API 的 basic authentication。 | 否 |
client > oauth2 | 配置 OAuth2 用于对 Kubernetes API 进行身份验证。 | 否 |
client > oauth2 > tls_config | 配置连接到 Kubernetes API 的 TLS 设置。 | 否 |
client > tls_config | 配置连接到 Kubernetes API 的 TLS 设置。 | 否 |
clustering | 配置组件在 Alloy 以集群模式运行时使用。 | 否 |
rule | 应用于发现的目标的 Relabeling 规则。 | 否 |
scrape | 应用于发现的目标的默认抓取配置。 | 否 |
selector | 用于发现哪些 scrapeconfigs 的标签选择器。 | 否 |
selector > match_expression | 用于发现哪些 scrapeconfigs 的标签选择器表达式。 | 否 |
>
符号表示更深的嵌套级别。例如,client
> basic_auth
指的是在 client
块内定义的 basic_auth
块。
client
client
块配置用于发现 scrapeconfigs
的 Kubernetes client。如果未提供 client
块,则使用运行 Alloy Pod 的服务帐户的默认集群内配置。
支持以下参数
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
api_server | string | Kubernetes API 服务器的 URL。 | 否 | |
bearer_token_file | string | 包含用于认证的 Bearer token 的文件。 | 否 | |
bearer_token | secret | 用于认证的 Bearer token。 | 否 | |
enable_http2 | bool | 请求是否支持 HTTP2。 | true | 否 |
follow_redirects | bool | 是否应遵循服务器返回的重定向。 | true | 否 |
kubeconfig_file | string | 连接到 Kubernetes 所使用的 kubeconfig 文件路径。 | 否 | |
no_proxy | string | 逗号分隔的 IP 地址、CIDR 表示法和域名列表,用于排除代理。 | 否 | |
proxy_connect_header | map(list(secret)) | 指定在 CONNECT 请求期间发送给代理的请求头。 | 否 | |
proxy_from_environment | bool | 使用环境变量指示的代理 URL。 | false | 否 |
proxy_url | string | 发送请求所通过的 HTTP 代理。 | 否 |
最多只能提供以下之一
no_proxy
可以包含 IP、CIDR 表示法和域名。IP 和域名可以包含端口号。如果配置了 no_proxy
,则必须配置 proxy_url
。
proxy_from_environment
使用环境变量 HTTP_PROXY、HTTPS_PROXY 和 NO_PROXY(或其小写版本)。请求使用与其方案匹配的环境变量中的代理,除非被 NO_PROXY 排除。如果配置了 proxy_from_environment
,则不得配置 proxy_url
和 no_proxy
。
仅在配置了 proxy_url
或 proxy_from_environment
时才应配置 proxy_connect_header
。
authorization
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
credentials_file | string | 包含 secret 值的 文件。 | 否 | |
credentials | secret | Secret 值。 | 否 | |
type | string | 授权类型,例如“Bearer”。 | 否 |
credential
和 credentials_file
是互斥的,在一个 authorization
块内只能提供其中一个。
basic_auth
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
password_file | string | 包含 basic auth 密码的文件。 | 否 | |
password | secret | Basic auth 密码。 | 否 | |
username | string | Basic auth 用户名。 | 否 |
password
和 password_file
是互斥的,在一个 basic_auth
块内只能提供其中一个。
oauth2
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
client_id | string | OAuth2 客户端 ID。 | 否 | |
client_secret_file | string | 包含 OAuth2 客户端 secret 的文件。 | 否 | |
client_secret | secret | OAuth2 客户端 secret。 | 否 | |
endpoint_params | map(string) | 可选参数,用于附加到 token URL。 | 否 | |
proxy_url | string | 发送请求所通过的 HTTP 代理。 | 否 | |
no_proxy | string | 逗号分隔的 IP 地址、CIDR 表示法和域名列表,用于排除代理。 | 否 | |
proxy_from_environment | bool | 使用环境变量指示的代理 URL。 | false | 否 |
proxy_connect_header | map(list(secret)) | 指定在 CONNECT 请求期间发送给代理的请求头。 | 否 | |
scopes | list(string) | 用于认证的 scope 列表。 | 否 | |
token_url | string | 获取 token 的 URL。 | 否 |
client_secret
和 client_secret_file
是互斥的,在一个 oauth2
块内只能提供其中一个。
oauth2
块还可以包含一个单独的 tls_config
子块。
no_proxy
可以包含 IP、CIDR 表示法和域名。IP 和域名可以包含端口号。如果配置了 no_proxy
,则必须配置 proxy_url
。
proxy_from_environment
使用环境变量 HTTP_PROXY、HTTPS_PROXY 和 NO_PROXY(或其小写版本)。请求使用与其方案匹配的环境变量中的代理,除非被 NO_PROXY 排除。如果配置了 proxy_from_environment
,则不得配置 proxy_url
和 no_proxy
。
仅在配置了 proxy_url
或 proxy_from_environment
时才应配置 proxy_connect_header
。
tls_config
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
ca_pem | string | 用于验证服务器的 CA PEM 编码文本。 | 否 | |
ca_file | string | 用于验证服务器的 CA 证书。 | 否 | |
cert_pem | string | 用于客户端认证的证书 PEM 编码文本。 | 否 | |
cert_file | string | 用于客户端认证的证书文件。 | 否 | |
insecure_skip_verify | bool | 禁用服务器证书验证。 | 否 | |
key_file | string | 用于客户端认证的密钥文件。 | 否 | |
key_pem | secret | 用于客户端认证的密钥 PEM 编码文本。 | 否 | |
min_version | string | 最低可接受的 TLS 版本。 | 否 | |
server_name | string | ServerName 扩展,用于指示服务器名称。 | 否 |
以下参数对互斥,不能同时设置
ca_pem
和ca_file
cert_pem
和cert_file
key_pem
和key_file
配置客户端身份验证时,必须同时提供客户端证书(使用 cert_pem
或 cert_file
)和客户端密钥(使用 key_pem
或 key_file
)。
如果未提供 min_version
,则最低可接受的 TLS 版本继承自 Go 的默认最低版本 TLS 1.2。如果提供了 min_version
,则必须设置为以下字符串之一
"TLS10"
(TLS 1.0)"TLS11"
(TLS 1.1)"TLS12"
(TLS 1.2)"TLS13"
(TLS 1.3)
clustering
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
enabled | bool | 启用与其他集群节点共享目标。 | false | 是 |
当 Alloy 使用集群并且 enabled
设置为 true 时,此组件实例选择加入集群以在所有集群节点之间分配抓取负载。
集群假定所有集群节点都运行相同的配置文件,并且所有选择使用集群的 prometheus.operator.scrapeconfigs
组件实例在抓取间隔内具有相同的配置。
所有选择加入集群的 prometheus.operator.scrapeconfigs
组件实例使用目标标签和一致性哈希算法来确定每个目标在集群对等体之间的所有权。然后,每个对等体只抓取其负责的目标子集,从而分配抓取负载。当一个节点加入或离开集群时,每个对等体重新计算所有权并继续使用新的目标集进行抓取。这比 hashmod 分片表现更好,因为 hashmod 分片需要重新分配*所有*节点,而这里只转移了目标所有权的 1/N,并且是最终一致的(而不是像 hashmod 分片那样的完全一致)。
如果 Alloy *未*以集群模式运行,则该块不起作用,并且 prometheus.operator.scrapeconfigs
会抓取其参数中接收到的每个目标。
rule
rule
块包含可应用于输入指标的任何 Relabeling 规则的定义。如果定义了多个 rule
块,转换将按自上而下的顺序应用。
可以使用以下参数来配置 rule
。所有参数都是可选的。省略的字段采用其默认值。
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
action | string | 要执行的 relabeling 操作。 | replace | 否 |
modulus | uint | 一个正整数,用于计算哈希后的源标签值的模数。 | 否 | |
regex | string | 一个有效的 RE2 表达式,支持括号捕获组。用于匹配从 source_label 和 separator 字段组合中提取的值,或在 labelkeep/labeldrop/labelmap 操作期间过滤标签。 | (.*) | 否 |
replacement | string | 如果正则表达式与提取的值匹配,则对其执行正则表达式替换的值。支持先前的捕获组。 | "$1" | 否 |
separator | string | 用于连接 source_labels 中存在的值的分隔符。 | ; | 否 |
source_labels | list(string) | 要选择值的标签列表。其内容使用 separator 连接,并与 regex 匹配。 | 否 | |
target_label | string | 将结果值写入到的标签。 | 否 |
您可以使用以下操作
drop
- 丢弃通过source_labels
和separator
提取的字符串与regex
匹配的指标。dropequal
- 丢弃串联的source_labels
与target_label
*不*匹配的目标。hashmod
- 哈希串联的标签,计算其模数modulus
,并将结果写入target_label
。keep
- 保留通过source_labels
和separator
提取的字符串与regex
匹配的指标。keepequal
- 丢弃串联的source_labels
与target_label
匹配的目标。labeldrop
- 将regex
与所有标签名称匹配。任何匹配的标签都将从指标的标签集中移除。labelkeep
- 将regex
与所有标签名称匹配。任何不匹配的标签都将从指标的标签集中移除。labelmap
- 将regex
与所有标签名称匹配。任何匹配的标签将根据replacement
字段的内容重命名。lowercase
- 将target_label
设置为串联的source_labels
的小写形式。replace
- 将regex
与串联的标签匹配。如果匹配,则使用replacement
字段的内容替换target_label
的内容。uppercase
- 将target_label
设置为串联的source_labels
的大写形式。
注意
可以使用
$CAPTURE_GROUP_NUMBER
或${CAPTURE_GROUP_NUMBER}
符号引用正则表达式捕获组。
scrape
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
default_scrape_interval | duration | 抓取目标的默认间隔。如果目标资源未提供抓取间隔,则用作默认值。 | 1m | 否 |
default_scrape_timeout | duration | 抓取请求的默认超时时间。如果目标资源未提供抓取超时时间,则用作默认值。 | 10s | 否 |
selector
selector
块描述了 scrapeconfigs
的 Kubernetes 标签选择器。
支持以下参数
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
match_labels | map(string) | 用于发现资源的标签键和值。 | {} | 否 |
当 match_labels
参数为空时,将匹配所有 ScrapeConfig 资源。
match_expression
match_expression
块描述了用于 scrapeconfigs 发现的 Kubernetes 标签匹配器表达式。
支持以下参数
名称 | 类型 | 描述 | 默认值 | 必需 |
---|---|---|---|---|
key | string | 要匹配的标签名称。 | 是 | |
operator | string | 匹配时使用的运算符。 | 是 | |
values | list(string) | 匹配时使用的值。 | 否 |
operator
参数必须是以下字符串之一
"In"
"NotIn"
"Exists"
"DoesNotExist"
如果在 selector
块内有多个 match_expressions
块,它们将通过 AND 子句组合在一起。
导出的字段
prometheus.operator.scrapeconfigs
不导出任何字段。它将抓取的所有指标转发到使用 forward_to
参数配置的接收器。
组件健康状态
当给定无效配置、Prometheus 组件初始化失败或与 Kubernetes API 的连接未正确建立时,prometheus.operator.scrapeconfigs
会报告为不健康。
调试信息
prometheus.operator.scrapeconfigs
在组件的调试端点上报告每个已配置抓取作业的上次抓取状态,包括发现的标签和上次抓取时间。
它还为它发现的每个 ScrapeConfig 公开一些调试信息,包括在协调 ScrapeConfig 中的抓取配置时发现的任何错误。
调试指标
prometheus.operator.scrapeconfigs
不公开任何特定于组件的调试指标。
示例
此示例发现集群中的所有 scrapeconfigs,并将收集到的指标转发到 prometheus.remote_write
组件。
prometheus.remote_write "staging" {
// Send metrics to a locally running Mimir.
endpoint {
url = "http://mimir:9009/api/v1/push"
basic_auth {
username = "example-user"
password = "example-password"
}
}
}
prometheus.operator.scrapeconfigs "scrapeconfigs" {
forward_to = [prometheus.remote_write.staging.receiver]
}
此示例将发现的 scrapeconfigs
限制为特定命名空间 my-app
中带有标签 team=ops
的那些。
prometheus.operator.scrapeconfigs "scrapeconfigs" {
forward_to = [prometheus.remote_write.staging.receiver]
namespaces = ["my-app"]
selector {
match_expression {
key = "team"
operator = "In"
values = ["ops"]
}
}
}
额外的指标标签
prometheus.operator.scrapeconfigs
会为 ScrapeConfig 对象抓取的所有指标添加以下额外标签。
标签 | 描述 |
---|---|
__meta_kubernetes_scrapeconfig_namespace | ScrapeConfig 对象的命名空间 |
__meta_kubernetes_scrapeconfig_name | ScrapeConfig 对象的名称 |
兼容组件
prometheus.operator.scrapeconfigs
可以接受来自以下组件的参数
- 导出 Prometheus
MetricsReceiver
的组件
注意
连接某些组件可能不合理,或者组件可能需要进一步配置才能使连接正常工作。有关详细信息,请参阅相关文档。