K8s 审计日志 sourceIPs 污染:X-Forwarded-For 批量伪造 + X-Real-IP 单 IP,真实来源仍在末尾
cloud/k8s · verified
一句话结论
Kubernetes apiserver 的审计日志会把请求中的 X-Forwarded-For、X-Real-IP 头内容汇总进 sourceIPs 数组;攻击者用带大量伪造 IP 的 X-Forwarded-For(或单个 X-Real-IP)发 API 请求,就能让审计日志出现一长串与攻击者无关的 IP,增加防守方按 IP 溯源的筛选/关联成本;但真实来源 IP 仍会被追加在数组末尾,防守方读取最后一个 IP 即可还原真实来源。
原理
- K8s 审计事件(
audit.k8s.io/v1)的sourceIPs字段记录请求来源。apiserver 在填充该字段时会把代理头X-Forwarded-For(逗号分隔的 IP 链)和X-Real-IP(单个 IP)纳入,再追加实际连接的来源地址。 X-Forwarded-For是 HTTP 代理常用的客户端 IP 传递头,语义上允许一路追加;apiserver 不校验其内容是否可信,直接写入审计日志。因此攻击者可以写任意多个 IP(原文示例从192.168.49.1一直列到192.168.49.254)。X-Real-IP只能放一个 IP,同样会被记录,但伪造效果有限;实测审计日志sourceIPs为["192.168.49.2", "192.168.49.1"],其中192.168.49.1是真实来源。- 真实来源 IP 总是被追加到
sourceIPs末尾(原文实测修改 IP 顺序/内容不会改变这一行为),所以这不是“完全隐藏来源”,而是“用大量噪声淹没真实 IP”,让按 IP 频次、地理、威胁情报关联的溯源多花时间。 - 该技巧不绕过认证/授权,只影响审计数据的可读性;它适用于已经拿到合法凭据(或处于内网)的攻击者在 API 操作时持续投放噪声。
触发条件
- 目标 K8s 集群开启审计日志(
--audit-log-path或审计 webhook),且审计级别至少记录Metadata/Request(sourceIPs通常在这些级别出现)。 - 攻击者能向 apiserver(或经过的代理)发送请求,并能设置
X-Forwarded-For/X-Real-IP头;若中间代理会覆盖这些头,效果会受限。 - 审计日志的消费方(SIEM/平台)按
sourceIPs做溯源或告警,且没有优先取最后一个 IP。
利用步骤
- 确认目标 apiserver 的审计日志会记录
sourceIPs,并观察默认请求的sourceIPs内容。 - 构造带大量伪造 IP 的
X-Forwarded-For请求(原文使用 192.168.49.1–254),正常访问一个会产生审计事件的 API(如GET /api/v1/pods)。 - 查看审计日志/平台,确认
sourceIPs被写入伪造列表,真实 IP 在末尾。 - 在后续操作中持续更换 IP 段/伪造头,制造大量看似来自不同来源的审计事件,干扰按 IP 聚合的告警与溯源。
- 结合其他反取证手段(如伪造 webhook 事件,见 [[cloud-k8s-audit-webhook-forged-eventlist]])进一步增加分析成本。
PoC
# X-Forwarded-For:大量伪造 IP(原文示例为 192.168.49.1 ~ 192.168.49.254)
curl --cert /root/.minikube/profiles/minikube/client.crt \
--key /root/.minikube/profiles/minikube/client.key \
-X GET https://192.168.49.2:8443/api/v1/pods -k \
-H 'User-Agent: ' \
-H 'X-Forwarded-For: 192.168.49.1, 192.168.49.2, 192.168.49.3, ..., 192.168.49.254'
# X-Real-IP:只能伪造一个 IP
curl --cert /root/.minikube/profiles/minikube/client.crt \
--key /root/.minikube/profiles/minikube/client.key \
-X GET https://192.168.49.2:8443/api/v1/pods -k \
-H 'User-Agent: ' \
-H 'X-Real-IP: 192.168.49.2'
审计日志中可见:
"sourceIPs": ["192.168.49.1", "192.168.49.2", "...", "192.168.49.254", "192.168.49.1"]
(最后一个 192.168.49.1 为真实来源;X-Real-IP 场景下为 ["192.168.49.2", "192.168.49.1"]。)
变体与关联
X-Forwarded-For可写 IPv6、内网/公网混合、重复 IP、超长列表(注意代理/头长度限制);X-Real-IP只能单值,噪声效果弱。- 若中间有 Ingress/代理,代理可能覆盖或追加这些头;需要先确认实际到达 apiserver 的头内容。
- 与 webhook 伪造事件组合:[[cloud-k8s-audit-webhook-forged-eventlist]]。
- 防守侧日志溯源方法见 [[defense-forensics-web-access-log-attacker-ip-triage]](思路类似:按 IP 频次/敏感路径筛选,但那是 Web access.log,不是 K8s audit)。
检测与防御
- 审计消费方:解析
sourceIPs时优先取最后一个 IP(真实来源),或把前面的条目标记为“代理/不可信”;不要只用第一个 IP 或对整串做频次统计。 - apiserver/网关:在可信边界(负载均衡/Ingress)清洗并覆盖
X-Forwarded-For/X-Real-IP,只保留可信代理链;对超长/异常 IP 列表做限制和告警。 - 检测:审计事件中
sourceIPs长度异常、包含大量连续/同段 IP、与user.username/userAgent/requestURI行为不一致;同一用户在短时间内出现大量“不同来源 IP”的请求。 - 平台侧:对审计日志做签名/防篡改,限制写入通道;告警关联真实来源 IP 与行为基线,避免被噪声淹没。