OverlayFS/挂载覆盖隐藏 /var/log 的识别与恢复
defense/forensics · verified
一句话结论
攻击者获得 root 后可把空的 tmpfs 或 OverlayFS 挂载到 /var/log 上,让 ls/cat 只能看到“覆盖层”,原始日志仍留在下层磁盘但被 VFS 遮蔽;应急时用 findmnt 找到异常挂载并 umount 即可恢复原始日志。
原理
- Linux 的路径解析由挂载表决定:在某个目录上挂载新的文件系统后,该路径的查找会落到新挂载的根,而不是原目录的内容。这就是“挂载覆盖”(mount shadowing)。
- 攻击者把空的
tmpfs或overlay挂到/var/log后,读取/var/log看到的是空目录/覆盖层;原始auth.log、syslog等仍在下层文件系统中,只是暂时不可见。 - OverlayFS 通过
lowerdir/upperdir/workdir合并多层目录:如果攻击者把原始日志目录作为 lower、空的 upper 放到别处,或反过来用一个空层覆盖,读取结果取决于挂载配置。案例中findmnt显示/var/log被 overlay 挂载,源路径位于/work/storage/.../log与/work/rootfs/tmp/.../mnt,umount后原始auth.log重新可见。 - 这种做法比
rm -rf /var/log/*更隐蔽:文件没有被删除,文件完整性监控可能看不到内容被清空;常规ls也看不到异常,除非检查挂载表。 - 如果攻击者在独立的 mount namespace 中操作(容器/
unshare -m),宿主机进程的/proc/<pid>/mountinfo仍能看到该 namespace 的挂载;需要进入对应 namespace 或读取其/proc/<pid>/root。
触发条件
- 攻击者已获得 root(或具备
CAP_SYS_ADMIN)并能执行mount。 - 目标未限制 mount 操作(无只读根、无 seccomp/AppArmor 阻断
mount)。 - 原始日志所在文件系统仍可访问;攻击者只是覆盖视图,没有删除/格式化底层数据。
- 应急人员能以 root 检查挂载表并执行
umount(或从其他 namespace/宿主机查看)。
利用步骤
- 攻击者创建空目录/文件系统作为覆盖层:
mkdir -p /tmp/empty && mount -t tmpfs tmpfs /var/log或使用 overlay:mount -t overlay overlay -o lowerdir=/var/log,upperdir=/tmp/up,workdir=/tmp/work /var/log - 确认覆盖生效:
ls -la /var/log只看到空/覆盖层内容。 - 原始日志仍在下层;攻击者可继续操作,常规查看看不到历史日志。
- 应急人员检查挂载:
findmnt /var/log、cat /proc/self/mountinfo | grep /var/log。 - 解除覆盖:
umount /var/log(busy 时umount -l /var/log),再次查看原始日志。 - 若挂载位于其他 namespace:进入 namespace 或读取
/proc/<pid>/root/var/log。
PoC
# 攻击者:用空 tmpfs 覆盖日志目录(需 root)
mkdir -p /tmp/empty
mount -t tmpfs tmpfs /var/log
ls -la /var/log # 只看到空目录/覆盖层
# 应急:发现异常挂载
findmnt /var/log
# 示例输出:
# TARGET SOURCE FSTYPE OPTIONS
# /var/log overlay[/work/storage/.../log] overlay rw,relatime
# 恢复原始日志
umount /var/log
ls -la /var/log # 原始 auth.log/syslog 重新出现
grep sshd /var/log/auth.log
# 查看所有进程的挂载命名空间差异(发现隐藏挂载)
for p in /proc/[0-9]*; do
findmnt -N "$(readlink -f "$p/ns/mnt")" /var/log 2>/dev/null && echo "pid=$p"
done
变体与关联
- 变体:
tmpfs、overlay、bind mount都可以覆盖目录;bind mount 一个空目录到/var/log同样能遮蔽。 - 变体:只覆盖
/var/log/audit、/var/log/auth.log等关键文件/子目录,降低被整体巡检发现的概率。 - 变体:在容器内挂载,利用 mount namespace 让宿主机常规
ls看不到,但宿主机/proc/<pid>/mountinfo仍可发现。 - 关联:[[defense-forensics-multisource-timeline-log-clear]](日志被删除后的多源时间线重建);[[defense-forensics-ansi-escape-log-poisoning]]、[[defense-forensics-carriage-return-output-overwrite]](其他日志反取证手法)。
- 边界:需要 root/CAP_SYS_ADMIN;底层文件若被删除/格式化,umount 也无法恢复;只读根、无 CAP_SYS_ADMIN、seccomp 阻断 mount 时无法实施。
检测与防御
- 检测:监控
mount/umount系统调用(auditd、eBPF);定期比对/proc/self/mountinfo与基线,告警/var/log、/var/log/audit上出现的 tmpfs/overlay/bind 挂载;检查异常 mount namespace;对日志目录做 inode/文件数基线。 - 修复/加固:限制普通账户与服务的
CAP_SYS_ADMIN;使用只读根/只读日志分区;容器使用PrivateTmp、只读挂载与 seccomp 阻断 mount。 - 缓解:日志实时转发到远程 SIEM/对象存储,保留独立副本;启用文件完整性监控;应急时先保存
/proc/*/mountinfo再卸载。