eBPF 可观测性详解:采集原理与实践
了解 Linux eBPF 的挂载点、验证器、权限与内核要求,比较 eBPF 采集和 OpenTelemetry 应用埋点的覆盖范围,并查看 DataKit 网络观测与实验性链路采集的前提。
eBPF 源于经典 BPF(Berkeley Packet Filter)。在 Linux 上,采集器可以加载受内核验证的程序,在支持的挂载点观察系统调用、网络和函数事件。 这类采集通常可以保留应用代码和二进制,适用于排查遗留系统和第三方组件。能看到什么,取决于内核功能、挂载点、权限和所用采集器。Linux BPF 系统调用
核心要点速览
- eBPF 程序在所选挂载点触发时执行,加载时由内核验证器检查程序路径、访存等约束。
- 系统和网络探针通常无需改动应用代码。用户态函数探针仍受运行时、二进制和挂载点影响,采集也有资源开销。
- 可以结合 OpenTelemetry 观测应用行为。SDK 或自动埋点能提供应用上下文,OpenTelemetry 本身也有基于 eBPF 的自动埋点工具 OBI。
eBPF 是什么?
内核 tracepoint 等机制已经可以暴露运行事件。eBPF 提供可编程的处理方式,让采集器在支持的挂载点筛选、聚合或输出事件。加载时,验证器检查控制流、寄存器和内存访问等约束。支持有界循环的内核可接受验证器能证明终止的循环。是否使用 JIT 取决于内核配置与架构。内核验证器 · 有界循环的内核变更 · Linux BPF
常见挂载点包括系统调用的进入与退出、内核函数(kprobe)、用户态函数(uprobe)、静态追踪点(tracepoint),以及网络路径上的 XDP 或 TC。每种挂载点能读到的上下文不同。容器仍依赖节点的 Linux 内核,并受权限及安全策略约束。libbpf 概览 · kprobe · uprobe
为什么 eBPF 适合可观测性?
- 减少应用改动。当所需信号可以在系统或网络层取得时,原有服务可以继续用同一套应用代码。
- 跨语言看共同信号。Java、Go、C++ 或 Rust 服务都可能使用同一套系统调用与网络接口。要读用户态函数或协议内容,还需匹配运行时、符号或协议解析器。
- 按需聚合。例如在内核里按连接累加字节数,再由用户态读取结果。挂载点频率、程序逻辑和数据导出量都会影响开销。
- 补充内核视角。TCP 重传、文件 I/O 等可从合适的探针取得。连接统计与协议内容要分开看。探针如果只看到 TLS 密文,仍可观测连接,但无法从密文直接解析 HTTP 方法或路径。
动手实践的路径
- 工具链。在获准的 Linux 测试机上,先核对内核功能与权限。
bpftool feature probe kernel可以检查支持的 BPF 程序类型、Map 类型和 helper。BCC 提供 Python 开发接口。加载和挂载可能还需要跟踪、网络或其他权限,具体取决于内核、程序类型与运行环境。bpftool 功能探测 - 第一个程序。BCC 的
hello_fields.py用get_syscall_fnname("clone")解析当前架构的系统调用符号,再挂载 kprobe。先确认目标符号存在,只对受控的测试活动观察输出。记录表示探针命中了这个入口。若要统计成功创建的进程,还需选择合适的事件并区分线程、失败调用和其他创建路径。BCC Python 教程 - 进阶。把高频事件的计数写入 eBPF Map。内核程序和用户态可通过各自的接口访问 Map。举例来说,可以按连接统计流量,由用户态定期读取,再根据负载检查 Map 容量和事件丢失情况。
学习时可以从 BCC 教程、libbpf-bootstrap 或 Go 的 cilium/ebpf 开始。以上示例根据公开文档整理。
在观测云中,可以先从 DataKit 的 ebpf-net 验证 TCP 连接、RTT 或重传,再按需开启 UDP 和协议采集。启用前核对 Linux 节点、DataKit 版本及架构、eBPF/kprobe/perf 支持和文档要求的 root 权限。Kubernetes 部署还需按官方清单核对主机路径挂载和权限。网络统计与应用链路采用不同配置。实验性 ebpf-trace 需要另行启用,并将 eBPF Span 发给开启 ebpftrace 的 DataKit 或 DataKit ELinker。需要跨节点拼接的 Span 应汇到同一个接收端。可见的协议、应用上下文和网络范围取决于插件及环境。DataKit eBPF · DataKit eBPF 链路 · DataKit 安全说明
eBPF 与 OpenTelemetry 怎么选?
可以先按排障需要区分内核信号和应用上下文。eBPF 是采集和处理的机制,OpenTelemetry 提供埋点、语义约定及遥测传输等能力。两者的范围有交集,例如 OpenTelemetry OBI 用 eBPF 为受支持的 Linux 工作负载采集应用信号。
| 维度 | eBPF 采集 | OpenTelemetry 应用埋点 |
|---|---|---|
| 部署方式 | 通常不改应用代码,需 Linux 挂载点及相应权限 | 可显式用 SDK 埋点,也有零代码方案,取决于语言和工具 |
| 数据深度 | 系统和网络行为,部分工具可按支持范围解析应用协议 | 支持的框架、方法或自定义业务字段,取决于埋点和配置 |
| 语言相关 | 内核信号通常与语言无关,用户态探针可能依赖运行时和符号 | SDK 和自动埋点有各自的语言与框架支持范围 |
| 典型用途 | 连接统计、网络问题诊断、运行时安全观测 | 请求链路、业务上下文、自定义指标 |
实践中,可用 OpenTelemetry 给请求补上操作名称和业务上下文,再用 eBPF 检查同一时间段的 RTT、重传和连接失败。同一时段出现只能提供排查线索,逐请求关联还需要可传递的链路上下文或其他可靠标识。OpenTelemetry 零代码埋点 · 上下文传播
常见问题(FAQ)
Q:eBPF 对内核版本有要求吗? 有。按采集器所需的程序类型、helper、挂载点和发行版回移植情况核对。BTF 为类型信息提供元数据,CO-RE 使用目标内核的类型信息适配结构差异,仍需目标环境支持程序实际依赖的功能。BTF · libbpf 与 CO-RE
Q:eBPF 性能开销到底多大? 取决于挂载点触发频率、程序逻辑及输出量。高频探针可先过滤或聚合。部署前用代表性负载对比采集器 CPU、内存、事件丢失和应用延迟。
Q:eBPF 能替代 APM 探针吗? 支持的协议和运行时可以产生部分应用 Span。若需要业务属性、方法级耗时或跨服务上下文传播,应按现有采集覆盖补充 SDK、Agent 或其他埋点。
Q:eBPF 在安全领域也能用吗? 可以。Tetragon 用 eBPF 做运行时安全观测和执行策略,Falco 可通过其现代 eBPF 探针获取内核事件,也支持内核模块驱动。部署取决于工具和驱动的要求。Tetragon · Falco 内核事件
系列阅读
- 上一篇:《Jaeger 分布式追踪实战》
- 下一篇:《什么是 OpenTelemetry》
- 相关:《分布式追踪详解》 · 《返回索引》
资料核对日期:2026-11-06。