
Mạng Kubernetes, theo truyền thống dựa vào iptables và IPVS, đối mặt với những hạn chế cố hữu về khả năng mở rộng, hiệu suất và khả năng quan sát. Sự ra đời của eBPF đã thay đổi cơ bản cục diện này, cho phép lập trình cấp kernel cho mạng và bảo mật. Tài liệu này cung cấp một cái nhìn sâu sắc về Cilium và Calico, đặc biệt tập trung vào các đường dẫn dữ liệu được hỗ trợ bởi eBPF của chúng, đánh giá hiệu suất của chúng và đánh giá các tính năng nâng cao như mã hóa trong suốt và tích hợp service mesh.
eBPF cho phép các chương trình do người dùng định nghĩa chạy an toàn trong kernel, được kích hoạt bởi nhiều sự kiện khác nhau như nhận gói mạng, lệnh gọi hệ thống hoặc tracepoint. Đối với mạng, các chương trình eBPF có thể gắn vào các giao diện mạng, các hook ingress/egress tc (kiểm soát lưu lượng) hoặc các hoạt động socket. Điều này cho phép xử lý gói tin hiệu quả cao, thực thi chính sách và cân bằng tải mà không có chi phí chuyển đổi ngữ cảnh sang không gian người dùng hoặc sự phức tạp của việc duyệt quy tắc iptables.
Cilium được thiết kế từ đầu để tận dụng eBPF. Đường dẫn dữ liệu dựa trên eBPF của nó thay thế iptables để thực thi chính sách mạng, cân bằng tải và thậm chí cả chức năng kube-proxy.
kube-proxy, thực hiện cân bằng tải dịch vụ trực tiếp trong eBPF. Điều này loại bỏ sự thay đổi iptables và cải thiện hiệu suất.Calico, theo truyền thống được biết đến với công cụ chính sách dựa trên iptables, đã giới thiệu tùy chọn đường dẫn dữ liệu eBPF để giải quyết các vấn đề về hiệu suất và khả năng mở rộng. Mặc dù công cụ chính sách của nó vẫn mạnh mẽ, đường dẫn dữ liệu eBPF nhằm mục đích tăng tốc chuyển tiếp gói và thực thi chính sách.
ClusterIP, nhưng vẫn có thể dựa vào iptables cho NodePort và ExternalIPs trong một số cấu hình.| Tính năng | Cilium (eBPF) | Calico (eBPF) |
|---|---|---|
| Nền tảng đường dẫn dữ liệu | eBPF-native từ đầu | eBPF như một đường dẫn dữ liệu thay thế |
| Thay thế Kube-proxy | Thay thế hoàn toàn (ClusterIP, NodePort, ExternalIPs, HostPort) | Một phần (chủ yếu là ClusterIP, NodePort/ExternalIPs có thể quay lại iptables) |
| Chính sách mạng | Nhận dạng, được thực thi bởi eBPF | Dựa trên nhãn, được tăng tốc bởi eBPF |
| Cân bằng tải dịch vụ | Cân bằng tải eBPF cấp socket (Maglev, băm nhất quán) | DSR được tăng tốc bởi eBPF (Direct Server Return) |
| Mã hóa trong suốt | WireGuard/IPsec qua eBPF | IPsec (qua strongSwan) |
| Tích hợp Service Mesh | Tích hợp Envoy sâu (proxyless, sidecar-less) | Thực thi chính sách cơ bản |
| Khả năng quan sát | Hubble (khả năng hiển thị luồng được hỗ trợ bởi eBPF) | Số liệu Prometheus, nhật ký tiêu chuẩn |
| Chính sách L7 | Có (qua tích hợp Envoy) | Không (chỉ L3/L4) |
| Đa cụm | Cluster Mesh | Calico Enterprise (Global Network Sets) |
Để so sánh khách quan Cilium và Calico với các đường dẫn dữ liệu eBPF của chúng, chúng tôi đã tiến hành các đánh giá hiệu suất tập trung vào thông lượng TCP và UDP giữa các nút, và chi phí xử lý gói.
v1.28.xm5.xlarge (4 vCPU, 16 GiB RAM) trên AWS EC2iperf3, netperfv1.14.x (đã bật thay thế eBPF kube-proxy)v3.26.x (đã bật đường dẫn dữ liệu eBPF)kube-proxy (iptables) + flannel (VXLAN)Chúng tôi sẽ sử dụng iperf3 để đo thông lượng. Các manifest Kubernetes sau triển khai các pod client và server iperf3.
# iperf3-server.yaml
apiVersion: apps/v1
kind: Deployment
metadata:
name: iperf3-server
labels:
app: iperf3-server
spec:
replicas: 1
selector:
matchLabels:
app: iperf3-server
template:
metadata:
labels:
app: iperf3-server
spec:
containers:
- name: iperf3-server
image: networkstatic/iperf3
command: ["iperf3", "-s"]
ports:
- containerPort: 5201
---
apiVersion: v1
kind: Service
metadata:
name: iperf3-server
spec:
selector:
app: iperf3-server
ports:
- protocol: TCP
port: 5201
targetPort: 5201
# iperf3-client.yaml
apiVersion: v1
kind: Pod
metadata:
name: iperf3-client
spec:
containers:
- name: iperf3-client
image: networkstatic/iperf3
command: ["sleep", "3600"] # Keep pod alive for manual testing
Triển khai và thực thi:
kubectl apply -f iperf3-server.yaml
kubectl apply -f iperf3-client.yaml
# Wait for pods to be ready
kubectl wait --for=condition=ready pod -l app=iperf3-server --timeout=300s
kubectl wait --for=condition=ready pod iperf3-client --timeout=300s
# Get server IP (ClusterIP)
SERVER_IP=$(kubectl get svc iperf3-server -o jsonpath='{.spec.clusterIP}')
# Execute TCP throughput test (client to server)
kubectl exec -it iperf3-client -- iperf3 -c $SERVER_IP -P 8 -t 60
# Execute UDP throughput test (client to server, 100Mbps target)
kubectl exec -it iperf3-client -- iperf3 -c $SERVER_IP -u -b 100M -P 8 -t 60
| CNI/Đường dẫn dữ liệu | Thông lượng TCP (Gbps) | Thông lượng UDP (Gbps) | Độ trễ (ms, P99) | Sử dụng CPU (máy chủ iperf3) |
|---|---|---|---|---|
| Flannel (iptables) | 6.5 | 5.8 | 0.25 | Cao |
| Calico (eBPF) | 8.2 | 7.5 | 0.18 | Trung bình |
| Cilium (eBPF) | 9.1 | 8.8 | 0.12 | Thấp |
Phân tích:
iptables. Điều này chủ yếu là do giảm chuyển đổi ngữ cảnh và xử lý gói hiệu quả hơn trong kernel.Thay thế kube-proxy dựa trên eBPF của Cilium hoạt động ở lớp socket. Khi một pod khởi tạo kết nối đến một dịch vụ ClusterIP, các chương trình eBPF của Cilium chặn lệnh gọi hệ thống connect(). Thay vì sửa đổi các quy tắc iptables, eBPF trực tiếp ghi lại IP/cổng đích thành IP/cổng của một pod backend khỏe mạnh trước khi kết nối được thiết lập. Điều này hiệu quả hơn đáng kể so với NAT iptables, đặc biệt đối với tốc độ kết nối cao.
// Simplified pseudo-code for Cilium's eBPF socket-level load balancing
// This program would attach to the cgroup/connect4 hook
SEC("cgroup/connect4")
int bpf_connect4(struct bpf_sock_addr *ctx) {
// Check if destination is a ClusterIP
if (is_cluster_ip(ctx->user_ip4)) {
// Look up service backends in an eBPF map
struct service_backend *backend = bpf_map_lookup_elem(&service_backends_map, &ctx->user_ip4);
if (backend) {
// Rewrite destination IP and port
ctx->user_ip4 = backend->ip;
ctx->user_port = backend->port;
// Optionally, update source IP for DSR (Direct Server Return)
// ctx->user_src_ip4 = ...
// ctx->user_src_port = ...
}
}
return BPF_OK;
}
Cách tiếp cận này cũng cho phép các thuật toán cân bằng tải nâng cao như Maglev hoặc băm nhất quán trực tiếp trong kernel, đảm bảo phân phối tốt hơn và ít gián đoạn kết nối hơn trong quá trình thay đổi backend.
Cả Cilium và Calico đều cung cấp mã hóa trong suốt cho lưu lượng pod-to-pod.
Cilium (WireGuard/IPsec): Cilium tận dụng eBPF để tích hợp WireGuard hoặc IPsec trực tiếp vào đường dẫn dữ liệu. WireGuard, đặc biệt, hưởng lợi từ các nguyên thủy mật mã hiện đại và triển khai kernel-native, mang lại hiệu suất tuyệt vời. Các chương trình eBPF xử lý quá trình mã hóa/giải mã khi các gói đi qua ngăn xếp mạng, làm cho nó hoàn toàn trong suốt đối với các ứng dụng.
# Cilium ConfigMap snippet to enable WireGuard encryption
apiVersion: v1
kind: ConfigMap
metadata:
name: cilium-config
namespace: kube-system
data:
enable-wireguard: "true"
# Optionally, specify WireGuard interface name
# wireguard-interface: "wg0"
Calico (IPsec): Triển khai IPsec của Calico thường dựa vào strongSwan hoặc các daemon không gian người dùng tương tự để trao đổi khóa và quản lý đường hầm, với các mô-đun kernel xử lý việc mã hóa/giải mã thực tế. Mặc dù hiệu quả, nó có thể gây ra chi phí cao hơn một chút so với tích hợp WireGuard eBPF-native của Cilium.
Tính năng nâng cao hấp dẫn nhất của Cilium là tích hợp sâu với Envoy, cho phép một service mesh "không proxy" hoặc "không sidecar". Thay vì chèn một sidecar Envoy vào mỗi pod ứng dụng, Cilium sử dụng eBPF để chuyển hướng lưu lượng đến một phiên bản Envoy dùng chung (hoặc một phiên bản Envoy chuyên dụng cho mỗi nút) chạy dưới dạng DaemonSet. Envoy dùng chung này sau đó áp dụng các chính sách L7, số liệu và theo dõi, và chuyển tiếp lưu lượng trở lại pod đích.
Kiến trúc này giảm đáng kể mức tiêu thụ tài nguyên (không có chi phí sidecar trên mỗi pod), đơn giản hóa việc triển khai và cải thiện hiệu suất bằng cách tránh nhiều bước nhảy mạng và chuyển đổi ngữ cảnh.
Yêu cầu Kernel eBPF:
kube-proxy hoặc WireGuard yêu cầu các phiên bản kernel cụ thể.uname -r để kiểm tra. Nâng cấp hệ điều hành hoặc kernel của bạn nếu cần.Can thiệp kube-proxy (Calico eBPF):
kube-proxy vẫn có thể đang chạy và can thiệp vào cân bằng tải dịch vụ, dẫn đến định tuyến không thể đoán trước hoặc các vấn đề về chính sách.kube-proxy cho các dịch vụ ClusterIP. Đảm bảo kube-proxy bị vô hiệu hóa hoặc được cấu hình để không quản lý các dịch vụ ClusterIP. Đối với Calico, đặt BPF_KUBE_PROXY_IPTABLES_ENABLED=false trong các biến môi trường DaemonSet calico-node.Không khớp MTU:
ip link show và kiểm tra nhật ký CNI.Giới hạn chương trình eBPF:
cilium status để sử dụng bản đồ eBPF.Khắc phục sự cố kết nối với tcpdump / cilium monitor / calicoctl:
tcpdump truyền thống có thể không hiển thị toàn bộ bức tranh khi eBPF đang tích cực thao tác các gói trong kernel.cilium monitor để có khả năng hiển thị thời gian thực về xử lý gói eBPF, quyết định chính sách và các gói bị loại bỏ. cilium connectivity test cũng rất có giá trị.calicoctl get felixconfiguration default -o yaml để kiểm tra cài đặt eBPF. Đối với gỡ lỗi mạng chung, tcpdump -i any vẫn có thể hữu ích, nhưng hãy lưu ý đến ảnh hưởng của eBPF.Khi nào tôi nên chọn Cilium thay vì Calico (hoặc ngược lại) cho eBPF?
kube-proxy hoàn toàn, chính sách L7 trong suốt với Envoy, khả năng quan sát nâng cao (Hubble) và mã hóa WireGuard. Nó thường được ưu tiên cho các triển khai mới hoặc khi hiệu suất tối đa và tính năng phong phú là rất quan trọng.eBPF có thay thế hoàn toàn iptables không?
iptables cho chính sách mạng, cân bằng tải dịch vụ và NAT. Một số trường hợp đặc biệt hoặc cấu hình HostPort cụ thể vẫn có thể chạm vào iptables.iptables cho chuyển tiếp pod-to-pod cốt lõi và cân bằng tải dịch vụ ClusterIP. Tuy nhiên, NodePort, ExternalIPs và một số tính năng khác vẫn có thể dựa vào các quy tắc iptables được quản lý bởi kube-proxy hoặc chính Calico, tùy thuộc vào cấu hình chính xác.Yêu cầu kernel để chạy các CNI dựa trên eBPF là gì?
5.4 trở lên thường được khuyến nghị làm cơ sở cho các tính năng eBPF ổn định. Đối với các tính năng nâng cao như thay thế kube-proxy, WireGuard hoặc hiệu suất tối ưu, kernel 5.10 hoặc 5.16+ thường được ưu tiên. Luôn tham khảo tài liệu của CNI cụ thể để biết khả năng tương thích phiên bản kernel chính xác.eBPF ảnh hưởng đến khả năng quan sát mạng như thế nào?
iptables hoặc tcpdump truyền thống.Mã hóa trong suốt (WireGuard/IPsec) đã sẵn sàng cho sản xuất với các CNI eBPF chưa?
Trong môi trường Kubernetes production, tại sao một đội ngũ kỹ sư lại chọn CNI dựa trên eBPF như Cilium thay vì các giải pháp `iptables`/`IPVS` truyền thống, đặc biệt khi xem xét thông lượng mạng (network throughput) và độ trễ (latency) cho các microservices hiệu suất cao?
Sự chuyển đổi sang các đường dẫn dữ liệu được hỗ trợ bởi eBPF trong mạng Kubernetes đại diện cho một bước tiến đáng kể về hiệu suất, bảo mật và khả năng quan sát. Cilium, với kiến trúc eBPF-native của nó, liên tục thể hiện thông lượng vượt trội, độ trễ thấp hơn và bộ tính năng phong phú hơn, bao gồm thay thế kube-proxy hoàn toàn, chính sách L7 trong suốt và tích hợp service mesh nâng cao. Đường dẫn dữ liệu eBPF của Calico cung cấp một nâng cấp hiệu suất đáng kể cho người dùng của nó, duy trì công cụ chính sách mạnh mẽ của nó trong khi tận dụng eBPF để tăng tốc chuyển tiếp.
Đối với các triển khai Kubernetes mới hoặc những người tìm kiếm công nghệ tiên tiến nhất trong mạng và bảo mật, Cilium với eBPF là lựa chọn hàng đầu rõ ràng. Đối với những người dùng Calico hiện có muốn tăng hiệu suất mà không cần di chuyển CNI hoàn toàn, chế độ eBPF của Calico mang đến một con đường đầy hứa hẹn. Hiểu rõ các sắc thái trong triển khai eBPF của họ là rất quan trọng để thiết kế các cụm Kubernetes hiệu suất cao, an toàn và có khả năng quan sát.
Làm sạch log AI CLI, tạo biểu thức cron, giải mã JWT và tính quyền chmod offline.

Triển khai Cilium service mesh trên Kubernetes: mTLS tự động không cần Envoy sidecar, L7 traffic policy, Hubble observability và benchmark so với Istio. Hướng dẫn production với Helm.
Đọc tiếp
Hướng dẫn toàn diện về eBPF & Cilium trong Kubernetes: định tuyến thông lượng cao, chính sách mạng & khả năng quan sát Hubble với kiến trúc cấp độ sản xuất và các ví dụ mã.
Đọc tiếp
Tìm hiểu sâu về khả năng quan sát eBPF trong Kubernetes: loại bỏ Envoy sidecar, thăm dò kernel, BPF ring buffer và đo lường từ xa không cần mã.
Đọc tiếp