Việc truyền tải dữ liệu giữa các hạ tầng mạng tại Trung Quốc đại lục và các trung tâm điện toán đám mây quốc tế luôn là bài toán kỹ thuật phức tạp đối với các kỹ sư mạng. Nhiều doanh nghiệp thường xuyên đối mặt với tình trạng băng thông sụt giảm nghiêm trọng, độ trễ biến động thất thường và tỷ lệ mất gói tin TCP vượt quá 30% trong các khung giờ cao điểm buổi tối (từ 20:00 đến 24:00 giờ chuẩn Trung Quốc). Những hiện tượng này không bắt nguồn từ đường truyền chặng cuối hay đứt cáp quang biển, mà xuất phát từ sự phân tầng hạ tầng mạng đường trục, chính sách định tuyến BGP không đối xứng và sự quá tải tại các cổng chuyển mạch quốc tế.

Hiểu rõ sự khác biệt giữa các hệ thống mạng viễn thông truyền thống và các tuyến IP transit cao cấp là yếu tố then chốt để xây dựng hạ tầng đa đám mây ổn định. Kết hợp các tuyến trung chuyển chuyên dụng với mô hình đường hầm Layer 3 VPN và công nghệ Anycast giúp luồng dữ liệu luôn duy trì hiệu năng cao và có tính dự đoán được.

+-------------------------------------------------------------------------------+
|         KIẾN TRÚC MẠNG XUYÊN BIÊN GIỚI VÀ HIỆN TƯỢNG BẤT ĐỐI XỨNG             |
|                                                                               |
|  [Máy khách doanh nghiệp đại lục]                                             |
|         |                                                                     |
|         +---> Tuyến A: Trung chuyển phổ thông (AS4134 ChinaNet 163)          |
|         |     - Cổng quốc tế nghẽn nặng (Thượng Hải / Quảng Châu)             |
|         |     - Mất gói giờ cao điểm: 25% - 40% | Bufferbloat > 400ms         |
|         |                                                                     |
|         +---> Tuyến B: Trung chuyển cao cấp (AS4809 CN2 GIA)                  |
|               - Đường trục chuyên dụng doanh nghiệp | Lõi MPLS / SRv6         |
|               - Mất gói giờ cao điểm: < 0.8% | Biến động độ trễ cực thấp      |
|                                                                               |
|  ==================== BẪY ĐỊNH TUYẾN BẤT ĐỐI XỨNG ==========================  |
|                                                                               |
|  [Khách] ===(Chiều gửi qua AS4809 CN2 GIA)=====> [Máy chủ đám mây quốc tế]   |
|                                                               |               |
|  [Khách] <===(Chiều về bị đẩy sang AS4134 nghẽn)==============+               |
|              (Nhà cung cấp đám mây giá rẻ đẩy dữ liệu qua transit thứ cấp)   |
|              Kết quả: Trễ gói ACK, sập cửa sổ TCP, truyền lại liên tục        |
+-------------------------------------------------------------------------------+

Kiến trúc mạng đường trục: AS4134 (ChinaNet) và AS4809 (CN2 GIA)

Tập đoàn viễn thông China Telecom vận hành hai hệ thống tự trị (Autonomous System - AS) tách biệt với chất lượng dịch vụ, quy mô peering và chi phí hoàn toàn khác nhau:

1. Đường trục ChinaNet 163 (AS4134)

AS4134 là hạ tầng mạng dân dụng truyền thống được phát triển từ giữa thập niên 1990. Đóng vai trò là xương sống kết nối cho hàng trăm triệu thuê bao băng rộng gia đình và doanh nghiệp nhỏ, AS4134 gánh vác hơn 80% tổng lưu lượng Internet của China Telecom.

Nút thắt cổ chai lớn của AS4134 nằm ở các trung tâm chuyển mạch cổng quốc tế tại Thượng Hải, Quảng Châu và Bắc Kinh. Các cổng này kết nối cáp quang nội địa ra các tuyến cáp ngầm xuyên Thái Bình Dương (như NCP, FASTER và APCN-2). Do khối lượng truyền tải video, trò chơi trực tuyến và duyệt web dân dụng vượt xa dung lượng cổng kết nối quốc tế được phân bổ, hàng đợi chuyển mạch thường xuyên bị đầy, gây tràn bộ đệm và rớt gói hàng loạt vào mỗi tối.

2. Mạng truyền dẫn thế hệ mới CN2 (AS4809)

Nhằm phục vụ các tổ chức tài chính và tập đoàn đa quốc gia đòi hỏi độ trễ nghiêm ngặt, China Telecom triển khai hệ thống AS4809 (CN2). Hoạt động độc lập song song với AS4134, CN2 sử dụng công nghệ chuyển nhãn đa giao thức (MPLS) và định tuyến phân đoạn (SRv6) kèm chính sách bảo lưu băng thông khắt khe.

Dịch vụ định tuyến CN2 được phân thành hai cấp độ:

  • CN2 GT (Global Transit): Gói dữ liệu di chuyển trên mạng CN2 ở phạm vi liên tỉnh nội địa, nhưng được chuyển giao sang cổng quốc tế AS4134 trước khi rời biên giới. Do đó, CN2 GT vẫn chịu ảnh hưởng bởi tình trạng nghẽn gateway biên giới.
  • CN2 GIA (Global Internet Access): Cấp độ cao cấp, nơi luồng dữ liệu đi vào router CN2 tại thành phố nội địa và duy trì hoàn toàn trên AS4809 qua các cổng biên giới riêng biệt tới thẳng các điểm hiện diện (PoP) ở Hong Kong, Tokyo, San Jose, Los Angeles hoặc Frankfurt. CN2 GIA bảo đảm tỷ lệ mất gói hai chiều dưới 1%.

Các nhà mạng khác cũng có các mạng cao cấp tương đương: China Unicom vận hành AS9929 (CU Premium, bên cạnh AS4837) và China Mobile vận hành AS58453 (CMI Enterprise).

+-------------------------------------------------------------------------+
|                    BẢNG SO SÁNH CÁC CẤP ĐỘ TRANSIT                      |
|                                                                         |
|  Tiêu chí            | AS4134 (ChinaNet 163)   | AS4809 (CN2 GIA)       |
|  --------------------+-------------------------+----------------------- |
|  Đối tượng chính     | Người dùng phổ thông    | Doanh nghiệp ưu tiên   |
|  Cổng xuất quốc tế   | Gateway công cộng nghẽn | PoP Tier-1 độc lập     |
|  Mất gói cao điểm    | 20% - 40%               | < 1.0%                 |
|  Biến thiên độ trễ   | 80ms - 250ms            | 2ms - 8ms              |
|  Cơ chế QoS          | Best-Effort phổ thông   | DiffServ / MPLS chuẩn  |
|  Chi phí trung chuyển| Tiêu chuẩn              | Phí doanh nghiệp       |
+-------------------------------------------------------------------------+

Nguyên nhân suy giảm hiệu năng: Nghẽn bộ đệm và mất gói dữ liệu

Khi các phiên TCP doanh nghiệp đi qua các cổng AS4134 quá tải, cơ chế kiểm soát tắc nghẽn sẽ gặp rối loạn nặng nề.

Các thuật toán kiểm soát tắc nghẽn truyền thống như Cubic hoặc Reno coi việc mất gói tin là tín hiệu cho thấy đường truyền đã chạm giới hạn vật lý. Khi bộ đệm hàng đợi (FIFO queue) của router AS4134 cạn kiệt, cơ chế tail-drop sẽ loại bỏ liên tiếp nhiều phân đoạn TCP. Điều này khiến kích thước cửa sổ tắc nghẽn (cwnd) của máy gửi co rút đột ngột về mức tối thiểu (1 hoặc 2 MSS).

Đồng thời, bộ đệm router có dung lượng quá lớn dẫn tới hiện tượng nghẽn bộ đệm (bufferbloat). Thay vì loại bỏ gói sớm để máy phát điều chỉnh tốc độ, hàng đợi giữ lại gói tin hàng trăm mili-giây. Thời gian khứ hồi (RTT) đo được nhảy vọt từ 60ms lên 500ms chỉ trong chớp mắt, làm sai lệch bộ tính toán thời gian chờ truyền lại (RTO) và sinh ra hàng loạt gói tin truyền lại trùng lặp không cần thiết.

+-------------------------------------------------------------------------+
|             HIỆN TƯỢNG SẬP CỬA SỔ TẮC NGHẼN TCP DO BUFFERBLOAT          |
|                                                                         |
|   Kích thước Cwnd                                                       |
|      ^                                                                  |
|   64 |         /\                                                       |
|      |        /  \  <--- Bộ đệm AS4134 đầy làm rớt gói liên tục        |
|   32 |       /    \                                                     |
|      |      /      \                                                    |
|   16 |     /        \____                                               |
|      |    /              \                                              |
|    2 |---/                \-- Cwnd sập về mức sàn (Thông lượng tê liệt) |
|    0 +------------------------------------------------------------> Thời|
+-------------------------------------------------------------------------+

Cạm bẫy bất đối xứng định tuyến trong hệ thống doanh nghiệp

Sai lầm phổ biến nhất trong triển khai hạ tầng xuyên biên giới là doanh nghiệp trang bị đường truyền CN2 GIA cho chi nhánh trong nước nhưng máy chủ đám mây đặt tại nước ngoài lại sử dụng các gói hạ tầng điện toán giá rẻ.

Quyết định định tuyến BGP vốn có tính chất một chiều độc lập. Khi máy khách gửi yêu cầu đến máy chủ đám mây thông qua AS4809 (đường gửi đi rất mượt mà với độ trễ thấp), đường quay về lại phụ thuộc hoàn toàn vào bảng định tuyến của nhà cung cấp dịch vụ máy chủ nước ngoài:

  1. Chiều gửi từ máy khách: Khách hàng -> Mạng lõi AS4809 -> PoP Hong Kong -> Máy chủ quốc tế (Ổn định, độ trễ < 30ms).
  2. Chiều phản hồi từ máy chủ: Máy chủ -> Nhà mạng trung chuyển giá rẻ (Cogent, HE) -> Điểm trung chuyển công cộng -> Cổng nghẽn AS4134 -> Máy khách.

Vì các gói tin phản hồi mang cờ TCP ACK, dữ liệu tải về và nội dung phản hồi API bị đẩy ngược vào hàng đợi nghẽn của AS4134, toàn bộ phiên kết nối vẫn phải chịu cảnh mất gói và giật trễ nghiêm trọng. Để đạt được hiệu năng cao thực sự, kiến trúc mạng bắt buộc phải đồng bộ tính đối xứng trên cả hai chiều truyền nhận.

+-------------------------------------------------------------------------+
|                  ĐỊNH TUYẾN ĐỐI XỨNG SO VỚI BẤT ĐỐI XỨNG                |
|                                                                         |
|  Định tuyến bất đối xứng (Lỗi kiến trúc):                               |
|  Khách hàng =====(Chiều gửi: AS4809 CN2 GIA)=====> Máy chủ nước ngoài   |
|  Khách hàng <====(Chiều về: AS4134 quá tải)======= Máy chủ nước ngoài   |
|                                                                         |
|  Đường hầm đối xứng (Kiến trúc chuẩn hóa):                              |
|  Khách hàng =====(Chiều gửi: AS4809 CN2 GIA)=====> Cổng biên trung chuyển|
|  Khách hàng <====(Chiều về: AS4809 CN2 GIA)======= Cổng biên trung chuyển|
|                                                           ||            |
|                                                (Mạng nội bộ / WireGuard)|
|                                                           ||            |
|                                                           v             |
|                                                Dịch vụ đám mây đích     |
+-------------------------------------------------------------------------+

Giải pháp kiến trúc: Layer 3 VPN kết hợp cổng định tuyến BGP Anycast

Để thiết lập đường truyền đối xứng có độ tin cậy cao, mô hình tối ưu là thiết lập một mạng lớp phủ Layer 3 VPN đặt tại các trung tâm trung chuyển chiến lược (chủ yếu là Hong Kong, Tokyo và Singapore).

Cấu trúc giải pháp bao gồm:

  • Cổng phân phối BGP Anycast: Điểm tập trung VPN được kết nối đa tuyến (dual-homed) trực tiếp với cả AS4809 (CN2 GIA) và AS9929 (CU Premium).
  • Đường hầm Layer 3 mã hóa: Sử dụng giao thức đường hầm thế hệ mới (WireGuard hoặc IPsec trên nền ChaCha20-Poly1305 / AES-256-GCM) để đóng gói dữ liệu IP trong các gói tin UDP.
  • Thực thi chính sách đối xứng: Gắn nhãn BGP Community và áp dụng định tuyến dựa trên chính sách (Policy-Based Routing - PBR) để cưỡng chế luồng gói phản hồi phải đi qua đúng hệ thống tự trị cao cấp đã tiếp nhận.
+-------------------------------------------------------------------------+
|            ĐÓNG GÓI ĐƯỜNG HẦM LAYER 3 VÀ XỬ LÝ GÓI TIN ĐỐI XỨNG         |
|                                                                         |
|  [Ứng dụng doanh nghiệp tại máy khách]                                   |
|         | Tạo gói TCP/UDP gửi tới dịch vụ nội bộ                        |
|         v                                                               |
|  [Giao diện mạng ảo: wg0 / tun0]                                        |
|         | Gán địa chỉ IP nội bộ cố định (ví dụ: 10.120.0.2/24)          |
|         | Đóng gói dữ liệu vào khung UDP mã hóa giao thức Noise         |
|         v                                                               |
|  [Truyền tải vật lý qua tuyến peering AS4809]                           |
|         | Gói tin đi trên hạ tầng cáp quang cam kết SLA                 |
|         v                                                               |
|  [Router biên cổng VPN tại Hong Kong / Tokyo]                           |
|         | Giải mã gói tin và xác thực khóa mật mã định danh             |
|         | Chuyển tiếp gói tin Layer 3 thô vào mạng VPC đích             |
|         v                                                               |
|  [Máy chủ dịch vụ ứng dụng đám mây]                                     |
+-------------------------------------------------------------------------+

Cấu hình kỹ thuật: Chính sách định tuyến động và cân bằng lưu lượng đối xứng

Để duy trì đường truyền đối xứng và ngăn chặn luồng dữ liệu chiều về bị đẩy nhầm sang các nhà mạng phổ thông, quản trị viên áp dụng chính sách định tuyến chặt chẽ trên các máy chủ cổng Linux.

1. Thiết lập bảng định tuyến theo chính sách

Tạo bảng định tuyến độc lập để toàn bộ dữ liệu đi qua giao diện mạng VPN luôn được trả về qua đúng cổng mạng cao cấp:

# Đăng ký định danh bảng định tuyến riêng biệt
echo "200 cn2gia_transit" | sudo tee -a /etc/iproute2/rt_tables

# Khởi tạo cổng ngầm định cho bảng trung chuyển cao cấp
sudo ip route add default via 203.0.113.1 dev eth1 table cn2gia_transit

# Điều hướng lưu lượng hầm mạng qua bảng trung chuyển tương ứng
sudo ip rule add from 10.120.0.0/24 table cn2gia_transit priority 100
sudo ip rule add to 10.120.0.0/24 table cn2gia_transit priority 101

2. Kích hoạt thuật toán kiểm soát tắc nghẽn TCP BBR

Nhằm giảm thiểu tác động của hiện tượng mất gói ngẫu nhiên mà không bị thuật toán CUBIC bóp nghẹt băng thông, cấu hình thuật toán BBR trên toàn bộ các máy chủ và điểm cuối:

# Nạp mô-đun BBR vào nhân Linux
sudo modprobe tcp_bbr

# Lưu cấu hình hàng quy và BBR vào tệp sysctl
cat << 'EOF' | sudo tee /etc/sysctl.d/99-network-throughput.conf
net.core.default_qdisc = fq
net.ipv4.tcp_congestion_control = bbr
net.ipv4.tcp_slow_start_after_idle = 0
net.ipv4.tcp_notsent_lowat = 16384
EOF

sudo sysctl --system

Thuật toán BBR chủ động đo lường băng thông thắt nút và thời gian trễ khứ hồi tối thiểu thay vì phụ thuộc vào tín hiệu mất gói, giúp duy trì tốc độ truyền tải tối đa ngay cả khi đường truyền biên giới xuất hiện rung lắc tức thời.

3. Điều chỉnh kích thước phân đoạn tối đa (MSS Clamping)

Do việc đóng gói tiêu đề đường hầm VPN làm tăng kích thước gói tin (WireGuard bổ sung 32 byte cho IPv4 hoặc 40 byte cho IPv6), các gói tin vượt quá kích thước MTU đường truyền sẽ bị rớt nếu các bộ định tuyến trung gian chặn thông điệp ICMP.

Áp dụng quy tắc kẹp kích thước MSS thông qua iptables để các phiên bắt tay TCP tự động đàm phán kích thước phân đoạn an toàn:

# Thực thi quy tắc kẹp MSS trên giao diện đường hầm VPN
sudo iptables -t mangle -A FORWARD -p tcp --tcp-flags SYN,RST SYN -o wg0 -j TCPMSS --clamp-mss-to-pmtu
sudo iptables -t mangle -A FORWARD -p tcp --tcp-flags SYN,RST SYN -i wg0 -j TCPMSS --clamp-mss-to-pmtu

Sự kết hợp giữa hạ tầng tự trị cao cấp (AS4809 / AS9929), công nghệ đóng gói đường hầm Layer 3 VPN, chính sách định tuyến đối xứng và thuật toán kiểm soát lưu lượng BBR tạo nên nền tảng kết nối mạng xuyên biên giới vững chắc, thông suốt và an toàn cho doanh nghiệp.