Передавання корпоративних даних між мережами материкового Китаю та глобальними хмарними серверами пов'язане зі специфічними інженерними викликами. Мережеві фахівці регулярно стикаються з раптовим падінням пропускної здатності, нестабільністю затримок і втратами пакетів TCP понад 30% у години пікових навантажень (з 20:00 до 24:00 за пекінським часом). Такі збої спричинені не дефектами кабельних ліній чи аваріями на підводних магістралях, а структурним розшаруванням автономних систем, асиметрією протоколу BGP та критичним перевантаженням міжнародних комутаційних центрів.

Розуміння відмінностей між базовими магістралями та преміальними транзитними маршрутами є ключовим для побудови стабільних мультихмарних середовищ. Поєднання виділених каналів, тунелювання Layer 3 VPN та точок входу Anycast забезпечує передбачувану симетричну роботу каналів зв'язку.

+-------------------------------------------------------------------------------+
|         СТРУКТУРА ТРАНСКОРДОННОГО ТРАНЗИТУ ТА ДИНАМІКА АСИМЕТРІЇ              |
|                                                                               |
|  [Корпоративний клієнт у Китаї]                                               |
|         |                                                                     |
|         +---> Маршрут A: Стандартний транзит (AS4134 ChinaNet 163)            |
|         |     - Критичне перевантаження шлюзів (Шанхай / Гуанчжоу / Пекін)    |
|         |     - Втрати в пікові години: 25% - 40% | Bufferbloat > 400 мс      |
|         |                                                                     |
|         +---> Маршрут B: Преміальний транзит (AS4809 CN2 GIA)                 |
|               - Виділена корпоративна мережа | Ядро MPLS / SRv6               |
|               - Втрати в пікові години: < 0.8% | Мінімальне коливання затримки|
|                                                                               |
|  ================== ПАСТКА АСИМЕТРИЧНОЇ МАРШРУТИЗАЦІЇ ======================  |
|                                                                               |
|  [Клієнт] ===(Вихідний потік через AS4809 CN2 GIA)===> [Закордонний сервер]   |
|                                                               |               |
|  [Клієнт] <===(Зворотний потік скинуто в AS4134)==============+               |
|               (Бюджетний хмарний провайдер відправляє трафік дешевим шляхом)  |
|               Результат: затримка ACK, звуження вікна TCP, повторні передачі  |
+-------------------------------------------------------------------------------+

Архітектура магістральних мереж: AS4134 (ChinaNet) та AS4809 (CN2 GIA)

Телекомунікаційний оператор China Telecom експлуатує дві окремі автономні системи з принципово різними характеристиками надійності та ціноутворенням:

1. Магістраль ChinaNet 163 (AS4134)

AS4134 є традиційною інфраструктурою загального користування, закладеною в середині 1990-х років. Вона обслуговує сотні мільйонів домашніх користувачів і малий бізнес, пропускаючи понад 80% усього трафіку China Telecom.

Головне вузьке місце AS4134 зосереджене в міжнародних шлюзах Шанхая, Гуанчжоу та Пекіна, які з'єднують внутрішні волоконні магістралі з транстихоокеанськими підводними кабелями (NCP, FASTER, APCN-2). У вечірні години обсяг споживчого трафіку багаторазово перевищує пропускну здатність портів обміну, через що виникає переповнення черг і масове скидання пакетів.

2. Мережа передавання нового покоління CN2 (AS4809)

Для міжнародних фінансових структур та корпоративних користувачів, яким потрібна мінімальна затримка, було створено автономну систему AS4809 (CN2). Вона функціонує паралельно з AS4134 на базі технологій MPLS та Segment Routing (SRv6) із суворим резервуванням пропускної здатності.

Транзитні послуги CN2 поділяються на два рівні:

  • CN2 GT (Global Transit): Дані прямують мережею CN2 всередині Китаю, але перед кордоном передаються на завантажені шлюзи AS4134.
  • CN2 GIA (Global Internet Access): Преміальний рівень, за якого пакети надходять у AS4809 у місті відправника та прямують виключно цією мережею через виділені прикордонні переходи до закордонних точок присутності (Гонконг, Токіо, Сан-Хосе, Франкфурт). CN2 GIA гарантує втрати пакетів на рівні менше 1%.

Схожі високопродуктивні мережі мають China Unicom (AS9929 CU Premium поряд із базовою AS4837) та China Mobile (AS58453 CMI Enterprise).

+-------------------------------------------------------------------------+
|                  ПОРІВНЯЛЬНА МАТРИЦЯ ТРАНЗИТНИХ РІВНІВ                  |
|                                                                         |
|  Параметр            | AS4134 (ChinaNet 163)   | AS4809 (CN2 GIA)       |
|  --------------------+-------------------------+----------------------- |
|  Цільова аудиторія   | Масовий користувач      | Корпоративний сектор   |
|  Прикордонні виходи  | Перевантажені шлюзи     | Виділені точки Tier-1  |
|  Втрати в години пік | 20% - 40%               | < 1.0%                 |
|  Середнє коливання   | 80 мс - 250 мс          | 2 мс - 8 мс            |
|  Клас обслуговування | Best-Effort             | Строгий DiffServ / MPLS|
|  Вартість транзиту   | Стандартна доступна     | Висока корпоративна    |
+-------------------------------------------------------------------------+

Причини деградації каналів: Bufferbloat та скидання пакетів

Під час проходження корпоративних потоків TCP через перевантажені шлюзи AS4134 механізми контролю перевантаження стикаються з критичними відхиленнями.

Традиційні алгоритми Cubic або Reno трактують втрату пакетів як досягнення фізичної межі каналу. Коли буфери FIFO на маршрутизаторах переповнюються, черга скидає сегменти, спричиняючи колапс вікна перевантаження (cwnd) до мінімуму (1-2 MSS).

Одночасно надлишковий розмір буферів спричиняє явище Bufferbloat. Черги затримують пакети на сотні мілісекунд замість своєчасного інформування джерела. Час RTT стрибає з 60 мс до 500 мс за лічені секунди, порушуючи роботу таймерів повторної передачі (RTO) і породжуючи зайві дублікати.

+-------------------------------------------------------------------------+
|                ЗВУЖЕННЯ ВІКНА TCP ЧЕРЕЗ ПЕРЕПОВНЕННЯ БУФЕРІВ            |
|                                                                         |
|   Розмір вікна Cwnd                                                     |
|      ^                                                                  |
|   64 |         /\                                                       |
|      |        /  \  <--- Переповнений буфер AS4134 скидає пакети        |
|   32 |       /    \                                                     |
|      |      /      \                                                    |
|   16 |     /        \____                                               |
|      |    /              \                                              |
|    2 |---/                \-- Колапс Cwnd (реальна швидкість падає до 0)|
|    0 +-----------------------------------------------------------> Час |
+-------------------------------------------------------------------------+

Пастка асиметрії маршрутизації в інфраструктурі

Поширеною помилкою інженерів є придбання дорогого підключення CN2 GIA для локального офісу в поєднанні з використанням бюджетного хмарного хостингу за кордоном.

Рішення BGP приймаються окремо для кожного напрямку. Клієнт передає пакети на сервер через AS4809 (стабільний канал без втрат), проте зворотний маршрут цілком визначається зовнішніми транзитними партнерами хостинг-провайдера:

  1. Прямий потік: Клієнт -> Мережа AS4809 -> Вузол у Гонконгу -> Закордонний сервер (затримка < 30 мс).
  2. Зворотний потік: Сервер -> Недорогий транзит (Cogent, HE) -> Загальна точка обміну -> Перевантажений шлюз AS4134 -> Клієнт.

Оскільки зворотні пакети несуть підтвердження TCP ACK та корисні дані, вони потрапляють у вечірні затори AS4134. Це зводить нанівець переваги прямого преміального каналу. Щоб отримати високу продуктивність, необхідно гарантувати симетрію маршруту в обох напрямках.

+-------------------------------------------------------------------------+
|                  СИМЕТРИЧНЕ ТА АСИМЕТРИЧНЕ МАРШРУТИЗУВАННЯ              |
|                                                                         |
|  Асиметричний маршрут (проблемний):                                     |
|  Клієнт =====(Прямий: AS4809 CN2 GIA)=====> Закордонний сервер          |
|  Клієнт <====(Зворотний: AS4134 перевантажений)=== Закордонний сервер   |
|                                                                         |
|  Симетричний тунель (оптимальний):                                      |
|  Клієнт =====(Прямий: AS4809 CN2 GIA)=====> Транзитний шлюз             |
|  Клієнт <====(Зворотний: AS4809 CN2 GIA)=== Транзитний шлюз             |
|                                                    ||                   |
|                                        (Приватна мережа / WireGuard)    |
|                                                    ||                   |
|                                                    v                    |
|                                        Цільова хмарна інфраструктура    |
+-------------------------------------------------------------------------+

Архітектурне рішення: Layer 3 VPN зі шлюзами BGP Anycast

Для побудови стабільного симетричного з'єднання розгортають оверлейну мережу Layer 3 VPN у стратегічних транзитних вузлах (Гонконг, Токіо, Сінгапур).

Компоненти рішення:

  • Шлюзи Anycast: Вузли концентрації трафіку з прямим підключенням до AS4809 (CN2 GIA) та AS9929 (CU Premium).
  • Тунелі Layer 3: Протоколи WireGuard або IPsec (ChaCha20-Poly1305 / AES-256-GCM), що інкапсулюють мережеві пакети в датаграми UDP.
  • Політики симетрії: Застосування BGP Community та правил маршрутизації на основі політик (Policy-Based Routing) для гарантованого повернення пакетів через ту саму преміальну мережу.
+-------------------------------------------------------------------------+
|            ІНКАПСУЛЯЦІЯ В ТУНЕЛЬ LAYER 3 ТА СИМЕТРИЧНА ОБРОБКА          |
|                                                                         |
|  [Корпоративна клієнтська програма]                                     |
|         | Створює вихідний пакет TCP/UDP                                |
|         v                                                               |
|  [Віртуальний інтерфейс: wg0 / tun0]                                    |
|         | Призначає внутрішню статичну IP-адресу (наприклад, 10.120.0.2)|
|         | Інкапсулює пакет у формат UDP протоколу Noise                 |
|         v                                                               |
|  [Фізичний канал через пряме з'єднання AS4809]                          |
|         | Передавання магістраллю з гарантованим рівнем SLA             |
|         v                                                               |
|  [Прикордонний маршрутизатор (Гонконг / Токіо)]                         |
|         | Перевіряє криптографічний ключ та розпаковує пакет            |
|         | Пересилає внутрішній пакет Layer 3 до цільової мережі VPC     |
|         v                                                               |
|  [Цільовий сервіс призначення]                                          |
+-------------------------------------------------------------------------+

Інженерне налаштування: динамічні політики та симетричний транзит

Щоб зафіксувати симетричний маршрут і уникнути випадкового скидання зворотного трафіку в загальні мережі, адміністратори застосовують спеціальні політики на серверах під керуванням Linux.

1. Налаштування маршрутизації на основі політик (PBR)

Створення окремої таблиці маршрутизації гарантує, що трафік віртуального інтерфейсу повертається через потрібний порт:

# Реєстрація ідентифікатора нової таблиці маршрутизації
echo "200 cn2gia_transit" | sudo tee -a /etc/iproute2/rt_tables

# Встановлення основного шлюзу для преміальної таблиці
sudo ip route add default via 203.0.113.1 dev eth1 table cn2gia_transit

# Спрямування трафіку підмережі тунелю через зазначену таблицю
sudo ip rule add from 10.120.0.0/24 table cn2gia_transit priority 100
sudo ip rule add to 10.120.0.0/24 table cn2gia_transit priority 101

2. Увімкнення алгоритму контролю перевантаження TCP BBR

Для запобігання втратам пропускної здатності під час випадкових коливань рекомендовано використовувати алгоритм Google BBR:

# Завантаження модуля BBR у ядро операційної системи
sudo modprobe tcp_bbr

# Збереження налаштувань BBR та черг FQ у конфігурації sysctl
cat << 'EOF' | sudo tee /etc/sysctl.d/99-network-throughput.conf
net.core.default_qdisc = fq
net.ipv4.tcp_congestion_control = bbr
net.ipv4.tcp_slow_start_after_idle = 0
net.ipv4.tcp_notsent_lowat = 16384
EOF

sudo sysctl --system

Алгоритм BBR відстежує реальну пропускну здатність каналу та мінімальний час затримки без прив'язки до факту втрати окремих пакетів, забезпечуючи високу швидкість обміну.

3. Фіксація максимального розміру сегмента (MSS Clamping)

Оскільки службові заголовки тунелю зменшують корисний обсяг пакета (WireGuard додає від 32 до 40 байтів), пакети більшого розміру можуть відкидатися, якщо мережеві пристрої блокують пакети ICMP.

Фіксація розміру MSS за допомогою iptables допомагає автоматично узгодити безпечний розмір блоків даних під час встановлення TCP-з'єднання:

# Правила обмеження MSS для інтерфейсу тунелю VPN
sudo iptables -t mangle -A FORWARD -p tcp --tcp-flags SYN,RST SYN -o wg0 -j TCPMSS --clamp-mss-to-pmtu
sudo iptables -t mangle -A FORWARD -p tcp --tcp-flags SYN,RST SYN -i wg0 -j TCPMSS --clamp-mss-to-pmtu

Поєднання високоякісних магістралей AS4809 / AS9929, оверлейних протоколів Layer 3 VPN, симетричної маршрутизації та алгоритму BBR створює надійну основу для захищеної транскордонної мережевої інфраструктури.