mtr и traceroute: как читать потери на промежуточных хопах

Почему 40% потерь на седьмом хопе обычно ничего не значат и на что смотреть на самом деле.

Самая частая ошибка при разборе жалобы «всё тормозит» — увидеть в mtr красный хоп посередине пути и написать провайдеру. В большинстве случаев проблемы там нет.

Как работает mtr

mtr отправляет пакеты с увеличивающимся TTL. Каждый маршрутизатор, у которого TTL истёк, должен ответить ICMP Time Exceeded. Генерация этих ответов идёт через control plane, и на загруженном железе она ограничена (rate limit, CoPP). Транзитный же трафик идёт через data plane и этих ограничений не испытывает.

Правило чтения

Главное правило

В примере седьмой узел ответил на 58 проб из 100, а конечный — на все 100 своих проб. Это совместимо с ограничением частоты ICMP-ответов. По одной строке нельзя оценить потери пользовательского трафика.

$ mtr -rwbzc 100 198.51.100.10
HOST                         Loss%  Snt  Last   Avg  Best  Wrst StDev
 1. AS64512 10.0.0.1          0.0%  100   0.4   0.5   0.3   1.2   0.1
 5. AS64500 203.0.113.17      0.0%  100   8.1   8.4   7.9  12.0   0.6
 7. AS64501 192.0.2.33       42.0%  100  31.2  30.8  30.1  44.9   2.1   # 58 ответов на 100 проб
 9. AS64501 192.0.2.61        0.0%  100  31.0  31.1  30.6  33.0   0.4
12. AS64502 198.51.100.10     0.0%  100  32.4  32.2  31.8  35.1   0.5

Что действительно настораживает

  • Потери начинаются на хопе N и держатся до конца — сверьте время с жалобой и проверьте обратный путь. Место потери по одному отчёту установить нельзя.
  • Скачок задержки, который сохраняется на всех следующих хопах — длинный линк или перегрузка.
  • Большой StDev на последнем хопе — джиттер, критичен для голоса и видео.

Полезные ключи

  • -T -P 443 — TCP вместо ICMP: проверка с тем же портом назначения, что у HTTPS.
  • -b -z — показывать и IP, и имена, и номера AS.
  • -c 100 -r -w — отчёт по 100 пакетам, удобно прикладывать к заявке.

Отправляя заявку провайдеру, прикладывайте mtr в обе стороны: обратный маршрут часто идёт другим путём, и проблема может быть именно там.

Что записать в заявку

Укажите время и часовой пояс, адреса источника и назначения, порт сервиса и симптом со стороны приложения. Приложите последний хоп вместе с промежуточными. Если конечный узел обычно игнорирует ICMP, сверяйте отчёт с подключением к самому сервису.

В отчёте на каждый узел приходится отдельная серия проб. Ограничение частоты ICMP описано в RFC 1812, § 4.3.2.8.