Как выбрать 10G-коммутатор Cisco для серверов, NAS и СХД: порты, совместимость и запас производительности?
10G-коммутатор для серверов, NAS и СХД выбирают по одновременной нагрузке, интерфейсам и работе сети после отказа. Количество портов и надпись «10 Гбит/с» не отвечают на вопросы о скорости резервного копирования, задержке хранилища и доступной полосе при потере одной линии. Сначала определите задачи приложений, затем подберите архитектуру подключений и только после этого модель.
Для небольшого серверного узла важны совместимость NIC и NAS, тип кабеля, шум, охлаждение и лицензии. Для виртуализации и интенсивного обмена со СХД добавляются очереди, микровсплески, независимые пути и поведение протокола хранения. Ниже — расчёт полосы, разбор 10GBASE-T и SFP+, ограничения LACP и проверка комплекта Cisco.
Когда 1G уже недостаточно и зачем переходить на 10G?
Переход оправдан, если сеть ограничивает полезную работу: резервная копия не помещается в окно, несколько пользователей конкурируют за канал NAS, миграция ВМ занимает слишком долго или серверные потоки регулярно достигают доступной полосы. Сначала убедитесь, что ограничение действительно сетевое. Медленные диски, перегруженный процессор, шифрование и большое число мелких файлов могут сохранять низкую скорость и после замены коммутатора.
Один гигабит в секунду соответствует 125 МБ/с в десятичных единицах до накладных расходов. Для 10 Гбит/с теоретический ориентир — 1 250 МБ/с, или 1,25 ГБ/с. Приложение получает меньше из-за протоколов и других ограничений. Число 1,25 не следует превращать в обещание скорости любого NAS.
При обследовании смотрите одновременные операции: например, резервное копирование, пользовательский доступ и перенос ВМ. Средняя загрузка за день не показывает короткий час, ради которого требуется модернизация. Полезны измерения по интерфейсам, задержке и времени выполнения конкретной задачи, а не только тест одного большого файла ночью.
Как рассчитать необходимую полосу для резервного копирования?
Используйте формулу B = D × 8 / T, где D — объём передаваемых данных в байтах, T — время в секундах, B — полезная скорость в битах в секунду. Для 5 ТБ за один час получается 5 × 10¹² × 8 / 3 600 ≈ 11,11 Гбит/с. Такой объём не передать за час через один 10G-канал даже при отсутствии накладных расходов.
Если окно увеличить до двух часов, ориентир снизится до 5,56 Гбит/с. Но это ещё не окончательный расчёт: часть окна занимают подготовка и завершение задания, полезная скорость меняется, а другие приложения тоже используют сеть. Если в примере передача идёт только 90 минут из двух часов, требуемая полезная скорость составит уже 7,41 Гбит/с.
| Объём и окно | Полезная скорость без накладных расходов | Вывод |
|---|---|---|
| 1 ТБ за час | 2,22 Гбит/с | 1G недостаточно, 10G следует проверить по всему пути |
| 5 ТБ за два часа | 5,56 Гбит/с | 10G может быть кандидатом при достаточной производительности СХД |
| 5 ТБ за 90 минут | 7,41 Гбит/с | Остаётся меньше запаса на другие задачи |
| 5 ТБ за час | 11,11 Гбит/с | Один 10G-канал недостаточен |
Для сжатия и дедупликации используйте измеренный объём данных на линии. Логический размер резервируемых файлов может сильно отличаться от фактического трафика. Обратная сторона тоже важна: скорость восстановления проверяют отдельно, поскольку цепочка чтения и распаковки отличается от записи резервной копии.
10GBASE-T или SFP+: что выбрать для серверов?
10GBASE-T удобен при медных RJ45-интерфейсах NAS и серверов и подходящей кабельной системе. Для стандартного канала до 100 м обычно проектируют Cat 6A с соблюдением требований к монтажу. Не считайте существующий кабель пригодным только по надписи на оболочке: состояние розеток, патч-панелей и помехи тоже влияют на результат.
SFP+ подходит для DAC, AOC и оптических модулей. DAC часто удобен внутри стойки при допустимой длине и совместимости обоих концов. Оптика полезна между стойками и помещениями; её выбирают по волокну, разъёмам и расстоянию. Порт SFP28 на 25G не гарантирует поддержку любой старой 10G-оптики: нужна матрица для устройства и выпуска.
| Вариант | Где удобен | Что проверить до покупки |
|---|---|---|
| 10GBASE-T | NAS с RJ45, существующая качественная медная инфраструктура | Категория полного канала, длина, скорости NIC, охлаждение |
| DAC | Короткие соединения в стойке | Совместимость двух устройств, длина, радиус изгиба |
| AOC | Готовая оптическая сборка в пределах поддерживаемых длин | Тип портов и невозможность отдельно заменить середину кабеля |
| SFP+ и волокно | Межстоечные и межкомнатные линии | Модули с обеих сторон, волокно, полярность, бюджет линии |
Выбор SR/LR и оптического бюджета подробно разобран в руководстве по SFP и SFP+ для Cisco. Здесь задача другая: подобрать весь серверный сетевой узел по нагрузке. Смешанный коммутатор с разными типами портов может сократить переходники, но его фактический состав нужно сверять по полному артикулу.
Дадут ли два порта 10G через LACP скорость 20 Гбит/с?
Обычно один поток при LACP проходит по одному физическому участнику группы. Два порта 10G могут дать до 20 Гбит/с суммарно для нескольких подходящих потоков, но не делают обычное одиночное TCP-соединение каналом 20G. Распределение зависит от алгоритма хеширования и состава трафика. Два крупных потока способны попасть на одну линию, оставив вторую менее загруженной.
Это особенно заметно при тесте «один компьютер — один файл — один NAS». Если требуется ускорить конкретное приложение, проверьте его поддержку параллельных соединений, SMB Multichannel или другого подходящего режима. Возможность многоканального обмена зависит от клиента, сервера, NIC и конфигурации; наличие двух кабелей её не включает автоматически.
Резервирование тоже требует расчёта. При двух линиях по 10G потеря одной оставляет 10G. Если нормальная нагрузка уже равна 16 Гбит/с, отказ приведёт к перегрузке. Поэтому суммарную полосу в штатном режиме и допустимую полосу при отказе записывают отдельно. Для двух разных коммутаторов нужна поддерживаемая архитектура: нельзя подключать одну LACP-группу к двум независимым узлам без соответствующей функции.
Как считать порты и uplink с запасом?
Предположим, есть шесть серверов с двумя сетевыми подключениями, два контроллера хранения с двумя подключениями и два резервных uplink. Это 12 + 4 + 2 = 18 физических портов. Если для расширения предусмотрены ещё два двухпортовых сервера, потребуется 22. При двух независимых коммутаторах распределение считают для каждого узла, а не помещают все 22 соединения в один корпус.
Профиль трафика важнее формального отношения скоростей. Если 12 серверных портов по 10G сходятся в один uplink 25G, отношение номинальных скоростей — 120/25 = 4,8:1. Это не означает постоянную перегрузку, если серверы редко передают одновременно. Но для синхронного резервного копирования такое отношение может быть проблемой. Трафик внутри одного коммутатора и трафик через uplink учитывают отдельно.
Суммарная коммутационная способность часто приводится с учётом двух направлений. Например, 48 × 25G + 6 × 100G дают 1,8 Тбит/с в одном направлении и 3,6 Тбит/с при сложении приёма и передачи. Такое число нельзя сравнивать напрямую с полезной скоростью одного приложения.
Почему важны буферы и микровсплески?
Короткие одновременные передачи нескольких серверов способны заполнить очередь медленного выходного порта. Средний график за пять минут при этом выглядит спокойным. Последствия — потери, повторные передачи и рост задержки. Поэтому смотрят счётчики очередей, drops и измерения с достаточно коротким интервалом.
Размер буфера в характеристиках может относиться ко всему устройству или общей области. Например, у Nexus 93180YC-FX3 указаны 40 МБ системного буфера; это не 40 МБ на каждый порт. Условия распределения и возможности управления очередями важнее одного большого числа. Буфер сглаживает часть всплесков, но не исправляет постоянную нехватку выходной полосы.
Для iSCSI не следует автоматически включать «все функции lossless». RoCE требует отдельного проверенного проекта с учётом PFC, ECN и возможностей конечных устройств. Неудачная настройка PFC может распространить задержки на другие потоки. Если сеть используется для разных приложений, политика очередей должна соответствовать их требованиям.
Какие Cisco Nexus включить в сравнение?
Nexus N9K-C93180YC-FX3 содержит 48 портов 1/10/25G SFP28 и шесть 40/100G QSFP28. Он подходит для сравнения в проектах, где нужны оптические серверные подключения и развитие к 25G. Nexus N9K-C93108TC-FX3 содержит 48 медных портов 100M/1/10GBASE-T и шесть 40/100G. Это разные варианты доступа, а не взаимозаменяемые корпуса с одинаковой кабельной системой.
Не путайте C93108TC-FX3 с C93108TC-FX3P: поддержка промежуточных скоростей 2,5/5G относится к соответствующему исполнению и требует проверки. Для любой модели уточняют режим NX-OS или ACI, лицензии, направление воздушного потока, источники питания и совместимость трансиверов. Предложение без этих позиций ещё не описывает готовый узел.
Начать подбор можно в каталоге коммутаторов Cisco. Если модернизация включает вычислительную часть, сопоставьте NIC и серверные конфигурации в разделе Cisco UCS C-Series. Статья не заменяет карточку конкретного устройства: окончательный PID выбирают после расчёта и проверки совместимости.
Что проверить в лицензиях, охлаждении и комплектации?
Для серверного оборудования направление воздуха должно соответствовать стойке. Несовместимые направления у вентиляторов и блоков питания либо неверная ориентация корпуса нарушают охлаждение. Также проверьте акустические условия: коммутатор дата-центра может быть неудачным выбором для открытого офиса даже при достаточном числе портов.
В комплект включают корпус, питание, вентиляторы, крепления, подходящие кабели и оптику, программные права и необходимые лицензии. Маршрутизация, виртуальные сети, телеметрия и режим управления проверяются по точной платформе. Не приобретайте функциональную лицензию только по сходству названия с другой серией.
Как провести приёмочный тест 10G-сети?
- Проверьте согласованную скорость, ошибки интерфейсов и совместимость всех кабелей.
- Измерьте одиночный поток и несколько одновременных потоков отдельно.
- Запустите реальные операции NAS, резервного копирования и виртуализации.
- Измерьте не только МБ/с, но и задержку, время задания, потери и загрузку CPU.
- Отключите один путь и проверьте работу при уменьшенной полосе.
- Проверьте восстановление данных и возврат линии без неожиданного перерыва.
Сохраните исходные настройки, версии, размеры файлов, число потоков и условия теста. Сравнение «до и после» достоверно, когда задачи одинаковы. Скорость одного синтетического теста не подтверждает выполнение всех производственных требований.
Как описать серверную нагрузку до выбора 10G-коммутатора?
Начните с путей данных, а не с количества серверов. Для каждого потока запишите отправителя, получателя, объём, требуемое время и период одновременной работы. Трафик между двумя серверами одной стойки может не выходить в ядро, а копирование на удалённый NAS занимает uplink. Виртуальная машина на том же хосте иногда вообще не использует физический порт для общения с соседней ВМ. Эти различия меняют требования к конкретному соединению.
Разделите интерактивные приложения, операции хранения, резервное копирование, миграцию ВМ и служебный обмен. Для первых критична задержка, для вторых — также целостность пути и поведение при отказе, для копирования — окно выполнения. Один общий график загрузки серверной сети скрывает конфликт: ежедневная копия может укладываться во время, но регулярно ухудшать отклик базы данных. Поэтому в пилоте нужны одновременно несколько классов нагрузки.
| Поток | Что измерить | Какой участок проверить |
|---|---|---|
| Пользователь → сервер приложения | Пиковые обращения и время операции | Uplink и серверный порт |
| Сервер → NAS | Одновременные чтение и запись | NIC сервера, порты NAS, дисковую подсистему |
| Резервное копирование | Передаваемый объём и окно | Самое медленное звено полного пути |
| Миграция ВМ | Пиковый объём и влияние на приложения | Сеть между хостами и ограничения гипервизора |
| Репликация на другую площадку | Полосу, задержку и допустимое отставание | Серверную сеть и межплощадочный канал |
Соберите наблюдения за обычным днём и за тяжёлыми событиями: закрытие периода, массовое обновление, запуск нескольких резервных заданий, восстановление после отказа. Пятиминутные средние полезны для общего профиля, но способны скрыть микровсплески. Для выбора буферов и очередей понадобятся более короткие наблюдения и счётчики потерь. Тестовый поток должен проходить по тем же интерфейсам и режимам, что будущая рабочая нагрузка.
Сколько времени займёт резервная копия через 10G: расчёт с рабочим резервом?
В этом примере используются десятичные единицы: 1 ТБ = 10¹² байт, 1 Гбит/с = 10⁹ бит/с. Для 1 ТБ теоретический минимум при 10 Гбит/с составляет 8 × 10¹² / 10¹⁰ = 800 секунд, то есть 13 минут 20 секунд. Это предел арифметики без расходов протокола и других ограничений. Он не означает, что любой NAS действительно прочитает и запишет терабайт за такое время.
Если измеренная полезная скорость полного пути составляет 6,5 Гбит/с, 1 ТБ передаётся примерно за 1 231 секунду, или 20,5 минуты. Для 4 ТБ с окном 2 часа нужна средняя полезная полоса 4 × 10¹² × 8 / 7 200 = 4,44 Гбит/с. Допустим, в тот же период приложения требуют ещё 1,2 Гбит/с. Сумма составляет 5,64 Гбит/с, а выбранный проектный коэффициент 1,25 даёт ориентир 7,05 Гбит/с.
| Условие | Расчёт | Практический смысл |
|---|---|---|
| 1 ТБ при идеальных 10 Гбит/с | 800 секунд | Нижняя арифметическая граница |
| 1 ТБ при измеренных 6,5 Гбит/с | Около 20,5 минуты | Оценка по полезной скорости всего пути |
| 4 ТБ за 2 часа | 4,44 Гбит/с | Необходимая полоса копирования |
| Копирование и приложения | 4,44 + 1,2 = 5,64 Гбит/с | Одновременная полезная нагрузка |
| Пример с запасом 25% | 5,64 × 1,25 = 7,05 Гбит/с | Ориентир для пилота, не гарантия результата |
Если программа сжимает данные, удаляет дубликаты или передаёт только изменения, используйте фактический передаваемый объём, а не размер исходного диска. При восстановлении направление и нагрузка могут отличаться от копирования. Проверьте оба действия: быстрый backup не доказывает, что сервис можно вернуть за установленное время. Также учтите, может ли несколько заданий одновременно читать один и тот же массив без ухудшения задержки.
Запас 25% здесь задан для расчётного сценария. Для предсказуемой ночной копии и интерактивной СХД могут потребоваться разные условия. Проектный резерв выбирают исходя из колебаний, роста и отказа, а не как универсальный процент. Если после потери порта остаётся 10G, критичная аварийная нагрузка должна укладываться именно в этот оставшийся путь, даже когда штатно доступны два порта.
Как посчитать порты для двух коммутаторов и будущего расширения?
Рассмотрим два серверных коммутатора, 14 серверов с одним подключением к каждому, NAS с двумя портами на каждый коммутатор и сервер резервного копирования с одним портом на каждый. На одной стороне требуется 14 + 2 + 1 = 17 клиентских портов. Межкоммутаторные соединения и uplink считаются отдельно. В схеме с классическим vPC могут понадобиться два порта peer-link, а для подключения выше — ещё два, в зависимости от проекта.
| Роль на каждом коммутаторе | Сейчас | Рост в примере | Тип интерфейса |
|---|---|---|---|
| Серверы | 14 | Ещё 6 | 10G или проверенный путь перехода на 25G |
| NAS | 2 | Ещё 1 | По поддерживаемой конфигурации NAS |
| Резервное копирование | 1 | Без добавления | 10G в данном задании |
| Временная диагностика | 0 | 1 | Свободный подходящий порт |
| Итого клиентских портов | 17 | 25 с расширением | Не смешивать с выделенными uplink |
| Uplink и peer-link | 4 в выбранной схеме | По будущей полосе | Отдельные быстрые порты |
В этом задании 24 клиентских порта уже не покрывают план расширения до 25. Наличие дополнительных uplink не всегда помогает: нужно подтвердить возможность использовать их как требуемые клиентские интерфейсы и подходящие скорости. У модели с 48 клиентскими портами и отдельными высокоскоростными соединениями запас организовать проще, но полоса этих соединений и стоимость полного комплекта всё равно требуют расчёта.
Планируйте не только свободные гнёзда, но и кабельные трассы, NIC серверов, доступную оптику, электропитание и место в стойке. Переход сервера с 10G на 25G может потребовать изменения адаптера, кабеля, режима порта и настроек FEC. Само наличие разъёма SFP28 у коммутатора не превращает установленный SFP+ адаптер сервера в 25G. Для каждого этапа расширения сохраните совместимую пару интерфейсов.
10GBASE-T, DAC или оптика: как сравнить полный комплект?
Сначала посмотрите, какие интерфейсы уже есть у серверов и NAS. Если большинство устройств оснащено 10GBASE-T, выбор медного коммутатора может уменьшить число замен NIC. Если оборудование имеет SFP+, короткие DAC в стойке могут быть удобнее отдельных модулей. Между стойками или на сложной трассе оптика позволяет подобрать подходящее решение по расстоянию и монтажу. Решение принимают для конкретных пар устройств.
| Вариант | Что включить в сравнение | Основная проверка |
|---|---|---|
| 10GBASE-T | NIC, качество постоянной линии, патч-корды | Работа 10G на измеренной кабельной трассе |
| DAC | Один совместимый кабель между подходящими портами | Поддержка обеими сторонами, длина и укладка |
| Оптика | Два модуля, волокно и соединения | Пара модулей, трасса и состояние коннекторов |
| Переход на 25G | Новые NIC, кабель или оптика, настройки | Весь тракт 25G и согласованные режимы |
Учитывайте потребление интерфейсов, охлаждение, радиус изгиба и удобство замены. Экономия на кабеле может исчезнуть после замены серверного адаптера или устранения ошибок линии. Для подбора оптической пары есть руководство по совместимости SFP/SFP+; здесь важно включить все компоненты в стоимость серверной сети, а не повторять весь оптический каталог.
N9K-C93180YC-FX3 имеет 48 портов 1/10/25G SFP28 и шесть 40/100G QSFP28. Для серверов с RJ-45 можно сравнить N9K-C93108TC-FX3. Поддержку 2,5/5G нельзя автоматически переносить на обычный FX3: эти скорости есть у соответствующего варианта FX3P. Сохраните полный артикул, режим работы и требуемые интерфейсы в спецификации.
Как буфер помогает при микровсплеске и почему он не заменяет быстрый порт?
Если несколько серверов одновременно передают на один более медленный выход, очереди начинают расти. Буфер удерживает часть данных, пока выход освобождается. Но при устойчивом превышении входной нагрузки любой конечный буфер заполнится. Поэтому увеличение буфера полезно против кратких всплесков, а постоянное ограничение полосы устраняют изменением пути, скорости интерфейса или допустимого профиля передачи.
В расчётном примере на выход 10 Гбит/с одновременно приходит 20 Гбит/с. Избыток составляет 10 Гбит/с, то есть 1,25 ГБ/с. За 10 миллисекунд он создаст 12,5 МБ данных для очереди, за 20 миллисекунд — 25 МБ. Теоретические 40 МБ заполнились бы за 32 миллисекунды, если бы весь этот объём принадлежал единственной очереди. В реальном коммутаторе такое допущение обычно неверно.
У Nexus FX3 системный буфер 40 МБ — общий аппаратный ресурс, а не гарантированные 40 МБ на каждый порт. Доступный ресурс конкретной очереди зависит от архитектуры и настроек. Показатель используют для сравнения платформ вместе с очередями и наблюдаемой нагрузкой. Нельзя умножить 40 МБ на число портов или обещать, что любой 32-миллисекундный всплеск будет принят без потерь.
| Симптом | Что посмотреть | Возможное действие после проверки |
|---|---|---|
| Потери при одновременных отправках | Дропы очередей, кратковременную загрузку | Изменить расписание, скорость выхода или политику очередей |
| Высокая задержка без потерь | Длину очереди и постоянную конкуренцию | Ограничить тяжёлые фоновые потоки |
| Низкое среднее, но короткие провалы | Микровсплески и временное окно наблюдения | Перейти от средних графиков к кратким измерениям |
| Потери только одного приложения | Класс QoS и весь путь | Проверить классификацию и конкурирующие потоки |
Не включайте PFC «для ускорения NAS» без отдельного проекта. Lossless-режимы нужны определённым технологиям и требуют согласования конечных устройств, приоритетов и поведения перегрузки. Для обычного TCP-хранилища причина низкой скорости может находиться в дисках, CPU или одном потоке. Новая политика пауз не исправляет эти ограничения и способна изменить поведение других приложений.
Как отличить ограничение сети от ограничения NAS или СХД?
Проверяйте путь по этапам. Сначала подтвердите согласованную скорость интерфейсов и отсутствие физических ошибок, затем передачу между двумя производительными тестовыми узлами без медленного массива. После этого добавьте NAS, реальный протокол и рабочий набор данных. Если синтетическая сеть работает хорошо, а файловая операция — плохо, нужно смотреть не только коммутатор, но и хранение, сервер, клиента и программу.
Число IOPS и мегабайты в секунду описывают разные нагрузки. 80 000 операций в секунду по 4 КиБ дают около 327,68 МБ/с, или 2,62 Гбит/с полезных данных. Та же интенсивность по 64 КиБ даёт 5 242,88 МБ/с — уже почти 41,94 Гбит/с. Это арифметика объёма операций, без расходов сети и с допущением, что такой поток действительно проходит через неё. Типичный рабочий профиль может содержать разные размеры блоков.
Для базы данных особенно важна задержка операции, а для больших резервных файлов — устойчивый throughput. Один результат последовательного чтения не описывает случайную смешанную запись. Проверьте состояние RAID, кэш, одновременное восстановление массива, число задач и загрузку CPU NAS. Если выполняется дедупликация или шифрование, эти функции также могут стать ограничением на стороне хранения.
| Этап проверки | Результат | Что он ещё не доказывает |
|---|---|---|
| Сетевая передача без массива | Возможности пути между тестовыми узлами | Скорость реального NAS |
| Последовательный файл на NAS | Полезную скорость выбранного протокола | Задержку базы с мелкими операциями |
| Рабочий смешанный профиль | Поведение реального приложения | Устойчивость после отказа |
| Тот же профиль на одном оставшемся пути | Аварийную производительность | Доступность остальных зависимостей сервиса |
Что проверять в двух подключениях сервера к разным коммутаторам?
Два кабеля дают резерв только при согласованной работе обеих сторон. Если сервер собирает один LACP-канал через два независимых коммутатора, коммутаторам нужен поддерживаемый механизм совместной работы, например соответствующая конфигурация vPC. В другой архитектуре применяются независимые сети, teaming или multipath на уровне сервера и приложения. Просто включить два NIC в любые свободные порты недостаточно.
Классический vPC объединяет подходящие подключения с точки зрения downstream-устройства, но не превращает пару в один аппаратный коммутатор. Peer-link и peer-keepalive выполняют разные функции. Для keepalive предусматривают путь, который не зависит от отказа того же peer-link. Проект должен учитывать одноподключённые устройства, согласованность параметров и поведение при разрыве межкоммутаторных соединений.
При потере одного пути полоса уменьшается. Два 10G-порта могут распределять несколько подходящих потоков, но один обычный поток LACP обычно остаётся на одном участнике по выбранному хэшу. У NAS дополнительные механизмы многоканальности или multipath могут давать другой результат, если они поддержаны и настроены. Выбирать 2 × 10G как автоматическую замену единственному 25G для любого приложения нельзя.
Проверьте, что при отказе NIC, кабеля, порта и целого коммутатора приложение сохраняет требуемую работоспособность. Отдельно испытайте возвращение компонента, потому что смена распределения потоков может дать ещё один переходный режим. Устройство с единственным подключением к отказавшей стороне останется недоступным независимо от качества пары. Такие ограничения нужно показать в схеме до закупки.
Нужны ли jumbo frames и что проверять при изменении MTU?
Увеличенные кадры могут уменьшать относительные расходы при передаче больших объёмов, если их поддерживает весь тракт и приложение получает пользу. Но одинаковый параметр на двух серверах ещё не подтверждает поддержку на промежуточных портах, логических интерфейсах и туннелях. Несогласованная MTU способна вызвать частичную работу: маленькие запросы проходят, большие передачи зависают или резко замедляются.
Сохраните исходную MTU, проверьте выбранное значение на полном пути, затем сравните приложение в одинаковом режиме. Для обычного IPv4/TCP без опций MTU 1500 оставляет MSS 1460 байт; дополнительные заголовки и инкапсуляция меняют расчёт. Не применяйте механически один MSS ко всем IPv4, IPv6 и туннельным сценариям. Проверка должна учитывать фактический маршрут сервера к NAS.
Если переход на jumbo не даёт измеримого выигрыша, сохраняйте более простую совместимую схему. Больший кадр не исправляет медленный диск, неправильный LACP-хэш или перегруженный uplink. Изменение MTU полезно оценивать как отдельную настройку с понятным возвратом, а не включать одновременно с заменой всей серверной сети.
Как провести нагрузочную приёмку и избежать красивого, но бесполезного теста?
Один поток между двумя мощными серверами проверяет лишь небольшой участок задачи. Для реальной приёмки нужно несколько отправителей, рабочие приложения, фоновые задания и режим отказа. Договоритесь о нагрузке заранее и сохраните конфигурацию теста. Отдельно измеряйте полезную скорость, задержку, ошибки интерфейсов и потери очередей. Иначе снижение скорости легко ошибочно приписать одному коммутатору.
| Тест | Условия | Что подтвердить |
|---|---|---|
| Один поток | Без других задач | Базовую работу NIC и пути |
| Несколько потоков к NAS | Реальный протокол и размеры операций | Совокупную скорость и предел хранилища |
| Backup вместе с приложениями | Согласованный пик | Окно копии и приемлемый отклик |
| Миграция ВМ | Рабочая нагрузка продолжается | Отсутствие недопустимого влияния на сервисы |
| Один оставшийся коммутатор | Критичный аварийный профиль | Работу и полосу N−1 |
| Возврат отказавшей стороны | Продолжающиеся сессии | Устойчивое восстановление схемы |
Критерий может выглядеть так: заданная копия завершается в окно, а операция бизнес-приложения укладывается в согласованное время одновременно с ней. Конкретные числа назначают по требованиям организации. Их нельзя подменить максимальной скоростью интерфейса или суммой пропускной способности ASIC. Даже высокий результат теста не обещает такое же время при другом наборе данных и перегруженной СХД.
Как заказать серверный комплект Cisco с понятным переходом на 25G?
Что означают терабиты коммутационной ёмкости и как считать oversubscription?
Коммутационная ёмкость описывает работу аппаратной платформы, а скорость конкретного пути ограничивают его интерфейсы. Для набора 48 × 25G и 6 × 100G сумма скоростей портов в одном направлении равна 1 800 Гбит/с. Учёт двух направлений даёт 3,6 Тбит/с. Из этой цифры нельзя сделать вывод, что один NAS или один uplink передаст 3,6 Тбит/с. На каждом физическом соединении остаётся его согласованная скорость.
Oversubscription показывает отношение потенциальной нагрузки к полосе общего участка. Если 48 серверных портов по 10G одновременно направляют трафик выше через два uplink по 100G, отношение номиналов составляет 480 / 200 = 2,4:1. После отказа одного uplink оно станет 4,8:1. Это не означает, что сеть обязательно медленная: серверы могут не создавать максимальный поток одновременно или обмениваться локально. Но схема не выдержит непрерывную полную нагрузку всех портов в одном направлении выше.
Посчитайте отдельно три режима: локальный обмен внутри пары, выход в ядро и доступ к хранилищу. Для каждого есть собственное ограничение. Если большинство данных остаётся между серверами, меньшая полоса uplink может быть оправдана. Если все хосты копируют на NAS через один 10G-порт, именно этот порт станет общим пределом даже у коммутатора с терабитной ёмкостью. Расчёт должен показывать, где собираются потоки и что остаётся после отказа.
Для оценки роста сравнивайте прогноз одновременной нагрузки с измеренной рабочей полосой, а не только с номиналами. Включите будущие резервные задания и миграции. Если нужны более быстрые uplink, заранее проверьте доступные порты, модули и поддержку другой стороны. Это делает запас конкретным: свободный QSFP28 полезен только вместе с совместимым следующим узлом и подготовленной линией.
Зафиксируйте модели NIC, NAS и серверов, используемые протоколы, карту портов сейчас и после расширения. Спросите, какие интерфейсы сохранят 10G, а какие перейдут на 25G; для каждого перехода нужны совместимые компоненты. Выбор модели с SFP28 может сохранить часть аппаратной базы, но стоимость NIC и кабелей должна быть учтена заранее. Так видно, когда запас коммутатора действительно уменьшает будущие затраты.
| Часть поставки | Что указать | Часто пропускают |
|---|---|---|
| Коммутаторы | Полный PID, режим ПО, лицензии | Несовпадение режимов управления |
| Питание и охлаждение | БП, кабели, направление воздушного потока | Противоположную ориентацию в холодном коридоре |
| Серверные подключения | NIC, DAC или пары оптики | Поддержку кабеля на стороне сервера |
| Резервная схема | Peer-link, отдельный keepalive, uplink | Компоненты второго пути |
| Рост | Порты, полосу и комплект следующего этапа | Необходимые новые адаптеры |
| Приёмка | Рабочие сценарии и аварийный профиль | Проверку приложения после возврата пути |
Для подбора 10G-сети под серверы и NAS отправьте ведомость потоков и портов. Предложение должно показывать завершённый тракт, а не только цену 48-портового корпуса. Это позволяет сравнить медный и оптический варианты, необходимый резерв и стоимость перехода на следующий этап без скрытой замены половины комплекта.
Частые вопросы о 10G-коммутаторах для серверов
Подойдёт ли обычный гигабитный кабель для 10G?
Нужна проверка полного медного канала. Для проекта до 100 м обычно используют Cat 6A. Старые линии оценивают по категории, длине и измерениям, включая патч-панели и шнуры.
Можно ли подключить 1G NAS к 10G-коммутатору?
Если порт поддерживает соответствующую скорость и интерфейс. Сам NAS останется ограничен своим подключением. У SFP+ и RJ45 набор поддерживаемых скоростей может отличаться.
Ускорит ли 10G обмен большим количеством мелких файлов?
Только если ограничение сетевое. Для мелких файлов часто важны задержка, метаданные, диски и процессор. Проверяйте именно рабочий набор данных.
Нужен ли сразу коммутатор на 25G?
Если расчёт и план развития требуют скорости выше 10G или выгодно сохранить переход к 25G. Но NIC, кабели и лицензии тоже должны поддерживать выбранный режим.
Достаточно ли двух портов NAS для отказоустойчивости?
Нужны независимые пути и подходящий режим NAS. Два порта в одном коммутаторе защищают от некоторых отказов линии, но сохраняют зависимость от этого узла.
Всегда ли нужны jumbo frames?
Нет. Увеличенный MTU применяют при подтверждённой пользе и согласованной настройке всего пути. Разные MTU способны вызвать проблемы, которые трудно заметить обычным ping.
Какой буфер лучше для СХД?
Универсального размера нет. Оценивают профиль всплесков, выходную полосу, распределение очередей и требования протокола. Большой буфер не компенсирует постоянную перегрузку.
Можно ли считать скорость по числу дисков?
Нельзя без профиля доступа. Последовательное чтение, случайные операции, запись и rebuild дают разные результаты. Требуются измерения или расчёт конкретной конфигурации хранения.
Nexus N9K-C93180YC-FX3 можно включить в ведомость кандидатов. Перед заказом проверьте полное исполнение и соответствие описанному сценарию; наличие карточки не заменяет проверку комплекта.
Как выбрать и купить 10G-коммутатор Cisco под серверную нагрузку?
Для подбора конфигурации подготовьте список NIC и NAS, схему подключений, число портов, объём резервных копий, окно передачи, тип кабеля и требования при отказе. Добавьте условия стойки и план расширения. В предложении сравнивайте готовые комплекты с одинаковой полезной задачей, а не только номинальную скорость портов.
