Весной 2021 года, несмотря на кризис полупроводников, многие производители серверов и сетевого оборудования анонсировали обновление своих продуктов. Но интереснее всего посмотреть на лидеров рынка, поэтому речь пойдёт о решениях Dell и HPE.
R.R Donnelley Printing Plant a.k.a Lakeside Technology Center.
Один из самых больших ЦОДов в мире, Lakeside Technology Center, расположен в США в Чикаго. К нему подведены три независимых источника электроэнергии, обеспечивающие мощность в 100 МВт. Но даже этот монстр в мире серверного оборудования имеет конечную площадь – 102 тыс. м2 или 14 футбольных полей по правилам FIFA. А поскольку ресурсы не бесконечны, то все ЦОДы стремятся улучшить энергоэффективность размещаемого оборудования.
Главный параметр – соотношение вычислительной мощности к потребляемой электроэнергии на 1U. Со временем старые серверы перестают справляться с постоянно растущими нагрузками, но энергии потребляют столько же или больше. В новых поколениях производительность на 1U выше, что позволяет освободить стойки, облегчить администрирование или увеличить мощность ЦОДа при аналогичном потреблении электроэнергии.
1. Первая причина – это ты уменьшение расходов на инфраструктуру
Улучшенная энергоэффективность;
Меньше нод при сохранении или увеличении нагрузки;
Меньше персонала для администрирования серверов;
Новое оборудование имеет больший ресурс наработки на отказ, чем отработавшее несколько лет без замены дисков и расходников.
2. Новейшие технологии
Апгрейд существующих наработок (например, переход c PCIe 3.0 на PCIe 4.0);
Появление новых технологий (например, процессоры Zen с архитектурой, разработанной почти с нуля).
Слева архитектура Zen, справа старая – Opteron A1100.
3. Улучшение защиты
Количество различных BEC-атак и других киберпреступлений растёт из года в год. В октябре 2021 года специалисты Check Point Software Technologies объявили, что в среднем по миру показатель вырос на 40%, а в Казахстане на 54%; поэтому вендоры постоянно устраняют уязвимости и вводят новые технологии защиты в свои продукты.
4. Социальный фактор
На необходимость обновления IT-инфраструктуры влияет обстановка в мире и обществе. Согласно опросу Enterprise Cloud Index (ECI) в 2020 г. пандемия привела к тому, что многие компании начали инвестировать в IT. Доля сотрудников на удалёнке непрерывно растёт, а когда (если) история с COVID-19 закончится, большинство компаний не собирается загонять людей обратно в офисы.
В марте 2021 года Dell выпустила пресс-релиз с анонсом 15-ого поколения (G15) серверов PowerEdge. Первоначально линейка состояла из 17-ти моделей, но в октябре 2021-ого Dell анонсировала ещё 4 сервера начального уровня на процессорах Intel Xeon E-2300 (Rocket Lake-E). В истории вендора это крупнейшее обновление, но есть небольшой нюанс: R6515, R7515, R6525, и R7525 были представлены ещё в сентябре 2019-ого и работали на AMD EPYC 7002. Так что первый шаг в G15 сделан пару лет назад.
Обновление процессоров – один из важнейших пунктов для конечного пользователя, поэтому в новом поколении серверов акцент сделан на EPYC 7003 и Xeon Scalable 3.
“Сервер PowerEdge R6515 с процессорами AMD EPYC 3 ускоряет обработку Big Data в базах данных Hadoop до 60%, сокращая время получения результатов аналитики”.
“Сервер PowerEdge R750 с процессорами Intel Xeon Scalable 3 обеспечивает оптимизацию производительности до 43% при решении линейных уравнений с массовым параллелизмом, поддерживая тяжелые вычислительные нагрузки клиентов”.
Модель, форм-фактор |
CPU, RAM |
Фото без передних панелей (безелей) |
|
Tower 4U |
1P, Xeon E-2300 до 8 ядер или Pentium до 2 ядер. DDR4, 4 слота, до 128 ГБ, Xeon – 3200 MT/s, Pentium– 2666 MT/s. |
|
|
Tower 4.5U |
1P, Xeon E-2300 до 8 ядер или Pentium до 2 ядер. DDR4, 4 слота, до 128 ГБ, Xeon – 3200 MT/s, Pentium– 2666 MT/s. |
|
|
1U |
1P, Xeon E-2300 до 8 ядер или Pentium до 2 ядер. DDR4, 4 слота, до 128 ГБ, Xeon – 3200 MT/s, Pentium– 2666 MT/s. |
|
|
1U |
1P, Xeon E-2300 до 8 ядер или Pentium до 2 ядер. DDR4, 4 слота, до 128 ГБ, Xeon – 3200 MT/s, Pentium– 2666 MT/s. |
|
|
1U |
2P, Xeon Scalable 2 и 3, до 24 ядер на процессор. DDR4, 16 слотов, до 1 ТБ RDIMM, 2933 MT/s. |
|
|
1U |
2P, Xeon Scalable 2 и 3, до 32 ядер. DDR4, 16 слотов, до 1 ТБ RDIMM, 3200 MT/s. |
|
|
1U |
2P, Xeon Scalable 2 и 3, до 40 ядер на процессор. DDR4, 32 слота, до 2 ТБ RDIMM или до 4 ТБ LRDIMM, 3200 MT/s. |
|
|
1U |
1P, AMD EPYC 7002, 7003 до 64 ядер на процессор. DDR4, 16 слотов, до 1 ТБ RDIMM или до 2 ТБ LRDIMM, 3200 MT/s. |
|
|
1U |
2P, AMD EPYC 7002, 7003 до 64 ядер на процессор. DDR4, 32 слота, до 2 ТБ RDIMM или до 4 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
2P, Xeon Scalable 2 и 3, до 24 ядер на процессор. DDR4, 16 слотов, до 1 ТБ RDIMM, 2933 MT/s. |
|
|
2U |
1P, AMD EPYC 7002, 7003 до 64 ядер. DDR4, 16 слотов, до 1 ТБ RDIMM или до 2 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
2P, Xeon Scalable 2 и 3, до 32 ядер. DDR4, 16 слотов, до 1 ТБ RDIMM, 3200 MT/s. |
|
|
2U |
2P, Xeon Scalable 2 и 3, до 40 ядер на процессор. DDR4, 32 слота, до 2 ТБ RDIMM или до 8 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
2P, AMD EPYC 7002, 7003 до 64 ядер на процессор. DDR4, 32 слота, до 2 ТБ RDIMM или до 4 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
2P, Xeon Scalable 2 и 3, до 40 ядер на процессор. DDR4, 16 слотов, до 1 ТБ RDIMM или до 2 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
2P, AMD EPYC 7002, 7003 до 64 ядер на процессор и до 280W (TDP). DDR4, 16 слотов, до 2 ТБ RDIMM или до 2 ТБ LRDIMM, 3200 MT/s. |
||
2U |
2P, Xeon Scalable 2 и 3, до 40 ядер на процессор. DDR4, 32 слота, до 2 ТБ RDIMM или до 4 ТБ LRDIMM, 3200 MT/s. |
|
|
4U |
2P, AMD EPYC 7002, 7003 до 64 ядер на процессор и до 280W (TDP). DDR4, 32 слота, 3200 MT/s. |
|
|
1U |
1P, Xeon Scalable 2 и 3, до 36 ядер. DDR4, 8 слотов, до 512 ГБ RDIMM или до 1 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
1P, Xeon Scalable 2 и 3, до 36 ядер. DDR4, 8 слотов, до 512 ГБ RDIMM или до 1 ТБ LRDIMM, 3200 MT/s. |
|
|
Full-height Blade 1U |
2P, Xeon Scalable 2 и 3, до 40 ядер на процессор. DDR4, 32 слота, до 2 ТБ RDIMM или до 4 ТБ LRDIMM, 3200 MT/s. |
|
Отдельного упоминания заслуживает Dell PE XE8545 – 4U сервер стандартной глубины. Это мощнейшая платформа для высокопроизводительных вычислений, ИИ, глубокого машинного обучения и виртуализации с поддержкой vGPU.
Под панелью на фронтальной части расположены 12 кулеров для охлаждения 4-ёх GPU NVIDIA A100 с двумя вариантами видеопамяти: 40 Гб (≈$15 000) и 80 Гб (≈$20 000). Там же дисковая корзина на 10 SFF дисков SAS, SATA, NVMe. Последних можно поставить не более 8 штук
Ключевые характеристики A100 80GB (инфо с блога Nvidia):
Тензорные ядра третьего поколения: до 20 раз выше скорость в ИИ по сравнению с предыдущим поколением Volta с новым форматом TF32, а также в 2.5 раза выше в вычислениях FP64 для HPC, в 20 раз выше в вычислениях INT8 для инференса и поддержка формата BF;
Больше и быстрее память HBM2e: удвоение пропускной способности памяти и впервые в индустрии полоса пропускания свыше 2 ТБ/с;
Технология MIG: удвоение памяти на изолированный инстанс, до семи MIG-систем с 10ГБ памяти каждая;
Структурная разреженность: ускорение до 2 раз в инференсе разреженных моделей;
NVLink и NVSwitch третьего поколения: удвоение полосы пропускания между GPU по сравнению с предыдущей технологией связи ускоряет передачу данных на GPU для ресурсоемких задач до 600 ГБ/с.
Чтобы сервер сравнялся по стоимости с чугунным космическим кораблём, в него можно поставить 2 новейших процессора AMD EPYC 7763 (по $8 000 каждый) и 2ТБ Dell DDR4 с 3200 MT/s (ещё приблизительно по $900 за планку 64 ГБ).
Рассмотреть 21 сервер в рамках одной статьи не получится, поэтому я выделю общие для G15 параметры. У некоторых моделей спецификации могут отличаться, для подробного изучения я оставил ссылки на QuickSpecs в таблице выше.
Итак:
Поддержка новых поколений CPU от Intel и AMD. Удивительно, что в G14 не было серверов на EPYC’ах, а в G15 сразу 6 моделей;
Больше моделей получило поддержку NVMe U.2;
Увеличение максимальной скорости RAM c 2933 до 3200 MT/s, кроме R450 и серверов на Intel Rocket Lake-E;
Увеличение количества слотов под RDIMMs и LRDIMMs. Например, у MX750c до 32 планок, а у MX740c до 24;
Переход на PCIe 4.0, что вдвое увеличивает максимальную пропускную способность;
Появились упрощённые модели “xs”;
Появились новые модели XR11 и XR12 с защищённым корпусом (ruggedized) уменьшенной глубины, разработанные для удалённого размещения в неблагоприятных условиях: пыль, перепады температур (-5, +55).
У компании HPE другая тактика в нейминге, и они её придерживаются. Вместо Gen11 ограничились припиской Gen10 Plus, а чуть позже Plus v2. Новинки анонсировали и выводили в продажу постепенно. И вроде поколение номинально не сменилось, но нововведений не меньше, чем у Dell в G15. В техническом плане у компаний паритет.
В целом обновление происходило следующими этапами:
В 2019 году вышли серверы DLxx5 Gen10 Plus – это обновление под AMD EPYC 7002.
Весной 2021-ого показали серверы DLxy5 Gen10 Plus сразу с новыми AMD EPYC 7003. К уже существующим моделям DLxx5 Gen10 Plus добавили поддержку EPYC 7003 и приписали “v2”.
Ну и чуть позже показали DLxy0 Gen10 Plus c Intel Xeon Scalable 3.
Модель, форм-фактор |
CPU, RAM |
Фото без передних панелей (безелей) |
|
(телекоммуникационный) 1U |
1P, Xeon Scalable 3 до 32 ядер. DDR4, 8 слотов, до 512ГБ LRDIMM, до 1.0 ТБ LRDIMM, 3200 MT/s. |
|
|
Модель 2019 года 1U |
1P, AMD EPYC 7002 до 64 ядер. DDR4, 16 слотов, до 1.0 ТБ RDIMM, до 2,0 ТБ LRDIMM, 3200 MT/s. |
|
|
1U |
1P, AMD EPYC 7003 Series до 64 ядер. DDR4, 16 слотов, до 1.0 ТБ RDIMM, или 4,0 ТБ LRDIMM, 3200 MT/s. |
|
|
1U |
2P, Xeon Scalable 3 до 40 ядер на процессор. DDR4, 32 слота, до 4.0 ТБ RDIMM на сокет, или 4,0 ТБ LRDIMM + 2,0 ТБ PMEM на сокет, 3200 MT/s. |
|
|
1U |
2P, AMD EPYC 7003 Series до 64 ядер на процессор. DDR4, 32 слота, до 8.0 TБ LRDIMM, 3200 MT/s. |
|
|
2U |
1P, AMD EPYC 7003 Series до 64 ядер. DDR4, 32 слота, до 1.0 ТБ RDIMM, или 4,0 ТБ LRDIMM, 3200 MT/s. |
|
|
2U |
2P, Xeon Scalable 3 до 40 ядер на процессор. DDR4, 32 слота, до 8.1 ТБ RDIMM, или 3.0 ТБ - LRDIMM + 8.2 ТБ PMEM, 3200 MT/s. |
|
|
Модель 2019 года 2U |
2P, EPYC 7002 до 64 ядер на процессор. DDR4, 32 слота, до 4,0 ТБ RDIMM, 3200 MT/s. |
|
|
2U |
2P, AMD EPYC 7003 Series до 64 ядер на процессор. DDR4, 32 слота, до 8,0 ТБ LRDIMM, 3200 MT/s. |
|
|
Модель 2020 года Micro tower |
На выбор: Intel Xeon E-2200 series до 2 ядер, Intel Pentium до 4 ядер. DDR4, до 32 ГБ ECC UDIMM, 2666 MT/s. |
|
|
Модель 2019 года Шасси высотой 2U, до четырёх узлов XL220n, XL225n, и до двух XL290n |
На выбор: EPYC 7002, 7003, Xeon Scalable 3. На один узел: DDR4, 16 слотов, до 1.0 ТБ RDIMM, до 2,0 ТБ LRDIMM, 3200 MT/s. |
|
|
Модель 2019 года Шасси высотой 6U, до двух узлов XL645d или один XL675d |
AMD EPYC 7002, 7003 до 280W на процессор. XL645d: DDR4, 8 слота, до 2.0 ТБ RDIMM, до 4,0 ТБ LRDIMM, 3200 MT/s. XL675d: DDR4, 32 слотов, до 2.0 ТБ RDIMM, до 4,0 ТБ LRDIMM, 3200 MT/s. |
|
И пару слов об Apollo 6500 Gen10 Plus – это модульная система для высокопроизводительных вычислений, ИИ, глубокого машинного обучения и виртуализации с поддержкой vGPU. Есть поддержка 4, 8, 10 или 16 GPU NVIDIA A100 и системы прямого жидкостного охлаждения (DLC). И стоит это дело аки квартира в Алматы.
Блоки модульных ускорителей для HPE XL645d Gen10 Plus и HPE XL675d Gen10 Plus.
1. Поддержка новых поколений CPU от Intel и AMD;
2. Увеличение максимальной скорости RAM до 3200 MT/s, кроме MicroServer;
3. Поддержка контроллеров PCIe Smart Array для внутренних и внешних накопителей;
4. Поддержка сетевых адаптеров OCP;
5. Поддержка новых SSD SATA Read Intensive;
6. Поддержка новых SSD NVMe Read Intensive и Mixed Use;
a) Новый комплект вентиляторов высокой эффективности для некоторых конфигураций.
7. Переход на PCIe 4.0, что вдвое увеличивает максимальную пропускную способность.
С точки зрения обычного пользователя вряд ли есть большая разница между новыми серверами HPE и Dell – это профессиональные решения, в основе которых лежат похожие, а во многом и одинаковые технологии. Для меня вопрос “AMD или Intel” выглядит серьезнее, чем “Dell или HPE”, но это тема для отдельной статьи.
Вектор развития IT сместился в удалённые гиперконвергентные инфраструктуры (SaaS, IaaS, PaaS) и облачные сервисы, поэтому вендоры и обновляют в первую очередь продукты для крупных заказчиков: ЦОДы, хостеры, финтех и т.д. Та же Dell представила серверы начального уровня только через полгода после основной линейки. Но рынок серверного оборудования растёт вместе со спросом на него, поэтому можно не сомневаться, что вендоры будут и дальше приятно удивлять нас.
НУЖНА ПОМОЩЬ В ПОДБОРЕ СЕРВЕРА? ТОГДА ОБРАЩАЙСЯ К НАМ!