02 ‐ Características - lncc-sered/manual-sdumont2nd GitHub Wiki
Conjunto de equipamentos, adquiridos em 2024, baseados na tecnologia BullSequana. Este ambiente é composto de 6x Racks BullSequana XH3000 (que atinge um total de 2,0 Pflops RPeak - Theoretical peak) com processadores Intel, AMD, ARM, GPU NVIDIA, APU AMD, Armazenamento Lustre e conectividade de Alto desempenho (Infiniband NDR de 400Gb/s).
No total, o ambiente conta com 20.064 núcleos de CPU, 392 GPUs Nvidia e 36 APUs AMD, distribuídos em 180 nós computacionais, possuindo a configuração abaixo.
- 60 nós computacionais BullSequana X3420
- 2 x AMD Genoa-X 9684X 96c (Total de Cores por nó: 192)
- 24 x 64 GB DDR5-4800 (Total de memória por nó: 1536 GB)
- 1 x 3.8 TB SSD M2 PRO 22110
- 62 nós computacionais BullSequana X3145-H
- 2x Intel Xeon SHR 48C HBM2,350W M9468 (Total de Cores por nó: 96)
- 4 x Nvidia Hopper HGX H100 SXM 80GB HBM3
- 16 x 64 GB DDR5-4800 RDIMM (Total de memória por nó: 1024 GB)
- 1 x 3.8 TB SSD M2 PRO 22110
- 36 nós computacionais BullSequana X3515-H
- 4x Nvidia GraceHopper SuperChip, contendo:
- Processador Grace ARM64 Neoverse V2 72c (Total de Cores por nó: 4 x 72 = 288)
- Nvidia Hopper HGX GH200 SXM 96GB HBM3 (Total de GPUs por nó: 4)
- 4x 128 GB de memória LPDDR5x + 4 x 96GB HBM3 (Total de memória por nó: 896 GB)
- 1x 3.8 TB SSD M2 PRO 22110
- 4x Nvidia GraceHopper SuperChip, contendo:
- 18 nós computacionais BullSequana G838-R80
- 2 x APU AMD Instinct MI300A APU GPU 128GB HBM3, contendo:
- Processador CPU AMD 'Zen 4' x86 CPU 24c (Total de Cores por nó: 2 x 24 = 48)
- 1 x GPU AMD CDNA3 128GB HBM3
- 2 x 128GB HBM3 (Total de memória por nó: 256 GB)
- 1 x 3.84 TB SATA3 SSD 1.5 DWPD
- 2 x APU AMD Instinct MI300A APU GPU 128GB HBM3, contendo:
- 4 nós computacionais BullSequana H263-V60
- 1 x Nvidia Grace-Grace SuperChip, contendo
- 2 x Processador Grace ARM64 Neoverse V2 72c (Total de Cores por nó: 2 x 72 = 144)
- 960 GB
- 1 x 3.84TB M.2_PCIe Gen 4x4_SSD_1DWDP
- 1 x Nvidia Grace-Grace SuperChip, contendo
O SDumont2nd possui dois sistemas de armazenamento para servir aos usuários. Ambos implementam o Lustre v.XXX.
DDN EXAScaler ES400NVX2-S Híbrido NVMe+HDD
- 2 x DDN EXAScaler 400NVX2-S
- 2 x SE9024 90-slot SAS-4 enclosures (gabinetes)
- 48 x Módulos de unidade SSD NVMe G4 de 7,68 TB e 1 DWPD para o sistema 400NVX2; Com suporte a SED
- 180 x Módulos de unidade HDD SAS-3 de 22 TB e 7,2k RPM para o gabinete SE9024; Com suporte a SED
- 8 x Portas NDR-200 QSFP112
- Espaço total utilizável: 3 PB de HDD + 264 TB de NVMe
DDN EXAScaler ES400NVX2-SE
- 2 x DDN EXAScaler 400NVX2-SE
- 4 x módulos Ethernet SE2420 de 24 compartimentos
- 48 x unidade SSD NVMe G4 de 3,84 TB e 1 DWPD para o sistema 400NVX2; Compatível com SED
- 96 x unidade SSD NVMe G4 QLC de 30,72 TB para o módulo SE2420; Compatível com SED
- 8 x Portas NDR-200 QSFP112