O Datacenter

      Para hospedar os equipamentos, a CCM utiliza um datacenter da marca SGI, modelo Ice Cube Air, o qual possui 20 racks, cada um com capacidade para 35 kW, totalizando 700 kW de capacidade energética e resfriamento, equipamento adquirido com verba FINEP. O resfriamento é feito via admissão de ar externo, que é resfriado por umidificação do ar, ou em dias muito úmidos ou quentes, há um resfriador para a água utilizada na umidificação do ar. Desta maneira, o gasto energético com o resfriamento dos equipamentos computacionais é reduzido, sendo por volta de 10% do gasto energético, em contraste com os 100% utilizados usualmente com ar-condicionados. Além disso, o sistema conta com proteção contra eventuais falhas de energia: há um sistema com dois grupos geradores diesel de 500 kW (adquiridos com verbas próprias da UFABC), além de nobreaks com capacidade máxima de 850 kW (adquiridos com verba FINEP).

Política de ocupação e manutenção do Ice Cube (BS nº 1133, 05/04/2022)

Equipamentos alocados no Ice Cube

Responsável: Central Computacional Multiusuário

E-mail: ccm@ufabc.edu.br

Equipamento Multiusuário: Sim

Procedimento para acesso: Solicitar a(o) docente responsável que realize a solicitação via Central de Serviços.

Nó de Gerenciamento

  • 1 (um) Nó de Gerenciamento Dell PowerEdge R6525 Server configurado com:

  • 128 GB de memória DDR4 4800 MT/s ECC Registrada (24x 32 GB RDIMM)

  • 32 (trinta e dois) cores em 2 (dois) sockets AMD EPYC 7313 3.0 GHz com 128 MB de cache;

  • 1 (um) SSD 480GB SATA 6Gbps de 2.5” Hot-Plug

  • 1 (uma) interface para gerenciamento remoto iDRAC;

  • 2 (duas) portas 1 GbE;

  • 1 (uma) porta QSFP56 200 Gb/s InfiniBand HDR;

  • Fontes redundantes (1+1) 800W;

Nós de Processamento

7 (sete) Compute Nodes Dell PowerEdge R6525 Server configurados com:

  • 128 (cento e vinte oito) cores em 2 (dois) sockets AMD EPYC 7763 2.45 GHz com 256 MB de cache;

  • 512 GB de memória DDR4 3200 MT/s ECC Registrada (16x 32 GB RDIMM);

  • 1 (um) SSD 480GB SATA 6Gbps de 2.5” Hot-Plug

  • 1 (uma) interface para gerenciamento remoto iDRAC;

  • 2 (duas) portas 1GbE;

  • 1 (uma) porta QSFP56 200 Gb/s InfiniBand HDR;
  • Fontes redundantes (1+1) 1400W;

9 (nove) Compute Nodes Dell PowerEdge R6625 Server configurados com:

  • 192 (cento e noventa e dois) cores em 2 (dois) sockets AMD EPYC 9654 2.4 GHz com 384 MB de cache;

  • 768 GB de memória DDR5 5600 MT/s ECC Registrada (16x 32 GB RDIMM);

  • 1 (um) SSD 480GB SATA 6Gbps

  • 1 (uma) interface para gerenciamento remoto iDRAC;

  • 2 (duas) portas 1GbE Base-T;

  • 2 (duas) portas Ethernet 10/25GbE SFP28
  • Fontes redundantes (1+1) de 1400W
 

1 (um) GPU Node Dell PowerEdge R7625 configurado com:

  • 64 (sessenta e quatro) cores em 2 (dois) sockets AMD EPYC 7513, 2.6GHz com 128MB de cache;

  • 256GB de memória DDR4 – 3200 MT/s ECC Registrada (16x 16GB RDIMM);

  • 2 (duas) GPGPUs NVIDIA L40S 24GB PCIe;

  • 1 (um) SSD 480GB SATA 6Gbps;

  • 1 (uma) porta para gerenciamento remoto iDRAC;

  • 2 (duas) portas Ethernet 1GbE Base-T;
  • 2 (duas) portas Ethernet 10/25GbE SFP28;
  • Fontes redundantes (1+1) de 2400W;

1 (um) GPGPU Node Dell PowerEdge R7525 Server configurados com:

  • 128 (cento e vinte oito) cores em 2 (dois) sockets AMD EPYC 7763 2.45 GHz com 256MB de cache;

  • 512 GB de memória DDR4 3200 MT/s ECC Registrada (16x 32 GB RDIMM);

  • 1 (um) SSD 480GB SATA 6Gbps de 2.5” Hot-Plug

2 (duas) GPGPUs NVIDIA A30 24 GB;

  • 1 (uma) interface para gerenciamento remoto iDRAC;

  • 2 (duas) portas 1GbE;

  • 1 (uma) porta QSFP56 200 Gb/s InfiniBand HDR;

  • Fontes redundantes (1+1) 2400W;

1 (um) GPGPU Node Dell PowerEdge R7525 Server configurados com:

  • 128 (cento e vinte oito) cores em 2 (dois) sockets AMD EPYC 7763 2.45 GHz com 256MB de cache;

  • 512 GB de memória DDR4 3200 MT/s ECC Registrada (16x 32 GB RDIMM);

  • 1 (um) SSD 480GB SATA 6Gbps de 2.5” Hot-Plug

  • 2 (duas) GPUs NVIDIA A40 48 GB;

  • 1 (uma) interface para gerenciamento remoto iDRAC;

  • 2 (duas) portas 1GbE;

  • 1 (uma) porta QSFP56 200 Gb/s InfiniBand HDR;

  • Fontes redundantes (1+1) 2400W;

Storage BeeGFS

  • 1 (um) Storage JBOD Dell PowerVault ME5084 configurado com:

  • 42 (quarenta e dois) HDDs 20TB NLSAS 7.2K RPM 12Gbps de 3.5” Hot-Plug

  • 1 (uma) controladora dupla SAS 8 portas

  • 2 cabos mini-SAS

  • Fontes redundantes (1+1) 2200W;

1 (um) Switch Dell Networking Gerenciável N1548-ON com:

  • 48 (quarenta e oito) portas 1GbE;

  • 4 (quatro) portas 10GbE SFP+;

  • 5 (cinco) anos de garantia com atendimento 5×10 NBD on-site.

1 (um) Switch Dell Networking Gerenciável S4148F-ON com:

  • 48 (quarenta e oito) portas 10GbE SFP+;

  • 4 (quatro) portas 100GbE QSFP28;