THUBAT KAAL 2.0

DETALLE DE LA CONFIGURACIÓN:

La solución contiene una capacidad de computo de 257.54 TFLOPS en doble precisión (182.04 Intel Skylake Xeon x86 64 Bits, 75.2 NVIDIA GPU P100). Está compuesta por 86 nodos de cálculo de los cuales 82 nodos son de tecnología INTEL XEON X86 64 BITS SKYLAKE (Purley Platform) y 4 nodos contienen 4 placas NVIDIA P100 cada uno. A su vez, cuenta con un área de sistema de archivos Lustre Alta Disponibilidad con 1.8 PB
disponibles.

DESEMPEÑO MAXIMO TOTAL : 255,4 TFlops

Hardware

4 racks 42 U con PDUs y cables de alimentación compatibles para los equipamientos.
86 nodos de cálculo con las siguientes características:

64 compute nodes bull R440-E5 (6.86 GB RAM por core):

  1. 2x procesadores Intel Skylake Xeon Gold 6130 (2.1 HHz, 16c, 22MB 125 W).
  2.  192 GR RAM DDR4-2667 ECC
  3. 1X 480 GB SATA 6Gb/s SSD internal (Intel SSD DC 3520 Series 480 GB, 2.5 in SATA 6Gb/s,3D1, MLC)
  4. 1x PCI Infiniband EDR ConnectX -4 single port
  5. 1x GbE RJ45 port

8 compute nodes bullx R440-E5 (13.72 GB RAM por core)

  1. 2x procesadores Intel Skylake Xeon Gold 6130 (2.1 GHz, 16c, 22 MB 125 W)
  2. 1384 GB RAM DDR4-2667 ECC
  3. 1x 480 GB SATA 6 Gb/s SSD internal (Intel SSD DC 3520 Series 480 GB, 2.5 in SATA 6 Gb/s, 3D1, MLC)
  4. 1x PCI Infiniband EDR Connect X-4 single port
  5. 1x GbE RJ45 port

 

 4 nodos de cálculo bullx R421 – E4K (4.57 GM RAM por core, 4x placas Nvidia P100)

  1. 2x procesadores Intel E5-2680 v4 (2.4 GHz, 14c, 35 MB)
  2. 128 GB RA; DDR4-2400 ECC
  3. 1x Disco SATA 500 GB interno
  4. 4x placas NVIDIA P100 (3584 cores, 4.7 Tflops double-precision, 12 GB)
  5. 1x placa PCI Infiniband EDR ConnectX-4 single port
  6. 1x GbE RJ45 port
  7. Total 19875,2 Gflops por nodo de cálculo

2 nodos de administración para servicios configurados en modo clúster de alta disponibilidad activo-activo (HA active –active), cada uno con las siguientes características:

  1. 2x procesarores Intel E5-2650v4 (2.2 GHz, 12 c, 30 MB).
  2. 128 GB RAM DDR4-2400 ECC.
  3. 1x placa PCI Infiniband EDR ConnectX-4 single port.
  4. 2x 10GbE RJ45 port.
  5. 2x SFP 1Gbps ports
  6. Los dos nodos comparten un almacenamiento de 9 TB de disco

2 nodos de acceso para servicio de login de usuarios y espacio home configurados en modo clúster de alta disponibilidad activo-activo (HA active-active) para login en modo activo-pasivo (HA-active-passive) para espacio home con las siguientes características:

  1. 2x procesadores Intel Skylake Xeon Gold 6130 (2.1 GHz, 16c, 22 MB 125 W)
  2. 192 GB RAM DDR4-2667 ECC.
  3. 2x 500 GB SATA 3 2.7 rpm.
  4. 1x PCI Infiniband EDR Connect X-4 single port.
  5. 2x GbE RJ45 port.
  6. Los dos nodos comparten un almacenamiento para home con las siguientes características:
  7. NetApp E2800-60
  8. Espacio bruto de 200 TB

Red de alto desempeño Infiniband EDR 100 Gbps configurado en una topología all-to-all

  1. 4 switches Mellanox IV EDR SB 7790
  2. Cables Inifiniband EDR QSFP


Red para administración Gibabit Ethernet compuesta por:

  1. 2x Switches Cisco GbE 3650X 48 ports + 2x SFP 10 Gbps.
  2. Cables Ethernet necesarios


Sistema de archivos Lustre para scratch con las siguientes características:

  1. Seagate ClusterStor Lustre L300:
  2. ClusterStor Sofware versión 3.0 IEEL min Lustre 2.5
  3. 2x MDS, MGS Servers
  4. 1x SSU (Scalable Storage Unit), ClusterStor Lustre 300 SSU, 5U, 2x OSS, HA single QSFP
    port per object sotrage EAC, IB, EDR, 82x 10 TB 7.2 RMP HDDs, 2 x 800 G SSD)
  5. 2x ESU (Expansión Storage Unit), ClusterStor Lustre 300 ESU, 5U, 82x 10 TB 7.2 RPM HDD.
  6. SMU 2U24 SMU EAC, 7*900 GB 10 KHDDs, 5×300 GB 15 KHDDs. 2×764 w PSUs, MMU 2U24
    EAC, 22X900 GB 10 KHDDS,2X764 W PSUs.
  7. Espacio disponible: 1.8 PB disponible (usable space)
Close Menu