Petascalový systém Karolina byl pořízen v rámci celoevropského společného podniku EuroHPC a instalován v roce 2021. V žebříčku TOP500, který sleduje superpočítače z hlediska jejich výkonnosti, se v roce své instalace celosvětově umístil na 69. pozici, v Evropě mu patřila 19. příčka a v žebříčku Green500 energeticky nejúčinnějších superpočítačů obsadil skvělé 8. místo. Tento superpočítač je navržen tak, aby uceleně pokryl uživatelské požadavky při řešení komplexních vědeckých i průmyslových problémů zahrnujících jak klasické numerické simulace, tak rozsáhlé datové analýzy nebo i využití umělé inteligence. Jelikož se jedná o jeden z EuroHPC petascalových superpočítačů, je část jeho výpočetních kapacit určena vědeckým komunitám z celé Evropy.

Karolina dosahuje teoretického výpočetního výkonu 15,7 PFlop/s, což znamená, že zvládne 15,7 biliard operací v plovoucí řádové čárce za sekundu.

Superpočítač Karolina se skládá z 6 hlavních částí:

  • univerzální část pro tradiční numerické simulace, kterou tvoří 720 počítačových serverů s celkovým teoretickým výpočetním výkonem 3,8 PFlop/s,
  • akcelerovaná část tvořená 72 servery, přičemž každý z nich je osázen 8 GPU akcelerátory s celkovým teoretickým výpočetním výkonem 11,6 PFlop/s pro standardní HPC simulace a až 360 PFlop/s pro výpočty umělé inteligence, 
  • část navržená pro zpracování rozsáhlých datových souborů poskytující až 24 TB sdílené paměti,
  • 36 serverů s celkovým výkonem 192 TFlop/s vyhrazených k poskytování cloudových služeb,
  • vysokorychlostní síť, která slouží jak k propojení všech částí dohromady, tak i k propojení jednotlivých serverů rychlostí až 200 Gb/s, 
  • rychlé datové úložiště poskytuje kapacitu více než 1,4 PB pro vysokorychlostní zpracování uživatelských dat rychlostí až 1 TB/s, zejména pro simulace i výpočty v oblasti náročné datové analýzy a umělé inteligence.

 

15,7
PFlop/s
teoretický výkon
1,4
PB
kapacita uložišť
200
Gb/s
rychlost sítě

Technická specifikace superpočítače 

Zahájení provozu

léto 2021

Teoretický výkon

15 690 Tflop/s

Operační systém

 Rocky Linux 8.9

Výpočetní uzly

 831

CPU na uzel

720x 2x AMD 7H12, 64 jader, 2,6 GHz, celkem 92 160 jader

72x 2x AMD 7763, 64 jader, 2,45 GHz, celkem 9 216 jader

72x 8x NVIDIA A100 GPU, celkem 576 GPU

32x Intel Xeon-SC 8628, 24 jader, 2,9 GHz, celkem 768 jader

36x 2x AMD 7H12, 64 jader, 2,6 GHz, celkem 4 608 jader

2x 2x AMD 7452, 32 jader, 2,35 GHz, celkem 128 jader

RAM na uzel

 256 GB / 1 TB (GPU) / 24 TB tlustý uzel
320 GB HBM2 (8 x 40 GB) GPU

Akcelerátory

 576x NVIDIA A100

Kapacita úložiště

 30,6 TB / home (1,93 GB/s sekvenční zápis, 3,10 GB/s sekvenční čtení),
1 361 TB / scratch (NVMe, 730,9 GB/s sekvenční  zápis, 1 198,3 GB/s sekvenční  čtení)

Síť

 Infiniband HDR 200 Gb/s

 

 

 Více zjistíte v dokumentaci ZDE.

 

Vytížení superpočítače karolina

Dashboard karolina

Zobrazte si aktuální data superpočítače Karolina.

Dashboardy zobrazují aktuální stav superpočítače. Zobrazované hodnoty jsou:

  • vytížení
  • alokace uzlů
  • zaplnění úložišť HOME a SCRATCH
  • statistiku Slurm úloh a TOP7 softwarových modulů
  • počet dnů provozu od poslední odstávky a datum případné naplánované nové odstávky
  • MOTD (Message of the Day)
  • odpovědného pracovníka za Službu dne

 

Galerie