Het Nederlandse nationale onderzoeksinstituut Nikhef, dat onderzoek doet naar subatomische natuurkunde, heeft samen met AMD aangekondigd dat het de Epyc Rome-chips gaat gebruiken in zijn datacentra.
Tristan Suerink, IT-architect bij Nikhef, vertelde Hardware Info dat er gebruikgemaakt wordt van 64 Lenovo ThinkSystem SR655-servermodules. Het gros daarvan heeft Epyc 7702P's met 64 cores aan boord, chips die bedoeld zijn voor moederborden met een enkel socket. In totaal zullen er vier serverracks volledig gevuld kunnen worden. Volgens Suerink is er veel discussie geweest over of er wel of geen gpu's ingezet moesten worden. Uiteindelijk is ervoor gekozen om negen systemen grafische kaarten te geven, in totaal veertien AMD MI50's (twee per machine) en twee machines met elk twee Nvidia V100-gpu's. De machines met gpu hebben een 32-core AMD Epyc 7502P ingebouwd.
Nikhef heeft vier racks gevuld met AMD Epyc-machines.
In totaal is er 31 terabyte aan ram aanwezig, in de meeste machines zit 512 GB aan ddr4. In de negen modules met de grafische chips zit 256 GB aan werkgeheugen, gecombineerd met cpu's met 32 cores. Elke server is aangesloten met twee Mellanox LX4-nic's met snelheden van 25 gigabit, die gekoppeld zijn aan Mellanox SN2100-switches. Suerink benadrukt dat het geen supercomputer genoemd mag worden, omdat er geen interconnect aanwezig is. Daarom wordt het een compute-cluster genoemd.
Iedere server is gekoppeld via twee 25 gigabit-links.
Het is de bedoeling dat het op de E-Infra aangesloten gaat worden, waar ook de nationale Cartesius-supercomputer van SARA op gekoppeld is. .Zo kunnen gebruikers gemakkelijk schakelen tussen deze supercomputer en de nieuwe cluster. Het moet onder andere gebruikt worden voor het onderzoeken van data afkomstig van CERN. Van de Large Hadron Collider wordt namelijk verwacht dat het over zes jaar tot tien keer de datastroom gaat produceren ten opzichte van nu, volgend jaar is er naar verwachting al de dubbele hoeveelheid data om onderzoek te doen. Ook wordt het cluster gebruikt voor onderzoek naar meer donkere materie en zwaartekrachtsgolven, die worden verzameld door detectoren op andere plekken in de wereld.
Bron: Nikhef
