Public procurement notice: Contract Award Notice
Published: 2024-12-20
Region: DEA22
Contract type: Supplies
Procedure: Open procedure
CPV classification: 48820000: Servers
Estimated value: 1428571.43 EUR
Award criteria: quality

Technical requirements: § 135 Absatz 2 GWB
Die Unwirksamkeit eines öffentlichen Auftrags kann nur festgestellt werden, wenn sie im Nachprüfungsverfahren innerhalb von 30 Kalendertagen nach der Information der betroffenen Bieter und Bewerber durch den öffentlichen Auftraggeber über den Abschluss des Vertrags, jedoch nicht später als sechs Monate nach Vertragsschluss geltend gemacht worden ist. 
Hat der Auftraggeber die Auftragsvergabe im Amtsblatt der Europäischen Union bekannt gemacht, endet die Frist zur Geltendmachung der Unwirksamkeit 30 Kalendertage nach Veröffentlichung der Bekanntmachung der Auftragsvergabe im Amtsblatt der Europäischen Union.
§ 160 Absatz 3 Nummern 1 bis 4 GWB
Der Antrag zur Einleitung eines Nachprüfungsverfahrens ist unzulässig, soweit 
- der Antragsteller den geltend gemachten Verstoß gegen Vergabevorschriften vor Einreichen des Nachprüfungsantrags erkannt und gegenüber dem Auftraggeber nicht innerhalb einer Frist von zehn Kalendertagen gerügt hat; der Ablauf der Frist nach § 134 Absatz 2 bleibt unberührt,
- Verstöße gegen Vergabevorschriften, die aufgrund der Bekanntmachung erkennbar sind, nicht spätestens bis zum Ablauf der in der Bekanntmachung benannten Frist zur Bewerbung oder zur Angebotsabgabe gegenüber dem Auftraggeber gerügt werden,
- Verstöße gegen Vergabevorschriften, die erst in den Vergabeunterlagen erkennbar sind, nicht spätestens bis zum Ablauf der Frist zur Bewerbung oder zur Angebotsabgabe gegenüber dem Auftraggeber gerügt werden,
- mehr als 15 Kalendertage nach Eingang der Mitteilung des Auftraggebers, einer Rüge nicht abhelfen zu wollen, vergangen sind.
Beschafft werden soll ein Rechencluster mit leistungsfähigen GPUs mit Schwerpunkt auf der FP64-Leistungsfähigkeit. Dazu sind Compute Ressourcen sowohl mit CPUs als auch mit GPUs notwendig. Alle CPUs und GPUs müssen per DLC gekühlt werden.
Die Universität Münster behält sich vor Rechenknoten und Garantieverlängerungen nachzukaufen (s. Optionen in der Leistungsbeschreibung).
Die exakte Lieferadresse befindet sich innerhalb Münster und wird bei Auftragserteilung bekannt gegeben.
- Im vorgegebenen Finanzrahmen von 850.000,00 Euro brutto (mind. aber 750.000,00 EUR) ist ein System gemäß Beschreibung, Leistungsbeschreibung und Leistungsverzeichnis anzubieten.
- Das Bestangebot ist das Angebot mit der höchsten Punktzahl.
- Im Rahmen des Budgets sollen möglichst viele Knoten geliefert werden.
- Da aufgrund der im Verhältnis zum Gesamtvolumen verhältnismäßig hohem Knotenpreis eine grobe Stückelung vorliegen wird, sind auch Angebote mit <850.000EUR möglich (jedoch mindes-tens 750.000EUR).
- Die erreichte Punktezahl wird mit einem Faktor 850000/Angebotsbruttopreis multipliziert
UNIVERSITÄT MÜNSTER AUSSCHREIBUNG 2024_113_SF
GPU-CLUSTER
Seite 6 von 10
- Pro Höheneinheit eines einzelnen Knotens, die 1 HE pro 2 GPUs übersteigt, wird 1% der Punkt-zahl abgezogen.
- Sollte eine dielektrische Flüssigkeiten anstatt Wasser bei der Kühlung zum Einsatz kommen, wird ein Bonus von 5% auf die Gesamtpunktezahl aufgeschlagen
- Die Bewertung der verbauten GPUs erfolgt anhand beigefügter Tabelle. Bitte tragen Sie dort das Mengengerüst ein. Falls andere GPU-Modelle angeboten werden, bitten wir um Rücksprache im Wege der Bieterkommunikation.
Falls zwei Angebote die gleiche Kennzahl erreichen, wird ein Angebot mit Zweiphasenkühlung be-vorzugt. Wenn immer noch ein Gleichstand besteht, wird das Angebot mit der günstigeren Nachkauf-option bevorzugt. Gibt es auch hier noch Gleichstand zwischen Angeboten, entscheidet das Los.
Beschafft werden soll ein Rechencluster mit leistungsfähigen GPUs mit Schwerpunkt auf der FP64-Leistungsfähigkeit. Dazu sind Compute Ressourcen sowohl mit CPUs als auch mit GPUs notwendig. Alle CPUs und GPUs müssen per DLC gekühlt werden.
Entweder erfolgt der Einbau:
a) in die vorhandenen Racks vom Typ Schroff nVent Varistar LHX+ (Breite 800mm, Höhe 2000mm, Tiefe 1300mm). Es steht als Primärkühlung Kaltwasser mit einer Vorlauftemperatur von 12°C zur Verfügung. Entsprechende Wärmetauscher zur Trennung des Kühlkreislaufs im Rack für die DLC-Systeme und dem Primärkühlkreislauf des Raums sind in die Racks zu integrieren und auch Be-standteil dieser Ausschreibung. Die Restwärmemenge, die nicht durch das DLC-System abgeführt wird, soll in dem Raum abgegeben werden und 30% des Gesamtwärmeaufkommens nicht über-schreiten. Für die Stromversorgung stehen bis zu 4 Anschlüsse vom Typ CEE Steckverbindung 3-Phasig 32A zur Verfügung. Für die Stromverteilung innerhalb der Racks sind entsprechende PDUs anzubieten, die über eine Ethernet-Schnittstelle abfragbar und schaltbar sind. Es stehen maximal 38 HE zur Verfügung.
Alternativ:
b) in ein bereits vorbereitetes Rack vom Typ a) mit einer Kühleinheit und Manifolds der Fa. ZutaCore, welches verwendet werden darf. Eine PDU ist vorhanden. Es stehen maximal 32 HE zur Verfügung
Alternativ:
c) in bereits vorhandene Racks vom Typ 2CRSI OCTORACK 42 DLC. PDU und Kühlung sind vorhan-den.  Es stehen maximal 24 OU zur Verfügung
Alternativ:
d) in einem selbst gelieferten Rack einschließlich der gesamten notwendigen Kühltechnik. Die Kos-ten dafür müssen im Angebotspreis enthalten sein. Bitte beachten Sie, dass der Aufzug nur über eine Höhe von 2 Metern verfügt. Bei größeren Racks muss der Transport über eine Treppe erfolgen.

Es wird für die Systeme eine Flüssigkeitskühlung (DLC) gefordert, die alle verbauten CPUs und GPUs kühlt. Die Kühlung muss so ausgelegt sein, dass die Systeme ohne Leerräume zwischen den einzelnen Servern betrieben werden können. Die Server sollen so kompakt gestaltet sein, dass maximal ein Rack benötigt wird (dies bezieht sich auf den Grundauftrag ohne Nachkaufoptionen). Die Kühlung muss entsprechend leistungsfähig dimensioniert werden, so dass das System unter Vollast (Linpack) stabil läuft. 
Die Kabelführung soll so gestaltet werden, dass der Luftstrom möglichst wenig beeinträchtigt wird.
Es wird nur Hardware beschafft.

Leistungsbeschreibung
GPU-Cluster (Umfang 850.000,00 EUR brutto). 
Das System besteht aus einem einzelnen Typ von Rechenknoten.
Das System wird im HPC-Serverraum aufgestellt.
Lieferung und Installation erfolgt durch den Anbieter. 
Im Betrieb muss es der Uni Münster gestattet sein, im Rahmen der Spezifikationen der Hardware ohne Verlust von Garantie Änderungen am Setup vorzunehmen.
Die Installation der Betriebs-Software und die Herstellung und Feststellung der Betriebsbereitschaft wird durch das Personal der Universität Münster erfolgen. Zur Abnahme der Hardware wird das beige-fügte Abnahmeprotokoll verwendet.

Leistungsverzeichnis (LV) 
> System
Die Ausstattung des Systems soll einheitlich bestehen aus:

Nr. Beschreibung
01 Die Systeme besitzen x86-64 Architektur
02 Es sind alle Speicherkanäle zu verwenden, der Speicher muss ECC verwenden und mit der maximalen für die CPU möglichen Frequenz betrieben werden können (außer dies ist durch eine mögliche Mehrfachbelegung der Speicherkanäle limitiert).
03 Datacenter NVMe, mindestens 0,96 TB Kapazität und 1 DWPD Lebensdauer; mindestens 5 GB/s lesend, 1,4 GB/s schreibend, 5 Jahre Herstellergarantie
04 Mindestens ein Anschluss Ethernet 10 GbE, RJ45
05 BMC mit gesondertem 1Gb Interface, HTML5 KVM ohne zeitliche Begrenzung, keine zusätzli-chen Lizenzgebühren. Redfish Support mit Unterstützung für next-boot pxe und Auswahl des Boot-Devices. Firmware-Updates herstellerseitig verfügbar auch nach Ende des vereinbarten Supportzeitraums.
06 Netzwerkkarte: Mindestens 1 Anschluss 400GbE NDR Infiniband, Hardware vDPA Support, Geneve offloading, Firmware-Updates herstellerseitig verfügbar auch nach Ende des verein-barten Supportzeitraums
07 (Im Fall der Einbauoptionen a) und b) Redundante Power-Supplies, mindestens Titanium, Stromkabel
08 BIOS-Updates herstellerseitig verfügbar auch nach Ende des vereinbarten Supportzeitraums
09 Infinibandkabel zum Anschluss an Inifinibandswitch in demselben Rack
10 PXE Boot unterstützt Nachladen von iPXE (EFI Chainload)
11 Unterstützung für SecureBoot mit eigenen Schlüsseln
12 2x CPU mit mindestens 56 Kernen, maximale Turbo-Taktrate innerhalb der Klasse (selbe An-zahl von Kernen)
13 Hauptspeicher mit einer Mindestensgröße von 1,5 TB bzw. Identisch mit HBM-RAM (bei MI300A)
14 Mindestens 4 GPUs mit SXM/NVLINK oder Infinity Fabric oder CXL Verbindung (z.B. H100, H200, MI300X oder MI300A). Gekühlt per DLC.

> Garantieverlängerung (optional)
Garantieverlängerung für:  
- Jahr 3 
- Jahr 4 
- Jahr 5

Weitere Informationen entnehmen Sie bitte der Leistungsbeschreibung.


Winner: Universität Münster
Award value: 713448
Number of bids: 1