Bewältigung von Herausforderungen in Rechenzentren mit innovativen Kühlplatten-Kühlungslösungen

Flüssigkeitskühlung mit Kühlplatten führt Wärme aus Rechenzentrumsracks ab, die mittlerweile mehr Wärme produzieren, als die Luftzirkulation abführen kann. Hochleistungsserver, die unter Dauerlast laufen, konzentrieren die Wärme direkt am Chip. Lüfter und Kühlluft erreichen diese Wärme nur langsam, und diese Wärmestauung veranlasst die Betreiber, die Kühlung mit Flüssigkeit direkt an der Quelle zu implementieren. Eine Kühlplatte aus Metall sitzt auf dem Prozessor, Kühlmittel durchströmt sie, und die Wärme wird durch Wärmeleitung vom Chip abgeleitet.

Der Kompromiss ist neu. Flüssigkeitskühlung im Rack bringt Integrations-, Kosten-, Zuverlässigkeits- und Wärmerückgewinnungsprobleme mit sich, die bei der Luftkühlung nicht auftraten. Dieser Artikel beschreibt die Funktionsweise der Kühlplattenkühlung in Rechenzentren, ihre größten Herausforderungen, den Vergleich mit Immersions- und Luftkühlung hinsichtlich der Wärmelast und die zu prüfenden Variablen vor einer Umrüstung. Die Auslegung von Immersionsbehältern, die Dimensionierung der Kaltwasseranlage oder die Spezifikationen für die Kühlmittelbeschaffung werden nicht behandelt, da diese von den Gegebenheiten vor Ort und den Angaben der Lieferanten abhängen.

Wie die Flüssigkeitskühlung mit Kühlplatten in einem Rechenzentrum funktioniert

Die Kühlung mit einer Kühlplatte leitet Wärme durch Wärmeleitung in einen Flüssigkeitskreislauf, nicht durch Konvektion an die Raumluft. Ein bearbeitetes Metall Kühlplatte Die Kühlflüssigkeit liegt über ein Wärmeleitmaterial direkt an der CPU oder GPU an. Kühlmittel fließt durch Kanäle im Inneren und transportiert die Wärme zu einer Kühlmittelverteilungseinheit (CDU). Die CDU gibt die Wärme dann über einen Wärmetauscher an den Kreislauf der Anlage ab. Da die Kühlflüssigkeit direkt mit der Wärmequelle in Kontakt kommt, spricht man von Direktkühlung des Chips.

Plattenmaterial, Durchflussrate und Kanaldesign setzen der maximalen Wärmeabfuhr einer Platte jeweils eine Grenze. Kupfer leitet Wärme besser als Aluminium (ca. 400 W/m·K gegenüber 240 W/m·K), daher wird für Hochleistungsplatten trotz des höheren Gewichts und der höheren Kosten häufig Kupfer verwendet. Die Durchflussrate hat zweierlei Einfluss: Zu geringe Durchflussrate lässt die Temperaturen an den Übergängen ansteigen, zu hohe Durchflussrate verschwendet Pumpenleistung und kann die Kanäle mit der Zeit beschädigen. Der Kreislauf muss auf die Platte abgestimmt sein und darf erst dann hochgefahren werden, wenn die Temperaturen unbedenklich erscheinen.

Luftkühlung kommt selbst in flüssigkeitsgekühlten Hallen selten ganz ohne Luft aus. Kühlplatten entlasten zwar die Prozessoren, doch Speicher, Leistungsstufen, Netzwerkkomponenten und die Kondensationskontrolle benötigen weiterhin Luftzirkulation. Die meisten Räume sind daher eine Hybridlösung, eine Kombination aus Flüssigkeits- und Luftkühlung.

Die steigende Nachfrage nach effizienter Kühlung in Rechenzentren

Die steigende Rackdichte, nicht die Stellfläche, hat die Luftkühlung an ihre Grenzen gebracht. KI und Hochleistungsrechner integrieren immer leistungsstärkere Prozessoren in jedes Rack, und die Wärmeentwicklung pro Rack ist schneller gestiegen, als die Klimaanlagen mithalten können. Als grober Richtwert gilt: Ab etwa 20 kW pro Rack wird die Luftkühlung unpraktisch, während direkt auf den Chips gekühlte Platten deutlich mehr Wärme erzeugen – in dem Bereich, in dem sich heute dichte KI-Racks befinden. Der genaue Punkt hängt von der Hardware, dem verfügbaren Luftstrom im Raum und der Einlasstemperatur ab.

Die Luftkühlung stößt an physikalische Grenzen, bevor die Kosten eine Grenze erreichen. Ventilatoren sind auf Temperaturdifferenzen und Luftvolumenstrom angewiesen. Mit steigender Raumdichte wird der benötigte Luftvolumenstrom unpraktikabel, und in Teilen des Raumes entstehen Hotspots, die den empfohlenen Temperaturbereich überschreiten. Hotspots beeinträchtigen die Leistung und erhöhen das Ausfallrisiko. Aus diesem Grund erfordert die zunehmende Raumdichte eine Anpassung der Kühlung.

Energie und Emissionen sind der zweite Grund für den Einsatz von Flüssigkeiten zur Wärmeabfuhr. Die Kühlung macht einen Großteil des Stromverbrauchs eines Rechenzentrums aus, daher erhöht ein ineffizientes Kühlsystem sowohl die Stromkosten als auch den CO₂-Fußabdruck. Der Einsatz von Flüssigkeiten direkt an der Quelle kann diesen Verbrauch senken, die Einsparungen hängen jedoch vom bestehenden System, dem Klima und der Auslastung ab. Alle Effizienzangaben sollten als Richtwerte und nicht als feste Zahlen betrachtet werden.

Herausforderungen für die Cold Plate Liquid Cooling Technologie

Die Kühlung mit Kühlplatten löst zwar das Hitzeproblem, bringt aber vier Herausforderungen mit sich, die über den Erfolg des Einsatzes entscheiden. Jede dieser Herausforderungen stellt einen technischen Kompromiss mit einer vom Betreiber überprüfbaren Variable dar.

Die Integration in bestehende Räume ist besonders schwierig. Die Umrüstung einer luftgekühlten Halle auf Flüssigkeitskühlung stellt die größte Herausforderung dar, da die Umrüstung einzelner Racks zwei Kühlsysteme gleichzeitig in Betrieb hält und den Arbeitsaufwand des Facility-Managements verdoppelt. Wenn sich Racks eine gemeinsame Kühleinheit (CDU) und einen Verteiler teilen, ist die sinnvolle Umrüstungseinheit eine zusammenhängende Reihe oder ein Pod, sodass die Bereiche für Kreislauf, Wartung und Leckagekontrolle erhalten bleiben.

Umbaukosten. Die Kosten, die Projekte verzögern, sind die Nachrüstungskosten, nicht die Kühlplatten. Das Kapital fließt in Kühlaggregate, Verteiler, Rohrleitungen und die Umgestaltung des Raumes. Die Amortisation hängt von der Auslastung des Raumes und der Betriebsdauer ab, daher muss die Kostenschätzung für jeden Standort individuell erstellt werden.

Leckage- und Korrosionsvermeidung. Leckagen und Korrosion sind die beiden Ausfallursachen, die die Zuverlässigkeit eines Flüssigkeitskreislaufs bestimmen, und beides sind Material- und Chemieprobleme. Mischmetallkreisläufe, wie beispielsweise Kupferplatten, die Aluminium an anderer Stelle speisen, begünstigen galvanische Korrosion. Die Abstimmung der Kühlmittelchemie und der Inhibitoren auf die medienberührenden Materialien ist die Grundlage für die Zuverlässigkeit. Korrosionsschutz, Beide sollten anhand der Lieferantenspezifikationen überprüft werden.

Abwärmenutzung. Die Rückgewinnung der aufgefangenen Wärme lohnt sich nur, wenn Temperaturen und Abfuhrkapazität optimal aufeinander abgestimmt sind. Kühlplattenkreisläufe können warmes Kühlmittel liefern, das wiederverwendbar ist. Der Nutzen hängt jedoch davon ab, dass der Kreislauf ausreichend warm betrieben wird und eine nahegelegene Nutzung, beispielsweise für die Gebäudeheizung, möglich ist. Daher ist die Wärmenutzung ebenso eine Frage der Anlagenplanung wie der Kühlung.

Kühlplatten-, Tauch- und Luftkühlung: Die richtige Methode für die Wärmelast auswählen

Die richtige Methode richtet sich nach der Wärmelast und der Temperaturänderungsfähigkeit des Raumes; es gibt keine allgemein beste Technologie. Kühlplatten, Tauchbäder und Luftkühlung decken jeweils einen anderen Teil der Wärmekette ab, daher kommt es bei der Wahl auf die individuellen Bedürfnisse an.

Verfahren	Optimale Passform	Hauptkompromisse
Luftkühlung	Racks mit geringerer Dichte; periphere Komponenten	Verliert an Kapazität mit steigender Rackdichte
Kühlplatte (direkt zum Chip)	Hochdichte CPU/GPU-Racks; anpassbar an bestehende Räume	Kühlt den Chip, nicht das gesamte Rack; etwas Luft bleibt zurück
Eintauchen	Sehr hoher Wärmestrom	Taucht Hardware in dielektrische Flüssigkeit ein; größere betriebliche Änderung

Bei Kühlplatten unterscheidet man zwischen einphasiger und zweiphasiger Kühlung. Einphasige Kühlung hält das Kühlmittel bis zur CDU flüssig, was die Wartung des Kreislaufs vereinfacht. Zweiphasige Kühlung lässt das Kühlmittel an der Platte verdampfen, um sehr hohe Wärmeströme aufzunehmen. Dies erhöht zwar die maximale Kühlleistung, macht den Kreislauf aber komplexer. Einphasige Kühlung deckt gängige CPU- und GPU-Dichten ab; zweiphasige Kühlung kommt zum Einsatz, wenn der Wärmestrom der Prozessoren die Kapazität der einphasigen Kühlung übersteigt.

Innovative Lösungen für die Kühlung von Kühlplatten

Die Lösungen für diese Herausforderungen liegen an zwei Stellen: im Systemdesign und im Systembetrieb. Beide zielen darauf ab, eine flexible Bereitstellung erweiterbar und wartungsfreundlich zu gestalten.

Modulare, skalierbare Architektur löst das Integrationsproblem. Ein reihenweise erweiterbarer Kreislauf ermöglicht es, einen Raum ohne aufwändige Umstrukturierung in eine Flüssigkeit zu verwandeln und bleibt auch bei wechselnden Prozessorgenerationen nutzbar. Die Dimensionierung von Platte, Kanal und Strömungsweg entsprechend der tatsächlichen Wärmelast ist der entscheidende Punkt. Kühlplattendesign entscheidet über das Ergebnis, denn eine zu große oder zu kleine Schleife führt später zu verschwendeter Pumpenenergie oder heißen Chips.

Überwachung und vorausschauende Wartung lösen das Zuverlässigkeitsproblem. Sensoren für Durchfluss, Temperatur und Druck ermöglichen es dem Bedienpersonal, entstehende Leckagen oder Verschmutzungen in Kanälen zu erkennen, bevor es zu Ausfallzeiten kommt. Die Verknüpfung dieser Daten mit der Wartungsplanung reduziert den manuellen Überwachungsaufwand für Flüssigkeitskreisläufe erheblich. Der Überwachungsplan sollte festlegen, welche Variable einen Alarm auslöst und bei welchem Schwellenwert, damit die Reaktion vor einem Fehler definiert ist.

Bewährte Praktiken für die Implementierung der Kühlplattenkühlung

Die Entscheidung für eine Kühlplatte wird vor der Installation, im Rahmen der Bedarfsanalyse und der Pilotphase, getroffen. Die folgenden Schritte legen die Optionen fest, deren Rücknahme nach der Verlegung der Rohrleitungen im Raum kostspielig ist.

• Prüfen Sie zunächst die Last und die verfügbaren Kapazitäten. Dimensionieren Sie das System entsprechend der aktuellen und zukünftigen Rackdichte, nicht anhand des heutigen Durchschnitts, damit die Schleife auch nach einer Hardware-Aktualisierung noch funktioniert.
• Vor der Skalierung sollte ein Pilotprojekt durchgeführt werden. Der Entwurf muss an einer kontrollierten Anlage erprobt und der tatsächliche Durchfluss, die Temperatur und der Druck gemessen werden, bevor die Halle in Betrieb genommen wird.
• Konstruieren Sie für Erweiterungen. Bevorzugen Sie modulare Layouts, damit zukünftige Reihen oder Racks mit höherer Dichte ohne Änderung des Kernsystems angefügt werden können.
• Setzen Sie auf hochwertige medienberührende Bauteile. Pumpen, Rohrleitungen, Platten und Kühlmittel sollten nach denselben Material- und Chemieprinzipien ausgewählt werden, da Leckagen und Korrosion an den schwächsten medienberührenden Teilen beginnen.
• Planen Sie Wartung und Schulung. Legen Sie einen Zeitplan für Dichtigkeits-, Korrosions- und Durchflussprüfungen fest und stellen Sie sicher, dass die Mitarbeiter den Kreislauf bedienen können.

Bevor Sie die Halle endgültig festlegen, überprüfen Sie anhand der Planungs- und Lieferantendaten eine kurze Liste von Variablen anstelle einer allgemeinen Checkliste. Dokumentieren Sie jeden Wert als Planungswert und als Messwert, damit die Abweichung sichtbar wird:

• Vorlauf- und Rücklaufkühlmitteltemperatur im Vergleich zum Auslegungsfenster der Kühlaggregate und der Platte
• Durchflussrate und Druckverlust pro Platte im Vergleich zum Auslegungspunkt
• Chiptemperaturreserve unter Spitzenlast
• Leckageerkennungsabdeckung und Reaktionszustand
• Material- und Kühlmittelverträglichkeit in allen medienberührten Bereichen
• Wärmebilanz von der CDU zum Anlagenkreislauf

Alle Grenzwerte in dieser Liste basieren auf Daten der Hardware, der Kühlplatte, der Kühleinheit und des Kühlmittellieferanten. Es handelt sich um ein Rahmenwerk, das die Felder vorgibt, nicht um eine Reihe fester Zahlen.

Die Wärmeabgabe am Gebäuderand wird leicht unterschätzt. Die zentrale Wärmeverteilungseinheit (CDU) muss ihre Last an einen Anlagenkreislauf abgeben, und wie diese Wärme das Gelände verlässt, hängt von verschiedenen Faktoren ab. Rechenzentrumskühler oder ein Wiederverwendungskreislauf legt die Kühlmitteltemperaturen fest, mit denen die Zahnstangenseite zurechtkommen muss.

Schlussfolgerung

Flüssigkeitskühlung mit Kühlplatten kommt zum Einsatz, wenn die Rackdichte die Luftkühlung übersteigt. Die Entscheidung hängt dann von der Kompatibilität und der Zuverlässigkeit ab. Der Nutzen liegt im Kühlpfad zwischen Chip und Kühlmittel. Plattenmaterial und Durchflussbalance bestimmen die abführbare Wärmemenge, während Integration, Kühlmittelchemie und Wärmeabfuhr darüber entscheiden, ob der Betrieb zuverlässig bleibt und sich die Nachrüstung lohnt. Häufig wird fälschlicherweise angenommen, dass Kühlplatten die Luftkühlung vollständig ersetzen. Tatsächlich übernehmen sie die konzentrierte Prozessorlast und lassen den Rest des Racks mit Luftkühlung.

Für einen Betreiber, der einen solchen Umbau erwägt, sind drei Dinge entscheidend: die angestrebte Rackdichte, die Frage, ob der Raum die Umrüstung einer Reihe nach der anderen ermöglicht, und die Ableitung der aufgefangenen Wärme. Die Dimensionierung der Kühlplatten auf diese Wärmelast, und nicht auf einen beworbenen Wirkungsgrad, gewährleistet den reibungslosen Betrieb des Kühlkreislaufs auch bei wechselnden Prozessoren.

FAQ

Weiterführende Literatur

• LBNL-Kompetenzzentrum für Rechenzentrumsenergie — Nationales Laborprogramm des US-Energieministeriums für Stromversorgungs- und Kühltechnologien von Rechenzentren. Eine herstellerneutrale Informationsquelle zu Energie und Kühlung in Rechenzentren; dient der Orientierung, nicht der standortspezifischen Dimensionierung.
• Direkte Chipkühlung: Alles, was Rechenzentrumsbetreiber wissen sollten — Data Center Knowledge, eine Branchenpublikation. Eine leicht verständliche Übersicht für Anwender über die Funktionsweise der Direktkühlung von Chips und deren Vor- und Nachteile; Hintergrundinformationen, keine technische Spezifikation.
• Die besten Strategien für die Flüssigkeitskühlung von Rechenzentren — ENCOR Advisors, ein Beratungsunternehmen für Rechenzentren. Behandelt die Einführung und Implementierungsstrategie von Flüssigkeitskühlung; die angegebenen Zahlen dienen lediglich der Orientierung und sollten anhand Ihrer eigenen Standortdaten überprüft werden.

Verwandte Artikel

• Die Rolle der innovativen Flüssigkeitskühlung bei der Erhöhung der Reichweite von Elektrofahrzeugen — Wie Flüssigkeitskühlung die Batterietemperatur reguliert, um die Reichweite von Elektrofahrzeugen zu schützen.
• Integration und Optimierung von intelligenten Kühlsystemen — Wie man intelligente Kühlsysteme in ein thermisches Design integriert und abstimmt.
• Grundprinzip der Flüssigkeitskühlplatte — Das Funktionsprinzip einer Flüssigkeitskühlplatte und wie sie die Wärme von der Quelle abführt.
• Revolutionierung der Effizienz von Rechenzentren mit Trumonytechs' Flüssigkeitskühlung — Wie Flüssigkeitskühlung die Energieeffizienz von Rechenzentren steigert.
• IGBT-Kühlung mit Flüssigkeitstechnologie: Verbesserung des elektronischen Wirkungsgrads — Einsatz von Flüssigkeitskühlung zur Wärmeableitung in IGBT-Leistungselektronik.