Nedsænkningskøling vs. Direkte-Til-Chipkøling: Hvad det betyder for dine rørspecifikationer

Introduktion: Beslutningen, der sker for sent

De fleste datacenteringeniører vælger deres køleteknologi - fordybelse eller direkte-til-chip - baseret på racktæthedsmål og kapitalbudget. Rørspecifikationen kommer senere, ofte behandlet som en udførelsesdetalje snarere end en designdriver. Den sekvensering er en fejl.

Det væskesystem, du bygger omkring din valgte kølearkitektur, er ikke udskifteligt. En rørspecifikation skrevet til direkte-til-chip (D2C) kold-pladekøling vil fejle - bogstaveligt og operationelt -, hvis den eftermonteres til enfaset nedsænkning- og omvendt. Med GPU-rackdensiteter, der nu rutinemæssigt overstiger 50 kW, og AI-arbejdsbelastningen skubber mod 100 kW pr. rack, er det ikke længere valgfrit at få rørspecifikationen rigtigt i den skematiske designfase. En enkelt lækage i et D2C-system kan fjerne et helt rack på $400.000 i GPU-hardware på få sekunder.

Denne vejledning er skrevet til mekanik- og VVS-ingeniører, der allerede har truffet (eller træffer) beslutningen om kølearkitektur og har brug for at omsætte dette valg til en forsvarlig, ASHRAE-kompatibel rørspecifikation.

 

 

Direkte til chip væskekøling datacenter GPU rack CDU

 

1. To arkitekturer, to fuldstændigt forskellige væskesløjfelogikker

Før du rører ved en rørplan, skal du forstå, at nedsænkningskøling og D2C fungerer efter fundamentalt forskellige hydrauliske principper.

Direkte-til-chip (D2C)cirkulerer væske - typisk deioniseret vand eller en vand-glykolblanding - gennem kolde plader monteret direkte på CPU'er, GPU'er og ASIC'er. Varme absorberes ved spånoverfladen og føres til en Coolant Distribution Unit (CDU), som udveksler den med anlæggets vandsystem. Resultatet er et tæt, tryksat netværk af rør med små-diameter, manifolds, fittings med hurtig-frakobling og kolde plader, som alle skal arbejde i hydraulisk balance samtidigt.

Enfaset nedsænkningskøling-nedsænker hele serverkort i en dielektrisk væske - typisk en syntetisk kulbrinte eller konstrueret væske - inde i en tank. Varme overføres fra alle komponenter til væsken, som derefter pumpes gennem en ekstern varmeveksler. Det eksterne rørnetværk er minimalt: i det væsentlige to forbindelser pr. tank (tilførsel og retur), der løber til en CDU eller facilitetskølekreds.

Den arkitektoniske forskel er markant: D2C fordeler den hydrauliske udfordring på tværs af snesevis af forbindelsespunkter pr. rack; nedsænkning konsoliderer det til en enkel ekstern-lavtrykssløjfe. Alt nedstrøms i din rørspecifikation kommer fra denne skelnen.

 

2. Valg af rørmateriale: Hvor ASHRAE sætter grænsen

ASHRAE TC 9.9 og TC 9.6 er eksplicitte om materialekompatibilitet. For D2C vand-baserede kølekredsløb forbyder vejledningen zink, aluminium og messing, der indeholder mere end 15 % zink -, som alle accelererer galvanisk korrosion i nærværelse af behandlet vand. Rent praktisk udelukker dette standard fittings af gule messing og galvaniserede stålrør, som forbliver almindelige i HVAC hydroniske systemer.

For Technology Cooling System (TCS) loop - den sekundære loop, der serverer kolde plader direkte -304 eller 316 rustfrit ståler standardspecifikationen. TCS-sløjfen kører typisk deioniseret eller højt behandlet vand, som faktisk er mere aggressivt over for korrosion end kommunalt vand, fordi det næsten ikke har nogen bufferkapacitet. En isoleringsventil ved hvert stativ, der er normeret til systemets driftstryk og fremstillet af 316 rustfrit stål, er påkrævet både til rutinemæssig vedligeholdelse og nødlækageisolering.

For nedsænkningskøling skifter materialeudfordringen helt. Den dielektriske væske er kemisk inert over for de fleste metaller, men den angriber aggressivt elastomerer - standard EPDM og Buna-N-pakninger, der bruges i HVAC-applikationer, vil svulme og nedbrydes inden for måneder efter kontakt med kulbrinte-baserede dielektriske væsker. Selve rørmaterialet (rustfrit, kulstofstål) er generelt kompatibelt, men hver pakning, O-}ring og fleksible forbindelse i den eksterne sløjfe skal specificeres som PTFE eller et fluorpolymermateriale, der er klassificeret til den specifikke væske, der er i brug.

 

3. Rørstørrelse, flowhastighed og trykfald

ASHRAE TC 9.6 indstiller en maksimal væskehastighed på2,1 m/s for rørdiametre større end 3 tommerfor at forhindre erosion ved beslag og bøjninger. Under 3 tommer er den praktiske grænse tættere på 1,5-1,8 m/s, før støj- og erosionsrisikoen stiger uacceptabelt. Disse grænser gælder for både kølearkitekturer, men skaber meget forskellige størrelsesresultater.

I D2C-systemer er flowhastigheden dikteret af den termiske belastning af hver kold plade. Efterhånden som chip-TDP (Thermal Design Power) øges, - opererer moderne H100 GPU'er ved 700W TDP, med næste-generations acceleratorer projekteret til 1.000W+ -, stiger flowbehovet pr. kold plade proportionalt. Et 50 kW rack med D2C-køling kan kræve 8-12 liter kølevæske pr. minut ved rackmanifolden, fordelt på 8 til 16 individuelle kolde plader. Dette driver behovet for omhyggelig hydraulisk afbalancering: kolde plader parallelt skal dele flowet ligeligt, ellers vil de varmeste spåner - typisk for enden af ​​manifoldgrenen - blive udsultet af kølekapacitet.

I nedsænkningssystemer bærer den eksterne rørsløjfe den fulde tankvarmebelastning, men med meget lavere hastighed og tryk, fordi drivmekanismen inde i tanken er konvektion og lav-hastighedspumpning, ikke tvungen høj-trykstrøm. En 250 kW dyktank kræver typisk kun 20-30 liter i minuttet gennem den eksterne varmevekslerkreds, ved systemtryk, der sjældent overstiger 2-3 bar.

Beslutningen om overhead kontra gulvbelægning påvirker også dimensionering. ASHRAE-vejledningen bemærker, at rørstrækninger under gulv skal tage højde for isoleringstykkelse og røroverskæringsafstand -, hvilket tilføjer 50 mm til rørdiameteren, når der tages højde for isoleringsindpakning, er en almindelig planlægningsfejl, der skaber koordinationskonflikter med hævede-gulvfliser.

 

4. Isoleringsventiler, si og lækagekontrol: Specifikationsdetaljerne, der beskytter oppetid

Det er her rørspecifikationer direkte bestemmer den operationelle modstandsdygtighed, og hvor de fleste specifikationsdokumenter er underskrevet.

Til D2C-systemer, skal hvert stativ have en afspærringsventil på både tilførsels- og returbenene, så et enkelt stativ kan isoleres og drænes til vedligeholdelse uden at lukke tilstødende stativer ned. Den foretrukne ventiltype til denne applikation er en3-delt kugleventili 304 eller 316 rustfrit stål. Husets design i tre-dele er afgørende her: I modsætning til én-- eller to-ventiler kan den adskilles på plads - uden at skære i røret eller fjerne ventilhuset fra ledningen - for at udskifte tætninger eller rense sædet. I et live datacentermiljø, hvor minimering af rack-nedetid er altafgørende, er denne-servicebarhed en meningsfuld operationel fordel, ikke en specifikationsluksus.

Opstrøms for hver stativmanifold kræves der en Y-si af rustfrit stål for at beskytte koldplademikrokanaler- mod partikelforurening. Koldpladegeometrier til højtydende GPU'er bruger kanalbredder så smalle som 0,5-1,0 mm; en partikel på 200 mikron kan delvist blokere en kanal og skabe et lokaliseret hot spot, som termisk overvågning muligvis ikke fanger, før chipdroslingen begynder. Angiv si med en maskestørrelse på 50 mikron eller finere på TCS-løkken i henhold til ASHRAE TC 9.9-retningslinjerne for vandkvalitet.

På returbenet forhindrer en kontraventil i rustfrit stål omvendt strømning gennem CDU-varmeveksleren, når et stativ er isoleret, eller en pumpe udløser - en tilbagestrømningshændelse, der kan introducere varm væske i forsyningshovedet og hæve kølevæsketemperaturerne over hele rækken, før styringerne reagerer.

For server-til-manifoldforbindelser skal du angive tørre-break quick-afbrydelsesfittings med et maksimalt tilladt spild på 1 kubikcentimeter pr. frakoblingscyklus i overensstemmelse med OCP-forbindelsesstandarder (Open Compute Project). Fleksible slangesegmenter ved disse tilslutninger skal sikres med ekstra klemmer med 150 mm intervaller for at forhindre nedbøjning-induceret trykfald og belastning på fittingsgevind.

Til nedsænkningssystemer, isolationsspecifikationen er enklere, men ikke triviel. Hver tank har brug for forsynings- og returisoleringsventiler, der er dimensioneret til det fulde tankflow, plus en prøveport til overvågning af væskekvalitet. Angiv de eksterne sløjfeforbindelser i et materiale, der er kompatibelt med den specifikke dielektriske væske - bekræft kompatibilitet med væskeleverandøren skriftligt, før du færdiggør specifikationen, da proprietære væskeformuleringer varierer.

Lækagedetekteringskabel skal føres langs hele længden af ​​alle D2C-forsyningsrørstrækninger, placeret ved det lavest tilgængelige punkt på hver rørbakke eller kabelbakke. For nedsænkningssystemer er det tilstrækkeligt med punkt-sensorlækagedetektorer ved hver tankbase og ved CDU'en, da eksterne rørforbindelser er få og{3}}synlige.

 

 

Leadtek 3-delt kugleventil

 

5. En praktisk specifikationstjekliste, før du udleverer til byggeri

Før din rørspecifikation forlader ingeniørteamet, skal du kontrollere følgende i forhold til din valgte kølearkitektur:

Materialeoverholdelse: Alle fugtede metaller bekræftet fri for zink og aluminiumlegeringer (D2C); alle elastomerer bekræftet kompatible med dielektrisk væskekemi (immersion)

Hastighedskontrol: Maksimalt 2,1 m/s ved rør større end eller lig med 3" diameter, pr. ASHRAE TC 9.6

Afspærringsventiler: En kugleventil med 3 stykker pr. stativ, levering og retur, med-linjeservicebarhed (D2C)

Si rating: Mindre end eller lig med 50 mikron mesh på TCS-forsyning, opstrøms for hver stativmanifold (D2C)

Kontroller ventilens placering: CDU-returben, hver rackreturgren (D2C)

Hurtig-afbrydelse af specifikationer: Tør-pause, mindre end eller lig med 1cc spild, OCP-kompatibel (D2C)

Lækagedetektion: Kontinuerligt kabel på alle forsyningsstrækninger (D2C); punktsensorer ved tankbase og CDU (nedsænkning)

Frihøjde under gulv: Rør OD plus isolering plus 50 mm krydsafstand bekræftet i gulvfri model

Vandbehandlingsplan: Site-specifikt kemiprogram aktiveret før systemudfyldning, med løbende overvågningsprotokol specificeret

 

Konklusion: Angiv rørsystemet, så det matcher kølearkitekturen, ikke omvendt

Beslutningen om køleteknologi og rørspecifikationen er ikke sekventielle trin - de er en enkelt integreret ingeniørbeslutning. Valget mellem nedsænkning og D2C-køling bestemmer den hydrauliske logik, materialebegrænsninger, isoleringsstrategi og lækagerisikoprofil for hele dit væskesystem. At forsøge at tilpasse en generisk HVAC-vandrørsspecifikation til begge arkitekturer vil producere et system, der underperformer operationelt og skaber unødvendig vedligeholdelseseksponering.

Engager dine rørspecifikationer ved skematisk design sammen med valget af kølearkitektur. Brug ASHRAE TC 9.6 og TC 9.9 som din baseline-overholdelsesramme, og kontroller hvert materialevalg i forhold til den faktiske væskekemi i dit system - ikke en generisk "vand"-antagelse. De 30 minutter, der bruges på at få isolationsventiltype og si-maskeklassificering lige på specifikationsstadiet, vil spare betydeligt mere end 30 minutter i fremtidig nedetid.

 

FAQ

Spørgsmål: Kan jeg bruge standard HVAC kulstofstålrør til en direkte-til-spånkølekreds?

Kulstofstål bruges i anlægs-side (FWS) kølevandssløjfer, men det er ikke passende til TCS-kredsløbet (Technology Cooling System), der direkte betjener kolde plader. TCS-sløjfen kører højt renset vand med lavt ionindhold, som er mere ætsende for kulstofstål end behandlet HVAC-vand. Angiv 304 eller 316 rustfrit stål til alle TCS loop rør og fittings.

Sp.: Hvorfor angiver min CDU-producent en anden rørforbindelsesstørrelse end min koldpladeleverandør?

CDU'er og kolde plader er ofte hentet fra forskellige producenter og designet til forskellige interne strømningsmodstandsantagelser. Uoverensstemmelsen mellem forbindelsesstørrelsen er et hydraulisk balanceringsproblem: Hvis CDU'en forventer 10 l/min ved 2 bar, og de kolde plader tilsammen kræver 14 l/min for at opretholde chip-junction-temperaturer, er ingen af ​​leverandørernes specifikationer forkerte - har systemdesignet ikke afstemt dem. En hydraulisk model af den fulde TCS-sløjfe, fra CDU-udtag til hver kold plade og tilbage, bør færdiggøres, før enhver forbindelsesstørrelse færdiggøres.

Spørgsmål: Hvor ofte skal Y-si rengøres på en D2C-kølekreds?

I løbet af de første 90 dages drift, inspicer filterkurve månedligt - nye rørsystemer udskiller partikler, efterhånden som rørbelægninger hærder og fittings sætter sig. Efter indbruds-perioden er kvartalsvis inspektion typisk tilstrækkelig for lukkede-sløjfesystemer med løbende vandkvalitetsovervågning. Hvis din CDU inkorporerer en differenstryksensor hen over sien, skal du indstille en alarm til 0,3 bar delta-P som den rene-kurvs basislinje.

Spørgsmål: Er nedsænkningskølerør lettere at specificere end D2C?

Det eksterne rørnetværk til nedsænkningskøling er væsentligt enklere - færre tilslutningspunkter, lavere tryk og ingen rack-manifoldfordeling. Materialespecifikationen er dog mere kompleks, fordi dielektrisk væskekompatibilitet skal verificeres for hver elastomer, pakning og fleksible konnektor i systemet. Fejltilstanden for at få materialekompatibilitet forkert i et nedsænkningssystem er langsom og svær at opdage: forseglingsnedbrydning over 12-18 måneder efterfulgt af gradvist væsketab og kontaminering snarere end den umiddelbare og synlige lækagehændelse, som D2C-systemer producerer.

Q: Hvad er den mindste gulvhulhøjde, der kræves for D2C-kølerør, der løber under et hævet gulv?

ASHRAE-vejledningen sætter ikke et universelt minimum, da det afhænger af rørdiameter, isoleringsspecifikation og om rør krydser hinanden. En praktisk planlægningsregel er at tillade den største rør-OD i løbet, plus 75 mm isolering på alle sider, plus 50 mm frigang over for krydsende rør, plus 25 mm under for understøtninger. For en 4-tommer forsyningsledning med 25 mm isolering giver dette et minimumsgulvhulrum på ca. 300 mm - større end det 250 mm hulrum, der er almindeligt i ældre datacentre med hævede gulve, hvilket er en eftermonteringsbegrænsning, der er værd at identificere tidligt.