Majoritatea centrelor de date nu au fost proiectate pentru ceea ce li se cere astăzi. O instalație concepută pentru rack-uri de 5–8 kW cu răcire cu aer nu este automat capabilă să susțină clustere GPU de 30–80 kW – doar pentru că este disponibilă puterea electrică. Infrastructura de răcire trebuie să poată face acest lucru, iar înainte de a o modifica trebuie să știți ce face, în realitate, în momentul de față.
1. De ce modernizările au nevoie de instrumentare înainte de schimbări de capacitate
O modernizare a răcirii introduce sarcini termice noi, cerințe noi de debit și condiții hidraulice noi într-un sistem existent. Fie că este vorba de Rear-Door Heat Exchangers pe rack-uri existente, instalarea unei CDU pentru alimentarea unui nou cluster GPU sau extinderea completă a Liquid Cooling pe o nouă zonă – infrastructura existentă de apă răcită este fundamentul pe care se construiește tot restul.
Dacă nu cunoașteți starea inițială a acestei infrastructuri – debitele reale, ΔT real, punctele reale de funcționare ale pompelor și distribuția reală pe derivații – atunci planificați modernizarea pe baza unor presupuneri. Aceste presupuneri provin din documentația inițială de proiectare, care reflectă ceea ce sistemul ar fi trebuit să ofere la punerea în funcțiune – poate acum zece ani. Filtrele se murdăresc, vanele de echilibrare își schimbă setările, rotoarele se uzează, iar setpoint-urile sunt ajustate de-a lungul a zece ani de operare. Sistemul de pe hârtie este rareori sistemul pe care îl aveți în realitate.
Instalarea senzorilor de debit și a măsurării termoenergiei înainte de orice lucrări de capacitate vă oferă trei lucruri pe care altfel nu le obțineți: o baseline reală ca bază de proiectare, criterii relevante pentru testele de recepție și o comparație înainte/după care demonstrează dacă modernizarea a funcționat.
Costurile instrumentării sunt mici comparativ cu modernizarea în sine – și foarte mici comparativ cu costul unei dimensionări greșite: instalații supradimensionate, circuite secundare cu performanță insuficientă sau o instalație frigorifică ce nu poate susține noua sarcină.
2. Crearea baseline-ului sistemului existent de apă răcită
Începeți la nivel de instalație. Înainte să interveniți asupra oricărui alt element, instalați măsurare de debit și temperatură pe colectoarele principale (header) pentru turul și returul de apă răcită.
Astfel stabiliți domeniul real de funcționare al instalației frigorifice: ce debit livrează, la ce temperatură pe tur și ce ΔT returnează sistemul. Comparați cu specificația de proiectare – și aproape întotdeauna veți găsi cel puțin o surpriză.
Constatări tipice în această etapă:
· ΔT mai mic decât în proiect. Sistemul recirculă mai multă apă decât este necesar pentru evacuarea căldurii. Asta înseamnă: pompele lucrează mai mult decât este nevoie, iar eficiența chiller-elor este mai slabă decât ar trebui.
· Distribuție neuniformă a debitului. Unele header-e primesc mai mult decât partea lor, altele prea puțin.
· Staging al chiller-elor care nu se potrivește cu sarcina reală. Două chiller-e la 40% fiecare în loc de unul la 80% este o ineficiență frecventă care devine evidentă abia cu date de termoenergie în timp real.
Creați acest baseline, pe cât posibil, cu echipamente permanente sau, pentru o evaluare inițială, cu debitmetre ultrasonice clamp-on temporare. Datele dintr-o înregistrare de două până la patru săptămâni, în condiții variabile de sarcină IT, sunt mult mai valoroase decât o singură măsurătoare punctuală. Ele arată comportamentul dinamic al sistemului și modul în care reacționează la schimbări de sarcină, fluctuații ale temperaturii ambientale și profile de cerere dependente de momentul zilei.
3. Măsurați debitul CRAH și pe ramuri înainte de creșterea densității de putere
Computer Room Air Handlers reprezintă distribuția existentă a răcirii. Înainte de a le înlocui sau completa cu infrastructură de Liquid Cooling, măsurați ce livrează în realitate.
Fiecare CRAH preia apă răcită din circuitul clădirii și evacuează căldură din aerul din sală. Debitul prin fiecare CRAH, combinat cu temperaturile apei pe tur și retur, arată capacitatea reală de răcire. Această valoare diferă adesea de puterea de pe plăcuța de identificare – uneori mai mică din cauza murdăririi bateriilor sau degradării vanei de control, alteori mai mare atunci când unitatea funcționează în suprarăcire la sarcină IT redusă.
Și mai important pentru planificarea modernizării: hidraulica ramurilor, adică echilibrarea debitelor în derivații. Derivațiile care alimentează CRAH-uri individuale au fost echilibrate la punerea în funcțiune. Asta nu înseamnă că au rămas echilibrate. O ramură proiectată pentru 20% din debitul total al instalației poate primi astăzi 28% – deoarece o vană de echilibrare mai sus pe circuit a fost modificată din alt motiv sau deoarece la un CRAH dintr-o ramură vecină vana de control a cedat închis și nimeni nu a observat că debitul s-a redistribuit.
Instalarea debitmetrelor pentru apă răcită pe fiecare ramură CRAH înainte de modernizare arată:
· Care CRAH-uri sunt limitate de debit versus limitate de vană
· Care ramuri au rezerve de capacitate pentru sarcini suplimentare
· Unde poate fi introdus un circuit secundar de Liquid Cooling fără a supraîncărca ramura hidraulică de alimentare
· Dacă o nouă instalație CDU necesită reechilibrarea întregului circuit de distribuție sau doar o ajustare locală
Aceste informații influențează direct unde amplasați CDU-urile, cum dimensionați pompele circuitului secundar și dacă vanele de control existente pe fiecare ramură pot gestiona cerința suplimentară de debit pe care o aduce echipamentul de Liquid Cooling.
Un debitmetru pe fiecare ramură CRAH nu trebuie să fie neapărat instrumentare permanentă – deși merită pentru transparența operațională continuă. Minim, ar trebui să înregistrați fiecare ramură timp de două până la patru săptămâni înainte de a finaliza designul modernizării.
4. Completați monitoring-ul în jurul schimbătoarelor de căldură și al circuitelor secundare
Multe instalații care au deja Rear-Door Heat Exchangers, In-Row-Cooler sau o instalație CDU din generații anterioare au circuite secundare cu prea puțină instrumentare.
Un Rear-Door Heat Exchanger (RDHx) pe un rând existent de rack-uri preia apă răcită din circuitul clădirii și evacuează căldură din aerul evacuat al serverelor. Fără măsurare de debit pe alimentarea RDHx și un ΔT pe RDHx, nu știți cât din sarcina termică a rack-ului preia cu adevărat – și cât ajunge în sală și este preluat de CRAH-uri. Pentru planificarea modernizării, această împărțire este decisivă, deoarece influențează modul în care modelați sarcina reziduală a CRAH-urilor după ce se adaugă noul Liquid Cooling.
Pentru fiecare circuit secundar existent – o instalație CDU mică, un circuit de răcire de laborator sau un Legacy In-Row Liquid Cooler – completați măsurarea de debit și temperatură pe ambele părți ale schimbătorului de căldură:
Partea primară (apă răcită din clădire intrare/ieșire): arată ce livrează efectiv circuitul clădirii acestui sistem secundar și dacă ajunge suficient debit din instalația frigorifică.
Partea secundară (circuitul de agent către servere): arată ce primesc și returnează efectiv serverele. ΔT pe circuitul secundar, combinat cu debitul secundar, oferă căldura evacuată efectiv. Verificați în paralel cu consumul de putere IT din rack-PDU – valorile ar trebui să coincidă; dacă nu, fie măsurarea, fie traseul de răcire este problematic.
Această corelare primar/secundar este unul dintre cele mai utile instrumente de diagnostic în timpul unei evaluări de modernizare. Identifică murdărirea schimbătorului de căldură (ΔT scăzut pe ambele părți la sarcină constantă), restricții hidraulice în circuitul secundar (debit primar corect, dar debit secundar scăzut) și probleme ale vanelor de control (debit primar care nu corelează cu schimbările de sarcină IT).
5. Instrumentați alimentările RDHx și CDU
Echipamentul nou de Liquid Cooling în modernizare – unități RDHx, CDU-uri pentru alimentarea rack-urilor GPU, sisteme de distribuție tip manifold pentru Direct-to-Chip Cooling – necesită, înainte de punerea în funcțiune, instrumentare de debit la punctele de racordare dinspre clădire.
Alimentări RDHx.
Fiecare unitate Rear-Door sau grup de unități alimentate dintr-o ramură comună necesită un debitmetru și senzori de temperatură pe tur și retur. Acesta este minimul pentru a verifica dacă fiecare unitate primește debitul de proiect la temperatura corectă pe tur și pentru a calcula evacuarea reală de căldură per unitate. Fără aceasta, performanța RDHx este necunoscută; știți doar că temperaturile echipamentelor IT sunt în limite – ceea ce, în cel mai bun caz, este un indicator întârziat.
Racorduri primare CDU.
Fiecare CDU este conectată pe partea primară la circuitul de apă răcită al clădirii. Un debitmetru și o pereche de senzori de temperatură la acest racord oferă măsurarea inputului termic al CDU pe partea primară. Împreună cu instrumentarea internă a circuitului secundar din CDU, obțineți un bilanț energetic complet al acestei unități de răcire. Orice diferență între aportul de căldură pe primar și evacuarea de căldură pe secundar indică o eroare de măsurare sau o pierdere de energie în CDU în sine.
Header-e de distribuție manifold.
În instalațiile în care un manifold central distribuie agentul către mai multe CDU-uri sau circuite de rack, măsurarea debitului pe tur și retur în manifold, precum și debitele pe fiecare ramură, oferă transparență asupra echilibrării distribuției. Acest lucru corespunde măsurării ramurilor CRAH pe partea de aer – aceleași probleme de dezechilibru apar și în header-ele de distribuție a lichidelor atunci când nu sunt monitorizate activ.
Aceste puncte de racordare sunt potrivite pentru măsurarea debitului cu ultrasunete: fără piese mobile în circuit, practic fără pierderi suplimentare de presiune și un dispozitiv care poate deservi atât BMS-ul clădirii (prin Modbus RTU), cât și controllerul CDU (prin analog sau impuls). ALSONIC de la Allengra este un exemplu în care traductoarele, electronica și stack-ul de comunicare sunt dezvoltate in-house – reducând un strat de risc de integrare la punerea în funcțiune.
6. Planificați integrarea BMS și DCIM înainte de punerea în funcțiune
Instrumentarea își arată valoarea maximă doar dacă datele ajung acolo unde sunt utilizate. Asta înseamnă: planificați integrarea înainte de instalarea senzorilor – nu după.
Deciziile în această etapă:
Ce merge în BMS versus DCIM? Datele de termoenergie la nivel de locație (header-ele instalației, ramurile principale de distribuție) ajung de obicei în BMS. Datele de rack și CDU – în special în medii hibride cu răcire cu aer și cu lichid – ajung adesea în DCIM, unde pot fi corelate cu datele de sarcină și putere IT. Unele date trebuie să ajungă în ambele sisteme. Definiți acest lucru înainte de a stabili protocoalele de ieșire.
Alegerea protocolului: Modbus RTU (sau Modbus TCP) este standardul pentru integrarea în BMS. IO-Link este utilizat tot mai mult pentru conectarea la controllere OEM de CDU. Clarificați ce suportă sistemul țintă și specificați ieșirile senzorilor în consecință. Un protocol de ieșire greșit înseamnă un convertor de protocol între ele, un component suplimentar, o altă sursă de defecțiune și latență suplimentară.
Puncte de date per instrument. Un debitmetru poate furniza debit, temperatură (dacă este inclusă o pereche de temperatură calibrată), ΔT, putere termică instantanee, energie cumulată, starea calității semnalului și starea detecției de bule. Nu orice integrare BMS utilizează toate aceste valori, dar definiți lista de puncte de date din timp, astfel încât register map-ul Modbus să fie complet înainte de începerea punerii în funcțiune.
Definirea alarmelor. Ce condiții generează alarme în BMS? Debit scăzut pe o alimentare primară de CDU. Temperatură de retur ridicată într-un circuit secundar de rack GPU. Detecție de bule într-o ramură critică de răcire. Acest lucru trebuie definit înainte de punerea în funcțiune, mapat pe categoriile de alarme din BMS și atribuit grupului corect de mentenanță. O alarmă care nu ajunge la nimeni nu este o alarmă.
Historian și trending. Raportarea energetică, calculele PUE și WUE și verificarea performanței modernizării necesită date istorice. Asigurați-vă că Historian-ul din BMS este configurat să înregistreze noile puncte de date la intervale adecvate – un minut pentru raportare energetică, una până la zece secunde pentru diagnostic tranzitoriu – înainte ca sistemul să intre în exploatare.
7. Utilizarea datelor de debit, temperatură și bule pentru testele de recepție. Testul de recepție al modernizării este semnătura formală că noul sistem de răcire funcționează conform planului. Fără instrumentare de baseline și metering live, recepția este de obicei vizuală: totul arată bine, temperaturile sunt în limite – în loc să fie cantitativă.
Cu instrumentarea potrivită puteți testa față de criterii reale de performanță.
Puterea termică evacuată. Sistemul CDU sau RDHx ar trebui să livreze o putere definită în kW la o temperatură pe tur și condiții de debit definite. Măsurați acest lucru. O unitate care îndeplinește performanța termică la condițiile de proiect, dar eșuează la debit primar redus, vă spune ceva despre rezerva hidraulică din circuitul clădirii.
ΔT la debitul de proiect. Circuitul secundar ar trebui să funcționeze, sub o sarcină IT reprezentativă, cu ΔT-ul de proiect între tur și retur. Sindromul low-ΔT – aceeași problemă care afectează răcirea cu aer – apare aici atunci când debitul secundar este mai mare decât este necesar. Confirmați că ΔT este în intervalul de proiect înainte de a semna recepția.
Echilibrarea debitului pe ramuri. După lucrări de rebalancing pe ramuri CRAH sau pe header-e de distribuție pentru Liquid Cooling, verificați fiecare debit de ramură față de valoarea de proiect. Documentați debitele măsurate la punerea în funcțiune ca nou baseline pentru comparații ulterioare.
Baseline pentru detecția de bule. Puneți în funcțiune ieșirile de detecție a bulelor și stabiliți o baseline a funcționării normale în timpul fazei inițiale de rodaj. Semnalul acustic al ALSONIC arată cum se stabilizează sistemul pe măsură ce aerul inițial este evacuat din circuit. Momentul în care semnalul de bule se stabilizează la nivelul de fundal este un reper de punere în funcțiune relevant – mai informativ decât un criteriu pur bazat pe timp.
Comparație înainte/după. Cu date de baseline din faza de măsurare înainte de modernizare și date live din sistemul pus în funcțiune, puteți arăta exact ce s-a schimbat: ΔT al instalației, echilibrarea debitelor pe ramuri, termoenergia livrată per kW sarcină IT și punctele de funcționare ale pompelor. Această documentație închide proiectul și definește punctul de pornire pentru operarea ulterioară.
8. Check-list de modernizare și pașii următori
Parcurgeți aceasta înainte de a începe orice instalare fizică:
Evaluarea baseline-ului
· Debit și temperatură pe header-ele instalației înregistrate cel puțin două săptămâni
· ΔT-ul existent al apei răcite comparat cu specificația de proiect
· Toate debitele pe ramuri CRAH măsurate și documentate
· Schimbătoarele de căldură ale circuitelor secundare existente măsurate pe ambele părți
· Punctele de funcționare ale pompelor (turație, curent, presiune diferențială) înregistrate
· Instalații RDHx sau CDU existente instrumentate și date de baseline colectate
Input-uri confirmate pentru designul modernizării
· Debitul disponibil pentru fiecare ramură nouă CDU sau RDHx confirmat față de capacitatea instalației
· Rezerva hidraulică pe ramură verificată înainte de adăugarea unei noi sarcini
· Temperatura pe tur a apei confirmată ca suficientă pentru specificațiile echipamentului de Liquid Cooling
· Concentrația de glicol măsurată și compatibilă cu materialele echipamentului nou
Specificarea instrumentării
· Locațiile de montaj ale debitmetrelor stabilite pentru toate noile racorduri primare CDU
· Punctele de măsură confirmate pentru măsurarea debitului pe ramuri RDHx
· Perechi de senzori de temperatură specificate pentru toate punctele de măsurare ΔT
· Necesitatea de detecție de bule pe circuitele secundare aliniată cu furnizorul CDU
· Protocoalele de ieșire confirmate cu sistemele BMS și DCIM receptoare
· Register map-urile Modbus solicitate furnizorului de senzori înainte de punerea în funcțiune
Integrarea BMS și DCIM
· Lista punctelor de date definită și aliniată cu echipa MSR
· Pragurile de alarmă și rutarea alarmelor definite înainte de punerea în funcțiune
· Logging-ul Historian confirmat la intervalele necesare
· Input-urile pentru calculul PUE și WUE identificate și mapate
Criterii de recepție
· Valorile țintă pentru puterea termică evacuată per CDU sau RDHx definite
· Intervalul ΔT la debitul de proiect documentat ca criteriu Pass/Fail
· Toleranța pentru echilibrarea debitelor pe ramuri definită
· Stabilirea baseline-ului de detecție a bulelor inclusă în protocolul de punere în funcțiune
· Formatul raportului de comparație înainte/după aliniat
Instrumentarea descrisă aici nu reprezintă o parte mare din bugetul unei modernizări – dar este partea care determină dacă restul proiectului poate fi dimensionat corect, pus în funcțiune și verificat. O modernizare Liquid Cooling într-un sistem de apă răcită caracterizat insuficient este un risc pe care Facility Engineers cu experiență l-au văzut deja de multe ori concretizat în mod neplăcut. Senzorii de debit și contoarele de termoenergie care previn acest rezultat pot fi specificați, instalați și integrați cu ușurință – mai ales cu un debitmetru/contor de energie cu ultrasunete precum ALSONIC, care combină debitul, detecția de bule și ieșirea Modbus într-un singur dispozitiv.
Allengra este o companie de dezvoltare și produce și dezvoltă debitmetre cu ultrasunete in-house. Putem adapta și dezvolta individual fiecare produs din portofoliul nostru pentru aplicații de răcire a centrelor de date AI și pentru OEM – în variantă clamp-on sau cu părți udate.
