A legtöbb adatközpontot nem arra tervezték, amit ma elvárnak tőlük. Egy 5–8 kW-os rackekre épített, léghűtésre optimalizált létesítmény nem lesz automatikusan alkalmas 30–80 kW-os GPU-klaszterek kiszolgálására pusztán attól, hogy rendelkezésre áll a teljesítmény. Ehhez a hűtési infrastruktúrának is fel kell nőnie a feladathoz, és mielőtt bármit módosítana rajta, tudnia kell, hogy jelenleg valójában hogyan működik.
1. Miért van szükség műszerezésre a kapacitásváltoztatások előtt a korszerűsítéseknél
Egy hűtési retrofit új hőterheléseket, új térfogatáram-igényeket és új hidraulikai viszonyokat vezet be egy meglévő rendszerbe. Legyen szó meglévő rackekre szerelt hátsó ajtós hőcserélőkről, egy új GPU-klasztert kiszolgáló CDU telepítéséről, vagy egy teljes folyadékhűtési kiépítésről egy új emeleti zónában, a meglévő hűtöttvíz-infrastruktúra az az alap, amire minden más ráépül.
Ha nem ismeri az infrastruktúra tényleges alapállapotát — a valós térfogatáramokat, a valós ΔT-t, a valós szivattyú-üzemi pontokat és a valós ági eloszlást —, akkor a korszerűsítést feltételezésekre alapozva tervezi. Ezek a feltételezések az eredeti tervezési dokumentumokból származnak, amelyek azt tükrözik, hogy a rendszernek mit kellett volna tudnia az üzembe helyezéskor, akár tíz évvel ezelőtt. A szűrők elkoszolódnak, a beszabályozó szelepek elállítódnak, a járókerekek kopnak, a setpointokat pedig egy évtized üzemeltetése során módosítják. A rajzokon szereplő rendszer ritkán azonos azzal, ami ténylegesen rendelkezésre áll.
Áramlásérzékelők és hőenergia-mérés telepítése bármilyen kapacitásbővítés előtt három olyan dolgot ad, amit másként nem lehet megszerezni: egy valós alapvonalat, amihez tervezni lehet; olyan átvételi tesztkritériumokat, amelyeknek tényleges jelentése van; valamint egy előtte/utána összehasonlítást, amely bizonyítja, hogy a retrofit működött.
A műszerezés költsége kicsi a retrofit egészéhez képest, és elenyésző ahhoz a költséghez viszonyítva, amit egy rosszul sikerült korszerűsítés okoz: túlméretezett berendezések, alulteljesítő szekunder körök, vagy egy hűtőközpont, amely nem képes elvinni az új terhelést.
2. A meglévő hűtöttvíz-rendszer alapállapotának felmérése
Induljon az üzemegységnél. Mielőtt bármi máshoz nyúlna, telepítsen áramlás- és hőmérsékletmérést a fő hűtöttvíz előremenő és visszatérő gerincvezetékekre (header).
A cél a hűtőközpont tényleges üzemeltetési tartományának meghatározása: mekkora térfogatáramot ad le, milyen előremenő hőmérsékleten, és milyen ΔT-vel tér vissza a rendszer. Hasonlítsa ezt össze a tervezési specifikációval, és szinte mindig talál legalább egy meglepetést.
Ebben a szakaszban tipikus megállapítások:
A tervezett értéknél alacsonyabb ΔT. A rendszer a szükségesnél több vizet keringtet a hő elszállításához, ami azt jelenti, hogy a szivattyúk a kelleténél nagyobb munkát végeznek, és a chiller hatásfoka rosszabb a vártnál.
Egyenetlen áramláseloszlás. Egyes gerincek a részesedésüknél többet kapnak; mások hiányt szenvednek.
A chiller lépcsőzése nem illeszkedik a tényleges terheléshez. Két chiller 40%-on történő üzemeltetése egyetlen 80%-os helyett tipikus hatékonysági probléma, amely csak valós idejű hőenergia-adatokkal válik egyértelművé.
Ezt az alapállapotot lehetőség szerint permanens műszerekkel, vagy a kezdeti felméréshez ideiglenes, ultrahangos clamp-on mérőkkel állapítsa meg. Két–négy hét adatnaplózása, eltérő IT-terhelési körülmények mellett sokkal többet ér, mint egyetlen pillanatfelvétel. Megmutatja a rendszer dinamikus viselkedését és azt, hogyan reagál a terhelésváltozásokra, a külső hőmérséklet-ingadozásokra és a napszaki igénymintákra.
3. Mérje a CRAH-kat és az ágak térfogatáramát a sűrűség növelése előtt
A Computer Room Air Handler (CRAH) egységek jelentik a meglévő hűtési elosztást. Mielőtt bármelyiket lecserélné vagy folyadékhűtési infrastruktúrával kiegészítené, mérje meg, valójában mit teljesítenek.
Minden CRAH hűtött vizet vesz fel az épület köréből, és a terem levegőjéből vonja el a hőt. Az egyes CRAH-okon átmenő térfogatáram, a hozzá tartozó előremenő és visszatérő vízhőmérsékletekkel együtt, megadja a tényleges hűtőteljesítményt. Ez az érték gyakran eltér a névleges kapacitástól: néha alacsonyabb a hőcserélő lamellák szennyeződése vagy a szabályozószelep romlása miatt, máskor magasabb, ha az egység alacsony IT-terhelés mellett túlhűtött üzemben fut.
A retrofit tervezés szempontjából még fontosabb: az ágak beszabályozottsága. Az egyes CRAH-okat kiszolgáló csőágakat az üzembe helyezéskor beszabályozták. Nem biztos, hogy azóta is beszabályozottak maradtak. Egy olyan ág, amelyet a teljes üzem áramlásának 20%-ára terveztek, ma 28%-ot is kaphat, mert feljebb egy beszabályozó szelepet más okból elállítottak, vagy mert egy szomszédos ágon lévő CRAH szabályozószelepe zárt állásban meghibásodott, és senki nem vette észre, hogy az áramlás újraeloszlott.
Hűtöttvíz-átfolyásmérők telepítése minden CRAH ágára a retrofit előtt feltárja:
Mely CRAH-ok áramlás-korlátosak és melyek szelep-korlátosak
Mely ágakban van kapacitástartalék további terheléshez
Hol lehet szekunder folyadékhűtési kört beilleszteni úgy, hogy ne terhelje túl azt a hidraulikai ágat, amelyről táplálkozik
Egy új CDU telepítéséhez a teljes elosztókör újrabeszabályozása szükséges-e, vagy elegendő egy helyi beállítás
Ez az információ közvetlenül befolyásolja, hová kerülnek a CDU-k, hogyan méretezi a szekunder köri szivattyúkat, és hogy az egyes ágakon lévő meglévő szabályozószelepek képesek-e kezelni azt a megnövekedett térfogatáram-igényt, amelyet a folyadékhűtő berendezések hozzáadnak.
Nem szükséges, hogy minden CRAH ágára telepített átfolyásmérő permanens legyen, bár érdemes megtartani a folyamatos üzemeltetési átláthatóság miatt. Minimumként naplózza minden ágat két–négy héten át, mielőtt véglegesíti a retrofit tervét.
4. Telepítsen monitoringot a hőcserélők és a szekunder körök köré
Sok olyan létesítményben, ahol már van valamilyen folyadékhűtés (hátsó ajtós hőcserélők, in-row coolerek, vagy egy korábbi generációs CDU telepítés), a szekunder körök alul vannak műszerezve.
Egy meglévő racksorban elhelyezett hátsó ajtós hőcserélő (RDHx) az épület köréből vesz fel hűtött vizet, és a szerverek kifúvott levegőjéből vonja el a hőt. Ha nincs áramlásmérés az RDHx betápon és ΔT mérés rajta, akkor fogalma sincs, a rack hőterhelésének mekkora részét kezeli ténylegesen, és mennyi jut át a terem levegőjébe, majd terheli a CRAH-okat. A retrofit tervezésben ez a megoszlás számít, mert befolyásolja, hogyan modellezi a fennmaradó CRAH-terhelést az új folyadékhűtés hozzáadása után.
Bármely meglévő szekunder kör esetén — egy kisebb CDU telepítés, egy tesztlabor hűtőkör, vagy egy legacy in-row folyadékhűtő — telepítsen áramlás- és hőmérsékletmérést a hőcserélő mindkét oldalára:
Primer oldal (épület hűtöttvíz be/ki): megmutatja, mit biztosít a létesítményi kör a szekunder rendszernek, és hogy megfelelő térfogatáramot kap-e az épület üzemétől.
Szekunder oldal (hűtőközeg kör a szerverekhez): megmutatja, mit kapnak és mit adnak vissza a szerverek ténylegesen. A szekunder kör ΔT-je a szekunder térfogatárammal együtt megadja a valós hőelvonást. Vesse össze ezt a rack PDU-kból származó IT teljesítményfelvétellel, és az értékeknek közel egyezniük kell; ha nem, akkor vagy a mérésben, vagy a hűtési útvonalban van probléma.
Ez a primer/szekunder keresztellenőrzés az egyik leghasznosabb diagnosztikai eszköz retrofit felmérés során. Kimutatja a hőcserélő szennyeződését (alacsony ΔT mindkét oldalon állandó terhelés mellett), a szekunder kör hidraulikai szűkületét (helyes primer áramlás, de alacsony szekunder áramlás), és a szabályozószelepek problémáit (a primer áramlás nem követi az IT-terhelés változásait).
5. Műszerezze az RDHx és a CDU betápokat
Az új folyadékhűtési berendezések — a retrofitbe kerülő RDHx egységek, a GPU rackeket kiszolgáló CDU-k, a direct-to-chip hűtés elosztó manifold rendszerei — mind igényelnek áramlásmérést az épületi oldalú csatlakozási pontjaikon, még az üzembe helyezés előtt.
RDHx betápok.
Minden hátsó ajtós egységnek, illetve a közös ágról táplált egységcsoportoknak szükségük van átfolyásmérőre és előremenő/visszatérő hőmérséklet-érzékelőkre. Ez a minimum ahhoz, hogy igazolni lehessen: minden egység megkapja a tervezett térfogatáramot a megfelelő előremenő hőmérsékleten, és ki lehessen számítani az egységenkénti tényleges hőelvonást. Enélkül az RDHx teljesítménye ismeretlen; csak azt látja, hogy az IT berendezések hőmérsékletei a specifikáción belül vannak, ami legfeljebb utólagos jelzőszám.
CDU primer csatlakozások.
Minden CDU a primer oldalán az épület hűtöttvíz-köréhez csatlakozik. Egy átfolyásmérő és egy hőmérsékletpár ezen a csatlakozáson megadja a CDU hőoldali bemenetét. A CDU belső szekunder köri műszerezésével együtt teljes energiamérleget kap erre a hűtőegységre. Bármilyen eltérés a primer oldali hőbevitel és a szekunder oldali hőleadás között mérési hibára vagy a CDU-n belüli energiaveszteségre utal.
Manifold elosztó gerincek.
Azokban a kiépítésekben, ahol egy központi manifold osztja el a hűtőközeget több CDU vagy rack-kör felé, a manifold előremenő/visszatérő áramlásmérése, valamint az egyes ágak térfogatáramai átláthatóvá teszik az elosztási egyensúlyt. Ez a léghűtéses oldalon végzett CRAH ágmérések megfelelője — ugyanazok az egyensúlytalansági problémák jelenhetnek meg a folyadékos elosztó gerincekben is, ha nincs aktív monitoring.
Ezekhez a csatlakozási pontokhoz jól illik az ultrahangos áramlásmérés: nincsenek mozgó alkatrészek a körben, gyakorlatilag nincs plusz nyomásesés, és egyetlen eszköz kiszolgálhatja az épület BMS-ét (Modbus RTU-n keresztül) és a CDU vezérlőt (analóg vagy impulzus kimeneten). Az Allengra ALSONIC egy példa, ahol a jelátalakítók, az elektronika és a kommunikációs stack házon belül készül, ami egy integrációs kockázati réteget kivesz az üzembe helyezés során.
6. Tervezze meg a BMS és a DCIM integrációt üzembe helyezés előtt
A műszerezés csak akkor adja a teljes értékét, ha az adatok hasznos helyre kerülnek. Ez azt jelenti, hogy az integrációt a szenzorok telepítése előtt kell megtervezni, nem utána.
Az ebben a szakaszban meghozandó döntések:
Mi kerüljön a BMS-be és mi a DCIM-be? A telephely szintű hőenergia-adatok (üzemi gerincek, fő elosztó ágak) tipikusan a BMS-be valók. A rack-szintű és CDU-szintű adatok — különösen hibrid hűtési környezetben, ahol a léghűtés és a folyadékhűtés keveredik — gyakran a DCIM-be tartoznak, ahol korrelálhatók az IT terhelési és teljesítményadatokkal. Egyes adatok mindkét helyre kellenek. Ezt még a kimeneti protokollok specifikálása előtt rögzítse.
Protokollválasztás: A BMS integráció szabványa a Modbus RTU (vagy Modbus TCP). Az IO-Link egyre gyakoribb OEM CDU vezérlőkapcsolatoknál. Határozza meg, mit támogat a fogadó rendszer, és ennek megfelelően specifikálja a szenzorok kimeneteit. A rossz kimeneti protokoll protokollkonvertert jelent a láncban: plusz komponens, plusz hibapont és extra késleltetés.
Adatpontok mérőnként. Egy átfolyásmérő szolgáltathat térfogatáramot, hőmérsékletet (ha illesztett hőmérsékletpár is van), ΔT-t, pillanatnyi hőteljesítményt, összegzett energiát, jelminőségi státuszt és buborékdetektálási státuszt. Nem minden BMS-integráció használja mindet, de az adatpontlistát előre definiálja, hogy a Modbus regisztertérkép teljes legyen, mire elkezdődik az üzembe helyezés.
Riasztásdefiníciók. Mely feltételek generálnak BMS riasztást? Alacsony áramlás egy CDU primer betápon. Magas visszatérő hőmérséklet egy GPU rack szekunder körén. Buborékdetektálás egy kritikus hűtési ágon. Ezeket üzembe helyezés előtt kell definiálni, BMS riasztáskategóriákhoz rendelni, és a megfelelő karbantartási reagáló csoporthoz irányítani. Az a riasztás, amely senkihez sem jut el, nem riasztás.
Historian és trendek. Energiajelentések, PUE és WUE számítások, valamint a retrofit teljesítményének igazolása mind történeti adatokat igényelnek. Erősítse meg, hogy a BMS historian a megfelelő időközökkel naplózza az új adatpontokat — egy perc az energiariportokhoz, egy–tíz másodperc tranziens diagnosztikához —, mielőtt a rendszer élesbe megy.
7. Áramlás-, hőmérséklet- és buborékadatok használata az átvételi teszteléshez. A retrofit átvételi tesztelés a formális jóváhagyás, amely igazolja, hogy az új hűtőrendszer a tervek szerint működik. Alapállapot-műszerezés és élő mérés nélkül az átvételi tesztelés nagyrészt vizuális: minden rendben néz ki, a hőmérsékletek specifikáción belül vannak — nem pedig kvantitatív.
Megfelelő műszerezéssel valós teljesítménykritériumokhoz mérten tud tesztelni.
Hőenergia-teljesítmény. A CDU- vagy RDHx-rendszernek meghatározott kW teljesítményt kell biztosítania adott előremenő vízhőmérséklet és áramlási feltételek mellett. Mérje meg. Egy olyan egység, amely a tervezési feltételek mellett megfelel, de csökkentett primer áramlásnál elbukik, információt ad az épületi kör hidraulikai tartalékáról.
ΔT tervezési áramlásnál. A szekunder körnek reprezentatív IT-terhelés mellett a tervezett előremenő/visszatérő ΔT-vel kell működnie. Az alacsony ΔT szindróma — ugyanaz a jelenség, ami a léghűtéses oldalt is érinti — itt is megjelenik, amikor a szekunder áramlás a szükségesnél magasabb. Az aláírás előtt ellenőrizze, hogy a ΔT a tervezési tartományban van.
Ági áramlás-egyensúly. Bármilyen újrabeszabályozási munka után a CRAH ágakon vagy a folyadékhűtési elosztó gerinceken, ellenőrizze minden ág térfogatáramát a tervezési értékhez képest. Dokumentálja az üzembe helyezéskori áramlási leolvasásokat új alapvonalként a jövőbeli összehasonlításokhoz.
Buborékdetektálási alapvonal. Üzemelje be a buborékdetektálás kimeneteit, és állapítson meg normál üzemi alapvonalat a kezdeti bejáratási időszakban. Az ALSONIC akusztikus jele mutatja a rendszer „beállását”, ahogy a kezdeti levegő távozik a körből. Az a pont, amikor a buborékjel a háttérszintre stabilizálódik, értékes üzembe helyezési mérföldkő, informatívabb, mint egy pusztán időalapú kritérium.
Előtte/utána összehasonlítás. A retrofit előtti mérési időszak alapadataival és az üzembe helyezett rendszer élő adataival pontosan kimutathatja, mi változott: üzem ΔT, ági áramlás-egyensúly, az IT-terhelés kW-jára jutó leadott hőenergia, valamint a szivattyúk üzemi pontjai. Ez az a dokumentáció, amely lezárja a projektet és megadja a kiindulási pontot a folyamatos üzemeltetéshez.
8. Retrofit ellenőrzőlista és következő lépések
Haladjon végig ezen, mielőtt bármilyen fizikai telepítés megkezdődik:
Alapállapot-felmérés
Az üzem gerincvezetékének (header) áramlása és hőmérséklete legalább két hétig naplózva
A meglévő hűtöttvíz ΔT összevetve a tervezési specifikációval
Minden CRAH ági térfogatáram megmérve és dokumentálva
A meglévő szekunder köri hőcserélők mindkét oldalon megmérve
Szivattyú üzemi pontok (fordulatszám, áramfelvétel, differenciálnyomás) rögzítve
Bármely meglévő RDHx vagy CDU telepítés műszerezve és alapvonalazva
Retrofit tervezési bemenetek visszaigazolva
Az elérhető térfogatáram minden új CDU vagy RDHx ágon visszaigazolva az üzemi kapacitáshoz képest
Ági hidraulikai tartalék ellenőrizve új terhelés hozzáadása előtt
Az előremenő vízhőmérséklet igazoltan megfelelő a folyadékhűtési berendezések specifikációihoz
A glikolkoncentráció megmérve, és kompatibilis az új berendezések anyagaival
Műszerezési specifikáció
Átfolyásmérő helyek meghatározva minden új CDU primer csatlakozásához
RDHx ági áramlásmérési pontok visszaigazolva
Hőmérséklet-érzékelő párok specifikálva minden ΔT mérési ponthoz
A buborékdetektálási igény a szekunder körökön egyeztetve a CDU beszállítóval
A kimeneti protokollok egyeztetve a BMS és DCIM fogadó rendszerekkel
A Modbus regisztertérképek bekérése a szenzorgyártótól üzembe helyezés előtt
BMS és DCIM integráció
Adatpontlista meghatározva és egyeztetve az irányítástechnikai csapattal
Riasztási küszöbök és továbbítás (routing) definiálva üzembe helyezés előtt
Historian naplózás visszaigazolva a szükséges időközökkel
PUE és WUE számításhoz szükséges bemenetek azonosítva és hozzárendelve
Átvételi tesztkritériumok
Hőenergia-teljesítmény célértékek meghatározva CDU-nként vagy RDHx-enként
ΔT tartomány tervezési áramlásnál dokumentálva, mint megfelelt/nem megfelelt kritérium
Ági áramlás-egyensúly tűréshatára meghatározva
Buborékdetektálási alapvonal felállítása szerepel az üzembe helyezési protokollban
Előtte/utána összehasonlító jelentés formátuma egyeztetve
Az itt leírt műszerezési munka nem nagy része egy retrofit költségvetésének, mégis ez az a rész, amely meghatározza, hogy a projekt többi eleme megfelelően tervezhető-e, üzembe helyezhető-e és igazolható-e. Egy alul jellemzett hűtöttvíz-rendszerbe bevezetett folyadékhűtéses retrofit olyan kockázat, amelynek rossz kimenetelét tapasztalt üzemeltetési mérnökök már sokszor látták. Az ezt megelőző áramlásérzékelők és hőenergia-mérők egyszerűen specifikálhatók, telepíthetők és integrálhatók — különösen egy olyan ultrahangos áramlás-/energiamérővel, mint az ALSONIC, amely egy eszközben egyesíti az áramlásmérést, a buborékdetektálást és a Modbus kimenetet.
Az Allengra fejlesztő cég, ultrahangos átfolyásmérőket gyárt és tervez házon belül. A termékpalettánk minden egyes termékét testre tudjuk szabni és egyedileg is tudjuk fejleszteni AI adatközpont-hűtési alkalmazásokhoz és OEM-ek számára, clamp-on vagy nedves (wetted) kivitelben.
