La plupart des centres de données n’ont pas été conçus pour répondre à ce qu’on leur demande aujourd’hui. Une installation prévue pour des racks de 5–8 kW avec refroidissement par air n’est pas automatiquement capable de prendre en charge des clusters GPU de 30–80 kW – simplement parce que la puissance électrique est disponible. C’est l’infrastructure de refroidissement qui doit pouvoir suivre, et avant de la modifier, vous devez savoir ce qu’elle fait réellement à l’instant T.
1. Pourquoi une instrumentation est nécessaire avant toute modification de capacité lors d’un retrofit
Un retrofit du refroidissement introduit de nouvelles charges thermiques, de nouvelles exigences de débit et de nouvelles conditions hydrauliques dans un système existant. Qu’il s’agisse d’installer des Rear-Door Heat Exchangers sur des racks existants, de mettre en place une CDU pour alimenter un nouveau cluster GPU, ou de déployer entièrement le Liquid Cooling sur une nouvelle zone – l’infrastructure existante d’eau glacée est la base sur laquelle tout le reste s’appuie.
Si vous ne connaissez pas l’état initial de cette infrastructure – les débits réels, le ΔT réel, les points de fonctionnement réels des pompes et la distribution réelle dans les dérivations – vous planifiez le retrofit sur la base d’hypothèses. Ces hypothèses proviennent des documents de conception d’origine, qui reflètent ce que le système devait fournir lors de la mise en service – peut-être il y a dix ans. Les filtres s’encrassent, les vannes d’équilibrage dérivent, les roues s’usent et les consignes sont ajustées au fil de dix années d’exploitation. Le système sur le papier est rarement celui que vous avez réellement.
L’installation de capteurs de débit et la mesure de thermoénergie avant tout travail de capacité vous apportent trois éléments que vous n’obtiendrez pas autrement : une baseline réelle comme base de conception, des critères d’essais de réception pertinents et une comparaison avant/après qui prouve si le retrofit a fonctionné.
Le coût de l’instrumentation est faible par rapport au retrofit lui-même – et très faible par rapport au coût d’un mauvais dimensionnement : installations surdimensionnées, boucles secondaires sous-performantes ou groupe froid incapable de supporter la nouvelle charge.
2. Établir la baseline du système d’eau glacée existant
Commencez au niveau de l’installation. Avant de toucher à quoi que ce soit d’autre, installez une mesure de débit et de température sur les collecteurs principaux (headers) de départ et de retour d’eau glacée.
Vous définissez ainsi la plage de fonctionnement réelle de l’installation frigorifique : quel débit elle fournit, à quelle température de départ et quel ΔT le système renvoie. Comparez cela aux spécifications de conception – et vous trouverez presque toujours au moins une surprise.
Les constats typiques à ce stade sont :
· Un ΔT plus faible qu’en conception. Le système fait circuler plus d’eau que nécessaire pour évacuer la chaleur. Cela signifie : les pompes travaillent davantage que nécessaire et l’efficacité des chillers est inférieure à ce qu’elle devrait être.
· Une répartition de débit inégale. Certains headers reçoivent plus que leur part, d’autres trop peu.
· Un staging des chillers qui ne correspond pas à la charge réelle. Deux chillers à 40% chacun au lieu d’un à 80% est une inefficacité fréquente, qui ne devient évidente qu’avec des données de thermoénergie en temps réel.
Établissez cette baseline, si possible, avec des instruments permanents, ou pour une première évaluation avec des débitmètres ultrasoniques clamp-on temporaires. Les données d’un enregistrement de deux à quatre semaines sous des conditions de charge IT variables sont nettement plus précieuses qu’un simple instantané. Elles montrent le comportement dynamique du système et la manière dont il réagit aux variations de charge, aux fluctuations de température ambiante et aux profils de demande selon l’heure de la journée.
3. Mesurer les débits des CRAH et des branches avant d’augmenter la densité de puissance
Les Computer Room Air Handlers représentent la distribution existante du refroidissement. Avant de les remplacer ou de les compléter par une infrastructure de Liquid Cooling, mesurez ce qu’ils fournissent réellement.
Chaque CRAH prélève de l’eau glacée sur la boucle du bâtiment et évacue la chaleur de l’air de la salle. Le débit à travers chaque CRAH, combiné aux températures d’eau aller et retour, indique la puissance frigorifique réelle. Cette valeur diffère souvent de la puissance nominale – parfois plus faible à cause de l’encrassement des échangeurs ou de la dégradation de la vanne de régulation, parfois plus élevée lorsque l’unité fonctionne en sur-refroidissement à faible charge IT.
Encore plus important pour la planification du retrofit : l’hydraulique des branches, autrement dit l’équilibrage des débits dans les dérivations. Les dérivations qui alimentent des CRAH individuels ont été équilibrées lors de la mise en service. Cela ne signifie pas qu’elles le sont restées. Une branche dimensionnée pour 20% du débit total de l’installation peut aujourd’hui recevoir 28% – parce qu’une vanne d’équilibrage en amont a été modifiée pour une autre raison, ou parce que la vanne de régulation d’un CRAH dans une branche voisine est restée bloquée en position fermée et que personne n’a remarqué que le débit s’était redistribué.
L’installation de débitmètres d’eau glacée sur chaque branche CRAH avant le retrofit montre :
· Quels CRAH sont limités par le débit versus limités par la vanne
· Quelles branches disposent de réserves de capacité pour une charge additionnelle
· Où insérer une boucle secondaire de Liquid Cooling sans surcharger la branche hydraulique d’alimentation
· Si une nouvelle installation de CDU nécessite un rééquilibrage de l’ensemble de la boucle de distribution ou seulement un ajustement local
Ces informations influencent directement l’emplacement des CDU, le dimensionnement des pompes de boucle secondaire et la capacité des vannes de régulation existantes de chaque branche à gérer l’exigence de débit supplémentaire induite par l’équipement de Liquid Cooling.
Un débitmètre sur chaque branche CRAH n’a pas besoin d’être une instrumentation permanente – même si cela vaut la peine pour la transparence opérationnelle continue. Au minimum, enregistrez chaque branche pendant deux à quatre semaines avant de finaliser la conception du retrofit.
4. Compléter le monitoring autour des échangeurs de chaleur et des boucles secondaires
De nombreuses installations qui disposent déjà de Rear-Door Heat Exchangers, d’In-Row-Cooler ou d’une installation de CDU d’une génération précédente ont des boucles secondaires avec trop peu d’instrumentation.
Un Rear-Door Heat Exchanger (RDHx) sur une rangée de racks existante prélève de l’eau glacée sur la boucle du bâtiment et évacue la chaleur de l’air de rejet des serveurs. Sans mesure de débit sur l’alimentation du RDHx et un ΔT à travers le RDHx, vous ne savez pas quelle part de la charge thermique du rack il prend réellement en charge – et quelle part part dans la salle et se retrouve sur les CRAH. Pour la planification du retrofit, cette répartition est déterminante, car elle influence la manière dont vous modélisez la charge résiduelle des CRAH après l’ajout du nouveau Liquid Cooling.
Pour chaque boucle secondaire existante – une petite installation de CDU, une boucle de refroidissement de laboratoire ou un Legacy In-Row Liquid Cooler – complétez la mesure de débit et de température des deux côtés de l’échangeur de chaleur :
Côté primaire (eau glacée bâtiment aller/retour) : montre ce que la boucle bâtiment fournit réellement à ce système secondaire et si un débit suffisant arrive depuis l’installation frigorifique.
Côté secondaire (boucle de fluide caloporteur vers les serveurs) : montre ce que les serveurs reçoivent et renvoient réellement. Le ΔT sur la boucle secondaire, combiné au débit secondaire, donne la chaleur effectivement évacuée. Vérifiez cela par recoupement avec la consommation IT mesurée via les rack-PDU – les valeurs doivent correspondre ; sinon, c’est que la mesure ou le chemin de refroidissement n’est pas correct.
Cet équilibrage primaire/secondaire est l’un des outils de diagnostic les plus utiles lors d’une évaluation de retrofit. Il identifie l’encrassement de l’échangeur (ΔT faible des deux côtés à charge constante), les restrictions hydrauliques dans la boucle secondaire (débit primaire correct, mais débit secondaire faible) et les problèmes de vannes de régulation (débit primaire qui ne corrèle pas avec les variations de charge IT).
5. Instrumenter les alimentations RDHx et CDU
Le nouvel équipement de Liquid Cooling dans le retrofit – unités RDHx, CDU pour alimenter des racks GPU, systèmes de distribution par manifold pour le Direct-to-Chip Cooling – nécessite, avant la mise en service, une instrumentation de débit aux points de raccordement côté bâtiment.
Alimentations RDHx.
Chaque unité Rear-Door ou groupe d’unités alimenté par une même branche nécessite un débitmètre ainsi que des capteurs de température aller/retour. C’est le minimum pour vérifier que chaque unité reçoit son débit de conception à la bonne température de départ et pour calculer la chaleur réellement évacuée par unité. Sans cela, la performance RDHx reste inconnue ; vous savez seulement que les températures des équipements IT restent dans les limites – ce qui, au mieux, est un indicateur retardé.
Raccordements primaires de CDU.
Chaque CDU est raccordée côté primaire à la boucle d’eau glacée du bâtiment. Un débitmètre et une paire de capteurs de température à ce point fournissent la mesure de l’apport thermique côté primaire de la CDU. Combinés à l’instrumentation interne de la boucle secondaire de la CDU, ils donnent un bilan énergétique complet de cette unité de refroidissement. Toute divergence entre l’apport de chaleur côté primaire et l’extraction de chaleur côté secondaire indique une erreur de mesure ou une perte d’énergie dans la CDU elle-même.
Headers de distribution par manifold.
Dans les installations où un manifold central distribue le fluide à plusieurs CDU ou boucles de rack, la mesure de débit sur l’aller et le retour du manifold ainsi que les débits de chaque branche apportent de la visibilité sur l’équilibrage de la distribution. Cela correspond aux mesures de branches CRAH côté air – les mêmes problèmes de déséquilibre apparaissent aussi dans des headers de distribution de liquides si l’on ne les surveille pas activement.
Ces points de raccordement se prêtent à la mesure de débit ultrasonique : aucune pièce mobile dans la boucle, pratiquement aucune perte de charge supplémentaire, et un appareil capable d’alimenter à la fois le BMS du bâtiment (via Modbus RTU) et le contrôleur de la CDU (via analogique ou impulsions). ALSONIC d’Allengra en est un exemple, où les transducteurs, l’électronique et la stack de communication sont développés en interne – ce qui réduit une couche de risque d’intégration lors de la mise en service.
6. Planifier l’intégration BMS et DCIM avant la mise en service
L’instrumentation ne révèle toute sa valeur que si les données arrivent là où elles sont utilisées. Cela signifie : planifier l’intégration avant d’installer les capteurs – et non après.
Les décisions à ce stade :
Qu’est-ce qui va dans le BMS versus le DCIM ? Les données de thermoénergie à l’échelle du site (headers d’installation, branches principales de distribution) vont typiquement dans le BMS. Les données rack et CDU – en particulier dans des environnements hybrides combinant refroidissement par air et par liquide – vont souvent dans le DCIM, où elles peuvent être corrélées aux données de charge et de puissance IT. Certaines données doivent aller dans les deux systèmes. Définissez cela avant de figer les protocoles de sortie.
Choix du protocole : Modbus RTU (ou Modbus TCP) est le standard pour l’intégration BMS. IO-Link est de plus en plus utilisé pour les liaisons vers les contrôleurs OEM de CDU. Clarifiez ce que le système cible supporte, et spécifiez les sorties capteurs en conséquence. Un mauvais protocole de sortie implique un convertisseur de protocole intermédiaire, un composant supplémentaire, une source de panne additionnelle et une latence supplémentaire.
Points de données par instrument. Un débitmètre peut fournir le débit, la température (si une paire de températures appairée est incluse), le ΔT, la puissance thermique instantanée, l’énergie cumulée, l’état de la qualité du signal et l’état de la détection de bulles. Toutes les intégrations BMS n’utilisent pas l’ensemble de ces valeurs, mais définissez la liste des points de données en amont afin que la register map Modbus soit complète avant le démarrage de la mise en service.
Définitions d’alarmes. Quelles conditions génèrent des alarmes BMS ? Débit faible sur une alimentation primaire de CDU. Température de retour élevée dans une boucle secondaire de rack GPU. Détection de bulles dans une branche de refroidissement critique. Cela doit être défini avant la mise en service, mappé sur les catégories d’alarmes du BMS et attribué au bon groupe de maintenance. Une alarme qui n’arrive chez personne n’est pas une alarme.
Historian et trending. Le reporting énergétique, les calculs de PUE et WUE ainsi que la vérification de la performance du retrofit exigent des données historiques. Assurez-vous que l’historian du BMS est configuré pour enregistrer les nouveaux points de données à des intervalles adaptés – une minute pour le reporting énergétique, une à dix secondes pour le diagnostic transitoire – avant la mise en production.
7. Utiliser les données de débit, de température et de bulles pour les essais de réception. La réception du retrofit est le sign-off formel attestant que le nouveau système de refroidissement fonctionne comme prévu. Sans instrumentation de baseline et sans comptage en temps réel, la réception est souvent visuelle : tout semble correct, les températures sont dans les limites – plutôt que quantitative.
Avec la bonne instrumentation, vous pouvez tester par rapport à des critères de performance réels.
Puissance thermique évacuée. Le système CDU ou RDHx doit fournir une puissance définie en kW à une température de départ et à des conditions de débit définies. Mesurez-la. Une unité qui respecte la performance thermique aux conditions nominales, mais échoue à débit primaire réduit, vous renseigne sur la réserve hydraulique de la boucle bâtiment.
ΔT au débit de conception. La boucle secondaire doit fonctionner, sous une charge IT représentative, avec son ΔT de conception entre départ et retour. Le syndrome de low-ΔT – le même problème qui affecte le refroidissement par air – apparaît ici lorsque le débit secondaire est plus élevé que nécessaire. Confirmez que le ΔT se situe dans la plage de conception avant de valider.
Équilibrage des débits de branches. Après des travaux de rééquilibrage sur des branches CRAH ou des headers de distribution de Liquid Cooling, vérifiez chaque débit de branche par rapport à sa valeur de conception. Documentez les débits mesurés lors de la mise en service comme nouvelle baseline pour des comparaisons ultérieures.
Baseline pour la détection de bulles. Mettez en service les sorties de détection de bulles et établissez une baseline de fonctionnement normal durant la phase initiale de rodage. Le signal acoustique de l’ALSONIC montre comment le système se stabilise à mesure que l’air initial est purgé de la boucle. Le moment où le signal de bulles se stabilise au niveau de fond constitue un jalon de mise en service significatif – plus informatif qu’un critère uniquement basé sur le temps.
Comparaison avant/après. Avec des données de baseline issues de la phase de mesure avant retrofit et des données live du système mis en service, vous pouvez montrer exactement ce qui a changé : ΔT de l’installation, équilibrage des débits de branches, thermoénergie délivrée par kW de charge IT et points de fonctionnement des pompes. Cette documentation clôt le projet et définit le point de départ pour l’exploitation ultérieure.
8. Check-list retrofit et prochaines étapes
Passez cela en revue avant de commencer toute installation physique :
Évaluation de la baseline
· Débit et température des headers d’installation enregistrés pendant au moins deux semaines
· ΔT existant d’eau glacée comparé aux spécifications de conception
· Tous les débits de branches CRAH mesurés et documentés
· Échangeurs de chaleur des boucles secondaires existantes mesurés des deux côtés
· Points de fonctionnement des pompes (vitesse, courant, pression différentielle) enregistrés
· Installations RDHx ou CDU existantes instrumentées et données de baseline collectées
Entrées confirmées pour la conception du retrofit
· Débit disponible par nouvelle branche CDU ou RDHx confirmé par rapport à la capacité de l’installation
· Réserve hydraulique de branche vérifiée avant l’ajout d’une nouvelle charge
· Température de départ de l’eau confirmée comme suffisante pour les spécifications de l’équipement de Liquid Cooling
· Concentration de glycol mesurée et compatible avec les matériaux du nouvel équipement
Spécification de l’instrumentation
· Emplacements de montage des débitmètres définis pour tous les nouveaux raccordements primaires de CDU
· Points de mesure confirmés pour la mesure de débit des branches RDHx
· Paires de sondes de température spécifiées pour tous les points de mesure ΔT
· Besoin de détection de bulles sur les boucles secondaires aligné avec le fournisseur de CDU
· Protocoles de sortie confirmés vis-à-vis des systèmes BMS et DCIM récepteurs
· Register maps Modbus demandées au fournisseur du capteur avant la mise en service
Intégration BMS et DCIM
· Liste des points de données définie et alignée avec l’équipe MSR
· Seuils d’alarme et routage des alarmes définis avant la mise en service
· Enregistrement Historian confirmé aux intervalles requis
· Entrées pour le calcul PUE et WUE identifiées et mappées
Critères de réception
· Valeurs cibles de puissance thermique évacuée définies pour chaque CDU ou RDHx
· Plage de ΔT au débit de conception documentée comme critère Pass/Fail
· Tolérance d’équilibrage des débits de branches définie
· Mise en place de la baseline de détection de bulles intégrée au protocole de mise en service
· Format du rapport de comparaison avant/après convenu
L’instrumentation décrite ici ne représente pas une grande part d’un budget de retrofit – mais c’est celle qui détermine si le reste du projet peut être correctement dimensionné, mis en service et vérifié. Un retrofit de Liquid Cooling sur un système d’eau glacée insuffisamment caractérisé est un risque que les Facility Engineers expérimentés ont déjà trop souvent constaté dans de mauvaises conditions. Les capteurs de débit et compteurs de thermoénergie qui évitent ce résultat se spécifient, s’installent et s’intègrent facilement – en particulier avec un débitmètre/compteur d’énergie ultrasonique comme l’ALSONIC, qui combine débit, détection de bulles et sortie Modbus dans un seul appareil.
Allengra est une entreprise de développement et fabrique et développe des débitmètres ultrasoniques en interne. Nous pouvons adapter et développer individuellement chaque produit de notre portfolio pour des applications de refroidissement de centres de données IA et pour des OEM – en version clamp-on ou en version immergée.
