Choisir entre un refroidissement

par salle, par range ou par rack

dans les datacenters






Rvision n 2
Par Kevin Dunlap et Neil Rasmussen
Introduction 2
Refroidissement par salle,
par range et par rack
2
Comparaison de trois
mthodes de refroidissement
7
Conclusion 15
Ressources 16

Cliquez sur une section pour y accder
directement

Table Des Matires
Livre Blanc 130

Les quipements informatiques de dernire
gnration, haute densit et densit variable,
crent des conditions pour lesquelles les systmes de
refroidissement classiques nont jamais t conus et
qui rendent ces systmes la fois inefficaces,
surdimensionns et imprvisibles. Pour rsoudre ces
problmes, des mthodes de refroidissement par salle,
par range et par rack ont t dveloppes. Ce
document dcrit ces mthodes de refroidissement
amliores et aide choisir celles qui conviennent le
mieux pour la plupart des datacenters de nouvelle
gnration.
Rsum Gnral

>
by Schneider Electric. Les livres blancs APC font maintenant partie de la bibliothque
Schneider Electric produite par le Datacenter Science Center de Schneider Electric
DCSC@Schneider-Electric.com
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 2



La quasi-totalit de la puissance lectrique fournie aux charges informatiques d'un datacenter
se transforme, terme, en chaleur rsiduelle qu'il faut vacuer pour viter les surchauffes.
Presque tous les quipements informatiques sont refroidis par air : chacun aspire l'air ambiant
et rejette de la chaleur rsiduelle avec l'air vacu. Un datacenter peut contenir des milliers
d'appareils informatiques. Il s'y forme donc des milliers de trajectoires d'air chaud dont
l'ensemble reprsente la chaleur rsiduelle totale en sortie du datacenter, qui doit tre
neutralise. Le systme de climatisation du datacenter doit capter efficacement ce flux
complexe de chaleur rsiduelle et l'extraire de la salle.

La mthode utilise depuis toujours pour refroidir les datacenters consiste utiliser des
appareils de refroidissement primtriques qui font circuler de l'air froid sous un plancher
technique sans aucune forme de confinement. C'est ce que l'on appelle une distribution d'air
entrant cible et d'air sortant libre, traite dans le livre blanc n 55, Les diffrents types de
distribution de l'air pour les environnements informatiques. Avec cette mthode, un ou
plusieurs systmes de climatisation fonctionnant en parallle introduisent de l'air froid dans
le datacenter et en vacuent l'air ambiant plus chaud. Le principe de base est le suivant :
les systmes de climatisation fournissent une capacit brute de refroidissement et servent
aussi brasser l'air en permanence dans la salle pour l'amener une temprature moyenne
homogne et viter la formation de points chauds. Cette approche est efficace tant que la
puissance ncessaire au brassage de l'air ne reprsente qu'une faible part de la consommation
totale du datacenter. Les donnes de simulation et l'exprience montrent que ce systme
est efficace tant que la densit de puissance moyenne reste de l'ordre de 1 2 kW par rack,
soit 323 753 W/m. Diverses mesures peuvent tre prises pour augmenter la densit de
puissance dans le cadre de cette mthode de refroidissement classique, mais certaines limites
pratiques restent infranchissables. Ces limites sont dcrites plus en dtail dans le livre blanc
n 46 Stratgies de refroidissement pour racks et serveurs lames de trs haute densit .
Les densits de puissance des quipements informatiques modernes font grimper la densit
de puissance de pointe 20 kW par rack, voire plus. Dans ces conditions, les donnes de
simulation et l'exprience montrent que le refroidissement classique (sans confinement) avec
brassage d'air devient insuffisant.

Pour rsoudre ce problme, on peut faire appel des mthodes de refroidissement qui agissent
au niveau de la salle, de la range ou du rack. Ces mthodes intgrent spcifiquement les
systmes de climatisation avec la salle, les ranges de racks ou les racks eux-mmes afin
de limiter le brassage d'air. Elles prsentent de nombreux avantages, notamment une bien
meilleure prvisibilit, une densit suprieure et une plus grande efficacit. Ce livre blanc
dcrit ces diffrentes mthodes et les compare. Il montre que chacune correspond des
applications prcises et que le refroidissement par range tend s'imposer pour les datacenters
de petite taille et les zones haute densit, tandis que le refroidissement par salle se gnralise
dans les grands datacenters.



Le systme de climatisation d'un datacenter remplit deux fonctions essentielles : fournir la
capacit de refroidissement et distribuer l'air aux charges informatiques. La premire fonction
est la mme pour chacune des mthodes, qu'il s'agisse de refroidir une salle, une range ou
un rack : la capacit volumtrique de refroidissement en kilowatts du systme de climatisation
doit vacuer la totalit de la charge (en kW) de l'quipement informatique. Les diverses
technologies qui remplissent cette fonction sont les mmes pour les trois systmes qui nous
intressent. La principale diffrence tient la faon dont elles remplissent la seconde
fonction essentielle, savoir la distribution d'air aux charges. Contrairement la distribution
de l'alimentation lectrique, qui emprunte des cbles et constitue un aspect concret et visible
de la conception, le flux d'air n'est que sommairement canalis par la conception de la salle,
Introduction
Refroidissement
par salle,
par range
et par rack
Les diffrents types de
distribution de l'air pour les
environnements informatiques
Lien vers les ressources
Livre Blanc 55
Stratgies de refroidissement
pour racks et serveurs lames de
trs haute densit
Lien vers les ressources
Livre Blanc 46
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 3
il n'est pas visible et varie considrablement suivant les installations. Contrler la circulation
de l'air est l'objectif principal des diffrents types de systmes de refroidissement.

Les plans au sol de la figure 1 illustrent les trois configurations de base. Les carrs noirs
reprsentent les baies disposes en ranges et les flches bleues reprsentent l'association
logique entre les systmes de climatisation (units CRAH) et les charges des baies
informatiques. La disposition relle des units CRAH peut varier. Dans le cas d'un
refroidissement par salle, les units CRAH sont associes la salle. Elles sont lies des
ranges ou des groupes dans le cas d'un refroidissement par range et chaque rack dans
le cas d'un refroidissement par rack.



Les sections suivantes dcrivent brivement les principes de fonctionnement de chaque
mthode.


Refroidissement par salle
Dans une architecture de refroidissement par salle, les units CRAH sont associes la salle
et fonctionnent ensemble pour traiter sa charge thermique totale. Un ou plusieurs systmes
de climatisation fournissent de l'air froid non canalis par des conduites, des registres,
des bouches d'aration, etc., ou la fourniture et/ou le retour d'air peuvent tre partiellement
canaliss par un systme de faux-plancher ou par une conduite de retour sur faux plafond.
Pour en savoir plus, se reporter au livre blanc n 55, Les diffrents types de distribution de
l'air pour les environnements informatiques.

Au stade de la conception, l'attention porte la circulation de l'air est trs variable. Pour
les plus petites salles, l'agencement des racks et la circulation de l'air ne sont pas forcment
planifis. Pour les grandes installations plus complexes, il est possible d'utiliser des faux-
planchers pour distribuer l'air dans des agencements en alles chaudes et froides conus
de faon ingnieuse pour diriger la circulation d'air et l'aligner sur les armoires informatiques.

Le refroidissement par salle est largement tributaire des contraintes propres la salle comme
la hauteur du plafond, la forme de la salle, les obstacles au sol et sous le plancher,
l'agencement des racks, l'emplacement des units CRAH, la distribution de l'alimentation
entre les charges informatiques, etc. Lorsque les flux entrants et sortants ne sont pas
canaliss, il n'est pas possible de prvoir prcisment les performances, lesquelles
sont par ailleurs peu homognes, surtout quand la densit de puissance augmente.
Il peut donc tre ncessaire, dans le cas d'architectures classiques, de recourir des
simulations informatiques complexes baptises CFD (computational fluid dynamics,
dynamique de calcul des fluides) pour mieux comprendre les performances de la conception
de certaines installations. De plus, des changements comme le dplacement, l'ajout et
l'adaptation d'quipements informatiques risquent d'invalider le modle de performance et
supposent des analyses et/ou des tests supplmentaires. En particulier, assurer la redondance
Par salle Par range Par rack
Figure 1
Plans au sol prsentant le
concept de base du
refroidissement par salle, par
range et par rack. Les flches
bleues montrent comment la
salle est alimente en air
Les diffrents types de
distribution de l'air pour les
environnements informatiques
Lien vers les ressources
Livre Blanc 55
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 4
des units CRAH relve d'une analyse trs complique difficile valider. La figure 2 montre
un exemple de configuration classique de refroidissement par salle.



L'impossibilit d'utiliser la capacit nominale totale des units CRAH est un autre inconvnient
majeur du refroidissement par salle sans confinement. Cela se produit quand une part
importante de l'air distribu par les units CRAH ne parvient pas aux charges informatiques
et revient directement ces units. Cet air perdu reprsente la part du flux d'air des
units CRAH qui ne contribue pas au refroidissement des charges, ce qui entrane une
rduction de la capacit de refroidissement totale. Celle-ci risque alors de ne plus couvrir
les besoins de refroidissement de la configuration informatique, mme si le systme CRAH
prsente la capacit nominale requise. Ce problme est trait plus en dtail dans le livre
blanc n 49, Erreurs compromettant les performances de refroidissement des datacenters
et des salles rseaux et pouvant tre vites.

Pour les nouveaux datacenters d'une puissance suprieure 200 kW, il conviendra de
prconiser un refroidissement par salle avec confinement des alles chaudes pour viter les
problmes voqus ci-dessus. Cette mthode est efficace avec ou sans plancher technique
et les units de refroidissement peuvent tre installes l'intrieur ou l'extrieur du datacenter.
Pour les datacenters existants avec refroidissement par salle et plancher technique, il sera
prfrable d'utiliser un confinement des alles froides, en gnral plus facile mettre en
place. Le confinement des alles chaudes et froides est aujourd'hui utilis pour limiter le
brassage dans les datacenters. Chacune de ces solutions prsente ses propres avantages,
dcrits plus en dtail dans le livre blanc n 135, Impact du confinement des alles froides et
chaudes sur la temprature et l'efficacit du datacenter. La figure 3 montre deux exemples
de systme de refroidissement par salle de nouvelle gnration.




Refroidissement par range
Dans ce type de configuration, les units CRAH sont associes une range et lui sont en
principe ddies. Elles peuvent tre installes entre les racks informatiques ou suspendues
au-dessus. Par rapport une solution classique de refroidissement par salle sans confinement,
les trajets de ventilation sont plus courts et plus clairement dfinis. De plus, la circulation de
l'air tant beaucoup plus prvisible, la totalit de la capacit nominale des units CRAH peut
tre utilise, ce qui permet d'atteindre une densit de puissance suprieure.

Le refroidissement par range offre divers avantages annexes, qui viennent s'ajouter aux
performances de refroidissement. Les trajets de ventilation plus courts rduisent la puissance
ncessaire pour les ventilateurs des units CRAH, d'o un gain d'efficacit. Cet avantage est
loin d'tre mineur si l'on considre que dans de nombreux datacenters faible charge, la
perte de puissance de ces seuls ventilateurs est suprieure la puissance consomme
par la charge informatique totale.

Le refroidissement par range permet de cibler la capacit de refroidissement et la redondance
en fonction des besoins rels de telle ou telle range. Par exemple, une range de racks
peut tre ddie des applications haute densit, comme des serveurs lames, et une autre
rserve des applications plus faible densit de puissance, comme des armoires de
Figure 2
Exemple de configuration
classique de refroidissement
par salle sans confinement
Figure 3
Exemples de systme de
refroidissement par salle de
nouvelle gnration avec
confinement
Impact du confinement des
alles froides et chaudes sur la
temprature et l'efficacit du
datacenter
Lien vers les ressources
Livre Blanc 135
Erreurs compromettant les
performances de
refroidissement des datacenters
et des salles rseaux et pouvant
tre vites
Lien vers les ressources
Livre Blanc 49
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 5
communication. En outre, il devient possible d'appliquer une redondance N+1 ou 2N des
ranges spcifiques.

Pour les nouveaux datacenters de moins de 200 kW, le refroidissement par range sera
plus indiqu, mme sans plancher technique. Pour les datacenters existants, ce type de
refroidissement peut tre envisag pour dployer des charges haute densit (5 kW ou plus
par rack). Le livre blanc n 134, Dploiement de modules haute densit dans un datacenter
faible densit traite des diffrentes faons de dployer des zones haute densit dans un
datacenter existant. Les figures 4a et 4b montrent des exemples de refroidissement par range.



Les deux systmes de refroidissement des figures 4a et 4b peuvent aussi tre configurs
sous forme de systme de confinement des alles chaudes pour augmenter la densit de
puissance. Cette conception rend les performances plus prvisibles en liminant les risques
de brassage d'air. La configuration simple et prdfinie du refroidissement par range se
traduit par des performances prvisibles qui peuvent tre entirement dcrites par le fabricant
et qui sont relativement insensibles la forme de la salle ou ses autres contraintes spcifiques.
Cela simplifie la fois la spcification et la mise en uvre de ces conceptions, en particulier
pour des densits de plus de 5 kW par rack. La spcification de la densit de puissance est
dfinie en dtail dans le livre blanc n 120, Les tapes de spcification de la densit de
puissance des datacenters.


Refroidissement par rack
Avec ce type de refroidissement, les units CRAH sont associes un rack et lui sont
en principe ddies. Ces units sont montes directement sur les racks informatiques
ou l'intrieur. Par rapport au refroidissement par salle ou par range, les trajectoires de
ventilation sont encore plus courtes et plus prcisment dfinies. Elles sont donc tout fait
insensibles aux modifications de l'installation ou aux contraintes propres la salle. Toute
la capacit nominale des units CRAH peut tre utilise et la densit de puissance la plus
leve (jusqu' 50 kW par rack) peut tre atteinte. La figure 5 montre un exemple de
refroidissement par rack.



Figure 4
4a (gauche)
Refroidissement par range
avec montage au sol

4b (droite)
Refroidissement par range
avec montage suspendu
Figure 5
Solution de refroidissement
par rack avec unit de
refroidissement totalement
intgre au rack
Les tapes de spcification
de la densit de puissance
des datacenters
Lien vers les ressources
Livre Blanc 120
Dploiement de modules
haute densit dans un
datacenter faible densit
Lien vers les ressources
Livre Blanc 134
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 6
l'instar du refroidissement par range, le refroidissement par rack prsente des
caractristiques originales, en plus d'offrir une capacit de densit extrme. Les trajets
de ventilation plus courts rduisent la puissance ncessaire pour les ventilateurs des
units CRAH, d'o un gain d'efficacit. Comme nous l'avons vu, cet avantage est loin d'tre
mineur puisque dans beaucoup de datacenters faible charge, la perte de puissance des
seuls ventilateurs des units CRAH excde la puissance consomme de la charge
informatique totale.

Un systme de refroidissement par rack permet d'adapter la capacit de refroidissement et
la redondance aux besoins des racks et, par exemple, de prvoir des densits de puissance
diffrentes pour les serveurs lames et les armoires de communication. En outre, la redondance
N+1 ou 2N peut tre applique certains racks. En revanche, le refroidissement par
range ne permet de spcifier ces caractristiques qu'au niveau de la range. De mme,
le refroidissement par salle ne peut les spcifier qu'au niveau de la salle.

Comme pour le refroidissement par range, la topographie du refroidissement par rack
permet de prvoir les performances, que le fabricant peut alors intgralement afficher. Elle
facilite ainsi la spcification de la densit de puissance et la mise en uvre de la densit
spcifie. Le refroidissement par rack convient aux datacenters de toutes tailles qui
contiennent des racks autonomes haute densit devant tre refroidis. Le principal
inconvnient de ce systme, c'est qu'il exige beaucoup plus de tuyauteries et de dispositifs
de climatisation que les autres, en particulier quand la densit de puissance est faible.


Refroidissement mixte
Rien n'empche de combiner des systmes de refroidissement par salle, par range et par
rack dans une mme installation. En fait, cette utilisation mixte prsente trs souvent des
avantages. L'installation de plusieurs units de refroidissement diffrents endroits d'un
mme datacenter est une solution mixte, comme le montre la figure 6. Elle sera intressante
pour les datacenters utilisant un large spectre de densits de puissance de racks.

Le refroidissement par range et par rack s'avre galement efficace lors du passage des
densits suprieures dans des salles faible densit. De petits groupes de racks d'un
datacenter existant sont alors dots de systmes de refroidissement par range ou par rack.
Ce type d'quipement isole efficacement les nouveaux racks haute densit et les rend
thermiquement neutres pour le systme existant de refroidissement par salle. Toutefois,
cette solution aura trs probablement un effet positif net puisqu'elle ajoute de la capacit de
refroidissement au reste de la salle. Il est donc possible d'ajouter des charges haute densit
un datacenter de faible densit sans devoir modifier le systme de refroidissement par
salle. Une fois dploye, cette approche correspond l'architecture mixte de la figure 6.

Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 7


Les systmes qui capturent l'air vacu au niveau du rack l'aide d'une chemine et le
rinjectent directement dans un systme de refroidissement par salle utilisent galement
un concept de refroidissement mixte. Cette solution prsente certains des avantages
des systmes de refroidissement par rack, mais peut s'intgrer dans un systme de
refroidissement par salle, existant ou prvu. La figure 7 illustre ce genre dquipement.





Pour ne pas se tromper lors du choix du systme de refroidissement d'un nouveau datacenter
ou d'un datacenter modernis (par salle, par range ou par rack), il est essentiel de mettre
en relation les caractristiques de performances des mthodes de refroidissement avec les
problmes pratiques qui affectent la conception et le fonctionnement des datacenters.

Ce chapitre compare les trois mthodes de refroidissement selon des critres communs
identifis par les utilisateurs de datacenters. Ces critres sont les suivants :

Adaptabilit
Disponibilit du systme
d

Par range
Par rack
Par salle


Comparaison
de trois
mthodes de
refroidissement
Figure 6
Plan au sol d'un systme
utilisant simultanment un
refroidissement par salle,
par range et par rack

Figure 7
vacuation de l'air chaud au
niveau d'un rack vers le
faux-plafond

Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 8
Cot sur le cycle de vie (TCO)
Facilit d'entretien
Facilit de gestion
Cots initiaux
Cot de l'lectricit
Conduites d'eau ou autres conduites proximit des quipements informatiques
Emplacement des units de refroidissement
Redondance
Mthode d'vacuation de la chaleur

Le tableau 1 rsume les cinq premiers critres et compare les avantages et les inconvnients
du refroidissement par rack, par range et par salle. Les conclusions suivantes peuvent tre
tires de ce tableau :

Le refroidissement par rack est le plus souple, le plus rapide mettre en place et autorise
des densits extrmes, mais pour un cot plus lev.
Le refroidissement par range offre un grand nombre d'avantages : flexibilit, rapidit
et de capacit de densit des systmes par rack, mais de faon plus conomique.
Le refroidissement par salle permet de modifier rapidement le schma de distribution
du refroidissement en reconfigurant les dalles au sol. La redondance du refroidissement
est partage par tous les racks du datacenter ayant de faibles densits. Cette mthode
est la fois simple et conomique.

Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 9








Catgorie Par rack Par range Par salle
Adaptabilit
Avantages
Planification facile de n'importe
quelle densit de puissance ;
isolation du systme de
refroidissement existant
Planification facile de n'importe
quelle densit de puissance ; la
capacit de refroidissement peut
tre partage
Modification rapide du schma
de distribution du
refroidissement pour une
densit de puissance < 3 kW
Inconvnients
La capacit de refroidissement
ne peut pas tre partage avec
d'autres racks
Exige un amnagement en alle
froides et chaudes
Moins efficace lorsque tout
l'espace n'est pas confin
Disponibilit
du systme
Avantages
Le refroidissement monobloc
supprime les points chauds et
les variations de temprature
verticales ; les solutions
standardises limitent les erreurs
humaines
Les units redondantes peuvent
tre partages entre plusieurs
racks d'un module ; le
refroidissement monobloc
supprime les variations de
temprature verticales
Les units redondantes
peuvent tre partages entre
tous les racks du datacenter
Inconvnients
Redondance ncessaire pour
chaque rack
Redondance ncessaire pour
chaque module de racks
Confinement ncessaire pour
sparer les flux d'air
Cot sur le
cycle de vie
(TCO)
Avantages
Un systme prfabriqu et des
composants standardiss
suppriment ou rduisent la
planification et l'ingnierie
ncessaires
Possibilit de satisfaire les
besoins de refroidissement ;
la planification et l'ingnierie
peuvent tre supprimes ou
rduites
Facilit de reconfiguration
des dalles de sol perfores
Inconvnients
Le systme de refroidissement
sera probablement
surdimensionn et de la capacit
sera perdue, ce qui peut
augmenter les cots initiaux
Les cots initiaux de cette
mthode peuvent augmenter
paralllement la taille du
datacenter
La distribution d'air impose une
capacit surdimensionne ;
la pression requise pour la
distribution sous le plancher
dpend de la taille de la pice
et de la hauteur sous plancher
Facilit
d'entretien
Avantages
Les composants standardiss
limitent l'expertise technique
ncessaire ; le personnel interne
peut se charger des procdures
d'entretien de routine
Les composants modulaires
limitent les interruptions de
service ; les composants
standardiss limitent l'expertise
technique ncessaire
Le matriel de refroidissement
est plac sur le primtre de la
salle ou l'extrieur, ce qui
loigne encore les techniciens
de l'quipement informatique
Inconvnients
Redondance 2N ncessaire pour
la rparation et l'entretien
simultans du systme
Le matriel de refroidissement
est plac sur la range o
travaillent les techniciens ct
de l'quipement informatique
L'entretien exige un technicien
qualifi ou des spcialistes
Facilit
de gestion
Avantages
Facilit de navigation grce
une interface avec menu et
capacit d'effectuer des analyses
prvisionnelles des pannes
Facilit de navigation grce
une interface avec menu et
capacit d'effectuer des analyses
quasi-prvisionnelles des
pannes
Les systmes de grande taille
simplifient le nombre de points
connecter et grer
Inconvnients
Pour des dploiements de
grande taille, exige de nombreux
points de connectivit
Pour des dploiements de
grande taille, exige de nombreux
points de connectivit
Exige une formation pousse
l'entretien ; impossibilit
d'effectuer des analyses en
temps rel
Tableau 1
Avantages et inconvnients du refroidissement par rack,
par range et par salle. Les performances satisfaisantes
sont surlignes en bleu.
































































































































Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 10
Cots initiaux
La plupart des responsables de datacenter s'inquitent des cots initiaux des diffrentes
mthodes de refroidissement. Une analyse montre comment ces cots varient pour les trois
mthodes de refroidissement eau rfrigre en fonction des densits de puissance des
racks. La figure 8 fait apparatre les rsultats pour un datacenter partir des hypothses
de l'encadr.


0,5
1
1,5
2
2,5
3
3,5
4
4,5
5
3 kW 6 kW 12 kW 20 kW
C
o

t

p
a
r

w
a
t
t

(
$
)
Densit de puissance moyenne par rack
Par salle/f aux-plancher
Par salle/f aux-plancher avec HAC
Par range/monobloc
Par range/monobloc avec HAC
Par rack



Le refroidissement par salle prsente les cots initiaux les plus faibles car il ncessite moins
d'units de refroidissement et de conduites. Les cots diminuent lgrement mesure que la
densit de puissance des racks augmente. En effet, pour une mme capacit de datacenter,
le modle suppose que l'encombrement diminue lorsque la densit augmente. Il faut donc
moins de plancher technique et de conduites, ce qui rduit les cots initiaux. Vous remarquerez
que le rendement lectrique de la salle diminue lorsque la densit de puissance des racks
augmente (cela sera trait la section suivante). Le confinement des alles chaudes (HAC,
hot aisle containment) augmente la densit de puissance des racks pour les deux mthodes
et diminue sensiblement la consommation lectrique du systme de refroidissement (nous le
verrons dans la section suivante), bien que le cot du confinement augmente lgrement les
cots initiaux.

Le refroidissement par range prsente des cots initiaux lgrement suprieurs ceux du
refroidissement par salle car il ncessite relativement plus d'units de refroidissement et de
conduites. Le cot diminue lorsque la densit de puissance des racks augmente, pour la
mme raison que dans le cas du refroidissement par salle. En revanche, le nombre d'units
de refroidissement diminue avec l'augmentation de la densit. Le HAC diminue non seulement
la consommation lectrique du systme de refroidissement par range, mais galement le
montant des cots initiaux puisqu'il limite le nombre d'units de refroidissement ncessaires.

Les cots initiaux du refroidissement par rack sont sensiblement suprieurs ceux des
deux autres mthodes lorsque les densits de puissance de racks restent modres. Cela
s'explique par l'augmentation du nombre d'units de refroidissement, qui augmente le cot
des investissements dans ces units et dans les conduites pour de faibles densits.
Par exemple, dans le cas du scnario supposant une puissance de 3 kW par rack,
le refroidissement par range implique un total de 48 units de refroidissement. Dans le cas
du refroidissement par rack, ce nombre s'lve 160 units. En outre, le refroidissement par
rack ncessite un confinement avant et arrire du rack et de l'unit de refroidissement, ce qui
alourdit encore les cots initiaux du systme. mesure que la densit augmente, les cots
Figure 8
Cot initiaux en fonction de la
densit de puissance d'un rack
moyen pour les trois mthodes
de refroidissement
> Hypothses pour
un datacenter
Charge informatique : 480 kW
Lieu d'installation : St. Louis,
Missouri, tats-Unis
Densit des racks : 3, 6, 12,
20 kW par rack (120 cfm/kW)
Brassage de l'air et dtournement
de l'air froid pour un systme par
salle sans HAC : 125 % de la
valeur nominale
Cot des conduites d'aprs la
base de donnes des cots
RSMeans : conduites en acier
Cot de l'nergie : 0,15 $/kWh
Composition des cots initiaux :
unit de refroidissement,
conduites, groupe frigorigne
refroidissement naturel,
installation et confinement
Composition du cot annuel de
llectricit : ventilateur de l'unit
de refroidissement, groupe
frigorigne et pompes
Redondance du systme de
refroidissement : N
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 11
initiaux s'amliorent considrablement puisque le nombre d'units de refroidissement est
rduit afin d'optimiser ces cots initiaux. Le refroidissement par rack est donc plus
conomique lorsque les densits de puissance des racks sont leves.


Cot de l'lectricit
La part du cot de l'lectricit dans les cots d'exploitation augmente en raison, d'une part,
de la hausse des prix de l'lectricit requise par les serveurs et, d'autre part, de l'augmentation
de la densit de puissance. Si chacun comprend bien que le cot de l'lectricit dpend des
tarifs de l'lectricit et de la puissance des serveurs, l'effet de la densit de puissance sur ce
cot est rarement pris en compte.

La figure 9 montre les effets de la densit de puissance sur les cots lectriques annuels
pour trois mthodes diffrentes de refroidissement eau rfrigre, selon les mmes
hypothses que celle de la figure 8.



90
95
100
105
110
115
120
125
130
135
140
3 kW 6 kW 12 kW 20 kW
C
o

t

a
n
n
u
e
l

d
e

l

l
e
c
t
r
i
c
i
t

(
1
0
0
0
$
)
Densit de puissance moyenne par rack
Par salle/f aux-plancher
Par salle/f aux-plancher avec HAC
Par range/monobloc
Par range/monobloc avec HAC
Par rack


Les cots lectriques d'un refroidissement par salle sans HAC sont plus levs car ce
systme exige d'acheminer davantage d'air sur de plus grandes distances et parce que
les units CRAH doivent consommer de l'nergie pour brasser ou agiter l'air dans la pice
afin d'viter la formation de points chauds. L'utilisation d'un HAC diminue les cots lectriques
grce la sparation des flux d'air. mesure que la densit augmente, les cots nergtiques
diminuent lgrement puisque les conduites raccourcissent et que la consommation lectrique
des pompes baisse en consquence.

Les cots lectriques d'un refroidissement par range sont systmatiquement infrieurs ceux
d'un refroidissement par salle car les units CRAH sont troitement couples la charge et
dimensionnes pour elle. Il n'y a plus de flux d'air inutile, ce qui permet d'conomiser plus de
50 % de la consommation lectrique des ventilateurs par rapport l'option du refroidissement
par salle. Les cots lectriques augmentent en mme temps que la densit de puissance
des racks car le nombre d'units de refroidissement diminue, mais chaque unit de
refroidissement exige davantage d'eau et d'air en circulation pour atteindre la capacit
requise afin de maintenir les tempratures au niveau souhait. Le ventilateur tourne plus vite,
ce qui limite l'conomie relle qu'offrent les ventilateurs vitesse variable. Dans ce cas,
l'ajout d'units redondantes fera effectivement baisser la consommation nergtique,
Figure 9
Cots lectriques initiaux
en fonction de la densit de
puissance d'un rack moyen
pour les trois mthodes de
refroidissement
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 12
mais au prix d'une hausse des cots initiaux. L'intensification de la circulation d'eau,
ncessaire pour maintenir la capacit, consomme par ailleurs davantage d'nergie.

Les cots lectriques du refroidissement par rack sont suprieurs lorsque les densits sont
faibles puisqu'il faut davantage d'units de refroidissement, ce qui ncessite davantage
d'lectricit pour faire circuler l'eau et l'air. Mme avec des ventilateurs vitesse variable,
l'augmentation du nombre d'units de refroidissement pour de faibles densits limite les
conomies d'nergie car les ventilateurs ont une vitesse minimale. Lorsque les densits sont
faibles, cette vitesse minimale fait circuler plus d'air que ncessaire. En outre, la circulation
d'eau exige davantage de conduites. mesure que la densit de puissance des racks
augmente, les cots nergtiques diminuent. En revanche, lorsque les densits sont leves,
les cots commencent augmenter puisque chaque rack possde une unit de refroidissement
et que chacune de ces units ncessite davantage d'air. Les ventilateurs des CRAH approchent
alors de leur vitesse de fonctionnement maximale, ce qui diminue les conomies relles que
peuvent offrir les ventilateurs vitesse variable. En outre, l'intensification de la circulation
d'eau, ncessaire pour maintenir la capacit, consomme aussi davantage d'nergie.


Conduites d'eau ou autres conduites proximit des quipements
informatiques
Les tudes montrent que les utilisateurs s'inquitent de voir cohabiter des conduites d'eau
ou de liquide frigorigne et des quipements informatiques. Ils craignent que des fuites de
fluides n'endommagent ces quipements et provoquent des interruptions de service.

Les datacenters haute densit comportant un grand nombre d'appareils de climatisation
utilisent en gnral des systmes de refroidissement eau rfrigre. Cette tendance devrait
se poursuivre pour des raisons d'environnement et de cot. Bien qu'il existe des produits
frigorignes prsentant moins de risques pour les quipements informatiques, ces produits
cotent plus cher que l'eau. Les proccupations en matire de disponibilit et la tendance
augmenter la densit des appareils ont pouss introduire des systmes rfrigrants
pomps dans l'environnement des datacenters. Ces systmes sont en gnral constitus
d'un changeur de chaleur et d'une pompe qui isole le mdia rfrigrant de l'eau rfrigre
dans le datacenter. Cette rfrigration sans huile permet de limiter la contamination en cas de
fuite. Cependant, le systme peut galement isoler d'autres liquides de refroidissement, tels
que le glycol. Reportez-vous au livre blanc n 59, Les diffrentes technologies de refroidissement
des datacenters pour en savoir plus sur les systmes liquide frigorigne pomp.


Emplacement de l'unit de refroidissement
L'emplacement d'un systme de climatisation peut avoir un effet spectaculaire sur les
performances du systme.

Dans le cas d'un refroidissement par rack, ce problme de prvisibilit des performances
disparat compltement puisque l'emplacement exact du systme de climatisation de la
charge cible est dtermin. Cela permet d'afficher l'avance les performances de
refroidissement. Si la conception prvoit un dploiement chelonn, l'emplacement des futurs
systmes de climatisation ne ncessite qu'un minimum de planification ou d'anticipation
puisque ces systmes sont dploys automatiquement avec chaque rack.

Dans le cas d'un refroidissement par range, l'implantation des systmes de climatisation
est rgie par des rgles de conception simples. Le nombre et l'emplacement des appareils
de climatisation par range sont dtermins par des rgles tablies lors de simulations et
de tests. Il faut bien sr s'assurer que les systmes sont correctement dimensionns pour
la spcification de densit de range. D'autres rgles, par exemple celle qui conseille d'viter
de placer les appareils en fin de range, optimisent les performances et la capacit du
Les diffrentes technologies
de refroidissement des
datacenters
Lien vers les ressources
Livre Blanc 59
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 13
systme. Lors de futurs dploiements, il est possible de conserver une certaine souplesse
quant aux emplacements jusqu'au moment du dploiement lui-mme. La densit de puissance
de rack moyenne ou de pointe/moyenne pour la range peut servir dterminer au dernier
moment la quantit et l'emplacement des climatiseurs. Le refroidissement par range est plus
flexible que le refroidissement par rack, il est moins encombrant et plus conomique.

Dans le cas d'un refroidissement par salle sans confinement, l'efficacit dpend fortement
de l'emplacement des units de refroidissement. Par exemple, les emplacements les plus
efficaces ne sont pas forcment exploitables, en raison de contraintes physiques de la salle
telles que les entres de porte, les fentres, les rampes d'accs ou l'impossibilit d'accder
aux conduites. L'installation ralise se rvle donc souvent peu performante mme si de
gros efforts d'ingnierie ont t consentis. De plus, la logistique ncessaire l'installation
de systmes de climatisation par salle suppose gnralement que ces systmes soient
implants dans la salle avant toutes les phases de dploiement informatique. Le dtail de
ces phases futures n'tant pas forcment connu, l'emplacement des systmes de climatisation
est rarement optimal. C'est pourquoi le confinement est si important pour les conceptions
modernes de refroidissement par salle. Il offre beaucoup plus de libert quant l'emplacement
des units de refroidissement. Le refroidissement par salle avec confinement permet aussi
d'implanter les units CRAH en dehors du datacenter.


Redondance
La redondance est ncessaire pour pouvoir assurer la maintenance des systmes de
refroidissement sous tension et garantir la prennit de la mission du datacenter en cas de
panne d'un quipement de climatisation. Les systmes d'alimentation utilisent souvent deux
voies pour acheminer l'lectricit vers les systmes informatiques, cela pour garantir la
redondance. En effet, les cordons d'alimentation et les connexions constituent un point
unique de panne potentiel. Dans le cas du refroidissement, les conceptions N+1 sont plus
frquentes que les doubles voies d'alimentation. Les voies de distribution d'air se limitant
une circulation d'air autour de la baie, la probabilit de panne est en effet trs faible. L'ide
ici, c'est que si le systme a besoin de quatre units CRAH, l'ajout d'une cinquime unit
permettra d'assurer le refroidissement de manire satisfaisante en cas de panne d'une des
units. D'o le terme de redondance N+1 . Pour les densits de puissance plus leves,
ce concept de redondance ne fonctionne plus. La faon dont la redondance est assure,
diffrente pour chacune des trois mthodes de refroidissement, est dcrite ci-dessous :

Pour un refroidissement par rack, le refroidissement n'est pas partag entre les racks et
il n'y a pas de voie de distribution d'air commune. Par consquent, le seul moyen d'assurer
la redondance consiste fournir une unit CRAH double voie N+X ou 2N pour chaque rack,
soit deux units CRAH par rack. Il s'agit l d'une contrainte trs lourde par rapport ce
qu'imposent les autres approches. Toutefois, pour les racks haute densit isols, cette
mthode est trs efficace puisque la redondance est entirement dtermine, prvisible
et indpendante des autres units CRAH.

Le refroidissement par range assure la redondance au niveau de la range et ncessite une
unit CRAH supplmentaire (N+1) par range. Cela est pnalisant pour les faibles charges
de 1 2 kW par baie, mme si les units CRAH pour range sont plus petites et moins
onreuses que les units CRAH pour salle. Ce problme disparat pour les densits
suprieures et l'approche N+1 reste valable jusqu' 25 kW par rack. Il se transforme mme
en avantage par rapport aux architectures de refroidissement par salle ou par rack qui
requirent souvent une redondance 2N pour les densits suprieures. Pouvoir assurer
la redondance dans des environnements haute densit avec moins d'units CRAH
supplmentaires est un avantage cl du refroidissement par range et rduit notablement
son cot total de possession (TCO).

Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 14
Pour le refroidissement par salle, la salle elle-mme est une voie de distribution d'air
commune toutes les charges informatiques. En principe, cela permet d'assurer la
redondance en introduisant une seule unit CRAH supplmentaire, quelle que soit la taille
de la salle. Cette approche vaut pour le refroidissement par salle sans confinement faible
densit et se rvle alors conomique. Toutefois, pour des densits suprieures, la capacit
d'une unit CRAH donne compenser la panne d'une autre unit CRAH dpend beaucoup
de la topologie de la salle. Par exemple, le modle de distribution d'air d'une unit CRAH
spcifique ne peut pas tre respect par une unit CRAH de secours distante de l'unit en
panne. C'est pourquoi, si une seule unit CRAH supplmentaire suffit assurer la redondance
pour les faibles densits, il faut multiplier leur nombre par deux pour des densits suprieures
10 kW par baie. Cela n'est pas le cas pour un refroidissement par salle avec confinement
parce que les trajectoires d'arrive et d'vacuation de l'air sont distinctes.


Mthode d'vacuation de la chaleur
Les problmes spcifiques traits dans cette section dpendent de la mthode d'vacuation
de la chaleur. Les climatiseurs de salle informatique (computer room air conditioners, CRAC)
dtente directe utiliss pour refroidir les datacenters fonctionnent diffremment des units
CRAH eau rfrigre. Ce type d'utilisation des units CRAC influera sur leur efficacit, sur
l'humidification, la redondance, etc. Il conviendra d'analyser la conception pour comprendre
le fonctionnement et les contrles de la solution de refroidissement spcifie pour un projet
donn. Reportez-vous au livre blanc n 59, Les diffrentes technologies de refroidissement
des datacenters pour en savoir plus sur les mthode d'extraction de la chaleur.


Les diffrentes technologies
de refroidissement des
datacenters
Lien vers les ressources
Livre Blanc 59
Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 15


L'approche classique du refroidissement par salle sans confinement se heurte des limites
techniques et pratiques dans les datacenters de nouvelle gnration. La ncessit pour ces
centres de s'adapter l'volution des besoins, de prendre en charge des densits de puissance
leves et variables et de rduire leur consommation lectrique et leurs autres cots de
fonctionnement a directement conduit au dveloppement de stratgies de confinement pour
le refroidissement par salle, par range et par rack. Cette volution permet dsormais de
traiter des densits de fonctionnement de 3 kW par rack, voire davantage. Le refroidissement
classique par salle a rendu bien des services et reste une option efficace et pratique pour les
installations faible densit et les applications o la technologie informatique volue peu.

Les solutions de refroidissement par salle, par range et par rack sont pratiques, prvisibles
et volutives. Elles rduisent la consommation lectrique, abaissent le cot total de possession
et offrent la disponibilit optimale quexigent les datacenters de nouvelle gnration. Les
utilisateurs doivent s'attendre ce que les nouvelles offres de produits utilisent ces approches.
Il faut prvoir que de nombreux datacenters utiliseront une combinaison de ces trois mthodes
de refroidissement. Le refroidissement par rack sera employ dans les environnements
caractriss par des densits extrmes, des dploiements granularit leve ou des
agencements non structurs. Le refroidissement par salle sans confinement restera efficace
pour les faibles densits et les applications qui subissent peu de modifications. Pour la plupart
des utilisateurs de technologies plus rcentes comme les serveurs haute densit, le refroidis-
sement par salle et par range avec confinement offrira le meilleur quilibre entre prvisibilit,
densit de puissance et adaptabilit, pour le meilleur cot total de possession global.



Conclusion
Neil Rasmussen est vice-prsident snior du service Innovation de Schneider Electric.
Il est responsable de la direction technique du plus gros budget mondial consacr la
recherche et au dveloppement de l'infrastructure physique (alimentation, climatisation, rack)
des datacenters.

Neil Rasmussen dtient 25 brevets lis au haut rendement et l'infrastructure d'alimentation
et de refroidissement des datacenters haute densit. Il a publi plus de 50 livres blancs
ddis aux systmes d'alimentation et de refroidissement, dont une grande partie ont t
traduits dans plus de 10 langues. Il s'est rcemment intress plus spcifiquement
l'amlioration du rendement nergtique. C'est un confrencier reconnu dans le monde
entier s'agissant des datacenters haut rendement. Neil Rasmussen travaille actuellement
au dveloppement d'infrastructures volutives haut rendement et haute densit pour les
datacenters. C'est l'un des principaux architectes du systme InfraStruXure d'APC.

Aprs avoir fond APC en 1981, Neil a assur les fonctions de vice-prsident snior de
l'ingnierie et de Chief Technology Officer pendant 26 ans. Il occupe ses fonctions actuelles
depuis qu'APC a rejoint Schneider Electric en 2007. Il est titulaire d'une licence et d'une
matrise en gnie lectrique du Massachusetts Institute of Technology, obtenus grce une
thse sur l'analyse de l'alimentation de 200 MW dun racteur fusion Tokamak. De 1979
1981, il a travaill au Lincoln Laboratory du MIT sur les systmes de stockage d'nergie
volant d'inertie et sur la gnration lectrique partir de l'nergie solaire.


Kevin Dunlap est Directeur gnral des solutions de refroidissement chez Schneider Electric.
Il est titulaire d'une licence en administration, avec spcialisation dans les systmes
d'information de gestion, dcerne par l'universit de Phoenix. Kevin Dunlap volue dans
l'industrie de la gestion de l'alimentation lectrique depuis 1994. Il a d'abord travaill pour
Systems Enhancement Corp., un fournisseur de logiciels et de matriels de gestion de
l'alimentation rachet par APC en 1997. Suite l'acquisition, il a rejoint APC comme responsable
produit en charge des cartes de gestion puis des solutions de refroidissement de prcision
aprs le rachat d'Airflow Company en 2000.

Il a particip de nombreux panels de gestion de l'alimentation et du refroidissement, des
consortiums runissant des acteurs de l'industrie et des comits de l'ASHRAE sur la gestion
thermique et sur les conomiseurs d'nergie.
propos des auteurs

Choisir entre un refroidissement par salle, par range ou par rack dans les datacenters


Schneider Electric Datacenter Science Center Livre Blanc 130 Rev 2 16






Les diffrents types de distribution de l'air pour les environnements
informatiques
Livre Blanc 55

Stratgies de refroidissement pour racks et serveurs lames de trs haute densit
Livre Blanc 46

Erreurs compromettant les performances de refroidissement des datacenters
et des salles rseaux et pouvant tre vites
Livre Blanc 49

Les tapes de spcification de la densit de puissance
des datacenters
Livre Blanc 120

Systmes d'humidification : rduction des cots nergtiques
dans les environnements informatiques
Livre Blanc 133

Dploiement de modules haute densit dans des datacenters
faible densit
Livre Blanc 134

Impact du confinement des alles froides et chaudes sur la temprature
et l'efficacit du datacenter
Livre Blanc 135

Les diffrentes technologies de refroidissement des datacenters
Livre Blanc 59







Consultez tous
les livres blancs
whitepapers.apc.com
Ressources
Cliquez sur l'icne pour
accder aux ressources

Pour des commentaires sur le contenu de ce livre blanc:

Datacenter Science Center
DCSC@Schneider-Electric.com

Si vous tes client et que vous avez des questions relatives votre projet de
datacenter:

Contactez votre reprsentant Schneider Electric
www.apc.com/support/contact/index.cfm

Contactez-nous
tools.apc.com
Consultez tous les outils
TradeOff Tools