Gestin del Aire en Centros de Proceso de Datos -

Aplicaciones
Robert Tozer Ing MSc MBA PhD CEng MCIBSE MInstR MASHRAE,
EYP Londres, Reino Unido, parte de Hewlett Packard Mission Critical Systems
Tel +44 (0)20 7796 5000, Robert.Tozer@hp.com

Resumen

En base a los principios de gestin de aire (resumidos en este trabajo) se comparten las experiencias
de los Centros de Proceso de Datos existentes analizadas en funcin de varios ndices. A partir de
este anlisis es posible determinar los parmetros de los sistemas ideales y se explican algunas
posibles configuraciones de contencin de los flujos de aire. Esto trae aparejado el desafi del
sistema de control de los ventiladores de las impulsoras de aire, ya que son mucho mas grandes y
resultan estar configurados en serie con los ventiladores (de menor autoridad) de los equipos de
informtica (servidores). Se discuten los parmetros a tener en cuenta para estos proyectos.

Introduccin mr Ts T f
R= =
ms Th T f
Este trabajo es la continuacin del trabajo de
referencia titulado Gestin del Aire en Centros
de Proceso de Datos Principios, del mismo ndice de Balance:
autor. Se recomienda familiarizarse con este m T Ts
BAL = c = h
antes de seguir leyendo a continuacin. ms Tr Tc
mf
Los principios estn representados en la BAL(1 + NP ) =
siguiente figura y ecuaciones subsiguientes ms
donde se pueden determinar los ndices de 1 R
gestin de aire a partir de mediciones de BAL(1 + NP ) =
1 BP
temperatura.
Cada centro de proceso de datos tiene un punto
particular que lo caracteriza en la siguiente
Tr Th figura.
Flujo por presin negativa

Mc Mn Mbp Ms Mr
Flujo Bypass

1.00
N/A B(1+NP)
Re-circulacin

CRAC Servidor 0.25

Flujo de

0.75
0.5
0.75
R 0.50 1
Ts
1.33
Tc Tf 0.25
2
4

Ideal
Figura 1: Flujos de aire en un centro de proceso 0.00
de datos 0 0.25 0.5 0.75 1
BP
ndice de presin Negativa:
m T f Tc
NP = n = Figura 2: ndices de Gestin del Aire
mc Tr T f

ndice de Bypass: La situacin ideal es cuando BP=R=NP=0 lo que

m T Tr resulta en BAL=1. En esta situacin todo el flujo
BP = b = h de aire producido por las impulsoras de aire
m f Th T f
llega a todos los servidores (y a ningn otro
lado) sin haberse degradado energticamente
ndice de Recirculacin:

Gestion del Aire - Aplicaciones 2009 02 08 Castellano v2.doc 1 de 6 Robert Tozer (EY
(sin hacer bypass y sin calentarse por mezclarse
45
con flujos de aire mas calientes).
40

Centros de Proceso de Datos existentes 35

La figura siguiente indica el resultado de una
serie de Centros de Proceso de Datos
analizados en funcin de los ndices de gestin
de administracin del aire.
1 B(1+NP)
Back to Front
0.75
Legacy
R 0.5
Cabinet inlet
0.25
Cold aisle - hot aisle
Ideal
0 excluidos de las garantas de los fabricantes.
0 0.25 0.5
BP
Figura 3: Numero de servidores por rango de
temperatura de suministro
Si bien hay una gran variedad en los resultados,
el promedio sugerido por este estudio es que
BP=0.5 y R=0.4. Esto quiere decir que en la
mayora de Centros de Proceso de Datos el 50%
del aire suministrado por las impulsoras de aire
hace bypass (BP) a los servidores y regresa a
las impulsoras sin haber realizado su funcin de
refrigeracin. Por otro lado el 40% del aire que
alimenta a los servidores proviene del aire de
retorno de ellas (R: recirculacin). Estos
resultados son bastante parecidos a los de una
encuesta realizada por el autor en la conferencia
de Data Centre Dynamics (Noviembre 2006),
donde BP=0.5 y R=0.5.
De todas maneras es importante recalcar que
estos ndices son medidas de parmetros
promedio en el centro de proceso de datos.
30
25
20
15
10
5
0
N/A
<15 15-20 20-25 25-32.2 32.2-40 >40
Figura 4: Numero de servidores por rango de
temperatura de alimentacin
Claramente se nota que hay una gran cantidad
de servidores que reciben aire demasiado fro y
todava ms servidores que reciben aire
demasiado caliente. Los servidores que trabajan
fuera del rango recomendado son normalmente
0.75 1
Un ndice utilizado para representar estas
desviaciones es el RCI (Rack Cooling Index)
(Herlin 2005). El RCI es un ndice porcentual que
provee una medida en la cual hay servidores
sobrecalentados por encima de 27C (RCH hi) y
servidores sub-enfriados por debajo de 18C
(RCI lo). RCI hi = 100% significa que no hay
ningn servidor que este alimentado con aire a
una temperatura superior a 27C, y RCI lo =
100% significa que no hay ningn servidor que
este alimentado con aire a una temperatura
inferior a 18C. Para detalles de las ecuaciones
ver el Apndice.
De acuerdo a ASHRAE la especificacin para
equipos de informtica de clase 1, es pobre si
RCI es 90%, y bueno si RCI es 96%. Entre
90% y 96% el rango es considerado como
aceptable. Como ejemplo los RCI para la
siguiente figura 5 son RCI lo=83% y RCI
hi=75%.
10

La siguiente figura indica las temperaturas 9

tpicas del aire que alimenta los servidores en 8

los Centros de Proceso de Datos analizados. La 7
categora de 18C a 27C (indicada en blanco) 6
es la gama de temperaturas recomendadas por 5
ASHRAE (Comit tcnico TC 9.9) para equipos 4
de informtica de Clase 1 (servidores). Si bien 3
este es un ejemplo de un pasillo fro pasillo
2
caliente, hay un alto ndice de recirculacin
1
dentro de los armarios, por carecer de paneles
de bloqueo en los huecos en los cuales no hay 0
servidores.
10
12
14
16
18
20
22
24
26
28
30
32
34
36
38
40
42
44

Figura 5: Numero de servidores por grado de

temperatura de alimentacin

Gestion del Aire - Aplicaciones 2009 02 08 Castellano v2.doc 2 de 6 Robert Tozer (EY
 los servidores vara (por variacin en su uso y
Es importante resaltar que en la mayora de por el crecimiento de su nmero en el centro de
Centros de Proceso de Datos las impulsoras de proceso de datos), es necesario que las
aire son controladas para mantener su impulsoras puedan proveer un volumen variable
temperatura de retorno de acuerdo a su punto de aire segn lo demandado. Ntese que
preestablecido. Esto hace que las temperaturas aunque los servidores tipo bandeja de pizza
de aire suministradas sean distintas, y que exista tienen caudal de aire constante, el nmero de
un diferencial de temperatura proporcional a su ellos en un centro de proceso de datos vara casi
carga trmica. Dependiendo de la carga de los diariamente con el crecimiento de la empresa.
equipos de informtica en su zona de influencia.
Por ejemplo, si el punto de consigna de las
climatizadores es 22C y su temperatura de
suministro es 14C, si no consideramos el flujo Th
Tr=Th
por presin negativa (NP), se podra encontrar
que las temperaturas del aire saliente de las Mc=Ms Ms Contencin
fsica: para
rejillas del falso suelo oscila entre 14C y 22C.
CRAC Servidor separar
En realidad, esta variacin de temperatura no se flujos de
debe tanto al flujo de presin negativa, sino a las aire fros y
diferentes cargas de las impulsoras de aire que calientes
suministran aire a temperaturas diferentes. Tc Ts=Tc

Debido a la necesidad de controlar las

temperaturas de aire suministrado a los Caudal de Aire de Volumen Variable
servidores (mas que al retorno de las
impulsoras), los proveedores de impulsoras Figura 7: Requerimientos del Sistema Ideal de
ofrecen la opcin de controlar en funcin del Gestin de Aire
punto de consigna del aire de alimentacin. Esto
permite ms control sobre las temperaturas de Paradjicamente, han sido los fabricantes de
suministro en toda la sala, al reducirse su gama armarios los que han tomado la iniciativa en
de temperaturas. Esto a su vez permite, una vez buscar soluciones en su propio equipamiento
resueltos los problemas de gestin de aire (NP, para resolver los desafos de la gestin del aire
BP, R), subir los puntos de consigna en los en Centros de Proceso de Datos. La siguiente
sistemas de refrigeracin, para lograr los ahorros figura muestra un armario tradicional (donde
energticos (mejorando del ciclo de refrigeracin prevalece NP, BP y R) y un armario de
y permitiendo utilizar el enfriamiento gratuito). alimentacin contenida con barreras fsicas entre
los flujos de aire fro y caliente.
Soluciones ideales contencin fsica

Si la situacin ideal es cuando BP=R=NP=0 lo

que resulta que BAL=1 entonces se obtendr un TR TR
BP BP
sistema como el indicado en la figura siguiente.
R R
TS
Servidor Servidor
Tr=Th Th
R R
Flujo por presin negativa

TH TH
Mc=Ms Mn=0 Mbp=0 Ms Mr=0
Servidor Servidor
Flujo de Bypass

TS
CRAC Servidor
Re-circulacin
Flujo de

NP

TF TF
Ts=Tc
Tc Tf=Tc

Figura 6: Sistema de Gestin de Aire Ideal Figura 8: Armario tradicional vs Armario con
barreras fsicas
Primero, para que haya una perfecta separacin
de flujos de aire fro y caliente, es necesaria una Sin embargo, se requieren soluciones globales
contencin fsica que no permita que ambos que abarquen de forma holstica todo el centro
flujos se mezclen. Segundo, como la carga de de proceso de datos. Obsrvese que las

Gestion del Aire - Aplicaciones 2009 02 08 Castellano v2.doc 3 de 6 Robert Tozer (EY
siguientes soluciones a nivel de armario cumplen
con los requerimientos de sistemas ideales tanto
en la contencin fsica como en el volumen de
aire variable. La siguiente figura indica dos
soluciones de arquitectura cerrada (izquierda) y
abierta (derecha).
Serpentina
TH
TH
Servidor Servidor
Serpen
-tina
TS
TS
Figura 9: Soluciones de Armario de Arquitectura
cerrada y abierta
En la arquitectura cerrada toda la solucin queda
dentro del armario. En la solucin de
arquitectura abierta, se coloca el serpentn en el
armario para neutralizar la carga trmica en su
origen, para enfriar el aire de retorno de los
servidores antes que regrese al CPD (Centro de
Proceso de Datos).
Si estas soluciones se llevan al nivel global del
centro de proceso de datos aparecen otros
diseos posibles:
- Pasillo fro contenido
- Pasillo caliente contenido
- Armario contenido
Tambin hay soluciones semi-abiertas donde se
intercalan las impulsoras dentro de las filas de
armarios, pero ilustraremos solamente las
soluciones de arquitectura abiertas.
La siguiente figura muestra la solucin de pasillo
fro contenido en un diseo de enfriamiento
gratuito directo de aire. Se logra la contencin al
tapar el techo del pasillo fro y agregando
barreras fsicas / puertas en los extremos de los
pasillos. Si bien hay que proveer al pasillo fro
con servicios adicionales (rociadores de
supresin de incendios, alarmas de incendio,
iluminacin), el espacio superior de los armarios
queda relativamente libre para distribucin de
bandejas elctricas, como en los Centros de
Proceso de Datos tradicionales.
Gestion del Aire - Aplicaciones 2009 02 08 Castellano v2.doc
Figura 10: Pasillo fro contenido
Ntese que en esta solucin, a excepcin del
pasillo fro, el resto del centro de proceso de
datos se encuentra a temperaturas ms
elevadas. Es importante considerar que si el
objetivo (para ahorrar energa) es subir el punto
de consigna del aire suministrado a los
servidores, las temperaturas del aire de retorno
de los servidores pueden causar problemas de
higiene y seguridad del personal operativo del
centro de proceso de datos.
En los Centros de Proceso de Datos
tradicionales, la diferencia de temperatura entre
el aire fro y caliente tpicamente varia de 5K a
10K (en diferencias de temperatura son iguales
los grados Kelvin K y Centgrados C). Sin
embargo hay que considerar que la temperatura
diferencial de los servidores tipo blade es de
15K y es posible que la siguiente generacin
suba a 25K (para permitir que el mismo caudal
de aire pueda enfriar mas a los componentes
internos). Si a esto se le suma la estrategia de
los departamentos de informtica de operar los
servidores a cargas mas altas, es posible que en
el futuro los pasillos calientes estn a 25K mas
que el pasillo fro. O sea, que si el flujo de aire
fro esta a 25C, el flujo de aire caliente podra
estar a 45-50C.
La siguiente figura muestra la solucin de pasillo
caliente contenido en un diseo de enfriamiento
gratuito directo de aire. Se logra la contencin al
encerrar la parte superior del pasillo caliente y
agregar barreras fsicas / puertas en los
extremos de los pasillos calientes. El
cerramiento del pasillo caliente puede
obstaculizar las bandejas de cableado lo cual
requerir atencin. En esta solucin, solamente
el pasillo caliente esta a mayor temperatura, en
la zona donde se realizan las operativas con los
cables de datos.
4 de 6 Robert Tozer (EY

Figura 11: Pasillo caliente contenido
La siguiente figura muestra la solucin del
armario contenido (extraccin) en un diseo de
enfriamiento gratuito directo de aire. Se logra la
contencin al usar un armario mas profundo y en
la parte superior se conecta un conducto de
extraccin que se conecta directamente al pleno
de retorno a las climatizadoras. Es de notar que
en esta solucin, todo el centro de proceso de
datos se encuentra a temperatura de flujo de
aire fro, solamente el conducto de extraccin del
armario y el pleno de retorno se encuentran a
temperaturas mas elevadas. En este caso todos
los pasillos son fros, por lo cual esta alternativa
ofrece el potencial de mayores densidades de
carga y de ms confort para los operarios.
Adems, es posible eliminar el piso elevado si se
alimenta el aire fro lateralmente (o por arriba) a
la sala.
Figura 12: Armario (extraccin) contenido
Controles
La solucin ideal requiere que los ventiladores
de las impulsoras de aire estn en serie con los
ventiladores de los servidores. Ntese que los
ventiladores de las impulsoras estn diseados
para sobrellevar la presin esttica exterior
requerida, mientras que los ventiladores de los
servidores solo compensaran su propia
resistencia (no estn diseados para sobrellevar
ninguna presin exterior). Adems, los
ventiladores de las impulsoras comparadas con
Gestion del Aire - Aplicaciones 2009 02 08 Castellano v2.doc
los de los servidores son ms grandes y
disponen de ms presin esttica teniendo ms
autoridad. Aunque la capacidad de los
ventiladores de las impulsoras se controle con
precisin, la presin diferencial entre la entrada
de aire y la salida del aire del servidor jams
ser neutra. Esto es debido a las bandas neutras
y proporcionales de los sistemas de control y a
las tolerancias y errores de los sensores de
presin, para controlar los ventiladores de las
impulsoras.
Como los ventiladores de los servidores estn
diseados para contrarrestar solamente la
presin interna del servidor, si se someten a una
presin negativa (con respecto al retorno), se
ver reducido el caudal de aire a travs del
equipo, por lo cual el aire no ser suficiente para
enfriar sus componentes crticos.
Evidentemente, los servidores no pueden tolerar
presiones negativas en el suministro de aire. Por
el contrario, si hay una presin positiva en la en
el suministro de aire, en teora no perjudica al
servidor, ya que en el peor de los casos tendr
caudal de aire de ms. Sin embargo, una vez
que se llega a ciertas presiones positivas, esta
empieza a tener un impacto sobre los controles
de ventilacin del mismo servidor.
En consecuencia, la presin en la alimentacin
jams deber ser negativa y tampoco debe pasar
un valor de presin positiva mxima que
denominaremos PPM. Por lo tanto la presin
diferencial P (Suministro Retorno) debe
satisfacer 0<P<PPM. Este valor de P debe ser
suministrado por el fabricante de los servidores
como requisito para poder mantener su garanta.
La solucin radica en controlar las impulsoras
para mantener un flujo controlado de bypass en
un valor mnimo, como se indica a continuacin.
Th
Flujo Controlado de Bypass
Tr
Flujo por presin negativa
Mc~Ms Mn=0 Mbp=min Ms Mr=0
CRAC Servidor
Re-circulacin
Flujo de
Ts
Tc Tf
Figura 13: Control de sistema contenido
Asegurando un flujo mnimo de bypass dar
origen a una pequea diferencia de presin
positiva en la zona de bypass. El diseador debe
prestar mucho cuidado para asegurar que en
todas las variaciones de cargas parciales sobre
5 de 6 Robert Tozer (EY
todo el rango de servidores existentes en la zona
de influencia de cada impulsora, la presin en
todos los servidores sea siempre positiva y
menor a la presin positiva mxima (PPM).
Tambin debe asegurarse que esta condicin se
mantenga ante la eventualidad de los posibles
fallos de impulsoras (N+1 o N+2, etc.). Es
sumamente importante tambin, que el sistema
de control no sea la causa de puntos singulares
de fallo del sistema termo-mecnico.
Apndice: Anlisis de funciones
RCI: Rack Cooling Index
Aplicado a las temperaturas recomendadas y
permitidas por ASHRAE.
RCI hi = 100 [ 1 Sum (Tx 27) / n (32.2 27)]
RCI lo = 100 [ 1 Sum (18 - Tx) / n (18 - 15)]

Conclusiones Funcin Weibull de densidad de probabilidad

Es posible disear Centros de Proceso de Datos

con soluciones casi ideales de gestin de aire,
con mnimo flujo de bypass, y sin flujos de
recirculacin y presin negativa. Estos diseos
permiten lograr importantes ahorros energticos
en los Centros de Proceso de Datos. Consisten
en sistemas de contencin fsica entre los flujos
de aire fro y caliente, como ser:
- Pasillo fro contenido
- Pasillo caliente contenido
- Armario contenido.
Sin embargo, se requiere un proyecto que
contemple de forma holstica el diseo termo-
mecnico de manera conjunta tanto de los
armarios como de la arquitectura del centro de
proceso de datos.
El sistema de control merece atencin especial,
ya que sino, puede daar el equipamiento
informtico.
Donde
Para valores de x<0 la funcin vale 0
k es el parmetro de forma, k>1 para que f(0)
converja a 0
Lamba es el parmetro de escala
x es la variable a partir de donde empieza la
distribucin (T-Tmin)
Cuando k=3.4 la funcin es similar a una
distribucin normal, por lo tanto 1<k<3.4
K<1 es usado en fiabilidad para mortalidad
infantil, k=1 rgimen de fallos constantes, y k>1
para fallos por desgaste (wear and tear).
0.5
0.4

Series1
0.3

Series2
Referencias
0.2
Series3

Herrlin M., 2005, Rack cooling effectiveness in

0.1
data centres and telecom central offices: the
Rack Cooling Index (RCI), American Society of
Heating Refrigeration and Air-Conditioning 0
15 20 25 30
Engineers, DE-05-11-2.
Figura A1: Funciones de distribucin de Weibull
Tozer Robert, 2006a, Data Centre Energy
Saving: Air Management Metrics, EYP White La figura muestra como de una distribucin mala
Paper. (k=1.8, lambda=4.2, en serie 1) se puede lograr
una mejor distribucin (k=1.2, lambda=1.1, en
Tozer Robert, 2006b, Data Centre Energy serie 3)
Saving: Air Management Metrics, Zerodowntime
Journal, Issue 19 Fall 2006 Probando distintos valores de k y lambda se
puede ver que:
Tozer R., Salim M., Kurkjian C., 2009, Air K tiene impacto sobre RCI hi
Management Metrics, ASHRAE Winter Chicago En cambio
Conference Transactions Lambda tiene impacto sobre R y RCI hi

Gestion del Aire - Aplicaciones 2009 02 08 Castellano v2.doc 6 de 6 Robert Tozer (EY