MX2014013689A - Procedimiento para el funcionamiento de un centro de datos con medios de refrigeracion eficientes. - Google Patents
Procedimiento para el funcionamiento de un centro de datos con medios de refrigeracion eficientes.Info
- Publication number
- MX2014013689A MX2014013689A MX2014013689A MX2014013689A MX2014013689A MX 2014013689 A MX2014013689 A MX 2014013689A MX 2014013689 A MX2014013689 A MX 2014013689A MX 2014013689 A MX2014013689 A MX 2014013689A MX 2014013689 A MX2014013689 A MX 2014013689A
- Authority
- MX
- Mexico
- Prior art keywords
- frames
- temperature
- heat exchange
- cooling
- exchange means
- Prior art date
Links
- 238000001816 cooling Methods 0.000 title claims abstract description 131
- 238000000034 method Methods 0.000 title claims abstract description 62
- 238000003860 storage Methods 0.000 claims abstract description 13
- 239000003507 refrigerant Substances 0.000 claims description 102
- 239000012530 fluid Substances 0.000 claims description 82
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 44
- 238000005057 refrigeration Methods 0.000 claims description 31
- 239000007788 liquid Substances 0.000 claims description 17
- 238000001704 evaporation Methods 0.000 claims description 9
- 230000008020 evaporation Effects 0.000 claims description 8
- 230000017525 heat dissipation Effects 0.000 claims description 8
- 238000012546 transfer Methods 0.000 claims description 5
- 239000002352 surface water Substances 0.000 claims description 2
- 230000001174 ascending effect Effects 0.000 claims 2
- 239000003673 groundwater Substances 0.000 claims 1
- 238000010992 reflux Methods 0.000 claims 1
- 239000003570 air Substances 0.000 description 117
- 230000008901 benefit Effects 0.000 description 7
- 238000013461 design Methods 0.000 description 7
- 238000005265 energy consumption Methods 0.000 description 6
- 239000000779 smoke Substances 0.000 description 6
- 239000000498 cooling water Substances 0.000 description 5
- 238000005086 pumping Methods 0.000 description 4
- 239000002826 coolant Substances 0.000 description 3
- 239000012809 cooling fluid Substances 0.000 description 3
- 238000007710 freezing Methods 0.000 description 3
- 230000008014 freezing Effects 0.000 description 3
- 238000010438 heat treatment Methods 0.000 description 3
- 238000007789 sealing Methods 0.000 description 3
- 241000518994 Conta Species 0.000 description 2
- LYCAIKOWRPUZTN-UHFFFAOYSA-N Ethylene glycol Chemical compound OCCO LYCAIKOWRPUZTN-UHFFFAOYSA-N 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000009833 condensation Methods 0.000 description 2
- 230000005494 condensation Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000011109 contamination Methods 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000035939 shock Effects 0.000 description 2
- 239000002689 soil Substances 0.000 description 2
- 229910000831 Steel Inorganic materials 0.000 description 1
- 239000000654 additive Substances 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000004378 air conditioning Methods 0.000 description 1
- 239000012080 ambient air Substances 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- WGCNASOHLSPBMP-UHFFFAOYSA-N hydroxyacetaldehyde Natural products OCC=O WGCNASOHLSPBMP-UHFFFAOYSA-N 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000009413 insulation Methods 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000013021 overheating Methods 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K7/00—Constructional details common to different types of electric apparatus
- H05K7/20—Modifications to facilitate cooling, ventilating, or heating
- H05K7/20709—Modifications to facilitate cooling, ventilating, or heating for server racks or cabinets; for data centers, e.g. 19-inch computer racks
- H05K7/20718—Forced ventilation of a gaseous coolant
- H05K7/20745—Forced ventilation of a gaseous coolant within rooms for removing heat from cabinets, e.g. by air conditioning device
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K7/00—Constructional details common to different types of electric apparatus
- H05K7/20—Modifications to facilitate cooling, ventilating, or heating
- H05K7/20709—Modifications to facilitate cooling, ventilating, or heating for server racks or cabinets; for data centers, e.g. 19-inch computer racks
- H05K7/208—Liquid cooling with phase change
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K7/00—Constructional details common to different types of electric apparatus
- H05K7/20—Modifications to facilitate cooling, ventilating, or heating
- H05K7/20709—Modifications to facilitate cooling, ventilating, or heating for server racks or cabinets; for data centers, e.g. 19-inch computer racks
- H05K7/20718—Forced ventilation of a gaseous coolant
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K7/00—Constructional details common to different types of electric apparatus
- H05K7/20—Modifications to facilitate cooling, ventilating, or heating
- H05K7/20709—Modifications to facilitate cooling, ventilating, or heating for server racks or cabinets; for data centers, e.g. 19-inch computer racks
- H05K7/20763—Liquid cooling without phase change
- H05K7/20781—Liquid cooling without phase change within cabinets for removing heat from server blades
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K7/00—Constructional details common to different types of electric apparatus
- H05K7/20—Modifications to facilitate cooling, ventilating, or heating
- H05K7/20709—Modifications to facilitate cooling, ventilating, or heating for server racks or cabinets; for data centers, e.g. 19-inch computer racks
- H05K7/20836—Thermal management, e.g. server temperature control
Landscapes
- Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Thermal Sciences (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Cooling Or The Like Of Electrical Apparatus (AREA)
- Air Conditioning Control Device (AREA)
- Structure Of Telephone Exchanges (AREA)
Abstract
La presente invención se refiere a un método para operar un centro de datos, que está adaptado para alojar una multiplicidad/pluralidad de bastidores que están diseñaos para proporcionar espacio de almacenamiento para equipos informáticos. El centro de datos está equipado con medios de refrigeración para proporciona disipación del calor que se genera mediante el equipo informático. El centro de datos operado de acuerdo con la presente invención tiene una eficiencia de utilidad de potencia (PUE) de como máximo 1,3, preferiblemente como máximo de 1,2, más preferiblemente como máximo de 1,5, en particular como máximo de 1,1.
Description
PROCEDIMIENTO PARA EL FUNCIONAMIENTO DE UN CENTRO DE DATOS CON MEDIOS DE REFRIGERACIÓN EFICIENTES
Campo de la Invención
La presente invención se refiere a un método para operar un centro de datos, que está adaptado para alojar una multiplicidad/pluralidad de bastidores que están diseñados para proporcionar espacio de almacenamiento para equipos informáticos. El centro de datos está equipado con medios de refrigeración para proporcionar disipación del calor generado por los equipos informáticos.
Antecedentes de la Invención
En la téenica anterior existen varias estructuras de edificios de datos para alojar una multiplicidad de bastidores, cada uno de los cuales comprende el espacio de almacenamiento para los equipos informáticos.
Los centros de datos convencionales más normalmente son edificios, que comprenden un suelo falso para una infraestructura informática, que normalmente está alojado en carcasas de bastidores de 19". En los centros de datos convencionales, la refrigeración se realiza todavía mediante aire frío, que se bombea en los falsos suelos que tienen orificios en lugares apropiados frente a los bastidores. De esta manera, el aire frío se suministra a las tomas de aire de los bastidores de ordenador. Este diseño requiere normalmente el concepto de los flujos de aire guiados, alimentando aire frío en los bastidores y eliminando el calor
de los equipos informáticos.
El documento WO 2010/000440 divulga un estado típico de la téenica de construcción del centro de datos convencional en la Figura 1. Este diseño convencional es de alguna manera una desventaja, porque los bastidores individuales tienen que ser diseñados como bastidores cerrados y el flujo de aire a través de los respectivos bastidores tiene que sondearse y controlarse para evitar el bombeo de cantidades innecesarias de aire frío desde el pasillo frío. Existen diversos conceptos que proporcionan una regulación del flujo de aire en el pasillo frío, de manera que los ventiladores que proporcionan el flujo de aire funcionan a la potencia más baja posible. El aire caliente generado por el equipo en el interior del bastidor se alimenta de nuevo a los intercambiadores de calor que se encuentran en otro lugar en el edificio del centro de datos. El aire calentado o bien se enfría de nuevo o se utiliza aire fresco con el fin de proporcionar una corriente de aire frío.
La técnica anterior, tal como el documento WO 2010/000440, describe el uso de bastidores refrigerados con agua para centros de datos de alta densidad. En la técnica anterior, el calor de los equipos electrónicos se transfiere al agua de refrigeración por medio de intercambiadores de calor, como se divulga en el documento WO 2010/000440, o se monta en los bastidores o en los pasillos. Otra técnica anterior utiliza la refrigeración directa de los equipos electrónicos instalados en los bastidores con agua.
Además del estado típico de la técnica de edificios de centro de datos convencionales, el documento WO 2010/000440 divulga una nueva arquitectura eficiente de energía para centros de
datos de ordenadores de varias plantas utilizando medios de refrigeración para la disipación del calor generado por los equipos informáticos. El concepto denominado TI verde realizado por el documento WO 2010/000440 permite la reducción del consumo de energía para la refrigeración. Los centros de datos convencionales a menudo requieren hasta un 50 %, e incluso más, de su consumo de energía para la refrigeración. El nuevo concepto de refrigeración del documento WO 2010/000440 permite que los centros de datos requieran menos del 10 % (PUE parcial < 1,1) de su energía para la refrigeración.
El centro de datos de ordenadores de variaras plantas estacionario del documento WO 2010/000440 se convierte en una especie de punto de referencia para posteriores conceptos IT verde a seguir como un desarrollo constante hacia la eficiencia energética de los centros de datos.
Sin embargo, los centros de datos de ordenadores estacionarios como se describen en el documento WO 2010/000440 requieren una constante demanda de tales centros y, por lo tanto, se consideran como inversiones de largo plazo. Además, los centros de datos móviles se vuelven más y más atractivos, ya que este contenedor de centro de datos móviles puede ser fácilmente instalado en el barrio cercano y contienen su propia infraestructura para que puedan ser "enchufado" donde el centro de datos de ordenadores estacionario es de tamaño insuficiente y/o sólo existen necesidades temporales.
El diseño de los centros de datos, ya sean móviles o fijos, está sujeto a mejoras constantes para optimizar los costes de refrigeración del equipo informático. Además del diseño, los
métodos para el funcionamiento de tales centros de datos permiten mejorar aún más para lograr un consumo de energía optimizado para la refrigeración.
Sumario de la Invención
Esta invención es para proporcionar un método de este tipo para el funcionamiento de una unidad de centro de datos fija o móvil.
Por lo tanto, la presente invención se refiere a un método para operar un centro de datos que comprende:
(i) un edificio para alojar una multiplicidad de bastidores (202), siendo cada bastidor un bastidor abierto que aloja un equipo informático,
(ii) siendo los bastidores (202) un un bastidor abierto que aloja un equipo informático (200),
(iii) los bastidores (202) comprenden medios de intercambio de calor (206, 207) que están adaptados para transferir el calor generado por el equipo informático a un refrigerante fluido, siendo dichos medios de intercambio de calor un elemento de los bastidores o un elemento unido a los bastidores,
(iv) al menos un primer circuito de refrigeración (203, 204), siendo dicho circuito de refrigeración un circuito cerrado de refrigeración, que está adaptado para suministrar a los medios de intercambio de calor (206, 207) de los bastidores (202) un refrigerante fluido y está adaptado además para transportar el refrigerante calentado fuera de los medios de intercambio de calor (206, 207) de los bastidores (202) a través del reflujo del circuito de
refrigeración,
(v) estando dicho primer circuito de refrigeración (203, 204) conectado a una fuente que proporciona frió, estando situada dicha fuente fuera del espacio que aloja la multiplicidad de bastidores,
(vi) teniendo los equipos informáticos (200) situados en los respectivos bastidores medios activos, preferiblemente ventiladores, para la refrigeración de partes de los equipos informáticos, preferiblemente, la CPU y/o la GPU y/o un hardware de almacenamiento, creando dichos medios activos un flujo de aire (205) en el bastidor hacia los medios de intercambio de calor (206, 207) que son un elemento de los bastidores o un elemento unido a los bastidores,
(vii) no teniendo bastidores (202) otros medios activos, en particular ventiladores, a excepción de las contenidas en los equipos informáticos antes mencionados, para la creación de un flujo de aire en el bastidor hacia los medios de intercambio de calor que son un elemento de los bastidores o un elemento fijado a los bastidores,
(viii) no comprendiendo dicho edificio para alojar la multiplicidad de bastidores (202) otros medios activos, a excepción de los contenidos en los equipos informáticos (200) antes mencionados, para la creación de un flujo de aire guiado,
(ix) al menos una entrada de alimentación eléctrica,
(x) al menos unos medios para distribuir la energía eléctrica desde la potencia de entrada a los bastidores individuales, permitiendo fuentes de alimentación redundantes en cada bastidor,
que comprende las medidas de
(a) proporcionar un refrigerante fluido desde la fuente proporcionando frió a los medios de intercambio de calor (206, 207) de los bastidores (202) dentro del primer circuito de refrigeración, entrando dicho flujo de entrada de refrigerante fluido en los medios de intercambio de calor (206, 207) que tienen una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferentemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202),
(b) controlar el flujo de refrigerante fluido dentro del primer circuito de refrigeración (205) que está adaptado para suministrar los medios de intercambio de calor (206, 207) de los bastidores (202) para mantener la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206 , 207) de los bastidores (202) (flujo de entrada) que tiene una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferentemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202),
(c) transportar el refrigerante fluido calentado que abandona los medios de intercambio de calor (206, 207) de los bastidores (202) (flujo de retorno) a la fuente que proporciona frío, estando situada dicha fuente fuera del espacio que aloja la multiplicidad de bastidores, para eliminar el calor del refrigerante fluido calentado a una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferiblemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno del refrigerante liquido y devolviendo
el refrigerante fluido al por lo menos un primer circuito de refrigeración.
La presente invención proporciona un método para operar un centro de datos, evitando la necesidad de guiar el aire de refrigeración a través de todos los bastidores para crear un pasillo frió dentro del centro de datos. Los únicos medios activos son normalmente ventiladores contenidos en los equipos informáticos antes mencionados, que crean un flujo de aire (205) en el bastidor individual hacia los respectivos medios de intercambio de calor. Estos medios activos, tales como ventiladores incorporados en los equipos informáticos normalmente no superan el 10 % de la energía eléctrica de los equipos informáticos instalados y en funcionamiento.
Sin dejar de utilizar la presente invención, se pueden utilizar medios activos no sustanciales que no contribuyen al flujo de aire (205) en el bastidor, por ejemplo, mediante la instalación de ventiladores distintos de los contenidos en los equipos informáticos antes mencionados. Esta contribución no sustantiva de tales medios activos no sustantivos adicionales proporcionan como máximo un 10 % del flujo de aire (205) generado por los medios activos contenidos dentro de los equipos informáticos antes mencionados.
La presente invención proporciona un método para operar un centro de datos que contiene bastidores que alojan equipos informáticos. Dichos equipos informáticos incluyen todo el equipo electrónico utilizado en relación con los equipos informáticos, que genera calor durante el funcionamiento.
La presente invención proporciona un método en el que se opera al menos un circuito de refrigeración, que suministra un refrigerante fluido en el centro de datos para
refrigeración. En la presente invención, la temperatura del refrigerante fluido que entra en el centro de datos y la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207) es casi igual, lo que significa que la temperatura del refrigerante fluido que entra en el centro de datos es como máximo 0,2 K por debajo de la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207).
En una realización preferida, la presente invención proporciona un método para operar un centro de datos en el que la densidad de potencia de los equipos informáticos en los bastidores es al menos de 5 kW (eléctricos) por bastidor, más preferentemente al menos 8 kW (eléctricos) por bastidor, más preferentemente al menos 10 kW (eléctricos) por bastidor. El limite superior para la densidad de potencia por bastidor está principalmente limitado por el espacio disponible en el interior del bastidor. Asi, el limite superior no se limita por si mismo, y por lo general puede llegar hasta 1 kW o 0,5 kW por unidad de altura en el bastidor. Para un bastidor típico, la densidad de potencia por bastidor asciende hasta 42 kW (eléctricos) por unidad de bastidor de altura 42.
El presente método también evita la necesidad de falsos suelos utilizados en ese contexto. Además, la invención tiene como objetivo la optimización de los requerimientos de energía y costes adicionales al disponer los bastidores de ordenador de manera más densa para minimizar la longitud requerida de los cables de red y mejorar las capacidades de comunicación del sistema.
El presente método para operar un centro de datos permite que el centro de datos tenga una estructura compacta que
comprende mayores capacidades escalables y una densidad de volumen aumentada. El presente método para operar un centro de datos se puede utilizar para centros de datos dispuestos en dos dimensiones, donde se colocan los bastidores en un solo nivel, o para centros de datos dispuestos en tres dimensiones, donde se colocan los bastidores en más de un nivel dentro del centro de datos.
El beneficio del presente método para operar un centro de datos aumenta con la densidad de potencia de los equipos informáticos instalados dentro de los bastidores. Este aumento de la densidad de empaquetado o almacenamiento para equipos informáticos, tales como hardware, que proporciona una disipación de calor, que puede incluso superar una velocidad de disipación de calor volumétrica de 1 kW por m3 y más, preferiblemente de 1,5 kW por m3 y más, más preferiblemente de 2 kW por m3 y más, más preferiblemente de 3 kW por m3 y más, que no se puede conseguir utilizando los sistemas de refrigeración de aire convencionales que son el sistema del estado de la téenica actual. La velocidad de disipación de calor volumétrica antes mencionada se basa en un centro de datos que tiene una altura de techo de 2,5 m y la superficie neta utilizada en el centro de datos. El área neta del centro de datos es el área que está ocupada por los bastidores que alojan los equipos informáticos, con exclusión de cualquier espacio adicional para infraestructuras de edificación técnica, tales como transformadores, generadores de energía, salas de baterías, sistemas de extinción de incendios, área de almacenamiento y similares. En la realización preferida de la invención hay un bastidor de 120 cm de profundidad y 70 cm de ancho. Los bastidores se montan
con una distancia de 120 cm entre hileras de bastidores. Por lo tanto, en la realización preferida de la invención un bastidor ocupa 1,7 m2 de espacio de suelo y 4,2 m3 de la superficie neta del centro de datos. Configuraciones más estrechas, por ejemplo, con bastidores de 60 cm de ancho y distancias más pequeñas son concebibles.
Así, el área neta del centro de datos utilizada en conexión con la presente invención es la superficie utilizada para alojar los bastidores de los equipos informáticos. Es la superficie total del centro de datos, menos la superficie utilizada para la infraestructura téenica (fuente de alimentación, refrigeración, UPS, baterías, generadores, gestión de incendios y otros), para la infraestructura de acceso (zonas seguras y no seguras), superficie de preparación y almacenamiento para equipos informáticos, así como salas de control informático y otras superficies necesarias para la gestión del centro de datos.
Por razones prácticas, la velocidad de disipación de calor volumétrica en el sistema de refrigeración de aire convencional, normalmente, no excede de 6 kW por bastidor, que corresponde a aproximadamente 2,5 a 3 kW/m2 y aproximadamente 0,7 a 0,9 kW/m3 usando los mencionados supuestos.
Todas las densidades de potencia por bastidor y otras unidades derivadas de las mismas se refieren a la energía eléctrica de los equipos informáticos instalados y que operan en el bastidor respectivo.
Como se explicó anteriormente, el beneficio del presente método para operar un centro de datos aumenta con la densidad de potencia del equipo instalado y opera dentro de los
bastidores. En particular, para centros de datos que tienen bastidores con equipos informáticos instalados y operativos que crean una velocidad de disipación de calor volumétrica que corresponde al menos a aproximadamente 5 kW/m2, preferiblemente al menos a aproximadamente 10 kW/m2, más preferiblemente a al menos aproximadamente 20 kW/m2, utilizando el área neta mencionada de los centros de datos/salas de centros de datos que alojan los bastidores, se proporciona una refrigeración extremadamente eficiente.
El presente método para operar un centro de datos implementa bastidores abiertos con intercambiadores de calor pasivos, siendo dichos medios de intercambio de calor un elemento de los bastidores o un elemento unido a los bastidores, que se construyen de manera tal que la mayor parte del aire calentado, en el mejor modo todo el aire calentado de los equipos informáticos instalados en el interior del bastidor se refrigeran de nuevo a la temperatura ambiente establecida. Preferiblemente, los intercambiadores de calor están situados en el lado posterior del bastidor. La posición real de los intercambiadores de calor se determina por la dirección del flujo de aire (205) generado por los medios activos de los equipos informáticos. En una realización preferida de la invención, el ángulo de incidencia del flujo de aire generado hacia la superficie del intercambiador de calor es como máximo de 75 °, más preferiblemente como máximo de 60 °, más preferentemente como máximo de 45 °, más preferentemente como máximo de 20 °, más preferiblemente entre 0 ° y 20 °.
El diseño del intercambiador de calor pasivo es un elemento de los bastidores o un elemento unido a los bastidores, preferiblemente está situado en el lado posterior de los
bastidores es también importante porque si producen una presión posterior muy alta hacia el flujo de aire natural, la eficiencia de refrigeración general se reduce. Evitar esa presión posterior en el interior del bastidor tiene múltiples ventajas. Primero, un equipo heterogéneo puede montarse en el interior del bastidor porque la presión posterior baja no puede tener un efecto negativo en el flujo de aire de otros equipos informáticos. Por ejemplo, un servidor de alta potencia, montado por debajo de un servidor de baja potencia no empujará su aire caliente de nuevo al servidor de baja potencia, siempre y cuando haya poca presión hacia el interior del bastidor. Una segunda ventaja es que hay pocos requerimientos respecto al sellado del cable que se alimenta a través del bastidor. Unos recortes o aberturas de cable normales requieren insertos de autosellado, como por ejemplo, juntas KoldLok®. El uso de tales insertos de autosellado en la presente invención es posible, pero no es obligatorio. Debido a que se evita la refrigeración por aire del estado de la téenica y que los flujos de aire guiados en el centro de datos no son necesarios; la velocidad de fugas potenciales de aire caliente es muy limitada en la presente invención.
La temperatura ambiente del espacio que aloja la multiplicidad de bastidores corresponde a la salida de aire frió de los intercambiadores de calor pasivos, que son un elemento de los bastidores o un elemento unido a los bastidores y, por lo tanto, están conectados a la temperatura del refrigerante fluido. Preferiblemente, la temperatura ambiente del espacio que aloja la multiplicidad de bastidores es de aproximadamente +2 K, más preferiblemente +1 K, más preferiblemente +0,5 K, más preferiblemente aproximadamente
la misma, de la temperatura del flujo de retorno del refrigerante fluido del primer circuito de refrigeración. El presente método proporciona refrigeración muy eficiente de los bastidores, que permite temperaturas ambiente más altas porque no existen riesgos de bucles de calor en cualquier lugar en el centro de datos. La única zona de aire caliente está dentro de los bastidores.
El refrigeración posterior puede realizarse a través de la fuente de frió antes mencionada, incluyendo, pero no limitado a, fuentes de agua fría externas, tales como suelo o agua superficial, refrigeración por evaporación que funciona basándose en el principio de evaporación, incluyendo torres de refrigeración de evaporación con o sin torres de refrigeración abiertas, refrigeradores híbridos, refrigeradores secos y similares, así como cualesquiera otras téenicas de refrigeración del estado de la técnica, incluyendo refrigeradores de compresión.
La mayor refrigeración y eficiencia de costes se logra mediante el uso de contraflujo, deriva indirecta, torres de refrigeración húmedas. El principio de refrigeración de tales torres de refrigeración utiliza el calor de evaporación del agua mediante la evaporación de agua. Por ejemplo, para enfriar un centro de datos de 1 MW son necesarios aproximadamente hasta 1,7 m3 de refrigerante fluido, tal como agua, para la evaporación por hora. La torre de refrigeración es totalmente pasiva, excepto el ventilador, que normalmente opera sólo si la temperatura exterior es superior a 15 °C. La temperatura más baja alcanzable, usando refrigeradores húmedos abiertos corresponde a la temperatura de bulbo húmedo. Se mide psicométricamente cubriendo un termómetro con
un paño húmedo. El uso de refrigeradores de evaporación asegura que la temperatura de suministro de agua más fría esté por encima del punto de rocío. Por lo tanto no hay riesgo de condensación en cualquier lugar dentro del centro de datos. Los suministros de agua no tienen que estar aislados.
El método de operación de la realización preferida de esta invención utiliza agua como refrigerante fluido frío, en el que el refrigerante fluido que entra en el centro de datos para la refrigeración a través del al menos un circuito de refrigeración tiene una temperatura casi igual a la temperatura de entrada en los medios de intercambio de calor medios (206, 207). En este contexto, casi igual significa que la temperatura del refrigerante fluido que entra en el centro de datos es como máximo 0,2 K por debajo de la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207).
En una realización preferida, el presente método opera con una temperatura del flujo de retorno del refrigerante fluido del primer circuito de refrigeración que es dependiente de la densidad de potencia particular instalada y que opera en los bastidores. Para densidades de potencia de hasta 10 kW
(eléctricos) por bastidor, la temperatura del flujo de retorno del refrigerante fluido del primer circuito de refrigeración es como máximo de 3K, preferiblemente como máximo de 2 K, más preferiblemente como máximo de 1 K, por encima de la temperatura suministrada por la fuente de frío que entra en el centro de datos y para densidades de potencia de al menos lOkW (eléctricos) por bastidor, el flujo de retorno del refrigerante fluido del primer circuito de
refrigeración es como máximo de 4K, preferiblemente como máximo de 3K, por encima de la temperatura suministrada por el fuente de frió.
La diferencia de temperatura antes mencionada entre el flujo de retorno del refrigerante fluido del primer circuito de refrigeración y el flujo de entrada de refrigerante fluido también puede ser mayor para velocidades de flujo de fluido de refrigerante reducidas. De esta manera la demanda de energía por las bombas necesarias que operan el circuito de refrigeración se reduce durante las estaciones más frías o los períodos de temperatura exterior más fría, normalmente a temperaturas exteriores inferiores a 17 °C, cuando el sistema de refrigeración de retorno/fuente de frío produce/proporciona una temperatura suficiente baja/refrigerante fluido frío sin coste adicional.
Normalmente, los bastidores utilizados en el presente método son carcasas de bastidores comunes de 19". En una realización preferida, los bastidores son bastidores altos que particularmente ahorran espacio. Los bastidores se colocan en el suelo del edificio y no necesariamente en sistemas de falso suelo. Unos tubos y/o bandejas de cables se montan encima de los bastidores. En caso de un falso suelo existente para la modificación de un centro de datos, tales falsos suelos existentes pueden ser utilizados igualmente para conducir las tuberías. Las puertas del intercambiador de calor se pueden conectar al circuito de refrigeración desde abajo y desde arriba. En una realización preferida adicional, en el que el centro de datos es un centro de datos móvil, los bastidores están conectados a la carcasa circundante a través de medios de absorción de choques, protegiendo así los
bastidores y los medios asociados/conectados, como medios de intercambio de calor y tubos de refrigeración, contra vibraciones y choques durante el transporte y el montaje.
El término "abierto" en relación con los presentes bastidores significa que la parte frontal de los bastidores es abierta y permite que entre al equipo informático dentro del bastidor aire de la sala sin resistencia al flujo. También es posible tener una puerta frontal abierta, por ejemplo, una puerta de rejilla, que permite que el aire fluya a través sin resistencia sustancial al flujo. Esta puerta de rejilla es la realización preferida, ya que permite la medición de la temperatura del aire de admisión. En esta realización preferida se realizan dos mediciones, normalmente una a una tercera parte de la altura de la puerta de rejilla, y la segunda aproximadamente a dos tercios de la altura de la puerta de rejilla. El concepto de bastidor abierto operado en el presente método permite la entrada de aire de la sala y el escape de este aire que absorbe el calor generado por los equipos informáticos. En una realización preferida, el aire que entra en el bastidor abierto y el aire que sale del equipo informático hacia los medios de intercambio de calor (206, 207) están separados mediante unos medios de desacoplamiento en el interior del bastidor, separando el aire que sale del equipo informático hacia los medios de intercambio de calor (206, 207) del aire que entra en el bastidor abierto para asegurar que el aire no calentado se aspira en los equipos informáticos.
Otra ventaja de los medios de intercambio de calor basados en bastidor es que los propios bastidores no tienen que mantenerse cerrados y que el flujo de aire dentro y fuera de
los bastidores ya no tiene que controlarse. Como un beneficio adicional, dentro del centro de datos, no se requieren acondicionadores de aire adicionales, ya que la función de refrigeración puede ser totalmente absorbida por las unidades de intercambio de calor de los bastidores.
Los bastidores usados en la presente invención no tienen cualesquiera otros medios activos, en particular ventiladores, para la creación de un flujo de aire en el bastidor hacia los medios de intercambio de calor que son un elemento de los bastidores o un elemento unido a los bastidores. Sólo el equipo informático situado en los respectivos bastidores tiene medios activos, preferiblemente ventiladores, para las piezas de refrigeración de los equipos informáticos, preferiblemente la CPU y/o GPU y/o un hardware de almacenamiento, y sólo dichos medios activos refrigeran partes de los equipos informáticos creando un flujo de aire en el bastidor hacia los medios de intercambio de calor, que son un elemento de los bastidores o un elemento unido a los bastidores.
El presente método para operar un centro de datos no requiere que el centro de datos tenga un falso suelo y disposiciones o diseño de pasillos fríos.
Los más preferibles son los intercambiadores de calor pasivos, que tienen una profundidad de aproximadamente 50 a 120 mm, que puede provocar sólo una presión posterior de aire muy baja. Por lo tanto, el aire caliente que sale de los equipos informáticos en los bastidores puede pasar el intercambiador de calor por sí mismo.
Como ya se ha mencionado, la densidad de potencia en los ordenadores modernos ha llegado a 1 kW, e incluso más, por
unidad de altura instalada en un bastidor. Los medios de refrigeración activos de los equipos informáticos instalados en un bastidor, tal como los ventiladores para la refrigeración de partes de los equipos informáticos, preferiblemente la CPU y/o GPU y/o un hardware de almacenamiento, crean flujos de aire apropiados para eliminar todo el calor de los equipos informáticos. El caudal de aire depende de la diferencia de temperatura DT entre el aire que entra en el bastidor y el aire que sale de los equipos informáticos. Las diferencias de temperatura típicas son DT = 5 a 30 K. Esta diferencia de temperatura requiere una corriente de volumen de aire de 100 a 600 3/(h*kW), que corresponde al menos a 0,5 m/s, preferiblemente al menos a 0,8 m/s, en particular al menos a 1,1 m/s.
Los equipos informáticos de estado de la téenica están diseñados para operar a una diferencia de temperatura entre el aire frío y caliente de aproximadamente 10 K. Por lo tanto, la velocidad de flujo de aire dentro de una unidad 42 de altura del bastidor de 19 pulgadas es una función lineal de la potencia generada por el equipo electrónico y la diferencia media de temperatura del aire generado por el equipo. Por lo tanto, operando con la diferencia de 10 K y teniendo un equipo informático instalado correspondiente a la potencia eléctrica de 20 kW, una corriente volumétrica de aire de 6.000 m3/h que corresponde a un caudal de aire de 2,1 m/s para tal unidad 42 de altura de bastidor de 19 pulgadas es adecuada. Dicha velocidad de flujo de aire en el presente método es la único creada por los medios de refrigeración activos de los equipos informáticos por unidad de altura
instalados en un bastidor, tales como los ventiladores de refrigeración de las partes del equipo informático, preferiblemente la CPU y/o GPU y/o un hardware de almacenamiento.
El presente método para operar un centro de datos permite la transferencia del calor generado por el equipo instalado en el interior del bastidor al refrigerante fluido sin elementos activos adicionales.
En el caso de los bastidores no están completamente equipados con equipos informáticos, es beneficioso cerrar grandes ranuras abiertas, por ejemplo, mayores de 3 unidades de altura, en el interior del bastidor para evitar que el aire caliente salga del bastidor en su lado frontal. Las pequeñas aberturas para el cableado no presentan un problema debido a la baja presión en el interior del bastidor.
El presente método para operar un centro de datos permite preferiblemente un refrigeración eficiente de un centro de datos en el que la densidad de potencia de los equipos informáticos en los bastidores es de, al menos, 5 kW (eléctricos) por bastidor, más preferiblemente al menos de 8 kW (eléctricos) por bastidor, más preferiblemente al menos de 10 kW (eléctricos) por bastidor. El limite superior para la densidad de potencia por bastidor está principalmente limitado en el espacio de almacenamiento disponible. Así, el límite superior alcanza normalmente 1 kW por unidad de altura en el bastidor, de manera que normalmente asciende hasta 42 kW (eléctricos) por bastidor.
Los bastidores usados en la presente invención tienen normalmente dimensiones de 1,2 x 0,7 x 2 m y se colocan preferiblemente de delante hacia atrás para obtener la máxima
eficiencia y uno junto al otro para una mayor redundancia. Aunque la mayoría de equipos informáticos, tales como servidores, implementan un flujo de aire de delante hacia atrás, hay excepciones a esta regla. Por ejemplo, la serie de conmutadores Cisco Nexus reciben aire frío en la parte delantera y el lado derecho del chasis, mientras que el aire caliente se expulsa en el lado posterior e izquierdo del sistema. Estos conmutadores también requieren bastidores de 1 m de ancho. En la realización preferida de esta invención, tales requisitos de flujo de aire se acomodan mediante el uso de bastidores de 1 m de ancho, que sellan la parte delantera izquierda y derecha posterior del bastidor. Configuraciones similares son posibles para equipos informáticos que utilizan sus lados del chasis para la entrada de aire. Las aberturas laterales de los bastidores no tienen que cubrir toda la altura del bastidor. Compartimientos de conmutadores especiales son concebibles.
También son concebibles separaciones flujo de aire horizontal en la parte posterior del bastidor, por ejemplo para permitir la determinación muy específica de las fuentes de humo potencial y para apagar selectivamente los servidores adecuados.
Muchas guías de aire de chapa pasiva son concebibles en la realización preferida de la invención para guiar el aire frío o caliente y para separar de manera potencial las regiones en el interior del bastidor. Tales guías de aire son totalmente pasivas y no afectan negativamente a la eficacia de la refrigeración del sistema. Cabe señalar que tales guías de aire generalmente no se requieren en la realización preferida de la invención y se utilizan simplemente para adaptarse a
los dispositivos existentes en los bastidores.
El presente método para operar un centro de datos implementa bastidores abiertos con intercambiadores de calor pasivos que son un elemento de los bastidores o un elemento unido a los bastidores, preferiblemente como puertas traseras, que se construyen de manera que la mayor parte del aire calentado, en el mejor modo todo el aire calentado de los equipos informáticos instalados en el interior del bastidor se enfria de nuevo a la temperatura establecida de la sala.
El intercambiador de calor pasivo individual es un elemento de los bastidores o un elemento unido a los bastidores, y preferentemente está situado en la parte posterior del bastidor individual y es capaz de transferir todo el calor generado por el equipo informático instalado y que opera dentro de un bastidor al refrigerante fluido.
De acuerdo con una realización preferida de la invención, la capacidad de los intercambiadores de calor se da por la naturaleza del fluido refrigerante, el flujo de entrada del refrigerante y la diferencia de temperatura del flujo de entrada del refrigerante y el flujo de salida del refrigerante. En el presente método, la capacidad de refrigeración de la suma de todos los medios de intercambio de calor instalados corresponde al calor generado por el equipo informático instalado y que opera en el centro de datos. Por lo tanto, la presente invención asegura que ninguna cantidad o ninguna cantidad sustancial de calor generado por el equipo informático se libera al espacio que aloja la multiplicidad de bastidores, normalmente indicado como el centro de datos.
La presente invención permite operar un centro de datos en el
que el aire que entra en los bastidores, normalmente desde el lado frontal, y el aire que sale de los bastidores, normalmente en el lado trasero a través de los medios de intercambio de calor, tienen la misma o esencialmente la misma temperatura y sustancialmente todo el calor generado se elimina por el intercambiador de calor y el refrigerante fluido. Preferiblemente, la temperatura del aire que entra en los bastidores y la temperatura del aire que sale de los bastidores, normalmente en la parte trasera a través de los medios de intercambio de calor, difieren en menos de +2 K, más preferiblemente +1 K, más preferiblemente +0,5 K, más preferiblemente es aproximadamente la misma. Por lo tanto, no se libera ningún calor o calor sustantivo al espacio/edificio que aloja los bastidores del centro de datos.
Como resultado, el presente método proporciona refrigeración muy eficiente de los bastidores y permite temperaturas ambiente más elevadas, ya que no existen riesgos de bucles de calor en cualquier lugar en el centro de datos. La única zona de aire caliente está dentro de los bastidores.
La presente invención permite que los medios de intercambio de calor reciban directamente el aire caliente generado por el equipo informático dentro del bastidor y transformen este aire caliente hacia abajo a una temperatura ambiente deseada simplemente transportando el calor a la tubería de transporte de refrigerante fluido. De esta manera, cualquier encaminamiento de aire caliente o la creación de cualquier flujo de aire dentro del centro de datos puede evitarse. Al permitir esto, la distancia sobre la que se desplaza el aire caliente o calentado se puede reducir a un mínimo. Sólo se requiere transportar el aire caliente dentro del bastidor, en
particular desde los equipos informáticos a los medios de intercambio de calor. De esta manera, cualquier flujo de aire turbulento de difícil control puede evitarse. Además, la presente invención no requiere que el flujo de alto rendimiento de aire frío y los problemas relacionados con cualquier condensación de la humedad que está presente en dicho aire. Por lo tanto, el uso de cualesquiera deshumidificadores de aire se convierte en superfluo.
De acuerdo con otra realización preferida de la invención, los medios de intercambio de calor no comprenden ningunos medios activos, tales como ventiladores, para guiar el calor/aire caliente desde el equipo a la superficie de los medios de intercambio de calor p a través de los medios de intercambio de calor. La corriente relativamente baja y laminar de aire obtenida desde la CPU y/o ventiladores de refrigeración de la GPU en el interior del bastidor particular permite evitar ventiladores adicionales y evitar cualquier consumo de energía del ventilador adicional.
El presente método para operar un centro de datos utiliza intercambiadores de calor pasivos que tienen una presión posterior de aire baja. La presión posterior de aire generada por el intercambiador de calor depende de la velocidad del flujo de aire. Los intercambiadores de calor utilizados en relación con el presente método tienen preferiblemente una presión posterior del aire máxima de 10 Pa para el caudal de aire correspondiente de hasta 0,5 m/s, más preferiblemente de 16 Pa como máximo para el caudal de aire correspondiente de hasta 0,8 m/s, más preferiblemente de 20 Pa como máximo para el caudal de aire correspondiente de hasta 1,1 m/s.
Los flujos de aire y la presión posterior del aire trabajan
bien con los equipos informáticos instalados en los bastidores, que habitualmente funcionan dentro de la mencionada diferencia de temperatura entre aire frío y caliente alrededor de 10K.
El presente método utiliza un sistema de refrigerante fluido. Una preocupación importante en los centros de datos es potencial de fugas, en particular para agua que se utiliza como refrigerante fluido.
El riesgo de derrames de agua y la cantidad de daños causados por los derrames corresponde a la presión del sistema de agua. Por lo tanto, un aspecto adicional del presente método es utilizar intercambiadores de calor que tienen una baja caída de presión a través del intercambiador de calor.
El presente método para operar un centro de datos utiliza intercambiadores de calor pasivos que tienen una baja caída de presión a través del intercambiador de calor.
La caída de presión a través del intercambiador de calor depende del flujo de fluido volumétrico del refrigerante fluido. Por lo tanto, en la presente invención, los intercambiadores de calor pasivos situados en la parte trasera de los bastidores preferiblemente proporcionan una caída de presión por debajo de 22 kPa para una corriente de volumen de 3 m3/h de agua, preferiblemente por debajo de 54 kPa para 5 m3/h para agua, más preferiblemente por debajo de 200 kPa para 10 m3/h de agua.
La operación a una velocidad de bombeo por debajo de 5 m3/h para el agua, el presente método puede llevarse a cabo por debajo de la presión atmosférica del refrigerante fluido, que es agua.
El presente método para operar un centro de datos requiere
controlar el flujo de refrigerante fluido dentro del primer circuito de refrigeración (205) que está adaptado para suministrar a los medios de intercambio de calor (206, 207) de los bastidores (202) para mantener la temperatura del fluido refrigerante que entra en los medios de intercambio de calor (206, 207) de los bastidores (202) (flujo de entrada) que tiene una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferiblemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno de refrigerante liquido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202). Asi, la velocidad de flujo para el fluido refrigerante, tal como agua, es preferiblemente de 0,9 m3 por hora y por kW instalado y en operación para una diferencia de 1 K y 0,17 m3 por hora y por kW instalado y operativo para una diferencia de 5 K.
Una de las preocupaciones que quedaba era el potencial de aumento de potencia causado por los ventiladores de refrigeración de los servidores debido a la presión de retorno del intercambiador de calor. Esto fue probado mediante la apertura y el cierre de la puerta trasera del bastidor y la determinación del consumo total de energía de los equipos en el interior del bastidor. Se midieron ambos, el consumo de energía total de todos los servidores en un bastidor y la corriente de alimentación a un ventilador de muestra. No hubo diferencia significativa en el consumo de energía medido cuando se abrió la puerta trasera, principalmente debido a la baja presión posterior. Preferiblemente, cada bastidor implementa unidades de distribución de energía autónomas, el suministro de energía a todos los componentes eléctricos en el interior del bastidor
y el control del consumo de energía y las propiedades eléctricas, en particular para altas densidades de energía, por ejemplo, utilizado en aplicaciones científicas. Esta funcionalidad se proporciona mediante un microcontrolador incorporado. Mide además la entrada de aire y la salida y la temperatura del agua de refrigeración. Además, cada bastidor implementa un detector de humo independiente. En caso de una alarma de humo o sobrecalentamiento, los servidores están configurados para apagarse automáticamente. Después de superar los umbrales configurados, la PDU en última instancia cortará la potencia. Estas medidas de seguridad son importantes por bastidor, debido a la alta densidad de potencia y al correspondiente aumento de la temperatura rápida en caso de un fallo de la refrigeración.
Los medios de intercambio de calor de los bastidores están conectados a un circuito de refrigeración que suministra refrigerante fluido, preferentemente refrigerante líquido, para cada uno de los medios de intercambio de calor a través de un sistema de tuberías.
En una realización preferida de la invención, el circuito de refrigeración comprende un sistema de tuberías para extraer el refrigerante. El uso de un refrigerante líquido tal como agua y otros fluidos de refrigeración adecuados, en particular con capacidades térmicas más grandes que el aire, es ventajoso debido a numerosas razones. En primer lugar, la cantidad total de calor que puede ser transferido y transportado es, en comparación con los refrigerantes gaseosos, mucho más grande. En segundo lugar, es posible controlar y monitorizar el flujo y la transmisión del refrigerante más fácilmente, en comparación con un flujo
turbulento y laminar de un refrigerante gaseoso.
En otra realización de la invención, la presión del refrigerante liquido se puede configurar por debajo de 2 bar, por lo que en caso de que se produzca una fuga de cyección de fluido mínima del líquido, el líquido de la fuga fluye a lo largo del circuito de refrigeración. En tal realización, el circuito de refrigeración puede tener un hueco/sumidero para recoger cualquier líquido de fugas, de manera que se evita que cualquier fuga de líquido entra en contacto con el hardware del ordenador. La tubería está dispuesta detrás de la puerta trasera del bastidor, que presenta una protección de los equipos informáticos contra fugas de agua debida a la estructura del intercambiador de calor de grano fino. En ambos casos, cualquier fuga en el sistema de tuberías puede ser detectada mediante el control de la presión en el sistema de tuberías y programar una alarma, permitiendo así tomar las medidas adecuadas contra dicha fuga, tales como por ejemplo la interrupción de las bombas, para reducir más la presión y para detener el suministro de agua continuo a la fuga.
Además, no se requiere el aislamiento del sistema de tuberías, ya que la temperatura ambiente corresponde a la temperatura de retorno de agua fría, que es significativamente mayor que el punto de rocío.
El centro de datos tiene al menos una fuente que proporciona frío está que está conectada directa o indirectamente al primer circuito de refrigeración, como se ha mencionado antes.
Lo más normal es que la fuente que proporciona frío es al menos una torre de refrigeración que opera con contraflujo, deriva indirecta, torre de refrigeración húmeda, en la que el
agua se pulveriza desde la parte superior de una columna y se enfria por la evaporación de parte del agua, y de este modo se recoge hacia abajo. Para evitar la contaminación del primer circuito de refrigeración, la fuente que proporciona frío puede desacoplarse de la fuente que proporciona frío mediante un segundo circuito de refrigeración. Tal desacoplamiento se logra normalmente mediante intercambiadores de calor que transfieren el calor redundante desde el primer circuito de refrigeración al segundo circuito de refrigeración.
Por medio de esta aplicación, cualquier contaminación del segundo circuito de refrigeración está conectada directamente a la fuente de frió, que puede contaminarse mediante partículas de aire, tal como polen, se separa del primer circuito de refrigeración que va dentro del centro de datos. Las bombas necesarias para bombear el fluido refrigerante se pueden colocar en el interior del centro de datos o fuera del centro de datos.
Dependiendo del clima ambiental, en algunas zonas geográficas los enfriadores de agua comunes causan problemas, por ejemplo, durante períodos fríos/de congelación. En tales casos se prefiere utilizar las llamadas torres de refrigeración híbridas en su lugar. Más normalmente, tales enfriadores híbridos son intercambiadores de calor de placas, a través de los cuales el refrigerante calentado fluye a través y se enfría por el aire ambiental. Un ejemplo de un enfriador híbrido se muestra en la patente US N ° 7864530. Para aumentar la capacidad de refrigeración en verano, es posible pulverizar agua a la superficie del intercambiador de calor de placas y utilizar la refrigeración de la evaporación
de dicha agua. Como estas torres de refrigeración híbridas incluyen un intercambiador de calor, no se requieren intercambiadores de calor. Sin embargo, el agua de refrigeración puede requerir aditivos, tales como glicol, para evitar que se congele.
Además, la fuente que proporciona frío tiene medios para transportar el liquido refrigerante a la entrada del circuito de refrigeración. Tales medios son normalmente tubos, preferiblemente flexibles, hechos de diferentes materiales, tales como acero, acero inoxidable y/o materiales poliméricos orgánicos sintéticos.
En otra realización de la presente invención, el centro de datos situado en una unidad tal como un contenedor o el centro de datos se construye utilizando bastidores que están preinstalados en marcos de soporte, que son preferentemente marcos de tamaño estándar. Esto permite la preinstalación/montaje previo en la construcción de centros de datos o para centros de datos móviles. Preferiblemente, tales marcos de tamaño estándar, unidades o contenedores tienen el tamaño estándar típico de un contenedor ISO común que se puede transportar, cargar y descargar, apilar y transportar de manera eficiente a través de largas distancias por barco, ferrocarril, camiones, camiones de semi-remolque o planos. Los más preferidos son unidades/contenedores de 20 pies (6,1 m), 40 pies (12,2 m), 45 pies (13,7 m), 48 pies (14,6 m) y 53 pies (16,2 m) de largo. El ancho es normalmente de 10 pies (3,0 m) a 8 pies (2,4 m) y la altura normalmente es de 9 pies y 6 pulgadas (2,9 m).
El presente método para operar un centro de datos proporciona un refrigerante fluido desde la fuente que proporciona frío a
los medios de intercambio de calor (206, 207) de los bastidores (202) dentro del primer circuito de refrigeración, teniendo dicho flujo de entrada de refrigerante fluido una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferiblemente 1 K a 2 K, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores
(202).
Preferiblemente, la temperatura del refrigerante fluido que entra en los medios de intercambio de calor se ajusta a 0,1 a 0,5 K por kW instalado y opera por bastidor no superando 10 kW por bastidor, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202). Preferiblemente, la temperatura del refrigerante fluido que entra en los medios de intercambio de calor se ajusta de 0,1 a 0,2 K por kW instalado y opera por bastidor, que asciende entre 10 kW y 25 kW por bastidor, por debajo de la temperatura del flujo de retorno de refrigerante liquido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202).
Preferiblemente, la temperatura del refrigerante fluido que entra en los medios de intercambio de calor se ajusta de 0,1 a 0,125 K por kW instalado y opera por bastidor, que asciende a por encima de 25 kW por bastidor, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202).
El presente método para operar un centro de datos permite una refrigeración eficiente de los centros de datos. Por ejemplo,
la temperatura más baja alcanzable con el estado de la teenología de refrigeración posterior usando refrigeración de evaporación es la temperatura de bulbo húmedo, que en Europa apenas llega a 22 °C. Las temperaturas de bulbo húmedo apropiadas están disponibles en los servicios meteorológicos locales. Normalmente, el suministro de fluido refrigerante, en particular el agua fría, está aproximadamente 2 K más caliente que la temperatura de bulbo húmedo, que es el límite teórico. En la realización preferida de la invención, el intercambiador de calor añade otros 2 K entre el circuito secundario y el primer circuito. Sin embargo, debe tenerse en cuenta que esta diferencia de temperatura es sólo una función del tamaño del intercambiador de calor y se puede optimizar su coste. Por ejemplo, una diferencia de temperatura de 1 K en el primer circuito de refrigeración (diferencia entre la salida y la entrada del intercambiador de calor), que corresponden por ejemplo a 9 m3/h de agua como refrigerante fluido y una potencia eléctrica de 10 kW del equipo informático instalado y operativo en el interior de los bastidores, el refrigerante líquido más bajo, en particular agua fría, retorna al sistema de refrigeración 5 K por encima de la temperatura de bulbo húmedo. Teniendo en cuenta otra diferencia de +1 K respecto a la temperatura ambiente debido a la radiación de los bastidores calientes, el aire caliente que se escapa la temperatura ambiente está 6 K más caliente que la temperatura de bulbo húmedo. Este límite puede incluso reducirse mediante el aumento de la velocidad de bombeo, pero a costa de un mayor requerimiento de energía de las bombas. Sin embargo, teniendo en cuenta que, por ejemplo, en Alemania la temperatura de bulbo húmedo excedió de 20 °C durante los
años 2007 hasta el 2011 durante cerca de 140 horas de media. Por lo tanto, sólo una pequeña fracción del tiempo las bombas tendrían que operar en alta velocidad de bombeo y, por lo tanto, sólo generan una pequeña adición al presupuesto de energía total. Durante temperaturas exteriores frías, el sistema de refrigeración se acelera para mantener la temperatura ambiente por encima de 20 °C.
Cabe señalar que, básicamente, todos los sistemas informáticos comerciales y componentes de red son adecuados para funcionar hasta 35 °C de manera casi constante acuerdo con ASHRAE TC 9.9 (2011) y ETSI EN 300019-1-3; V2.3.2 (2009-07). Muchos vendedores han anunciado que incluso se aumenta esta cifra hacia temperaturas más altas debido a que todos los sistemas de refrigeración mejoran la eficiencia con el aumento de las temperaturas ambiente.
Si el retorno de refrigerante fluido, en particular agua fría, alcanza 30 °C, se puede utilizar para calentar edificios si implementan calefacción del suelo o de la pared sin ningún tipo de bombas de calor. La única potencia adicional requerida es la bomba para mover el agua a través de colectores de calefacción en el interior del edificio y potencialmente empujarla hacia los pisos más altos. En verano, la calefacción por suelo radiante puede conectarse al suministro de agua fría y, por lo tanto, utilizarse para una refrigeración muy eficiente del edificio, sin embargo, con requisitos de refrigeración adicionales para las torres de refrigeración.
Más normalmente, la mayoría o incluso todos los bastidores están conectados individualmente al circuito de refrigeración, que proporciona un instrumento eficaz para
retirar y descargar el calor del hardware del equipo.
El acoplamiento de cada bastidor a refrigerar al circuito de refrigeración individualmente con el circuito de refrigeración en conexión con los intercambiadores de calor específicos del bastidor adecuados para eliminar todo el calor generado por el hardware informático proporciona la ventaja adicional de que es posible controlar y monitorizar la potencia de refrigeración y el intercambio de calor de manera individual y por separado para cada bastidor individual dentro de la estructura del centro de datos. La refrigeración del aire caliente exclusivamente dentro del bastidor hace que sea posible la instalación de cualesquiera densidades de paquetes de bastidores sin necesidad de diseño de flujo de aire, tal como pasillos fríos o pasillos calientes.
La presente invención permite el uso de una arquitectura llamada de bastidor abierto que asegura que los bastidores no tienen que ser sellarse herméticamente. Tal estructura de bastidor abierto permite además un acceso más fácil a los equipos informáticos, en particular, al hardware del ordenador, en el interior del bastidor, en caso de cualquier problema o mantenimiento necesario. Debido a la baja presión del flujo de aire en el lado posterior de las aberturas normales de equipos informáticos para el cableado, puede cerrarse fácilmente.
Otro aspecto preferido de la presente invención es que al menos algunos o todos los bastidores comprenden medios de control. De esta manera, todo el sistema puede adaptativamente, reaccionar localmente a los fallos del sistema local y puede iniciar automáticamente disposiciones
respectivas para compensar el fallo.
Según otra realización, los medios de control también comprenden sensores de temperatura, detectores de fugas de las tuberías y/o detectores de homo, por lo que dichos detectores están acoplados a un sistema de alarma de emergencia, que está adaptado para cambiar selectivamente el hardware, el bastidor y/o la porción relevante de la unidad de tubo de refrigeración.
El sistema de emergencia puede estar diseñado y dispuesto en cualquiera de dichos bastidores individualmente y separados de un sistema de emergencia de los bastidores adyacentes o vecinos. Los detectores de humo y de fuga se pueden instalar por separado y de forma independiente entre sí para apagar de forma individual los equipos informáticos que se puedan quemar o que emiten humo y poder mantener todas las demás operaciones del centro de datos. Alternativamente, también puede ser imaginable usar una combinación de detectores individuales y/o utilizar un detector multifuncional.
De acuerdo con una realización adicional, los bastidores comprenden además medios de programación de potencia, que están adaptados para mantener una corriente eléctrica de descarga general por debajo de un umbral predefinido. Esta realización está adaptada para evitar que todo el centro de datos consuma una cantidad de energía que no puede ser proporcionada por una fuente de alimentación externa. Por lo tanto, los medios de planificación de potencia están adaptados para regular que cada bastidor o un par/grupo de bastidores consuma la energía de un suministro de corriente o tensión eléctrica de acuerdo con una hoja de tiempo dada.
Por ejemplo, un primer bastidor puede alimentarse después de
un retardo de tiempo dado en comparación con cualquier otro bastidor del centro de datos. De esta manera, el consumo máximo de potencia de todo el centro de datos se puede mantener por debajo de un umbral predefinido, asegurando asi que la fuente de alimentación externa no se averie. Los medios de programación de potencia pueden implementarse como un algoritmo especifico que se asigna a un individuo predefinido, por lo tanto, con diferente tiempo de retardo en cualquiera de los bastidores del edificio del centro de datos.
Alternativamente, es también concebible que una desconexión de energía de los distintos bastidores se controle por medio de una arquitectura centralizada. Sin embargo, también un sistema de emergencia interconectado está dentro del alcance de la presente invención, mediante el cual una multiplicidad de detectores de fugas y/o de humo están acoplados eléctricamente a un sistema de emergencia central, que puede iniciar automáticamente disposiciones respectivas para contrarrestar un fallo del sistema.
Según otra realización preferida, el centro de datos comprende además al menos un circuito de refrigeración adicional, por ejemplo, un primer circuito de refrigeración redundante, que comprende la misma estructura principal que el primer circuito de refrigeración que se hace cargo de la tarea de la primera estructura de refrigeración en caso de cualquier fuga u otro problema. Preferiblemente, el circuito de refrigeración, que incluye el primer circuito de refrigeración, tiene por lo menos dos entradas de refrigerante fluido que permiten el funcionamiento incluso en caso de cualquier fuga o apagado parcial.
De acuerdo con todavía otra realización preferida, todas las bombas en el centro de datos tienen una bomba de seguridad redundante, que se puede activar en caso de que falle la bomba primaria. Unas válvulas adecuadas de cierre permiten la sustitución de una bomba rota mientras el sistema está en funcionamiento.
El presente método permite la operación del centro de datos a temperaturas ambiente relativamente altas, por ejemplo, hasta 30 °C.
La realización preferida de la invención implementa una redundancia adicional si los bastidores se montan uno junto al otro. En ese caso, el aire frío de dos filas de bastidores se mezcla en el pasillo entre los bastidores. Las dos filas de bastidores pueden hacerse fácilmente independientes mediante el uso de tuberías y bombas independientes. En caso de que una fila de bastidores completa falle debido a una fuga catastrófica o a un fallo de todas las bombas redundantes, el aire que sale de los bastidores conectados al sistema de refrigeración de fallos se elevará poco a poco hasta que se alcance la temperatura del aire de salida de los servidores, que suele ser 10 K más alta que la temperatura ambiente. Para un bastidor con el consumo de energía de 10 kW, el aumento de la temperatura es de aproximadamente 3K por hora. El aire caliente que sale de la fila de bastidores con el sistema de refrigeración se mezcla con el aire de la fila de bastidores opuesta. Por lo tanto, la temperatura del aire en el interior de la fila es en promedio sólo 5 K más caliente que la temperatura ambiente. Este aumento de temperatura puede compensarse mediante la reducción del suministro de agua fría a la fila de bastidores con el
sistema de refrigeración de trabajo.
La eficiencia de utilidad de potencia (PUE) que se utiliza en relación con la presente invención se define en "Data Center Efficiency Metrics - PUE™, Partial PUE, ERE, DCcE" (2011) de Dan Azevedo, Jud Coolcy, Michael Patterson y Mark Blackburn, publicado en www.theqreenqrid.orq. Con mucho, la mayor contribución a la sobrecarga de energía de un centro de datos es la refrigeración. Contribuciones adicionales son transformaciones y distribuciones eléctricas, la generación de energía de respaldo, como los sistemas de respaldo de batería, acondicionamiento de aire y similares. La invención presentada permite reducir la sobrecarga de refrigeración a un mínimo. El presente método permite operar el centro de datos con una eficacia de utilidad de energía (PUE) de como máximo 1,3, preferiblemente como máximo 1,2, más preferiblemente como máximo de 1,15, en particular, como máximo 1,1.
Descripción de las Figuras de la Invención
A continuación, la invención se describirá en detalle haciendo referencia a los dibujos, en los que:
La Figura 1 ilustra esquemáticamente un centro de datos que opera de acuerdo con el presente método.
Descripción Detallada de la Invención
En la realización ilustrada de la figura 1, cualquiera de los bastidores (202) comprende una unidad separada de intercambio de calor (206), que está equipada con un intercambiador de
calor (207). Los medios activos, tales como el ventilador de refrigeración de la CPU, de los equipos informáticos (200) facilita un flujo de aire (205) en el interior del bastidor (202) hacia la unidad de intercambio de calor (206). Las unidades de intercambio de calor (206) están acopladas a una tubería (203/204) que transporta un refrigerante liquido, por ejemplo agua, a cualquiera de los bastidores (202).
El refrigerante suministrado por medio de una tubería (203/204) es beneficioso porque los diversos bastidores (202) son totalmente pasivos y ya no tienen que diseñarse como bastidores cerrados. Por otra parte, la disipación de calor fuera de los diversos bastidores (202) se puede reducir de manera efectiva a un mínimo o incluso evitarse completamente. Por lo tanto, ya no es necesario controlar una corriente de aire global dentro de la estructura del edificio. De esta manera, la generación de puntos calientes que podrían ser debidos a algo de flujo de aire caliente no controlado fuera de los bastidores (202) se pueden eliminar de manera efectiva.
Además, el flujo de aire a lo largo de la estructura del edificio del centro de datos ya no tiene que controlarse de forma activa, ya que la temperatura ambiental alrededor de los bastidores (202) se mantiene en un nivel relativamente frío en comparación con la temperatura en el interior de los bastidores (202).
Para implementar la tolerancia a fallos en la infraestructura de refrigeración, los bastidores (202) pueden ser operados de una manera uniforme/antigua, donde cada segundo bastidor está acoplado a la misma tubería, a saber, ya sea al primer o segundo circuitos redundantes del primer circuito de
refrigeración. De esta forma, dos primeros circuitos redundantes de refrigeración pueden mantenerse, proporcionando una capacidad de refrigeración residual.
En caso de un fallo, por ejemplo debido a una fuga en la tubería (203/204), un bastidor particular puede desacoplarse selectivamente del sistema de tuberías (203/204).
Como no hay ningún requisito para guiar el aire a lo largo de la estructura del centro de datos, tal como el espacio que aloja la multiplicidad de bastidores, los bastidores (202) que contienen los equipos informáticos (200) se pueden colocar en cualquier disposición arbitraria. Un centro de datos en el sentido de la presente invención contiene más de un bastidor (202).
El aumento de la temperatura ambiente en el centro de datos, por lo tanto, se eleva el refrigerante fluido, en particular la temperatura del agua de refrigeración, que aumenta directamente la eficiencia de refrigeración del refrigerante fluido calentado, en particular, el agua de refrigeración calentada.
Lista de números de referencia:
200 equipos informáticos
201 suelo de rejilla
202 bastidor
203/204 sistema de tuberías para el primer circuito de refrigeración
205 flujo de aire en el interior del bastidor, solamente creado por medios activos contenidos en los equipos informáticos
206 unidad de intercambio de calor
207 intercambiador de calor
Ejemplo 1
Un centro de datos, que aloja un equipo de alto rendimiento consume 500 kW de potencia y está instalado en 34 bastidores, cada uno de 19 pulgadas y tiene 42 unidades de altura. Los bastidores son de 1, 2 m de profundidad y 70 cm de ancho. El espacio del bastidor requiere menos de 100 m2 de superficie neta.
La infraestructura de refrigeración consiste principalmente en dos circuitos de refrigeración, conectados por un intercambiador de calor. El primer circuito de refrigeración transfiere el calor generado en bastidores del centro de datos de 19 pulgadas a un intercambiador de calor, que se enfria de nuevo mediante el circuito secundario. El circuito de refrigeración secundario utiliza dos contraflujos de 313 kW, deriva indirecta, torres de refrigeración húmedas, donde se toma el agua de reposición de un rio vecino. Toda la infraestructura de refrigeración está montada en el interior de un contenedor de 20 pies con dos torres de refrigeración montadas en el techo. Dichas torres pueden mantenerse y limpiarse una cada vez, mientras que el sistema de refrigeración permanece activo, pero a una potencia reducida. Cabe señalar que este esquema requiere un mínimo de potencia de los ordenadores 50 kW con el fin de evitar la congelación de los sistemas de refrigeración durante el invierno. Se ha instalado una infraestructura de drenaje de agua de emergencia.
Todo el sistema de refrigeración implementa tres consumidores eléctricos: la bomba secundaria (6 kW), la primera bomba del circuito de refrigeración (28 kW) y un ventilador en cada torre de refrigeración (4,5 kW cada uno). La potencia de los
ventiladores puede estrangulares, ya que no se requieren los ventiladores a temperaturas exteriores por debajo de 15 °C. Las dos bombas de agua están configuradas para funcionar a una corriente constante, de volumen fijo de 150 m3/h en el secundario y 220 m3/h en el primer circuito de refrigeración. El caudal de agua en el primer circuito de refrigeración es suficiente para enfriarse hasta 900 kW de potencia, mientras que el circuito secundario soporta hasta dos veces 313 kW hasta la fecha. Una actualización del sistema para una potencia total de 900 kW es posible mediante la adición de una torre de refrigeración adicional a la infraestructura existente. Con la asunción de una típica utilización del 35 % de promedio de los ventiladores de las torres de refrigeración y 500 kW de potencia máxima HPC, se produce una sobrecarga media de refrigeración del 7,4 % o PUE = 1,074. En el caso de un sistema de refrigeración utilizado completamente con una carga de potencia de 900 kW, la sobrecarga de refrigeración sería del 4,9 % o PUE = 1,049. Otras optimizaciones son concebibles, en particular en el caso de la bomba secundaria. En el caso de esta implementación, la bomba tiene que accionar el volumen actual sobre una gran distancia de 120 m debido a que el contenedor de refrigeración no podría colocarse cerca de la sala del centro de datos.
Ejemplo 2
Un contenedor de centro de datos móvil que tiene una anchura de 3 m, una altura de 2,9 m y 12,2 m de longitud está equipado con 13 bastidores de 19", cada uno con equipos informáticos que operan a 35 kW. La potencia total de 455 kW se enfría de nuevo mediante un enfriador híbrido. La bomba de
agua requiere 10 kW y el enfriador híbrido requiere 6kW adicionales, lo que resulta en una eficiencia de utilidad potencia de PUE = 1,035.
Claims (15)
1. Procedimiento para operar un centro de datos que comprende: (i) un edificio para alojar una multiplicidad de bastidores (202), siendo cada bastidor un bastidor abierto que aloja un equipo informático, (ii) siendo los bastidores (202) un bastidor abierto que aloja un equipo informático (200), (iii) los bastidores (202) comprenden medios de intercambio de calor (206, 207) que están adaptados para transferir el calor generado por el equipo informático a un refrigerante fluido, siendo dichos medios de intercambio de calor un elemento de los bastidores o un elemento unido a los bastidores, estando situados preferiblemente en el lado posterior o en el elemento de los bastidores, (iv) al menos un primer circuito de refrigeración (203, 204), siendo dicho circuito de refrigeración un circuito cerrado de refrigeración, que está adaptado para suministrar a los medios de intercambio de calor (206, 207) de los bastidores (202) un refrigerante fluido y que está adaptado además para transportar el refrigerante calentado fuera de los medios de intercambio de calor (206, 207) de los bastidores (202) a través del reflujo del circuito de refrigeración, (v) estando dicho primer circuito de refrigeración (203, 204) conectado a una fuente que proporciona frió, estando situada dicha fuente fuera del espacio que aloja la multiplicidad de bastidores, (vi) teniendo los equipos informáticos (200) situados en los respectivos bastidores medios activos, preferiblemente ventiladores, para la refrigeración de partes de los equipos informáticos (200), preferiblemente, la CPU y/o la GPU y/o un hardware de almacenamiento, creando dichos medios activos un flujo de aire (205) en el bastidor (202) hacia los medios de intercambio de calor (206, 207) que son un elemento de los bastidores o un elemento unido a los bastidores, estando situados preferiblemente en el lado posterior o en el elemento de los bastidores (202), (vii) no teniendo dichos bastidores (202) otros medios activos, en particular ventiladores, a excepción de los contenidos en los equipos informáticos (200) antes mencionados, para la creación de un flujo de aire (205) en el bastidor (202) hacia los medios de intercambio de calor (206, 207) que son un elemento de los bastidores o un elemento fijado a los bastidores, preferiblemente situados en el lado trasero o el elemento de los bastidores (202), (viii) no comprendiendo dicho edificio para alojar la multiplicidad de bastidores (202) otros medios activos, a excepción de los contenidos en los equipos informáticos (200) antes mencionados, para la creación de un flujo de aire guiado, (ix) al menos una entrada de alimentación eléctrica, (x) al menos unos medios para distribuir la energía eléctrica desde la entrada de alimentación a los bastidores individuales, permitiendo fuentes de alimentación redundantes en cada bastidor, que comprende las medidas de (a) proporcionar un refrigerante fluido desde la fuente proporcionando frió a los medios de intercambio de calor (206, 207) de los bastidores (202) dentro del primer circuito de refrigeración, entrando dicho flujo de entrada de refrigerante fluido en los medios de intercambio de calor (206, 207) que tienen una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferentemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202), (b) controlar el flujo de refrigerante fluido dentro del primer circuito de refrigeración (203, 204) que está adaptado para suministrar los medios de intercambio de calor (206, 207) de los bastidores (202) para mantener la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207) de los bastidores (202) (flujo de entrada) que tiene una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferentemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202), (c) transportar el refrigerante fluido calentado que abandona los medios de intercambio de calor (206, 207) de los bastidores (202) (flujo de retorno) a la fuente que proporciona frió, estando situada dicha fuente fuera del espacio que aloja la multiplicidad de bastidores, para eliminar el calor del refrigerante fluido calentado a una temperatura de 1 K a 5 K, preferiblemente de 1 K a 3 K, más preferiblemente de 1 K a 2 K, por debajo de la temperatura del flujo de retorno del refrigerante líquido y devolviendo el refrigerante fluido al por lo menos un primer circuito de refrigeración.
2. El método como se reivindica en la reivindicación 1, en el que la densidad de potencia de los equipos informáticos en los bastidores es al menos de 5 kW (eléctricos) por bastidor, más preferiblemente al menos de 8 kW (eléctricos) por bastidor, más preferiblemente al menos de 10 kW (eléctricos) por bastidor.
3. El método como se reivindica en la reivindicación 1, en el que los bastidores (202) están dispuestos como centros de datos dispuestos en dos dimensiones, donde los bastidores están situados en un nivel, o como centros de datos dispuestos en tres dimensiones, donde los bastidores (202) están situados en más de un nivel dentro del centro de datos.
4. El método como se reivindica en la reivindicación 1, en el que la densidad de potencia de los equipos informáticos (200) instalados y en funcionamiento dentro de los bastidores (202) crea una capacidad de disipación de calor volumétrica que corresponde al menos a aproximadamente 5 kW/m2, preferiblemente al menos a aproximadamente 10 KW/m2, más preferiblemente al menos a aproximadamente 20 kW/m2.
5. El método como se reivindica en la reivindicación 1, en el que la temperatura ambiente del espacio que aloja la multiplicidad de bastidores (202) es de aproximadamente +2 K, preferiblemente +1 K, más preferiblemente +0,5 K, más preferiblemente aproximadamente la misma temperatura del flujo de retorno del refrigerante fluido del primer circuito de refrigeración.
6. El método como se reivindica en la reivindicación 1, en el que la fuente de frió proporciona la refrigeración a través de (i) fuentes de agua fría externas, preferiblemente agua subterránea o superficial, (ii) refrigeración de evaporación que opera basándose en el principio de evaporación, incluyendo torres de refrigeración de evaporación con o sin torres de refrigeración abiertas, (iii) refrigerador híbrido o (iv) refrigerador seco.
7. El método como se reivindica en la reivindicación 1, en el que el refrigerante fluido que entra en el centro de datos para la refrigeración a través del al menos un circuito de refrigeración tiene una temperatura como máximo 0,2 K por debajo de la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207).
8. El método como se reivindica en la reivindicación 1, en el que la temperatura del flujo de retorno del refrigerante fluido del primer circuito de refrigeración es como máximo 3 K, preferiblemente como máximo 2 K, más preferiblemente como máximo 1 K, por encima de la temperatura suministrada por la fuente de frío al entrar al centro de datos para densidades de potencia totales de hasta 10 kW (eléctricos) por bastidor o en el que la temperatura del flujo de retorno del refrigerante fluido del primer circuito de refrigeración está como máximo 4 K, preferiblemente como máximo 3 K, por encima de la temperatura suministrada por la fuente de frío que entra en el centro de datos para densidades de potencia total de al menos 10 kW (eléctricos) por bastidor.
9. El método como se reivindica en la reivindicación 1, en el que el método para operar el centro de datos no opera ningún acondicionador de aire adicional.
10. El método como se reivindica en la reivindicación 1, en el que el método para operar el centro de datos no tiene ningún otro medio activo, en particular ventiladores, para crear un flujo de aire (205) en el bastidor hacia los medios de intercambio de calor, excepto para los medios activos que están presentes en el equipo informático situado en el bastidor.
11. El método como se reivindica en la reivindicación 1, en el que los medios activos, en particular ventiladores, que están presentes en los equipos informáticos (200) crean un flujo de aire (205) en el bastidor hacia los medios de intercambio de calor que corresponde a un corriente de volumen de aire de 100 a 600 m3/(h*kW), que corresponde a al menos 0,5 m/s, preferiblemente de al menos 0,8 m/s, en particular de al menos 1,1 m/s.
12. El método como se reivindica en la reivindicación 1, en el que los medios activos, en particular ventiladores, que están presentes en los equipos informáticos (200) crean un flujo de aire (205) en el bastidor hacia los medios de intercambio de calor que crean una presión posterior de aire mediante el intercambiador de calor correspondiente a un máximo de 10 Pa para el caudal de aire correspondiente de hasta 0,5 m/s, preferiblemente 16 Pa como máximo para el caudal de aire correspondiente de hasta 0,8 m/s, más preferiblemente de 20 Pa como máximo para el caudal de aire correspondiente de hasta 1,1 m/s.
13. El método como se reivindica en la reivindicación 1, en el que la caída de presión a través del intercambiador de calor se ajusta por debajo de 22 kPa para una corriente de volumen de 3 m3/h para el refrigerante fluido, preferiblemente agua, preferiblemente por debajo de 54 kPa para 5 m3/h para el refrigerante fluido, preferiblemente agua, más preferiblemente por debajo de 200 kPa para 10 m3/h para el refrigerante liquido, preferiblemente agua.
14. El método como se reivindica en la reivindicación 1, en el que el caudal para el refrigerante líquido, preferiblemente agua, se ajusta desde 0,9 m3 por hora y por kW instalado y que opera para una diferencia de 1 K y 0,17 m3 por hora y por kW instalado y que opera para una diferencia de 5 K.
15. El método como se reivindica en la reivindicación 1, en el que la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207) se ajusta a 0,1 a 0,5 K por kW instalado y que opera por bastidor no excediendo 10 kW por bastidor, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202) o en el que la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207) se ajusta de 0,1 a 0,2 K por kW instalado y que opera por bastidor ascendiendo a entre 10 kW y 25 kW por bastidor, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202), o en el que la temperatura del refrigerante fluido que entra en los medios de intercambio de calor (206, 207) se ajusta de 0,1 a 0.125 K por kW instalado y que opera por bastidor, ascendiendo por encima de 25 kW por bastidor, por debajo de la temperatura del flujo de retorno de refrigerante fluido que sale de los medios de intercambio de calor (206, 207) de los bastidores (202). RESUMEN DE LA INVENCIÓN La presente invención se refiere a un método para operar un centro de datos, que está adaptado para alojar una multiplicidad/pluralidad de bastidores que están diseñaos para proporcionar espacio de almacenamiento para equipos informáticos. El centro de datos está equipado con medios de refrigeración para proporciona disipación del calor que se genera mediante el equipo informático. El centro de datos operado de acuerdo con la presente invención tiene una eficiencia de utilidad de potencia (PUE) de como máximo 1,3, preferiblemente como máximo de 1,2, más preferiblemente como máximo de 1,5, en particular como máximo de 1,1.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP12003748 | 2012-05-11 | ||
| EP12007913.2A EP2663172A1 (en) | 2012-05-11 | 2012-11-23 | Method for operating a data centre with efficient cooling means |
| PCT/EP2013/001391 WO2013167280A1 (en) | 2012-05-11 | 2013-05-10 | Method for operating a data centre with efficient cooling means |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| MX2014013689A true MX2014013689A (es) | 2015-07-06 |
| MX345661B MX345661B (es) | 2017-02-09 |
Family
ID=47257356
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| MX2014013689A MX345661B (es) | 2012-05-11 | 2013-05-10 | Procedimiento para el funcionamiento de un centro de datos con medios de refrigeración eficientes. |
Country Status (13)
| Country | Link |
|---|---|
| US (2) | US10653041B2 (es) |
| EP (2) | EP2663172A1 (es) |
| CN (1) | CN104272889B (es) |
| BR (1) | BR112014028056B1 (es) |
| CA (1) | CA2873088C (es) |
| DE (1) | DE13726418T1 (es) |
| DK (1) | DK2848105T4 (es) |
| ES (1) | ES2627107T5 (es) |
| MX (1) | MX345661B (es) |
| PL (1) | PL2848105T3 (es) |
| RU (1) | RU2623495C2 (es) |
| SG (1) | SG11201407165QA (es) |
| WO (1) | WO2013167280A1 (es) |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102008030308A1 (de) | 2008-06-30 | 2009-12-31 | Lindenstruth, Volker, Prof. | Gebäude für ein Rechenzentrum mit Einrichtungen zur effizienten Kühlung |
| US8116080B2 (en) * | 2009-12-28 | 2012-02-14 | International Business Machines Corporation | Container-based data center having greater rack density |
| JP2015161489A (ja) * | 2014-02-28 | 2015-09-07 | 富士通株式会社 | データセンタ、制御装置の制御プログラムおよびデータセンタの制御方法 |
| US9414531B1 (en) * | 2014-09-24 | 2016-08-09 | Amazon Technologies, Inc. | Modular data center without active cooling |
| US9847673B2 (en) | 2015-08-06 | 2017-12-19 | Microsoft Technology Licensing, Llc | Active power transfer switch control to reduce service impacts due to electrical power interruptions |
| US9946328B2 (en) | 2015-10-29 | 2018-04-17 | International Business Machines Corporation | Automated system for cold storage system |
| US10965525B1 (en) * | 2016-06-29 | 2021-03-30 | Amazon Technologies, Inc. | Portable data center for data transfer |
| US10939587B2 (en) * | 2017-02-16 | 2021-03-02 | Dell Products, L.P. | System and method for injecting cooling air into servers in a server rack |
| CN110447315B (zh) * | 2017-07-28 | 2020-11-06 | 百度时代网络技术(北京)有限公司 | 用于数据中心中的使it部件液体冷却的电子器件机架的液体冷却设计 |
| JP7024081B2 (ja) | 2017-11-30 | 2022-02-22 | フラマトム・ゲーエムベーハー | 受動的緊急冷却モードを備えた換気及び空調システム |
| US10939588B2 (en) * | 2017-11-30 | 2021-03-02 | Schneider Electric It Corporation | Airflow distribution and management architecture for large data center |
| RU190100U1 (ru) * | 2019-03-21 | 2019-06-18 | Федеральное государственное унитарное предприятие "Российский Федеральный Ядерный Центр - Всероссийский Научно-Исследовательский Институт Технической Физики имени академика Е.И. Забабахина" (ФГУП "РФЯЦ-ВНИИТФ им. академ. Е.И. Забабахина") | Мобильный центр обработки данных |
| CN110456716A (zh) * | 2019-08-28 | 2019-11-15 | 大连应达实业有限公司 | 高效直混式换热装置的物联网管控系统 |
| CN111026252B (zh) * | 2019-12-06 | 2021-08-24 | 苏州浪潮智能科技有限公司 | 一种服务器温度冗余控制的方法及装置 |
| US11829215B2 (en) * | 2020-11-30 | 2023-11-28 | Nvidia Corporation | Intelligent and redundant liquid-cooled cooling loop for datacenter cooling systems |
| WO2022119465A1 (ru) * | 2020-12-01 | 2022-06-09 | Федеральное государственное унитарное предприятие "Российский федеральный ядерный центр - Всероссийский научно-исследовательский институт технической физики имени академика Е.И. Забабахина" | Система защиты вычислительного оборудования центра обработки данных |
| CN114356059B (zh) * | 2021-12-31 | 2024-09-17 | 联想(北京)信息技术有限公司 | 服务器的冷却液分配设备控制方法、装置及服务器系统 |
| US12477684B1 (en) * | 2022-03-07 | 2025-11-18 | Rhodium Technologies LLC | Fluid circulation systems and cooling facilities with elevated heat exchanger |
Family Cites Families (54)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US2075349A (en) | 1935-08-26 | 1937-03-30 | Williams Oil O Matic Heating | Refrigeration |
| US3334684A (en) * | 1964-07-08 | 1967-08-08 | Control Data Corp | Cooling system for data processing equipment |
| FI802202A7 (fi) | 1979-07-20 | 1981-01-01 | Zampieri P | Poltin nestemäisen polttoaineen polttamiseksi sinisellä liekillä. |
| FR2588072B1 (fr) | 1985-09-30 | 1987-12-11 | Jeumont Schneider | Installation de dissipation pour elements semi-conducteurs de puissance |
| US5323847A (en) | 1990-08-01 | 1994-06-28 | Hitachi, Ltd. | Electronic apparatus and method of cooling the same |
| US5509468A (en) * | 1993-12-23 | 1996-04-23 | Storage Technology Corporation | Assembly for dissipating thermal energy contained in an electrical circuit element and associated method therefor |
| GB2354062A (en) † | 1999-09-13 | 2001-03-14 | British Broadcasting Corp | Cooling system for use in cooling electronic equipment |
| US6301837B1 (en) | 2000-03-13 | 2001-10-16 | Kewaunee Scientific Corp. | Rack assembly for supporting electronic units |
| EP1266548B2 (en) | 2000-03-21 | 2015-07-29 | Liebert Corporation | Method and apparatus for cooling electronic enclosures |
| WO2002052107A2 (en) | 2000-12-22 | 2002-07-04 | Clearspace Technology Limited | Data centre building |
| GB0207382D0 (en) | 2002-03-28 | 2002-05-08 | Holland Heating Uk Ltd | Computer cabinet |
| US20040008483A1 (en) * | 2002-07-13 | 2004-01-15 | Kioan Cheon | Water cooling type cooling system for electronic device |
| US6714412B1 (en) * | 2002-09-13 | 2004-03-30 | International Business Machines Corporation | Scalable coolant conditioning unit with integral plate heat exchanger/expansion tank and method of use |
| US7203574B2 (en) | 2003-01-10 | 2007-04-10 | Lockheed Martin Corporation | Self-sustaining environmental control unit |
| DE10310282A1 (de) | 2003-03-07 | 2004-09-16 | Rittal Gmbh & Co. Kg | Flüssigkeits-Kühlsystem |
| US7278273B1 (en) | 2003-12-30 | 2007-10-09 | Google Inc. | Modular data center |
| DE202004006552U1 (de) * | 2004-04-26 | 2004-07-08 | Knürr AG | Kühlungssystem für Geräte- und Netzwerkschränke |
| JP4321413B2 (ja) | 2004-09-02 | 2009-08-26 | 株式会社日立製作所 | ディスクアレイ装置 |
| JP4922943B2 (ja) | 2004-11-14 | 2012-04-25 | リーバート・コーポレイシヨン | 電子部品筐体冷却システムおよび方法 |
| US7266741B2 (en) | 2004-11-19 | 2007-09-04 | Fong Luk | Generation of test vectors for testing electronic circuits taking into account of defect probability |
| DE102005005588B4 (de) | 2005-02-07 | 2008-03-13 | Knürr AG | Schaltschrank |
| US7385810B2 (en) | 2005-04-18 | 2008-06-10 | International Business Machines Corporation | Apparatus and method for facilitating cooling of an electronics rack employing a heat exchange assembly mounted to an outlet door cover of the electronics rack |
| US7315448B1 (en) | 2005-06-01 | 2008-01-01 | Hewlett-Packard Development Company, L.P. | Air-cooled heat generating device airflow control system |
| US7448437B2 (en) | 2005-06-24 | 2008-11-11 | Fu Zhun Precision Industry (Shenzhen) Co., Ltd. | Heat dissipating device with heat reservoir |
| CA2653806C (en) | 2006-06-01 | 2014-06-03 | Exaflop Llc | Warm cooling for electronics |
| WO2007139559A1 (en) | 2006-06-01 | 2007-12-06 | Exaflop Llc | Controlled warm air capture |
| US7551971B2 (en) | 2006-09-13 | 2009-06-23 | Sun Microsystems, Inc. | Operation ready transportable data center in a shipping container |
| US8727458B2 (en) | 2006-10-20 | 2014-05-20 | Adc Telecommunications, Inc. | High density telecommunications mounting drawer |
| US8395896B2 (en) | 2007-02-24 | 2013-03-12 | Hewlett-Packard Development Company, L.P. | Redundant cooling systems and methods |
| FR2914340B1 (fr) | 2007-03-30 | 2011-02-25 | Data 4 | Structure d'un batiment destine a heberger des donnees informatiques |
| US7511959B2 (en) | 2007-04-25 | 2009-03-31 | Hewlett-Packard Development Company, L.P. | Scalable computing apparatus |
| US7477514B2 (en) | 2007-05-04 | 2009-01-13 | International Business Machines Corporation | Method of facilitating cooling of electronics racks of a data center employing multiple cooling stations |
| US8320125B1 (en) * | 2007-06-29 | 2012-11-27 | Exaflop Llc | Modular data center cooling |
| US20090229283A1 (en) | 2007-08-24 | 2009-09-17 | Joseph Marsala | Method and apparatus for isothermal cooling of hard disk drive arrays using a pumped refrigerant loop |
| US7864530B1 (en) | 2007-09-28 | 2011-01-04 | Exaflop Llc | Changing data center cooling modes |
| JP4940095B2 (ja) * | 2007-10-22 | 2012-05-30 | 三洋電機株式会社 | 電子機器冷却システム |
| EP2053911B1 (en) * | 2007-10-22 | 2013-05-15 | Sanyo Electric Co., Ltd. | Electronic device cooling system |
| ES2595802T3 (es) * | 2007-11-09 | 2017-01-03 | Knürr GmbH | Sistema y método para climatización |
| US7963119B2 (en) | 2007-11-26 | 2011-06-21 | International Business Machines Corporation | Hybrid air and liquid coolant conditioning unit for facilitating cooling of one or more electronics racks of a data center |
| US7808780B2 (en) | 2008-02-28 | 2010-10-05 | International Business Machines Corporation | Variable flow computer cooling system for a data center and method of operation |
| DE102008030308A1 (de) | 2008-06-30 | 2009-12-31 | Lindenstruth, Volker, Prof. | Gebäude für ein Rechenzentrum mit Einrichtungen zur effizienten Kühlung |
| WO2010039120A1 (en) | 2008-09-30 | 2010-04-08 | Hewlett-Packard Development Company, L.P. | Data center |
| GB0905870D0 (en) | 2009-04-03 | 2009-05-20 | Eaton Williams Group Ltd | A rear door heat exchanger |
| US20110056675A1 (en) * | 2009-09-09 | 2011-03-10 | International Business Machines Corporation | Apparatus and method for adjusting coolant flow resistance through liquid-cooled electronics rack(s) |
| US8286442B2 (en) * | 2009-11-02 | 2012-10-16 | Exaflop Llc | Data center with low power usage effectiveness |
| US8116080B2 (en) | 2009-12-28 | 2012-02-14 | International Business Machines Corporation | Container-based data center having greater rack density |
| US8789384B2 (en) * | 2010-03-23 | 2014-07-29 | International Business Machines Corporation | Computer rack cooling using independently-controlled flow of coolants through a dual-section heat exchanger |
| GB201008099D0 (en) * | 2010-05-14 | 2010-06-30 | Eaton Williams Group Ltd | A rear door heat exchanger |
| DE102010031909A1 (de) | 2010-07-22 | 2012-01-26 | Airbus Operations Gmbh | Abdichtungssystem |
| TWI422318B (zh) * | 2010-10-29 | 2014-01-01 | Ind Tech Res Inst | 數據機房 |
| TW201229451A (en) * | 2011-01-11 | 2012-07-16 | Hon Hai Prec Ind Co Ltd | Heat circle system |
| US8804334B2 (en) * | 2011-05-25 | 2014-08-12 | International Business Machines Corporation | Multi-rack, door-mounted heat exchanger |
| EP2555605A1 (en) | 2011-08-01 | 2013-02-06 | GSI Helmholtzzentrum für Schwerionenforschung GmbH | Mobile data centre unit with efficient cooling means |
| US10880180B2 (en) | 2015-09-16 | 2020-12-29 | Huawei Technologies Co., Ltd. | Method and apparatus for data analytics management |
-
2012
- 2012-11-23 EP EP12007913.2A patent/EP2663172A1/en not_active Withdrawn
-
2013
- 2013-05-10 CA CA2873088A patent/CA2873088C/en active Active
- 2013-05-10 CN CN201380024678.7A patent/CN104272889B/zh active Active
- 2013-05-10 WO PCT/EP2013/001391 patent/WO2013167280A1/en not_active Ceased
- 2013-05-10 SG SG11201407165QA patent/SG11201407165QA/en unknown
- 2013-05-10 BR BR112014028056-8A patent/BR112014028056B1/pt active IP Right Grant
- 2013-05-10 RU RU2014150044A patent/RU2623495C2/ru active
- 2013-05-10 US US14/398,758 patent/US10653041B2/en not_active Expired - Fee Related
- 2013-05-10 MX MX2014013689A patent/MX345661B/es active IP Right Grant
- 2013-05-10 ES ES13726418T patent/ES2627107T5/es active Active
- 2013-05-10 EP EP13726418.0A patent/EP2848105B2/en active Active
- 2013-05-10 DK DK13726418.0T patent/DK2848105T4/da active
- 2013-05-10 DE DE13726418.0T patent/DE13726418T1/de active Pending
- 2013-05-10 PL PL13726418T patent/PL2848105T3/pl unknown
-
2020
- 2020-05-07 US US16/869,361 patent/US20210092866A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| RU2623495C2 (ru) | 2017-06-27 |
| CA2873088A1 (en) | 2013-11-14 |
| DK2848105T3 (en) | 2017-06-19 |
| PL2848105T3 (pl) | 2017-08-31 |
| EP2848105B2 (en) | 2020-11-25 |
| EP2663172A1 (en) | 2013-11-13 |
| CN104272889A (zh) | 2015-01-07 |
| SG11201407165QA (en) | 2014-11-27 |
| BR112014028056B1 (pt) | 2021-12-07 |
| RU2014150044A (ru) | 2017-05-23 |
| EP2848105A1 (en) | 2015-03-18 |
| BR112014028056A2 (pt) | 2017-08-08 |
| WO2013167280A1 (en) | 2013-11-14 |
| MX345661B (es) | 2017-02-09 |
| US20210092866A1 (en) | 2021-03-25 |
| EP2848105B1 (en) | 2017-03-08 |
| CN104272889B (zh) | 2018-04-27 |
| DK2848105T4 (da) | 2021-03-01 |
| US10653041B2 (en) | 2020-05-12 |
| US20150083363A1 (en) | 2015-03-26 |
| ES2627107T3 (es) | 2017-07-26 |
| CA2873088C (en) | 2020-12-15 |
| ES2627107T5 (es) | 2021-09-15 |
| DE13726418T1 (de) | 2015-09-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20210092866A1 (en) | Fluid-cooled data centres without air coinditioning, and methods for operating same | |
| US9763365B2 (en) | Mobile data centre unit with efficient cooling means | |
| US8842430B2 (en) | Data center | |
| EP3204697B1 (en) | Air handling unit and method of operating the same | |
| US20130032310A1 (en) | Transportable, environmentally-controlled equipment enclosure | |
| JP2013134032A (ja) | 機器冷却システムおよび機器冷却方法 | |
| US20090301688A1 (en) | Cooling Apparatus and Methods for Cooling | |
| RU126357U1 (ru) | Центр обработки данных | |
| CN117092947B (zh) | 一种机房控制装置及运维监测系统 | |
| Fjerdingen et al. | Ventilation and Cooling Requirements for ICT rooms |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| FG | Grant or registration |