Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Consideraciones:
¾ Desastres Naturales
¾ Riesgos del Sitio
¾ Consideraciones del Sitio
¾ Energía Eléctrica
¾ Comunicaciones
SELECCIÓN DEL SITIO
¾ Riesgos de Sitio:
• Considera calles diferentes de acceso, pero no
carreteras (0.8 km), aeropuertos (1.6 km),
gasolinerías, fabricas, etc.
• De preferencia edificios de un solo piso dedicado al
Data Center
• Edificios con múltiples inquilinos de uso oficina
(evitar restaurantes, etc.)
• Amplia separación entre columnas
• Separación de otros edificios de 18 m. donde posible
SELECCIÓN DEL SITIO
¾ Energía Eléctrica:
• Capacidad
• Confiabilidad
• Acceso
• Costo
• Consideraciones futuras
SELECCIÓN DEL SITIO
¾ Comunicaciones:
• Capacidad/Redundancia
• Ancho de Banda
• Acceso
• Costo
• Consideraciones futuras
El Diseño Tradicional
TIER 1
• Alta Disponibilidad
• Alto Performance
• Diseño Flexible
• Velocidad en Instalación y Modificaciones
• Preparados para el Futuro
• Fácil de Implementar y Utilizar
REQUISITOS Y RECOMENDACIONES
La base del Estándar TIA-942
Edificio:
• Oficinas Generales
• TRs y ERs
Data Center:
• Oficinas TI
• Acometida(s)
• Cuarto(s) Eléctricos/Mecánicos
• Centro de Operaciones (NOC)
• TR para Data Center
• Almacén y Recepción de Materiales
• Cuarto de Computo
Layout Típico de un Data Center
ACOMETIDA (Entrance Facility)
Aloja:
Core Routers
Core LAN Switches
Core SAN Switches
PBX/VoIP
Área de Distribución Horizontal (HDA)
• Aloja los switches LAN, SAN, KVM
• La cantidad máxima de conexiones está dada por la
capacidad de las canalizaciones (charolas, etc.)
ARQUITECTURA
®
ARQUITECTURA
TIER 1:
• Ningún requerimiento especial
• Resistencia del piso debe ser 7.2 kPa (150 lbf/ft2). Véase Telcordia GR-63
• Altura min. 2.60 m
ARQUITECTURA
(1 hora) (2 horas)
Detalle de plafón/muro
Sello de neopreno
Iluminación
9 Encima de pasillos
9 500 lux verticalmente
9 200 lux horizontalmente
9 Se mide en centro de pasillos
a 1.00m de altura
9 Detectores de movimiento...
9 Considerar LEDs
9 Balastros electrónicos...
Puertas contra Fuego (NFPA 80)
Escalón: Rampa:
9 30 cm. profundo min. 9 Ángulo de 1:12 (ADA) hasta 1:6
9 17.5 cm. altura máx. 9 Para subir a 45 cm. requiere
9 Para subir a 45 cm. requiere 5.40 m. + 90 cm. descanso
60 cm. + 90 cm. descanso 9 Para subir a 60 cm. requiere 7.20
9 Para subir a 60 cm. requiere m. + 90 cm. descanso
90 cm. + 90 cm. descanso
Zinc Whiskers
TIA-942:
• Cables eléctricos
en pasillos fríos
• Cables de
comunicaciones
en pasillos
calientes
Separación de Cables (Piso Falso)
®
RACKS
Ancho de pasillos:
Frente mínimo: 1.00 m
(1.20 m preferido)
Atrás mínimo: 0.90 m
1.22 m 0.90 m
Pasillo frío Pasillo caliente
Contar placas...
Fuente: ASHRAE
Ejemplo
Las Herramientas:
Transformador
Interruptores UPS PDU
Principales
Racks
Planta de
Emergencia
Distribución Eléctrica (IEEE 1100)
Circuitos de Alimentación
• Se debería utilizar conductores aislados incluso la tierra; la
continuidad eléctrica de la canalización se logra por aparte.
• De preferencia la canalización para alimentadores para equipos
electrónicos es dedicada y uso exclusivo.
• Centros de carga se instalan en la misma área que el equipo
electrónico con la misma referencia a tierra.
• Se instala centros de carga dedicados, es decir, con conductor
neutro por cada circuito. El circuito dedicado tendrá un EGC con
aislante.
• En canalizaciones con grandes cantidades de circuitos se amarra
cada circuito en un mazo.
Recomendaciones del IEEE 1100-2005:
Otras consideraciones:
• Neutro un calibre más grande que fases *
• Transformadores factor K *
Common
Bonding
Network
Documentos relevantes
• Standby
• Line Interactive
• Standby-Ferro
• Double Conversion On-Line
• Delta Conversion On-Line
Standby
MTBF
= RELIABILITY
MTBF+MTTR
Tier 1
Configuración Capacidad “N”
• Disponibilidad limitada
• Carga expuesta a energía sin protección para
mantenimiento
• Muchos puntos únicos de falla (single points of failure)
Configuración “N+1”
Isolated Redundant
Tier 2
Configuración “N+1”
Isolated Redundant
Tier 2
Configuración “N+1”
Parallel Redundant
Tier 3
Configuración “2 (N+1)”
System + System
Tier 4
Configuración “N+1”
para servidores con dos fuentes
“N”
“N” adicional
Configuración “N+1”
para servidores con una fuente
“N”
“N” adicional
Automatic Transfer Switch (ATS)
Ventajas de ATS
• Transferencia en 8-16 ms
• No requiere de sincronización entre UPS
• Monitoreo, administrable por Web, SNMP ó Telnet
• Más confiable que STS (MTBF*: 700,000 á 1,500,000 horas)
BOA
PDUS monitoreables para rack
NOTA: Una PDU con 42 circuitos rinde 14 boas trifásicas (14 x 3 = 42).
Cálculo de circuitos
Consumo de racks 1-4
Total Servidores 45274
Total en kW 45.27
Carga Total del Data Center
Método A: Por equipo
Concepto Datos requeridos Cálculo de calor Cálculo sub-
total
Equipo TI Carga total en Igual a carga total
Watts* en Watts* _______ Watts
UPS con batería Sistema total en (0.04 x sistema) +
Watts (0.06 x carga de
equipo IT _______ Watts
Distribución de Sistema en Watts (0.02 x sistema) +
carga eléctrica (0.02 x carga de
equipo IT _______ Watts
Iluminación Área en metros2 21.53 x área (m2) _______ Watts
Gente Cantidad máx. 100 x cant. máx. _______ Watts
Total Suma sub-totales Suma sub-totales _______ Watts
* El valor de placa es un valor de seguridad; el valor real puede ser entre 30 y 65%; nunca
sobrepasa 80% (Fuente: Data center power requirements: measurements from Silicon Valley -
J. Mitchell-Jackson, J.G. Koomey, B. Nordman, M. Blazek - US Department of Energy)
Carga Total del Data Center
Método A: Por equipo
CARGA UPS (kW) OTROS (kW) CÁLCULO DE HVAC (BTU/TR)
Iluminación Cálculo de aire:
Servidores 45.27 3.83 60.25
78m2 *21.5W 55.27 + 4.98 kW
Gente Conversión a BTUh:
Otros equipos 10.00 0.60 205,573
6 x 100W 60.25 x 3412
Distr. Eléctrica Calor de UPS (BTUh)
Total equipos 55.27 0.55 24,000
(1%)
Total en BTUh 229,573
Conversión a TR:
Carga Total de UPS 55.27 Carga Total 4.98 Total de aire 19.13 TR
Carga Total Aires 52.00
Carga Total del Data Center
Método B: Por área/rack
Fuente: Cooling Strategies for Ultra-High Density Racks and Blade Servers
by Neil Rasmussen (APC Rev. 2006-5)
Carga Total del Data Center
Método B: Por área/rack
Ejemplo
ASHRAE Thermal
Report:
450W típico
Carga Total del Data Center
ASHRAE® Power Trends (W/equipo m2):
Fuente: Datacom Equipment Power Trends and Cooling Applications (ASHRAE 2005)
ASHRAE® Power Trends
W/equipo m2 W/rack
Carga Total del Data Center...?
Vida útil del Data Center
Data Center ≥ 10
Equipo 3-5
Vida en años
PC 1-3
Software ?
Vida útil del Data Center
CONFORT PRECISIÓN
Tiempo
2080 horas/año 8760 horas/año
funcionamiento
El aire caliente mezcla con el aire frío...
Captura del aire caliente es crítico para el funcionamiento correcto del sistema.
Fuente: Design Considerations for Datacom Equipment Centers (ASHRAE 2005)
Comparación de eficiencia
A: Agua
helada 1
B: Agua
helada 2
C: Agua
helada con
separación
de retorno de
aire
Eficiencia de CRACs y temperatura de aire de retorno
5.5°C 1°C .8 TR
Ejemplo:
Para enfriar 1 kW
requiere de ̴ 154 cfm 1 rack con 6 kW (6000 W)
6000 X 3.41 = 20460 BTU o 1.7 TR
de aire a 1 atmósfero
Limitaciones del piso falso
Placa perforada 25%
12
Capacidad Con Extremo No practico
Típica Esfuerzo
10 Blade Servers
Rack Power (kW)
4
Standard IT Equipment
2
0
0 100 200 300 400 500 600 700 800 900 1000
[47.2] [94.4] [141.6] [188.8] [236.0] [283.2] [330.4] [377.6] [424.8] [471.9]
El aire caliente en los pasillos calientes regresa a los CRACs por el plafón, evitando
“short circuiting.”
NOTA: La cantidad de aire de retorno ≤ aire de suministro!
Otras consideraciones:
9 Sellar pasos en piso falso
9 Sellar pasos entre áreas (fire stopping)
9 Sellar el plafón
9 Distribución balanceada de equipos
9 Evitar nichos y obstrucciones en cámara plena
9 Instalar paneles ciegos en los racks para control de flujo de aire:
Pasillos fríos y calientes con Vertical Overhead (VOH):
Consideraciones para VOH:
Sun
Microsystems
Data Center
Santa Clara, Ca.
Gabinetes con retorno de aire
Fuente: Datacom Equipment Power Trends and Cooling Applications (ASHRAE 2005)
Consideraciones:
LAWRENCE BERKELEY
NATIONAL LABORATORY
“Right sizing” el UPS
A partir de 60% de carga el
UPS es más eficiente:
LAWRENCE BERKELEY
NATIONAL LABORATORY
Ejemplo de enfriamiento y UPS escalables:
LAWRENCE BERKELEY
NATIONAL LABORATORY
Comparativo entre 8.1 y 8.2
Relación en ahorro de energía
GREEN GRID METRICS: Describing Data Center
Power Efficiency Technical Committee White Paper
PUE = DCiE =
Total Facility Power IT Equipment Power
IT Equipment Power Total Facility Power
Ejemplo: Ejemplo:
100kW/40kW = 2.5 (PUE) 40kW/100kW = 0.4 (DCiE)
GREEN GRID METRICS: Describing Data Center
Power Efficiency Technical Committee White Paper
Mejores practicas:
9 “Rightsizing” la infraestructura física
9 Utilizar componentes eficientes
9 Diseñar un sistema eficiente
9 Pasillos fríos y calientes
9 Sellar pasos entre equipos y fugas de aire
9 Configuración de software de servidores
9 Virtualización
9 Servidores eficientes (240V) y consolidación
9 Iluminación eficiente
9 Coordinación de CRACs para evitar “demand fighting”
Perdidas en UPS
Promedio a carga
de 100%
Promedio parado
HVAC a la medida
• Reducción en tamaño de CRACs
• Más aire donde se requiere
• Flujo de aire variable
• Crecimiento modular
Costo beneficio de “right sizing”
Flexibilidad en el crecimiento
• Adaptación a nuevas tecnologías
• No requiere de “bola de cristal”
• Planeación ordenada
• Sí requiere coordinación con proveedor
Costo beneficio de “right sizing”
Fuente: HP
La mayoría de servidores ya son
preparados para 240V
Fuente: APC
Costo beneficio de 240V
Ventajas de 240 V
• Más corriente
• Menos circuitos y cables a los racks
• Más eficiente que 120V
• Ahorro en energía eléctrica
Tetraedro de fuego
MECANISMOS DE EXTINCION
Tradicional Pre-Acción
NFPA 75 requiere:
Agua:
Es el agente extintor más antiguo. Apaga por enfriamiento, absorbiendo
calor del fuego para evaporarse. La cantidad de calor que absorbe es
muy grande. En general es más eficaz si se emplea pulverizada, ya
que se evapora más rápidamente, con lo que absorbe más calor. El
agua cuando se vaporiza aumenta su volumen 1600 veces.
Es especialmente eficaz para apagar fuegos de clase A (sólidos), ya que
apaga y enfría las brasas.
No debe emplearse en fuegos de clase B, a no ser que esté
debidamente pulverizada, pues al ser más densa que la mayoría de
los combustibles líquidos, éstos sobrenadan. Es conductora de
electricidad, por lo que no debe emplearse donde pueda haber
corriente eléctrica, salvo que se emplee debidamente pulverizada, en
tensiones bajas y respetando las debidas distancias.
AGENTES EXTINTORES
Espuma:
Es una emulsión de un producto espumógeno en agua. Básicamente
apaga por sofocación, al aislar el combustible del ambiente que lo
rodea, ejerciendo también una cierta acción refrigerante, debido al
agua que contiene.
Se utiliza en fuegos de clase A y B (sólidos y líquidos).
Es conductora de la electricidad, por lo que no debe emplearse en
presencia de corriente eléctrica.
AGENTES EXTINTORES
Líquidos Flamables
Clase B
Gases Flamables
Ti
po
Ti de
p o Pr
od A AB ABC BC ABC
de Bióxido de Agentes
Fu ucto Sólido Espuma Polvo
Carbono Halogenados
eg
o
A SI SI SI
Poco eficiente
SI
Sólido Muy eficiente Eficiente Muy eficiente Eficiente
B NO SI SI SI SI
Líquido Es eficiente Muy eficiente Muy eficiente Eficiente Muy eficiente
C NO NO SI SI SI
Riesgo debe usarse debe usarse Eficiente Eficiente Muy eficiente
Eléctrico
1: Envoltura óptica
2: Tapa
3: Cuerpo
4: Foto diodo
5: LED infra rojo
Detector iónico
Cámara de ionización.
* Nota: Así llamados por que no dejan residuos después de ser descargados.
* Nota: CO2 no puede ser usado en áreas ocupadas por humanos; su
concentración de 34% es letal! [Fuente: Carbon Dioxide as a Fire
Suppressant: Examining the Risks (EPA Feb. 2000)]
Agentes Limpios
Gases Inertes
Un agente limpio que contiene entre sus componentes
primarios un o más de los gases:
• Helio
• Neón
• Argón
¿Como funcionan?
• Reducción de oxígeno a < 15% de concentración
Agentes Limpios
Halocarbonos
Un agente limpio que contiene entre sus componentes
primarios un o más de los elementos:
• Flúor
• Cloro
• Bromo
• Yodo
¿Como funcionan?
• Reacción química: 80%
• Enfriamiento: 20%
Agentes Limpios (Halocarbono)
FM-200 (HFC-277ea, Heptafluoropropane, CF3CHFCF3)
NOAEL: No Observable Adverse Effect Level (La concentración más alta que no se
ha observado adversos efectos fisiológicos o toxicológicos).
LOAEL: Lowest Observed Adverse Effect Level (La concentración más baja que se
ha observado adversos efectos fisiológicos o toxicológicos).
Agentes Limpios (Halocarbono)
Ecaro-25 (FE-25, HFC-125, Pentafluoroethane, CHF2-CF3)
• NFPA 750
• Agua de alta presión con boquillas especiales
• El mist (niebla) queda suspendido en aire
• No conductivo
• Requiere de bombas de alta presión
• Para cuartos mecánicos/eléctricos o pequeños D.C. (< 100m2)
• Calentamiento global – es pura agua!
Hypoxic Air Venting
Ventilación Hipóxica de Aire (FirePASS, etc.)
¾ El sistema tendrá:
a) Estaciones manuales que duplican las secuencias 1-3
b) Su activación cancela funciones de time-delay y aborto
* Nota: La NFPA 75 (8.4.2.1) permita que la decisión
de apagar la energía eléctrica reside con el
usuario basado en su análisis de riesgo.
Otras consideraciones
A
Plafón Falso
Vertical
C
B Área General
Piso Falso
A
®
TIPO DE
CABLES DE COBRE CABLES DE FIBRA
AMBIENTE
OFNP
Cámara Plena CMP
OFCP
Cableado entre OFNR
CMR
pisos (Riser) OFCR
OFN(G)
Área General CM(G)
OFC(G)
Cámaras Plena (NEC)
NEC Artículo 800 (2005)
45
40 PE
35
Gasolina
30
25
MJ/kg
20 Madera
PVC
15
Papel LS0H
10
FEP
5
0
SEGURIDAD FÍSICA
TIA 942 (G.6.1.5 Building
management system)
9 Arquitectónicas
9 Electrónicas
9 Operacionales
Arquitectónico
Paisajismo
Iluminación
Puertas, chapas, ventanas
Espacios seguros
Infraestructura
Electrónico Operacional
Control de acceso Personal de seguridad
Detección de intrusión Políticas y procedimientos
CCTV Sensibilización
Grabación de video digital Preparación para emergencias
Audio dedicado Planeación para contingencias
Capas
• Acceso total
• Aislamiento total
Análisis de riesgo
Tipos de lectores:
• ¿Que tienes? - Tarjetas de proximidad, Wiegand, banda
magnética, etc.
• ¿Que sabes? - Usualmente teclado con códigos de acceso
• ¿Quien eres? - Algún tipo de lector biométrico
Control de Acceso
Tipos de medio:
• Cobre (UTP, FTP, STP)
• Fibra Óptica (Multimodo, monomodo)
• Inalámbrico (Microonda, radiofrecuencia, infrarrojo)
• Conexión por red celular
Chapas eléctricas
Consideraciones:
• Preparación especial de puerta
• Conexión a tablero de control de incendios
Chapas electromagnéticas
Consideraciones:
• Operación “fail-safe”
• Requieren de otro tipo de chapa adicional
• Fuerzas comunes de 700, 1200, 1650 lbs.
CCTV (Closed Circuit TV)
Costo
Cableado
Vida
Switches
PC
Software
Access Access
Providers EC Providers
HC Backbone Access
Telecommunication Room Providers
Backbone
Entrada Secundaria
MC EC
Area de Distribución Principal
Cableado Backbone
Backbone
Area de Distribución
HC HC HC
Horizontal
Interconnect
Cableado Punto de
Horizontal Cableado
Horizontal Consolidación
Interconnect
Equipamiento Activo Interconnect Interconnect
Equipamiento
Dispositivos de Equipamiento Equipamiento
Almacenamiento Activo
Activo Activo
Area de Equipos
TOPOLOGÍA: Modular para
Data Centers grandes
Carriers
(Micro) Coaxial
MDA
UTP
Cat. 6A 100m
Clase F 100m
La palabra clave:
Flexibilidad
DUCTO METÁLICO
• Cada 30 metros
• Después de dos codos de 90º
Llenado de tubería:
Tipos de charola:
Escalerilla
Malla de acero Canal ventilado
• Planos
• Racks
• Paneles
• Cables
* TIA-942 Annex B
PLANOS
Se debe realizar una grilla acorde al piso falso (24”X24” o
61x61 cm)
RACKS & PANELES
AJ05-A01 / AQ03-B01
RESUMEN EJECUTIVO
Resumen del Proceso de Planeación, Diseño, Construcción,
Implementación y Operación & Mantenimiento
Planeación, Diseño, Construcción, Implementación y
Operación & Mantenimiento
Planeación
• Entender las necesidades del cliente
• Tendencias de TI
• Selección del sitio
• Formular plan del proceso
• Establecer parámetros básicos (Nivel de calidad, Tiers)
• Análisis económico
• Diseño conceptual y presupuesto
Planeación, Diseño, Construcción, Implementación y
Operación & Mantenimiento
Diseño
• Arquitectónico y Estructural
• Mecánico, Eléctrico y Plomería (MEP)
• Protección contra Incendio
• Seguridad Física y Control de Acceso
• Sistemas de TI
• Cableado Estructurado
Planeación, Diseño, Construcción, Implementación y
Operación & Mantenimiento
Construcción
• Documentos (Planos, Especificaciones, Permisos)
• Contratistas y Proveedores
• Ejecución de Obra
• Cableado Estructurado
• Instalación de Equipos
• As-builts
Planeación, Diseño, Construcción, Implementación y
Operación & Mantenimiento
Implementación*
• Certificación del Cableado
• Plan de Commissioning
• Arranque de Equipos
• Pruebas de Equipos
• Reportes Finales de Pruebas
• Equipos de TI
• Plan de Mantenimiento
• Monitoreo de Seguridad
• Notificación en Caso de Fallas
• Procedimiento Establecido
• Reporte/Análisis de Evento
• Acción Correctiva
Planeación, Diseño, Construcción, Implementación y
Operación & Mantenimiento
www.searchdatacenter.com
www.datacenteruniversity.com
www.datacenterjournal.com
www.uptimeinstitute.org
www.nfpa.org
www.bicsi.org
www.tiaonline.org
www.ashrae.org
www.ieee.org
www.thegreengrid.org
www.usgbc.org
www.lbl.gov