de Datos Adaptado por: Ing Manuel Pealoza Figueroa Septiembre 2007 UNSAAC-DAI TEMARIO Visin general del estndar para Centro de Datos: TIA-942 Cmo es definido un centro de datos? Para quin es el estndar? Cmo puede el estndar ayudar a disear mejor la infraestructura? Opciones de medios para cableado Ejemplos de aplicaciones tpicas Disear en base a Estndares y Mejores Prcticas TIA/EIA-942: estndar de Centro de Datos Uptime Institute: clasificaciones en niveles Artculos 250, 300, 770 & 800 de NEC BICSI TDMM & ITSIM Cdigos/Regulaciones locales y nacionales En todos los casos, los cdigos de la jurisdiccin toman precedencia.
Disear en base a Estndares y Mejores Prcticas TIA-568-B.1 TIA-568-B.2 TIA-568-B.3 TIA-569-B TIA-606-A J-STD 607 TIA-758-A ANSI T1.336 (Universal Telecommunications Frame) Interesados Interesados Interesados Interesados Ingenieros en Informtica Ingenieros en Telecomunicaciones Ingenieros Electrnicos
Estndar Estndar: es una prctica recomendada El uso de estndares obliga a cumplir con ciertos requerimientos de rendimiento performance. Los estndares son creados para asegurar diseo y performance uniformemente de alta calidad en muchas industrias. Adems funcionan para asegurar y fomentar un alto nivel de competicin dentro de la industria a fin de que los usuarios reciban la mejor performance a precios competitivos Estndar Trabajaremos con ellos a lo largo del ejercicio de nuestra profesin TIA-942 Descripcin El estndar especifica los requerimientos mnimos para la infraestructura de telecomunicaciones de centros de datos y cuartos de computadoras incluyendo centros de datos empresariales de nico inquilino y centros de datos de "hosting" de Internet multi-inquilinos. La topologa propuesta en este documento est pretendida para ser aplicable a cualquier tamao de centro de datos TIA-942: Bloques de Construccin TIA-942: Resumen Propsito: Proveer requerimientos & lneas de gua para el DISEO e INSTALACIN de un centro de datos cuarto para computadoras El estndar har posible que el diseo del CD sea involucrado temprano en el proceso de construccin Deja margen para planificacin de largo plazo de centros de datos para soportar crecimiento y aplicaciones futuras Perfil del Standard Diseo Infraestructura del Sistema de Cableado Espacios de Telecomunicaciones & Topologas Sistemas de Cableado Rutas del Cableado Redundancia Anexos informativos TIA-942: Tpicos Claves 1) Cableado 2) Pathways y espacios 3) Redundancia 4) Diseo de la red 5) Ubicacin 6) Acceso 7) Arquitectura 8) Diseo del ambiente 9) Diseo elctrico 10) Proteccin del fuego 11) Intromisin del agua El centro de datos puede ser un cuarto dentro de un edificio u ocupar un edificio entero de su propiedad. Centro de Datos: Que es? "Un edificio porcin de un edificio cuya funcin principal es alojar un ambiente para computadoras y sus reas de soporte" Centro de Datos: Que es? Un cuarto una red de cuartos que aloja los activos interconectados de procesamiento de datos, de almacenamiento y de comunicaciones de 1 ms empresas. Centro de Datos Propsito: El propsito del centro datos es alojar los activos de datos en un entorno que satisface sus necesidades por potencia, HVAC, telecomunicaciones, redundancia y seguridad. Los activos incluyen equipos activos montados en racks en gabinetes y un sistema de cableado estructurado para interconectarlos. Centro de Datos Los parmetros para los centros de datos estn definidos en los estndares: TIA-942 (Norte Amrica) EN 50173-5.200X (Europa) ISO/IEC Draft 24764 (Internacional) Centro de Datos Centro de Datos Centros de Datos: Tipos (Dominio) Privado, Empresarial Corporativo (Dominio) Pblico, de Internet de Hosting Los Centros de Datos se dividen en 2 tipos categoras basado en la clase de servicio que ellos proveen Centros de Datos: Tipos Centro de Datos Empresarial: Sirve las necesidades de una nica compaa, campus u operacin global. Puesto que el centro de datos empresarial provee servicios de comunicacin y de datos a una nica compaa empresa, es el "core/ncleo" del sistema de redes de la compaa as como de su Internet y del acceso telefnico. Servidores web, hubs de intranet, NAS (Network Attached Storage) y otros equipos estn tpicamente localizados aqu. Centros de Datos: Tipos Centro de Datos Privado: Es uno que es manejado por el departamento de TI de la propia organizacin, y provee las aplicaciones, el almacenamiento, el Web-hosting, y funciones de e- business necesitadas para mantener las operaciones plenas. Centros de Datos: Tipos Centro de Datos Corporativo: Provee servicios de comunicacin y de datos a una nica compaa empresa. El centro de datos corporativo es el ncleo para el networking de datos de la compaa as como para su acceso a Internet y telfonos. Servidores Web, hubs de intranet, NAS (Network Attached Storage) y mucho ms estn tpicamente localizados aqu. Tpicamente soporta: Una presencia Web para soporte al cliente y acceso remoto. Centros de Datos: Tipos Centro de Datos de "Hosting" Sirve a una variedad de clientes y es posedo por un proveedor de servicios que vende servicios de datos y de Internet (tal como Web-hosting VPN a varios clientes). Centros de Datos: Tipos Centro de Datos Pblico Proveen servicios yendo desde colocacin de equipos hasta Web-hosting administrado. Los clientes tpicamente accesan sus datos y aplicaciones va el Internet. Centros de Datos: Tipos Centro de Datos de Hosting: Son posedos y operados por compaas de servicio que comercializan acceso-web, hosting, y otros servicios basados en Internet. Un amplio rango de estos servicios puede ser definido: Colocacin Colocacin administrada Hosting totalmente administrado Centro de Datos outsourced Centros de Datos: Tipos Mientras que ambas clases de centros de datos usan equipo e infraestructura de red similares, el centro de datos de "hosting" tiene el requerimiento para delimitacin y seguridad adicionales. Centros de Datos Para conservar los equipos corriendo confiablemente, an bajo las peores circunstancias, todos los centros de datos son construidos con las siguientes infraestructuras de soporte cuidadosamente "con ingeniera": Suministro de energa y backup Control del enfriamiento y ambiental Sistemas para el fuego y el humo Seguridad fsica Conectividad a redes externas NOC (Network Operations Center) Cableado Puesta a tierra Centro de Datos: Diseo Coordinar todos los aspectos de un centro de datos es crtico, lo cual debe incluir: Sistema de cableado de telecomunicaciones Plano de piso del equipamiento Planos elctricos Plano arquitectural HVAC Seguridad Sistema para rayos Centro de Datos: Diseo Principios del Diseo de la Infraestructura de una Centro de Datos: Ahorrar espacio: Maximizar los recursos de espacio es un aspecto crtico del diseo de un centro de datos. Confiabilidad: Diseos redundantes, a prueba de fallas y para mximo "uptime" (tiempo de actividad operacin) Administrabilidad: Principio clave para optimizar el CD. Se disea la infraestructura para ser un servicio altamente confiable y flexible para adecuar todo desde upgrades y modificaciones hasta recuperacin de desastres. Centro de Datos: Diseo Por qu? Centro de Datos: Diseo Administracin del cable? Es realmente importante? Centro de Datos: Diseo Centro de Datos: Diseo Antecedentes (1/3): TIA/EIA-568-B define 7 Subsistemas Centro de Datos: Diseo Antecedentes (2/3): TIA/EIA-568-B.1: define: Instalacin de Entrada Cuarto de Equipos Cuarto de Telecomunicaciones Punto de Consolidacin rea de Trabajo Centro de Datos: Diseo Antecedentes (3/3): ANSI/TIA/EIA-568-B.1-2001 Centro de Datos: Diseo Proceso de Diseo Recomendado Estimar necesidades a full capacidad para todo el equipamiento Anticipar crecimiento futuro sobre la vida del centro de datos Proveer todos los requerimientos a arquitectos e ingenieros Crear un plano de piso del equipamiento Disear el sistema de cableado de telecomunicaciones Centro de Datos: Elementos Genricos Instalaciones de Entrada Espacio para oficinas Oficinas del Staff de Soporte Centro de Operaciones Cuarto de Computadoras Cuartos de Telecomunicaciones y de Equipos Cuartos Elctrico & Mecnico UPS, Cuarto de Bateras, Tableros del Switch principal y HVAC Cuartos de Almacenamiento Plataformas de Carga acceso a ascensores de artculos, bienes y/o mercancas Staff de soporte Cuarto(s) de Entrada Cuartos Mecnico & Elctrico del CD NOC TRs sirviendo espacios del CD Cuartos de Almacenamiento & Bancos de Carga Cuarto de Computadoras Oficina General (espacio fuera del CD) TRs & ERs sirviendo espacios fuera del CD Centro de DatosVCD sitio del edificio Shell del edificio Inter relacin de espacios en un CD Figura: Interrelacin de espacios en un centro de datos Trminos & Definiciones N+1 (Necesidad + 1) Concurrentemente Mantenible: Permite que las operaciones continen mientras ejecutando mantenimiento planificado, reparacin & reemplazo de componentes, la adicin retiro de componentes de capacidad, test del sistema & componentes, Tolerante a Fallas: Concurrentemente mantenible + permite al "site" aguantar una falla de peor-caso. Patch Panel Vista posterior recuadro (vista anterior) Mtodos de Conexin Conexin Directa Interconexin Cross-connect Mtodos de Conexin Cross-connect Interconexin Mtodos de Conexin Antecedentes ANSI/TIA/EIA-568-B Commercial Building Telecommunications Cabling Standard ISO/IEC 11801 Information Technology Generic Cabling for Customer Premises Modelos de Canal para el rea de Trabajo: ANSI/TIA/EIA-568-B Conexin: (definicin) Una conexin es donde 2 segmentos de cableado llegan juntos. Mtodos de Conexin: rea de Trabajo Figura: Modelo de 2 Conexiones: Interconexin al Outlet de Telecomunicaciones Interconexin Mtodos de Conexin: rea de Trabajo Figura: Modelo de 3 Conexiones: Cross-connection al Outlet Telecomunicaciones Cross-connection Mtodos de Conexin: rea de Trabajo Figura: Modelo de 3 Conexiones: Interconecxin a un Punto de Consolidacin Interconexin Mtodos de Conexin : rea de Trabajo Figura: Modelo de 4 Conexiones: Cross-connection con un Punto de Consolidacin Cross-connection Mtodos de Conexin: Data Center Interconexin Figura: Modelo de 2 Conexiones: Interconexin a Interconexin Mtodos de Conexin: Data Center Figura: Modelo de 3 Conexiones: Cross-connection a Interconexin Cross-connection Mtodos de Conexin: Data Center Figura: Modelo de 3 Conexiones: Interconexin con un Punto de Consolidacin Interconexin Mtodos de Conexin: Data Center Figura: Modelo de 4 Conexiones: Cross-connection a Punto de Consolidacin Cross-connection Mtodos de Conexin: Data Center Figura: Modelo de 4 Conexiones: Cross-connection a Cross-connection Cross-connection Niveles de un Centro de Datos Se relaciona con los niveles de disponibilidad de infraestructura Las clasificaciones por niveles fueron originalmente definidos por The Uptime Institute Aborda los sistemas crticos del centro de datos Los sistemas crticos pueden tener diferentes clasificaciones Clasificaciones pueden ser degradadas ya que la carga del centro de datos se incrementa a travs tiempo Nivel I - Bsico Trayecto nico para potencia y distribucin de enfriamiento Ningn componente redundante Puede no tener un piso levantado Susceptible a discontinuidad a partir de actividad planificada y no-planificada 28.8 horas de "downtime" ("tiempo de parada") anual Nivel I - Bsico Figura: Ejemplo de una reducida topologa de un Centro de Datos Nivel I - Bsico Figura: Topologa de un Centro de Datos reducido Nivel II Componentes Redundantes Trayecto nico para potencia y distribucin de enfriamiento Componentes redundantes Tiene un piso levantado Ligeramente menos susceptible a discontinuidades que Nivel I 22.0 horas de "downtime"/"tiempo de para" anual Nivel II Componentes Redundantes Figura: Ejemplo de Piso Levantado y Pedestales Nivel II Componentes Redundantes Figura: Pedestales y Rejillas del Piso Levantado Nivel II Componentes Redundantes Figura: Instalacin del Piso Levantado Nivel II Componentes Redundantes Figura: Bandejas de cable tipo cesta para cableado bajo piso levantado Nivel III Concurrentemente Mantenible Mltiples trayectos de potencia y de distribucin del enfriamiento Slo 1 trayecto activo Componentes redundantes Deja un margen para cualquier actividad planificada de la infraestructura del sitio sin disturban operacin del hardware del computador 1.6 horas de "downtime"/"tiempo de para" anual Nivel III Concurrentemente Mantenible Nivel IV Tolerante a Fallas Mltiples trayectos de potencia y de distribucin de enfriamiento activos Componentes redundantes Todo el hardware de la computadora tiene que tener entradas duales de potencia Podra sostener al menos un peor-caso, falla no- planificada evento con ningn impacto de carga crtico 0.4 horas de "downtime"/"tiempo de para" anual Niveles de un Centro de Datos Niveles de un Centro de Datos TIA-942: Define los Sistemas Crticos Telecomunicaciones* Arquitectural y Estructural Elctrico Mecnico Nivel 1 Requerimientos de Telecomunicaciones Cableado, racks, gabinetes & pathways satisfacen requerimientos del TIA-942 Tiene 1 pathway de entrada desde el proveedor del acceso a la instalacin Pathway nico para todo el cableado Etiquetado recomendado: ANSI/TIA/EIA-606-A y anexo B Nivel 2 Requerimientos de Telecomunicaciones Todos los requerimientos del Nivel 1 Tiene 2 pathways de entrada desde el carrier (proveedor de acceso) a las instalaciones Routers & switches tienen fuentes de alimentacin y procesadores ambos redundantes Aborda vulnerabilidad de la entrada de servicio al edificio Nivel 3 Requerimientos de Telecomunicaciones Todos los requerimientos del Nivel 2 Ser servido por al menos 2 carriers (proveedores de acceso) Un cuarto de entrada secundario Pathways del backbone redundantes Mltiples routers y switches para redundancia Aborda vulnerabilidad de un nico proveedor de acceso (carrier) Nivel 4 Requerimientos de Telecomunicaciones Todos los requerimientos del Nivel 3 Cableado del backbone redundante Cableado del backbone debe de estar en conductos (ser canalizado) tener armadura de inter bloqueo rea de distribucin secundaria opcional Cableado horizontal redundante opcional Aborda cualquier vulnerabilidad de la infraestructura del cableado Niveles: Resumen Niveles: Resumen Espacios de Telecomunicaciones ANSI/TIA-942: Espacios para soportar equipos de telecomunicaciones & cableado: 1) Cuarto de Entrada (ER) 2) Cuarto de Telecomunicaciones (TR) 3) Cuarto de Computadoras 4) rea de Distribucin Principal (MDA) 5) rea de Distribucin Horizontal (HDA) 6) rea de Distribucin de Zona (ZDA) 7) rea de Distribucin de Equipos (EDA) Ejemplo de la topologa bsica del centro de datos de TIA-942 Ejemplo: Topologa del Centro de Datos bsico, TIA-942 Cuarto de Entrada (ER) Punto de delimitacin del carrier ( proveedor de acceso) Equipo de terminacin de cables del carrier ( proveedor de acceso) Interface entre cableado del centro de datos y cableado inter-edificios Rutas para todos los cables de entrada Puede estar localizado dentro fuera del cuarto de computadoras Cuarto de Entrada (ER) Espacio donde los circuitos del carrier, de los proveedores de acceso (WAN) e instalaciones del campus entran al edificio. En centros pequeos/medianos podran ser localizados en el Centro de Datos mismo. V Instalacin de Entrada (TIA/EIA-568). Cuarto de Telecomunicaciones (TR) Espacio dedicado a la oficina y operaciones del Centro de Datos NOC Puede ser combinado con un HDA/MDA No ser confundido con una TR empresarial rea de Distribucin Principal (MDA) Punto central de distribucin Incluye el cross-connect principal (MC) Puede incluir el cross- connect horizontal (HC) Routers & switches "core" para LAN/SAN, PBX estn localizados aqu Localizado dentro del cuarto de computadoras Debe de haber al menos 1 MDA rea de Distribucin Principal (MDA) Es el espacio central donde el punto de distribucin para el sistema de cableado estructurado en el CD est localizado. Puede servir mltiples HC Potencialmente un cuarto dentro de otro cuarto para seguridad aadida. V Cuarto de Equipos (TIA/EIA-568). rea de Distribucin Horizontal (HDA) Soporta todo el cableado a las reas de distribucin de equipos (EDAs) Incluye el cross-connect horizontal (HC) Switches para los equipos en el EDA estn localizados aqu Esta localizado dentro del cuarto de computadoras Mnimo de 1 HDA por piso rea de Distribucin Horizontal (HDA) Localizacin tpica de los: Switches LAN Switches SAN Switches KVM que soportan los equipos finales. Generalmente hay varios HDAs Si mltiples usuarios asegurar rea V Cuarto de Telecomunicaciones (TIA/EIA-568). Cross-connect Horizontal (HC) HC incluido en el HDA puede estar en el TR y/o MDA El cross-connect horizontal es un gran campo de "parcheo" que distribuye "cables horizontales" hacia fuera a los equipos (.e.g. servidores, mainframes, dispositivos de almacenamiento). Tpicamente, la principal tarea del HC es proveer un medio para "parchear" los cables horizontales a los puertos en los switches de borde ( acceso). TIA-942 tambin da gua para un mtodo de Cableado Centralizado de FO, en el cual los cables horizontales son conectados directamente a un cable backbone multi-fibra antes que a un switch. rea de Distribucin de Zona (ZDA) Punto de inter-conexin opcional dentro del cableado horizontal Localizado entre el HDA y EDA Permite re-configuracin frecuente y flexibilidad Debe de servir un mximo de 288 conexiones para evitar congestin de cables Debera no tener equipo activo (excepto para potencia DC) rea de Distribucin de Zona (ZDA) Debera estar limitado a servir un mximo de 288 conexiones coaxiales de par trenzado Cross-connect no ser usado en el ZDA No ms de 1 ZDA ser usado dentro de la misma corrida del cable horizontal. No habr ningn equipo activo en el ZDA, excepto equipo de potencia DC. Debe de estar 15 m. del HDA Localizacin del outlet de zona. V Punto de Consolidacin (TIA/EIA-568). rea de Distribucin de Equipos (EDA) Espacio para equipos finales: Servidores Mainframes Tape Drives Cableado horizontal es terminado aqu sobre los patch panels Cableado punto-a-punto entre equipos es permitido rea de Distribucin de Equipos (EDA) Son espacios asignados para los equipos finales, incluyendo sistemas de computadoras, equipos de comunicaciones y servidores. El equipo final es usualmente equipo de pie equipo montado en gabinetes racks. Los cables horizontales son terminados en las EDAs conectndose a hardware montado en gabinetes racks. Cableado punto-a-punto es permitido entre equipos localizados en el EDA. el cable sera mayor que 15 m. y conectara equipos en racks gabinetes adyacentes en la misma fila. V rea de Trabajo (TIA/EIA-568). Espacios de Telecomunicaciones Un CD puede tener 1, ninguno mltiples de cualquiera de estos espacios Pasillos Calientes y Fros Gabinetes/racks debern ser arreglados en un patrn alternante, con partes delanteras de los gabinetes/racks enfrentando uno al otro en una fila para crear pasillos "calientes" y "fros". Pasillos Calientes y Fros Pasillos: Pasillos fros estn en frente de racks y gabinetes. Si hay un piso de acceso, cables de distribucin de poder deberan ser instalados aqu debajo del piso de acceso sobre la losa. Pasillos calientes estn detrs de los racks y gabinetes. Si hay un piso de acceso, las bandejas de cable para el cableado de telecomunicaciones debera ser localizado debajo del piso de acceso en los pasillos calientes. Pasillos Calientes y Fros Espacios libres: Un mnimo de 1 m (3 ft) de espacio delantero ser provedo para la instalacin de los equipos. Un espacio libre delantero de 1.2 m (4 ft) es preferible para acomodar equipos ms profundos. Un mnimo de 0.6 m (2 ft) de espacio trasero ser provedo para acceso de servicio a la parte trasera de racks y gabinetes. Un espacio libre trasero de 1 m(3 ft) es preferible. Algunos equipos pueden requerir espacios de servicio ms grandes que 1 m (3 ft). Pasillos Calientes y Frios Sistema de Cableado del CD ANSI/TIA-942: Componentes de la arquitectura de un sistema de cableado estructurado (1/2): Cableado horizontal Cableado de backbone Cross-connect en el ER MDA Main Cross-Connect (MC) en el MDA Horizontal Cross-Connect (HC) en el TR, HDA MDA Sistema de Cableado del CD ANSI/TIA-942: Componentes de la arquitectura de un sistema de cableado estructurado (2/2): Punto de consolidacin Outlet/(toma seal) de zona en el ZDA Outlet en el EDA Sistema de Cableado del Centro de Datos Medios de Cableado Reconocidos Cable de par-trenzado 100 Ohm Fibra multimodo de 62.5/125 [m 50/125 [m Fibra monomodo Cable coaxial de 75 Ohm Varias opciones para cada medio: Terminaciones tradicionales de campo Configuraciones pre- terminadas Medios de Cableado reconocidos Los cables reconocidos, el hardware de conexin asociado, jumpers, patch cords, cords de equipos y cords del rea de Zona satisfacern todos los requerimientos aplicables especificados en: ANSI/TIA/EIA-568-B.2 y ANSI/TIA/EIA-568-B.3: Cable de par trenzado de 100 ohm: Categora 3 5e que cumple ANSI/TIA/EIA-568-B.2 Categora 6 que cumple ANSI/TIA/EIA-568-B.2-1 (recomendado) Medios de Cableado reconocidos
Cable de fibra ptica MM (multimodo) 62.5/125 m 50/125 m que cumple ANSI/TIA/EIA-568-B.3 50/125 m 850 nm optimizado p' lser que cumple ANSI/TIA- 568-B.3-1 (recomendado) Cable de fibra ptica SM (monomodo) que cumple ANSI/TIA/EIA-568-B.3 Los medios coaxiales reconocidos son: cable coaxial 75 ohm (tipo 734 y 735) (Telcordia Technologies GR-139-CORE) conector coaxial (ANSI T1.404). Medios de Cableado Reconocidos Soluciones pre- terminadas Donde? Ambientes de alta densidad SAN Topologa del Cableado Horizontal rea de Distribucin Horizontal (HDA) rea de Distribucin de Equipos (EDA) rea de Distribucin de Zona (ZDA) rea de Distribucin de Equipos (EDA) cableado horizontal cableado horizontal cableado horizontal Cableado Horizontal Topologa Cableado Horizontal Cableado desde el HDA hasta el EDA incluyendo: Cables horizontales Cross-connects horizontales Patch Cords Opcional punto de consolidacin outlet de zona Distancia del cable horizontal 100 metros MAX La distancia reducida si cable del rea de zona usado Cableado Horizontal El cableado horizontal es la porcin del sistema de cableado de telecomunicaciones que se extiende desde la terminacin mecnica en el EDA hasta el cross-connect horizontal en el HDA hasta el cross-connect principal en el MDA. El cableado horizontal incluye cables horizontales, terminaciones mecnicas, y patch cords jumpers, y puede incluir un outlet de zona punto de consolidacin en el ZDA. Cableado Horizontal Patch cord Cross-connect A mas alta densidad, mas grandes los administradores de cable. Anchos de 6" a 10" es lo normal Cableado Horizontal Patch Panels puede ser instalados en techos suspendidos Patch Panels 48-Puertos THE SIEMON COMPANY Patch bay Cableado Horizontal THE SIEMON COMPANY SD THE SIEMON COMPANY SD THE SIEMON COMPANY SD Patch Cord hacia el Servidor THE SIEMON COMPANY THE SIEMON COMPANY SD Patch Cord hacia el Switch THE SIEMON COMPANY THE SIEMON COMPANY Servidores Switch FA S TA T U S S uppl y 1 P ow er P ow er S uppl y 2 Ca ta ly st SE RI ES 6500 Aplicacin de Muestra HDA EDA Patch Panels 48-puertos TH E SI EMON COMPA N Y TH E SI EMON COMPA N Y Servidores TH E SI EMON COMPA N Y TH E SI EMON COMPA N Y Patch Cord en el switch TH E SI EMON COMPA N Y TH E SI EMON COMPA N Y TH E SI EMON COM PA NY T H E SI EMON COM PA NY Patch Cord en el servidor Switch Cableado Horizontal FA S TA T U S P ow er S uppl y 1 P ow er S uppl y 2 Ca ta ly st SE RI ES 6500 ZDA HDA EDA Topologa del Cableado de Backbone Cuarto de Entrada (ER) rea de Distribucin Principal (MDA) TR rea de Distribucin Horizontal (HDA) rea de Distribucin Horizontal (HDA) Cableado del Backbone Cableado del Backbone Cableado del Backbone Topologa Cableado del Backbone Cableado entre ER, MDA y HDA incluyendo: Cables del Backbone Cross-connects principales Cross-connects horizontales Patch cords Permitir reconfiguraciones de la red y crecimiento futuro Cableado del Backbone La funcin del cableado de backbone es proveer conexin entre el MDA, el HDA y las instalaciones de entrada en el sistema de cableado del CD. El cableado del backbone consiste de los cables del backbone, cross-connects principales, cross- connect horizontales, terminaciones mecnicas y patch cords jumpers usados para cross- connection backbone-a-backbone. Cableado del Backbone Cables patch de fibra Pathways del Cableado Los Centros de Datos se adherirn a las especificaciones ANSI/TIA-569-B con las excepciones anotadas en el estndar. El cableado no ser encaminado a travs de espacios pblicos a menos que encerrado en Pathways seguros. Huecos de mantenimiento, cajas de jalar, cajas de empalme sern cerrados con llave y monitoreados. Pathways del Cableado Pathways del Cableado: Implementacin Pathways separados para potencia y cables de datos Bajo el piso de acceso Arriba de los racks y gabinetes Mixtura de abajo & encima del piso de acceso Mltiples rutas diversas Cuestin de los tamaos del cable: Cat 5e 0.157 Cat 6 0.25 Cat 6a 0.35 (mx.) Pathways del Cableado: Implementacin Ruta del cableado: Pathways definidos Minimizar "zigzag" Distribucin area Distribucin bajo el piso Coordinar con otras utilidades del cuarto Pathways del Cableado: Separacin del Cableado Distancias apropiadas deben de ser mantenidas entre cables elctricos y de par trenzado Circuitos elctricos de bifurcacin deberan estar en conducto de metal flexible hermtico Circuitos elctricos del alimentador a las unidades de distribucin de potencia deberan estar en conducto de metal slido Si se usa bandeja de cable MNIMO de 12" entre bandejas Pathways del Cableado: Separacin del Cableado Pisos de Acceso: Asignar pasillos separados para el cableado de potencia y de telecomunicaciones Si no posible, entonces proveer separacin tanto horizontal como vertical Pathways del Cableado: Separacin del Cableado Usar Pasillos anchos & Luces amplias Pathways del Cableado: Separacin del Cableado Bandejas de Cable: Cableado de fibra y de cobre en bandejas deberan estar separados: Mejora la administracin Minimiza dao a cables de dimetro ms pequeo Si posible, la fibra debera estar encima del cobre Pathways del Cableado: Cuarto de Entrada Todo debera ser subterrneo Cada Proveedor de Acceso (Carrier) debera tener al menos 1 conducto de 4" Satisfacern ANSI/TIA-569-B Pathways del Cableado: Pisos de Acceso Cableado bajo el piso estar en bandejas de cable ventiladas Las bandejas pueden ser instaladas en mltiples capas Las bandejas tendran una profundidad mxima de 6" (150 mm) El piso de acceso debera usar estructura de durmiente empernado Cable tasado Plenum es tpico consultar AHJ Pathways y Espacios: Debajo del piso Preocupaciones: Podra restringir flujo del aire fro La habilidad para crear pathways segregados (separados) La accesibilidad a los cables Pathways y Espacios: Debajo del piso Preocupaciones: Figura: Colocacin de Bandejas de Cable en el croquis de Pasillo Caliente / Pasillo Fro Pathways y Espacios: Debajo del piso Preocupaciones: Figura: Colocacin de Bandejas de Cable en el croquis de Pasillo Caliente / Pasillo Fro Pathways y Espacios: Debajo del piso Preocupaciones: Baldosas slidas a lo largo de los pasillos calientes Baldosas perforadas a lo largo de los pasillos fros Pathways y Espacios: Debajo del piso Preocupaciones: Figura: Usando el vaco del techo como un espacio de aire de retorno Pathways y Espacios: Debajo del piso Pathways y Espacios: Debajo del piso Pathways y Espacios: Debajo del piso Pathways y Espacios: Debajo del piso Coordinar el enrutamiento de potencia y los medios de cable de modo que no bloqueen el flujo de aire Pathways y Espacios: Debajo del piso Pathways de fibra: Mucha variantes Coordinar con potencia, HVAC y deteccin de humo Pathways y Espacios: Debajo del piso Pathways del Cableado: Bandejas de Cable areo Las bandejas pueden ser instaladas en mltiples capas Las bandejas tendrn una profundidad mxima de 6" (150 mm) En espacios comunes de centros de datos de inquilinos-compartidos Bandeja del fondo slida
MIN de 9 ft (2.7 M) encima del piso acabado La bandeja debera estar soportada desde el techo Pathways y Espacios: areos Pathways y Espacios: areos Figura: Ejemplo de Sistema de Pathway de Cableado Areo Pathways y Espacios: areos Figura: Ejemplo de Sistema de Pathway de Cableado Areo Redundancia La confiabilidad de la infraestructura de telecomunicaciones necesita ser incrementada Definida por las clasificaciones de los niveles Es muy comn tener mltiples Proveedores de Servicio Pathways de Entrada deberan estar sobre extremos opuestos del edificio Si ER (Cuarto de Entrada) secundario requerido: El equipo del proveedor de acceso debera ser capaz de operar independientemente 20 metros de separacin Zonas de proteccin del fuego separadas Redundancia N es el requerimiento base operacional N+1 Redundancia N+2 Redundancia 2N 2(N+1) Redundancia: rea de Distribucin Principal (MDA) Si distribucin secundaria requerida: Router y switches "core" deberan ser distribuidos Circuitos deberan ser divididos Separadas zonas de proteccin de fuego Unidades de distribucin de potencia separadas Sistemas de aire acondicionado separados Redundancia de la Infraestructura MDA (principal) SDA (redundante) HDA HDA EDA EDA EDA ZDA Redundancia - Cableado del Backbone Protege contra corte de energa/outage causada por dao Es comn ver cableado adicional MDA a HDA HDA a HDA Cableado debera ser corrido a lo largo de rutas diferentes Si existe rea de Distribucin Secundaria (SDA) No es requerido HDA a HDA Redundancia Cableado Horizontal Cableado debera ser discurrido a lo largo de rutas diferentes Todava debe de satisfacer longitudes de cable 100 metros mximo Equipo crtico puede ser soportado por 2 HDAs Zonas de proteccin de fuego separadas Redundancia: Ejemplo Un CD requiere 200kVA de potencia de UPS. Cual es el diseo preferido? Normal Operation N 100kVA 100kVA N 200kVA Data Center with 200kVA power requirement 1 UPS of 200kVA capacity 2 UPS of 100kVA capacity Hay alguna redundancia? Redundancia: Ejemplo 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA Redundant UPS systems delivering 200kVA power. N N+1 2N 200kVA power required at datacenter Data Center 2(N+1) Redundancia: Ejemplo 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA Component failure Power failure Normal Operation Normal Operation Normal Operation Data Center N N+1 2N 2(N+1) Redundancia: Ejemplo 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA Path failure Power failure Power failure Normal Operation Normal Operation N N+1 2N 2(N+1) Data Center Redundancia: Ejemplo 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA FALLA DOBLE = falla de componentes & path Power Failure Normal Operation 2N 2(N+1) Data Center Redundancia: Ejemplo 100kVA 100kVA 100kVA 100kVA 100kVA 100kVA Normal Operation Data Center 2(N+1) Operacin: Documentacin e Identificacin Qu debe de etiquetarse? Cables Outlets (toma-seales) Racks Patch Panels Backbones Barra elctrica de puesta a tierra Ubicaciones de los firestop (cajas contra incendios) Pathways Espacios Anexo Informativo B Identificacin de la Infraestructura de Cableado Los Centros de Datos deberan adherirse a ANSI/TIA/EIA-606-A con las excepciones como advertido / noted en el estndar TIA/EIA-606-A TIA/EIA-606-A Elementos claves: Identificadores Etiquetado Registros Esquema de Identificacin para el Espacio del Piso El espacio del piso debera seguir la huella del cuadriculado del centro de datos Usar 2 letras y 2 dgitos numricos para identificar cada baldosa del piso de 600mm x 600mm (2ft x 2ft) AA, AB, AC AZ, BA, BB, BC, y as sucesivamente Muestra: Identificador de Espacio del Piso AA AB AC AD AE AF AG AH AI AJ AK AL AM AN 01 02 03 04 05 06 07 08 09 10 11 12 coordenada X coordenada Y Esquema de Identificacin para Racks y Gabinetes Todos los racks y gabinetes deberan ser etiquetados en la parte frontal y parte trasera Para cuartos con pisos de acceso, cada rack y gabinete tener un identificador nico basado en las coordenadas de la baldosa del piso Si gabinete descansa sobre ms de 1 baldosa, la misma esquina de cada gabinete puede ser usada par identificar la ubicacin de la cuadricula Ejemplo: esquina derecha delantera Esquema de Identificacin para Racks y Gabinetes AA AB AC AD AE AF AG AH AI AJ AK AL AM AN 01 02 03 04 05 06 07 08 09 10 11 12 13 coordenada X coordenada Y muestra del Identificador de Gabinete Gabinete de muestra Esquina derecha frontal AJ05 Esquema de Identificacin para Racks y Gabinetes En centros de datos con mltiples pisos, el nmero de piso debera ser agregado como un prefijo al nmero de gabinete. EJEMPLO: Un gabinete cuya esquina frontal derecha est en la baldosa AJ05 en el piso 2, ser nombrado: 2AJ05 Esquema de Identificacin para Patch Panels Cada panel ser etiquetado con un carcter alfabtico comenzando con A, B, C Z etc. Empezar desde la parte superior del rack hacia abajo. Los paneles de administracin del cable horizontal no cuentan cuando se determina la posicin del patch panel panel de administracin del cable V organizador de cables Muestra de Identificadores de Panel en el Rack A B C D E F AJ05 -A a AQ 03 -B Ports 01 -24 AJ05 -B a AQ 03 -C Ports 01 -24 AJ05 -C a AQ 03 -D Ports 01 -24 AJ 05-D a AQ 03-E Ports 01 -24 AJ05 -E a AQ 03 -F Ports 01-24 AJ05 -F a AQ 03 -G Ports 01 -24 Muestra de Identificadores del Patch Panel CAT 6 x 24 Esquina Frontal derecha Gabinete de muestra Esquina Frontal derecha AA AB AC AD AE AF AG AH AI AJ AK AL AM AN AO AP AQ AR AS AT AU AV AW AX AY 01 02 03 04 05 06 07 08 09 10 11 12 13 coordenada Y coordenada X Identificador del Patch Panel Identificador: ubicacin del gabinete del extremo cercano + identificador del patch panel seguido de: ubicacin del gabinete del extremo lejano + identificador del patch panel + nmeros de puertos AJ05-A a AQ03-B Puertos 1-24 Muestra del Identificador del Patch Panel Identificador del Cable y del Patch Cord Cables y patch cords deberan ser etiquetados en ambos extremos con la ubicacin de ambos extremos del cable Ejemplo: Etiqueta del cable en el extremo cercano: AJ05-A01 / AQ03-B01 Etiqueta del cable en el extremo lejano: AQ03-B01 / AJ05-A01 Muestra del Identificador del Patch Cord Muestra del Identificador del Cable Centro de Datos: Aterramiento Sistema de aterramiento de red Centro de Datos: Aterramiento Topologa tpica de puesta a tierra de un CD Centro de Datos: Aterramiento Bonding y grounding (aterramiento) tpicos Centro de Datos: Aterramiento Topologa tpica de puesta a tierra de un CD Centro de Datos: Aterramiento Centro de Datos: Aterramiento Figura: busbars, accesorios aisladores, conductores de puesta a tierra (bonding), y terminales. Centro de Datos: Aterramiento CBN (Common Bonding Network): CBN = Red de Conexionado/Enlazamiento Comn El CBN es el conjunto de componentes metlicos que estn intencionalmente incidentalmente interconectados para proveer los medios principales para efectuar "bonding" y puesta a tierra en el interior de un edificio de telecomunicaciones. Estos componentes incluyen: acero estructural, varas de reforzamiento, tubera metlica, conducto de potencia AC, racks de cable, y conductores de "bonding". El CBN est conectado al sistema de electrodos de tierra exterior. Centro de Datos: Aterramiento SD SERIES II CAT 5 ORTRONICS 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 ORTRONICS Telecom Main Grounding Bussbar Telecom Room Grounding Bussbar Main Building Ground Electrical Panel Electrical Power Ground Workstation Power branch Circuits Power Cord Hub Power Cord FTP Horizontal Cable FTP Patch Cable FTP Patch Cable FTP Patch Panel FTP Jack Ground Wire SD SERIES II CAT 5 ORTRONICS 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 ORTRONICS Telecom Main Grounding Bussbar Telecom Room Grounding Bussbar Main Building Ground Electrical Panel Electrical Power Ground Workstation Power branch Circuits Power Cord Hub Power Cord FTP Horizontal Cable FTP Patch Cable FTP Patch Cable FTP Patch Panel FTP Jack Ground Wire Centro de Datos: Puesta a tierra: Estndares El aterramiento de Centros de Datos est gobernado por los siguientes documentos: TIA-942 Telecommunications Infrastructure Standard for Data Centers. TIA/EIA-J-STD-607-A-2002 Commercial Building Grounding (Earthing) and Bonding Requirements for Telecommunications. IEEE Std 1100 (IEEE Emerald Book) IEEE Recommended Practice for Powering and Grounding Electronic Equipment. Resumen Construido aparte de varios estndares TIA existentes Se enfoca sobre necesidades especficas y aplicaciones del ambiente del centro de datos Recomienda mejor diseo y prcticas de cableado Recomienda diferentes opciones de medios de cableado Herramienta til para diseo e instalacin de un ambiente de centro de datos Resumen ANSI/TIA-942: Estndar que especifica procedimientos para la planificacin y diseo del centro de datos Provee lneas de gua y recomendaciones para implementacin de centros de datos, abarca mucho mas que infraestructura de telecomunicaciones potencia, pathways, proteccin del fuego, puertas, tratamiento de paredes, y otros. Determina 4 niveles para redundancia del centro de datos Considera 568-B, 569-B, 606-A y 607 para el cableado, pathways, administracin y diseo de aterramiento, instalaciones y otros procedimientos. Glosario (1/4) Bonding: El conexionado ( enlazamiento) en conjunto de todas las tierras elctricas de los equipos y del edificio para eliminar diferencias en los potenciales de tierra elctrica. [NEC Articulo 100] La unin permanente de partes metlicas para formar un path elctricamente conductivo que asegura continuidad elctrica y la capacidad para conducir sin incidentes cualquier corriente probablemente a ser impuesta". Cross-connect Una instalacin permitiendo la terminacin de cables as como su interconexin conexin "cruzada" con otro cableado equipos. Tambin conocido como un distribuidor. Glosario (2/4) [NEC Artculo 100] Grounding: "Establecer una conexin, sea intencional accidental, entre un circuito elctrico equipo y la tierra a algn cuerpo conductivo que sirve en lugar de la tierra". Pathway Rutas de cables y/o estructuras de soporte diseadas en un piso falso en el techo Glosario (3/4) Plenum rea/Espacio: Una rea encerrada (tal como el techo el piso) usada para manejar la distribucin del aire. (En edificios) Son espacios para circulacin del aire en sistemas de aire acondicionado y de ventilacin. Plenum Cable: Se refiere a cableado estructurado permitido bajo los cdigos de la construccin para espacios plenum. El cable tasado como plenum tiene quemado-lento, envoltura (forro) resistente-al-fuego que emite poco humo. Uno que ha pasado el test UL 910 para propagacin de flama y opacidad del humo (es la mejor eleccin global para la proteccin de la vida y la propiedad en caso de incendio). Glosario (4/4) SAN: Red de alta-velocidad, separada de la LAN, la cual permite conectividad entre servidores y almacenamiento y est dedicada a mover datos entre estos (dos) dispositivos. (rea) espacios dentro del data center dedicado a almacenar datos. Acrnimos ANSI - American National Standards Institute ASHRAE American Society of Heating, Refrigerating and Air-Conditioning Engineers BICSI Building Industry Consulting Service International CIR Communications Industry Researchers CRAC Computer Room Air Conditioning EIA Electronics Industries Alliance HDDC High Density Data Center IETF Internet Engineering Task Force Acrnimos NCPI Network-Critical Physical Infrastructure NEC National Electric Code NFPA National Fire Protection Association NRIC Network Reliability and Integrity Council PDU Power Distribution Unit POU Power Outlet Unit SAN Storage Area Network TBB Telecommunications Bonding Backbone TGB Telecommunications Grounding Busbar TIA Telecommunications Industry Association TMGB Telecommunications Main Grounding Busbar