INSTRUCTIVO Código:

Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 1 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

1. ALCANCE (*)
Estas instrucciones se aplican para el proceso de “Detener e Iniciar el Driver de Comunicaciones” el que
se encuentra instalado en los servidores SRV_SCADA_1 (192.168.1.1) y SRV_SCADA_2 (192.168.1.2)

2. RESPONSABLE
El operador del centro de cómputo de turno es el encargado de ejecutar el procedimiento.

3. REQUERIMIENTOS
La ejecución de este instructivo deberá realizarse con previa autorización del personal de soporte técnico
del ETIC o personal autorizado del EDP (ver: Instructivo - protocolo de Acceso al Sistema Scada
Metropolitano).

4. FRECUENCIA
La frecuencia de ejecución de este procedimiento es eventual y se ejecutara a solicitud del personal
autorizado.

5. DEFINICIONES (*)
Cluster Scada.- Esta conformado por los servidores SRV_SCADA_1, SRV_SCADA_2 los cuales forman
el cluster llamado SRV_SCADA, este tipo de cluster es ACTIVO – PASIVO, por ello solo el servidor
con E l servicio ACTIVO puede acceder a las unidades compartidas.

BLADE.- Son servidores de diseño modular.

 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 2 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

6 DESARROLLO DEL PROCEDIMIENTO (*)

7. CAIDA O INHIBICION DEL SERVIDOR SRV_SCADA_2

7.1 En caso se presento caída o inhibición del servidor Scada realizar lo siguiente:

 Buscar el servidor SCADA METROPILITANO en el Rack18 de los BLADE HP

 Retirar el Slot del servidor por un lapso de 3 minutos, después volver a introducirlo, considerar
que el Servidor enciende automáticamente, para lo cual debemos esperar 10 minutos a que
responda el Servidor; validar si existe comunicación con el servidor con un ping al servidor
inhibido SRV_SCADA_2 (192.168.1.2), de no existir comunicación volver a intentar retirando del
slot el servidor y volver a colocarlo. En caso no llegue a responder luego de 3 intentos escalarlo
telefónicamente con el administrador responsable.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 3 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

Paso 1.- Conectarse vía CONEXIÓN REMOTA hacia el servidor SRV_SCADA_2 (192.168.1.2) el usuario a
trabajar es clusadmin.

Paso 2.- Primero se debe abrir una sesión del Cluster Administrator para ello: Seleccionar Start /
Administrative tools/ Failover Cluster Management
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 4 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

Aparecerá una ventana similar a:

Desplegar la pestaña CLUSTER_SCADA.SCADA.

Paso 3.- Ubicar el cursor en Service and Applications ejecutar click derecho y se observara el estado de
los servicios del SCADA y su estado ONLINE, tal como se muestra a continuación:

Paso 4.- Primero Colocar en OFFLINE el servicio de COMUNICACIONES del CLUSTER_SCADA tal
como se indica a continuación:
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 5 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 6 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

Paso 5.- Segundo CONMUTAR los servicios Oracle, Scada y DTC (en ese orden) respectivamente
hacia el servidor SRV_SCADA_2. Estos servicios se conmutan en ONLINE.

Nota: Para conmutar uno de los servicios de un servidor hacia otro se debe seleccionar el servicio,
realizar clic derecho, seleccionar la opción “Move this service or application to another node”, luego
realizar click en la opcion: “Move to node xxx” donde xxx es el nodo hacia donde se moverá el servicio.

Paso 6.- Tercero Conmutar los servicios COMUNICACIONES hacia el servidor Scada 2. Estos servicios
se conmutan en OFFLINE.

Paso 7.- Una vez conmutado Colocar en ONLINE el servicio de COMUNICACIONES del
CLUSTER_SCADA.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 7 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

Paso 8.- Verificar que los servicios de COMUNICACIONES, Oracle, Scada y DTC hayan terminado de
conmutar en forma correcta. Se debe observar:

 El estado del servicio sea ONLINE

 El current_Owner debe indica el servidor donde se está ejecutando el servicio.

Paso 9.- Abrir una pantalla en DOS con privilegios de administrador y ejecutar:

C:\> cluster group "Cluster Group" /move

Paso 10.- Finalmente verificar en el Nagios que no aparezca ninguna alerta asociada al servidor SCADA.

Paso 11: Comprobar recursos de históricos.

 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 8 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 9 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 10 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

8. TROUBLESHOOTING

CASO 1: Los disco no se presentan en el Servidor SRV_SCADA_2.

Ante la no activación de los servicios SCADA, revisar la disponibilidad de disco en el Servidor

SRV_SCADA_2

PASO 1: Diagnostico: No se visualizaba los discos en los servidores:

PASO 2: Se procede enganchar los discos con la siguiente opción (Bring this resource online) con click
derecho en disco del Disk Driver, para cada uno de los siguientes servicios SRV_SCADADTC, ORACLE y
SCADA.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 11 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 12 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 4: Revisar los discos servidor SRV_SCADA_2 y los servicios SCADA (Cluster) activo:

PASO 3: Colocar en ONLINE los servicios del CLUSTER_SCADA como en el presente procedimiento.

CASO 2: Activación del servicio de COMUNICACIONES en el servidor SRV_SCADA_2.

PASO 1: Ingresar por escritorio remoto al servidor SRV_SCADA_2 e ingresar al FAILOVER CLUSTER
MANAGEMENT. Se visualiza que el Servicio COMUNICACIONES esta Failed.

PASO 2: Ingresar al FAILOVER CLUSTER MANAGEMENT donde el recurso comunicaciones y abrir

sus servicios internos. Luego darle Bring this resource online (click derecho) a los recursos: BD_Write
y Modbus RTU. NOTA el servicio debe estar en el NODO: SRV_SCADA_2
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 13 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 3: Revisar que el servicio COMUNICACIONES este en Online.

 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 14 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

CASO 3: Reactivación de las curvas de tendencia entrecortadas de la aplicación SCADA Infoplus

(Pantallas)

PASO 1: En el Servidor SRV_SCADA_2, Ingresar a la aplicación Infoplus.21 Administrator.

PASO 2: Ingresar a Infoplus.12/SRV_SCADA_2/Historian y revisar los objetos de base de datos de

tiempo real están caídos (color rojo).
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 15 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 3: Ingresar al Infoplus.21 Manager (en Inicio) y damos Start Infoplus21. Y esperamos que levante
la aplicación SCADA.

PASO 4: En el Infoplus.21 Manager, dar STOP luego esperamos que se detenga la aplicación SCADA. A
continuación, dar STAR para inicializar la aplicación SCADA. Con este estamos reiniciando solamente la
aplicación SCADA Infoplus.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 16 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 5: Ingresar a Infoplus.12/SRV_SCADA_2/Historian y revisar los objetos de base de datos de

tiempo real estén activos (color: verde)
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 17 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

CASO 4: Restablecimiento del servicio de comunicaciones.

Ante el reporte de problemas en las comunicaciones en el SCADA Metropolitano con las estaciones
remotas que se encuentran agrupadas por zonas.

PASO 1: Ingresar al Servidor SRV_SCADA_2 de producción para revisar los servicios en el Failover
Cluster Management y comprobar que el servicio de COMUNICACIONES este en Failed y en algunos casos
también afecta el servicio SCADA poniéndolo en failed.

PASO 2: Ingresar al Infoplus.21 Administrator V7.1(Start/All Programs/AspenTech/Aspen Manufacturing

Suite/Aspen Infoplus.21/ Infoplus.21 Administrator). Dar F5 para actualizar los registros y revisar la
aplicación del: Infoplus.21/SRV_SCADA_2/Definition Records/ZonaRadiosDef/#_OF_SELECTIONS y
revisar que los ESTADOS _COM (columna) de las radios estén en ERROR.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 18 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 3: Ingresar al EVENT VIEWER de Windows y revisar error con EVENT_ID = 41, donde se reporta
errores con el Serial Port COMXX de un puerto determinado, este error es recurrente por todos los serial
ports con ERROR mostrados en el Infoplus.21 Administrator. Activar el servicio de COMUNICACIONES
en ONLINE en el Failover Cluster Management, revisar los subservicios y activarlos si fuese el caso.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 19 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 4: Coordinar con Grupo Funcional de Telecomunicación (OperaTelecom, Roberto Marticorena y/o
Manolo Carrasco) el apagado de los equipos de comunicación que se encuentran en el sótano.

PASO 5: Esperar aproximadamente 10 minutos hasta que el Sistema Operativo de Windows (EVENT
VIEWER) detecte que los portservers (PORTSERVER_1 y PORTSERVER_2) estén en estatus de
STATUS_IO_TIMEOUT, monitorear el EVENT_ID = 41.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 20 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

PASO 6: Coordinar con Grupo Funcional de Telecomunicación (OperaTelecom, Roberto Marticorena y/o
Manolo Carrasco) el encendido de los equipos de comunicación que se encuentran en el sótano.

PASO 7: Ingresamos al Infoplus.21 Administrator V7.1(Start/All Programs/AspenTech/Aspen

Manufacturing Suite/Aspen Infoplus.21/ Infoplus.21 Administrator). Dar F5 para actualizar los registros.
Ingresar: Infoplus.21/SRV_SCADA_2/Definition Records/ZonaRadiosDef/#_OF_SELECTIONS y
revisamos que los ESTADOS _COM de las radios estén en OK. De ser necesario actualizar
constantemente.

PASO 8: Ingresar a la consola ETSCD4: 192.168.1.98 con usuario/clave de administrador, para revisar la
pantalla de comunicaciones y asi comprobar el funcionamiento correcto del Servicio de Comunicaciones.
 INSTRUCTIVO Código:
Revisión:01
Aprobado:
Fecha:
SOP-SRV - I002 - NR - Pasos para Página: 21 de 21
Gerencia de Desarrollo e
Investigación conmutar servicios SCADA en caso de
inhibición del servidor SRV_SCADA_2

Visualizar en las pantallas que todas las ZONAS y las estaciones están en VERDE (color de correcto
funcionamiento), de haber estaciones en rojo es por incidencias propias de la Estación remota ajenas a
este incidente.