Debido a un fallo fisico en el disco duro de LINUX02 nos vemos obligados a realizar una intervencion de emergencia, traspasando todos los archivos y configuraciones a un nuevo servidor DELL, para posteriormente sustituir el disco defectuoso de la maquina actual de LINUX02, y usarla para otros fines.

La intervencion tiene una duracion prevista de dos horas.

22:03: Se ha finalizado la instalacion del nuevo sistema operativo. Comenzamos a instalar y configurar el panel de control.

23:00: El panel de control ya se encuentra instalado, y se estan restaurando las copias de seguridad. El proceso esta aproximadamente al 50 %. Una vez recuperadas las copias, se restauraran las bases de datos a la ultima version actualizada.

00:20: El proceso de restauracin de las copias continua ejecutandose en el servidor. Una vez finalizado el proceso, se restaurara la version mas reciente de las bases de datos.

02:00: La restauracion del sistema ha finalizado con exito.

En estos momentos los usuarios de servicios Linux que tengan establecido Marina como skin de DirectAdmin pueden estar experimentando problemas de acceso al panel de control.

El problema esta localizado en los servidores de OutServices, desarrolladores del skin, los cuales estan caidos y el skin no puede confirmar la validez de la licencia.

Estamos a la espera de que OutServices resuelva el problema con sus servidores.

Se ha detectado una incidencia de red que ha afectado durante un corto intervalo de tiempo al acceso a los servidores.

El problema ha sido aislado en el servidor LINUX03, que estaba realizando un ataque de denegacion de servicio hacia otras redes.

En estos momentos el servidor ha sido detenido para poder localizar el origen del problema, y resolverlo antes de conectarlo de nuevo a la red, para evitar nuevos problemas.

Actualización

Finalmente se ha detectado el usuario que generaba los problemas.

Una vez mas, toda la incidencia, he venido derivada de un usuario que hacia uso de un script MKPortal desactualizado, a traves del cual han conseguido subir scripts maliciosos, generando el ataque DoS.

De nuevo recordamos la necesidad de mantener todos los scripts actualizados, para evitar este tipo de problemas. Es responsabilidad del cliente mantener al dia y asegurado todo lo que sube dentro de su espacio.

Durante los proximos dias se realizara un chequeo completo de todos los scripts que usan todos los clientes, y se suspenderan las cuentas de clientes que mantengan scripts publicos (phpNuke, phpBB, MKportal, …) en una version desactualizada que pueda generar problemas de seguridad, y puedan suponer caidas para el resto de clientes.

Debido a un fallo de disco, se hace necesaria la sustitucion de hardware en Linux03.

Aprovechando la incidencia, como es necesaria la sustitucion del disco y reinstalacion completa del sistema, restaurando las paginas desde las copias de seguridad, se va a cambiar el hardware de LINUX03 a un nuevo servidor DELL de mejores prestaciones, incrementando el rendimiento del servidor.

El fallo ha sido detectado a las 2.50 AM, y desde entonces se esta trabajando en la resolucion.

4.32 AM: el nuevo hardware DELL se encuentra ya montado, y las IPs de LINUX03 vuelven a responder con normalidad. Se esta instalando y configurando el panel de control para poder restaurar las copias.

5.08 AM: el panel de control ya se encuentra instalado. Se estan finalizando las ultimas configuraciones de Apache, PHP, firewall, para proceder a la restauracion de las cuentas.

5.15 AM: se ha iniciado el proceso de restauracion de las copias. Las paginas comenzaran a funcionar progresivamente, por orden alfabetico.

7.12 AM: todos los servicios funcionando y dominios. Se ha aprovechado para actualizar PHP y MySQL a la version 5.

Durante el dia de hoy (19 Abril) se va a realizar una ampliacion de memoria RAM en los servidores LINUX01 y LINUX08.

En el proceso de ampliación los servidores estaran inaccesibles durante aproximadamente 10 minutos.

Debido a los problemas que presentan los actuales equipos (ioPower) de distribucion electrica y control remoto de reinicios, se ha planificado una intervencion durante la cual se sustituira el hardware actual por nuevos equipos APC de mayores prestaciones y operatividad.

Durante la intervencion, sera necesaria la desconexion de cada servidor por un periodo aproximado de diez minutos, durante el cual se retirara el equipo electrico actual del rack, se instalara el nuevo, y se realizaran las nuevas conexiones.

La intervencion queda planificada para mañana, dia 11 de Marzo, entre las 4 y las 8 PM.

Se ha detectado un fallo de hardware en LINUX05. Las tarjetas de red han dejado de responder.

En estos momentos se esta planificando la sustitucion del hardware defectuoso, para poder tener el servidor operativo lo antes posible.

Actualización 13:08 PM: Todo el hardware ha sido sustituido. Por el cambio de hardware ha sido necesario reinstalar el sistema operativo, y en estos momentos se estan restaurando las copias de seguridad.

Aproximadamente el 50 % de las paginas del servidor ya se encuentran operativas, y en aproximadamente 20 minutos, el 100 % de las paginas estaran funcionando.

Actualización 14:00 PM: Todos los servicios y dominios del servidor se encuentran funcionando. Se estan ajustando las ultimas configuraciones en el panel de control y en el sistema operativo.

La migracion hacia el nuevo sistema de correo ha sido finalizada en todos los servidores Windows.

Como mejoras en el sistema de correos se han incorporado:

- Nuevo servidor de correo: se mejora el rendimiento general de todo el sistema de correo, evitando retrasos en las colas de envio y/o recepcion.

- Nuevo sistema antispam operativo: el sistema antispam integrado ya esta filtrando mas de 30.000 mensajes de correo basura diarios para todos los usuarios.

- Nuevo webmail: accesible desde la misma direccion del anterior webmail, el nuevo webmail incluye funcionalidades nuevas como filtros de correo, agenda de contactos, calendario, …

Todos los usuarios de servidores Windows se encuentran ya funcionando sobre la nueva plataforma.

Para mejorar el servicio de correo y tiempo de respuesta en los servidores Windows, toda la plataforma actual de correo de nuestros servidores Windows va a ser migrada hacia un sistema de correo independiente.

Dentro de esta migracion se contempla:

- Cambio de MailEnable (sistema actual de correo) por SmarterMail (nuevo servidor de correo, de mejores prestaciones).

- Migracion del sistema de correo hacia un servidor externo: actualmente el sistema de correo comparte servidor con otros recursos, como el servidor web o FTP. Para mejorar el rendimiento de todos los servicios, el sistema de correo sera migrado a un servidor externo, exclusivo para correo.

- Instalacion de nuevo webmail, ademas del ya existente.

- Implementacion de filtros antispam y listas negras: se incorporaran distintos sistemas de deteccion de SPAM, para reducir la cantidad de correo basura recibida por el servidor.

El cambio es transparente para los usuarios, siempre y cuando se use “mail.dominio.com” como servidor de correo (entrante y saliente).

La migracion esta prevista a completarse durante las proximas 48 horas, tiempo durante el cual, en algun momento, puede detectar algun problema temporal con el correo.

La actuacion se aplica a todos los servidores Windows.

Un fallo de sincronizacion del Kernel, en el servidor Linux08, ha provocado un error “Kernel Panic” durante el proceso de arranque del sistema, lo que ha obligado a preparar y arrancar el servidor con otro Kernel distinto.

Durante el proceso, el servidor ha estado inaccesible.

En estos momentos el servidor ya se encuentra arrancado con el Kernel operativo. El tiempo total de fallo ha sido de 20 minutos.