Blog

Actualizaciones forzosas en Hardware, 31 Mayo 2020

2020.06.02

El 31 de Mayo 2020 ocurrió una falla, aquí contamos los detalles

Actualizaciones forzosas en Hardware, 31 Mayo 2020

En este artículo vamos a contar el detalle de lo sucedido el 31 de Mayo  2020 en Hostingfacil.co y que hicimos para prevenir que vuelva a pasar.

Artículo relacionado: Cómo fue la resiliencia en Hostingfaci.co 30 Enero 2017

Afortunadamente gracias al buen servicio que dicen nuestros clientes a otras personas “el voz a voz” no hemos invertido en Ads (publicidad paga en línea) en más de 17 meses y aún así el crecimiento ha sido sostenido y frecuentemente acelerado. Dicha aceleración del crecimiento se incrementó aún más en los últimos meses, una parte atribuible a la pandemia global causada por el SARS-CoV-2 (COVID-19) que forzó a muchos comercios a moverse a Internet.

Iniciamos en Junio 30 2015, en 23 Agosto 2015 realizamos la primera actualización de Hardware, igualmente en 31 Enero 2017 y 31 Mayo 2020, en un principio fue menos de 2 meses, luego 17 meses, ahora 16 meses, y cada vez doblamos la capacidad, esta vez la cuadruplicamos, y también a diferencia de las anteriores veces, pasamos de 85% de nuestra capacidad (13 Mayo) a 90% en 8 días, de ahí en adelante incrementos de 1% diario en promedio, lo que el pronóstico indicaba que antes de terminar el 31 de Mayo 2020 era probable que se excediera la capacidad instalada, algo que usualmente desde que llega al 85% planeamos a los 30 días o antes, ampliar, esta vez no tuvimos tiempo de una mejor planeación y debido a esto tuvimos que forzosamente iniciar un Domingo 6:00 PM (-5 UTC), cuya duración fué de 4 horas y 30 minutos.

Pero al completarlo y encender, ya era muy tarde, el sistema de booteo se corrompió y por más que intentamos con diferente cantidad de opciones y herramientas desde 10:30 PM hasta 6:30 AM no fue posible, en ese punto tuvimos que tomar otra forzosa y no planeada decisión como fue reinstalar todo, y de una vez se actualizó el sistema operativo y varios componentes que estaba previsto realizarlo en Octubre 2020.

Desde 1:45 PM se inició a restaurar las cuentas desde un Backup diario en AWS S3 hasta 5:40 AM, luego hasta 1:00 AM del 3 de Junio terminando configuraciones para dejar todo apunto, despiertos desde Domingo 6 AM explorando opciones para no tener que hacer la migración forzosa hasta Miercoles 1 AM, sin dormir un solo minuto, todo en pro de nuestros compromisos.

Esta actualización trajo cosas buenas:

1. Ahora contamos con el procesador Intel para servidores más rápido del mercado (al día de hoy) en velocidad “Max Turbo Frequency” con 5 Ghz como lo es el Intel® Xeon® E-2288G Processor que se observa en esta captura de pantalla como el primero en dicha velocidad de la línea Intel para servidores:

Esto permite que aplicaciones como Wordpress se ejecuten a la máxima velocidad ya que son basadas en PHP y no hace uso de hilos/threads aún, son monoproceso, lo que hace que se beneficien de procesadores con buena velocidad de reloj y por consiguiente se reduzca el tiempo de respuesta del servidor (TTFB)

2. Pasamos de tener Discos SSD por SAS a NVMe, que es la tecnología de punta para conectar almacenamiento, la velocidad de accesos por segundo se incrementó de 75000 IOPS a 750000 IOPS, 10 veces!  Esto permite que cuando haya múltiples operaciones de lectura / escritura de archivos, se haga siempre a la máxima velocidad.

3. El link de red (La velocidad de Internet) pasó de ser 1 Gb/s a 10 Gb/s, esto permite que más conexiones de red concurrentes se hagan y todas sigan con una buena calidad de transmisión.

4. Ahora contamos con el doble de RAM y ligeramente más rápida (DDR4-2666), lo que permite que por ejemplo el motor de base de datos guarde más información en RAM que en Disco y así se procese más rápido las consultas (queries).

La siguiente migración será diferencia de ésta, gracias al link de red de 10 Gb/s será 10 veces más rápida en relación a la cantidad de datos a mover, además, en un horario 2:50 AM - 3:20 AM (30 minutos) Domingo noche - madrugada Lunes.

Esperamos que estos cambios de hardware junto con los cambios de software que hemos introducido recientemente como el servidor Web más rápido para conectar PHP, la caché más eficiente e inteligente para Wordpress, la mejor y máxima seguridad posible en todos sea acertado a el compromiso que nuestro servicio permanezca siendo el más rápido, con tiempos de carga de sitios Web inferior a un segundo, con seguridad y cerca del 100% de disponibilidad.

 
Buzon Sugerencias Hosting Fácil