10 junio 2008

Anochecer de un dia agitado

Hoy fue un dia de aquellos...

En la manana nos dimos cuenta que las nuevas consultas web estaban consumiendo toda la cpu del servidor web.
Pedimos a la gente de redes que determinara que era lo que consumia y pedimos un log del IIS.
De redes nos comentan que detectaron que una ip consumia toda la cpu, y ahi apuntamos todo a un posible mal uso de las consultas desde el exterior.
Cuando nos llego el log del IIS ya estabamos con esa predisposicion y apuntamos a buscar una ip con mucho consumo, pero le pasamos el log a Enrique que estaba en Uruguay.
Mientras nosotros corriamos tras un fantasma, la cabeza fresca ( sin pelos ) de Enrique veia lo que era a todas luces claro, habia un archivo .js que en 15 minutos era reclamado miles de veces y no era encontrado, algo muy sospechoso.
Cuando ya era evidente que la instalacion nueva habia provocado tal situacion, usamos el plan de contingencia y volvimos a las consultas web viejas que funcionaron correctamente y nos salvaron el momento de tension.
Sin demoras y aun con el pedido de prudencia con lo que haciamos, copiamos todos los .js que debieran haberse instalado ( y no se instalaron ) y dejamos funcionando el web server interno y uno de los dos web servers externo, probando asi que el problema se solucionaba.
Resumen:

  • supimos que teniamos un problema hoy en la manana, hasta ese momento habia otros problemas que no eran nuestros que lo ocultaban.
  • con Alejandro funcionamos como equipo, investigando, buscando soluciones y haciendo que los recursos humanos estuvieran trabajando para resolver el problema.
  • el apoyo de Gustavo, que sabemos lo que debe angustiarse por no poder estar y resolver las presiones que solo el puede disolver.
  • lo fundamental, el apoyo de Enrique desde Uruguay, el no estar en la voragine y poder aportar una vision completamente desapasionada, tecnica, fria, la que dice " fijense en esto " y pum, le pega al patito. Por eso cuando no estamos en Costa Rica tenemos que estar pendientes de los que estan aca, el que esta en Uruguay es nuestro apoyo, sin dudas.
El final, dos consultores que en Costa Rica se van al hotel con muchas experiencias adquiridas y con la sensacion de un excelente trabajo en equipo, bajo altos niveles de stress respondimos todos, aqui y en Uruguay, como hubieramos querido.
Hoy en Costa Rica, compartiendo historias personales, un Casillero del Diablo nos acompano en lo que fue una celebracion de un buen dia de trabajo, de esto vivimos.


Actualizacion: no nombre a Gabriel, en quien tambien estoy pensando cuando hablo de quienes nos apoyan desde Uruguay. Se de las preocupaciones y especial atencion que dedica a los que estan en Costa Rica, doy fe, lo he visto.
Incluyo un reconocimiento a Oscar en Costa Rica, un tico al que la velocidad de procesamiento de su cpu le limita el multitasking :-). Se involucra plenamente en los problemas y es un excelente apoyo, sincroniza en el trabajo en equipo y estoy seguro que se siente bien trabajando con nosotros.

2 comentarios:

Enrique Almeida dijo...

Espero que el Casillero del Diablo no les afecte la jornada de hoy, que seguramente sera muy movida...

A mi, el estar a la distancia en una instalacion compleja, me produce una angustia y desazon por no poder estar, pero a veces ayuda a ver las cosas con un poco mas de perspectiva.

Gabrielito (a quien no nombraste en tu post) tambien esta muy pendiente de lo que pueda saltar.

Salú.

BlogAdmin dijo...

Creo que el haber estado de un lado y del otro del mostrador y la confianza, hacen que las cosas funcionen. Si, omiti nombrar a Gabriel, pero solo poner el nombre, porque en el tambien estoy pensando cuando comento del apoyo desde ahi. El lo sabe.
Gracias Enrique.