¿Cuál es el fracaso que ha hecho que le costó a usted oa su empresa una gran cantidad de dinero?

A fines de la década de los 90, fui director de tecnología de una compañía que proporcionaba ancho de banda de Internet a aproximadamente la mitad de los 600 ISP en Australia en ese momento. El ancho de banda terrestre era muy caro en aquellos días, pero era posible comprar ancho de banda en satélites al final de su vida útil a un precio relativamente bajo, aproximadamente la mitad del precio del ancho de banda terrestre.

Diseñé un hermoso centro de datos y una estación terrena para una nueva antena 9M que planeamos usar para triplicar nuestro ancho de banda de un haz de banda C que habíamos comprado en el antiguo satélite PAS-2.

Ese satélite ya no era geoestacionario y estaba en una órbita inclinada, describiendo una gran figura plana 8 en el cielo. Así que nuestra antena 9M necesitaba un motor y engranajes de seguimiento para poder mantener la señal del satélite. Eso no fue problema, se hizo fácilmente.

Estaba muy orgulloso de mi nuevo centro de datos, para mí era un diseño de tercera generación, construido más como una sala de reunión de telecomunicaciones que como una sala de servidores. Mi solución de UPS me gustaba especialmente, con dos generadores independientes que podrían proporcionar una autonomía de energía ilimitada si fallara la red, siempre y cuando hubiera un suministro de diesel.

De todos modos, hubo este descuido masivo. No sé cómo sucedió. En algún lugar en la entrega de los parámetros de sub diseño a los diferentes contratistas, una pequeña línea desapareció. Fue la línea que mostró un cable de alimentación desde el UPS al motor de la antena.

Por supuesto, lo inevitable sucedió. Hubo una gran tormenta eléctrica de verano y se cortó la electricidad de la mitad de la ciudad. Esto fue alrededor de las 11 de la noche, a principios de diciembre. Mi equipo de ingeniería y yo estábamos tomando bebidas navideñas en ese momento.

Mi UPS funcionó bien, los generadores se activaron y todo estuvo bien. Todos recibimos un pitido de buscapersonas de nuestro sistema de monitoreo que nos dice que no había electricidad, pero que todos los sistemas estaban apagados. Así que todo estuvo bien.

Durante unos 10 minutos.

¿Cuál es el tiempo que tardó la antena sin alimentación en perder contacto con la señal del satélite?

Cuando llegó el segundo mensaje de alerta ‘Datos perdidos de Internet’, recuerdo haber mirado a mi ingeniero principal y ambos nos dijimos inmediatamente “¡La puta antena!”

Exactamente en ese momento me di cuenta del descuido.

Ahora, en este momento estábamos suministrando aproximadamente 1/3 de los datos de Internet de Australia. Pero sin nuestra alimentación, los otros 2/3 se saturarían, haciendo que Internet sea inutilizable para la mayor parte del país. Además, nuestros contratos de SLA significaron que si la interrupción del servicio durara más de 20 minutos, nos costaría más de $ 50,000 por hora.

Mi ingeniero principal y yo fuimos al centro de datos, a solo 10 minutos de distancia. Enviamos a otro ingeniero a nuestras casas para obtener cualquier extensión de potencia que pudiera encontrar.

Justo cuando llegamos, los cielos se abrieron y se produjo un increíble espectáculo de truenos e iluminación. Corrí hacia el analizador de espectro, mi ingeniero fue a por la torre de la antena.

A los pocos minutos, tenía la tapa fuera de la caja de engranajes y tenía el analizador de espectro conectado al receptor. Al girar los engranajes a mano, no fue una hazaña en el trueno de aullidos y la tormenta de iluminación, logramos recuperar la señal. Lo hicimos durante la siguiente media hora, mientras que al menos tres veces la iluminación golpeó la varilla del conductor un poco lejos de la antena. Hombre que era ruidoso.

Justo cuando el frente de la tormenta pasaba, el otro ingeniero llegó con una carga de arranque de cables de extensión de potencia. Teníamos suficiente para ejecutar una línea desde un GPO en el centro de datos hasta el motor de la antena. Así se acabó la crisis.

En mi informe al CEO y directores al día siguiente, por supuesto, asumí toda la responsabilidad de la supervisión. Y elogió a mis ingenieros por su dedicación, rápida acción y, francamente, valentía. El costo para la compañía era de aproximadamente $ 50,000, que decidieron pagar de buena fe a nuestros clientes, aunque técnicamente todavía estaban dentro de nuestra ventana de SLA.

Afortunadamente, también decidieron que valía la pena seguir como CTO. Así que todo estuvo bien que terminó bien.

Solía ​​ser un contratista de Google, el trabajo de mis sueños. Un día hubo una gran tormenta, la peor de la historia y había reservado un espacio para el automóvil en el trabajo. Técnicamente, no se suponía que tuviera el espacio para el automóvil porque solo era un Contratista Temporal, pero la recepción de Google lo aprobó debido a la tormenta y al hecho de que era un automóvil nuevo. Sin embargo, salí corriendo de la casa dejando el pase de mi auto en casa. También me había ofrecido tontamente a dar un “acuse de recibo” que obviamente me estaba usando y aprovechando de mí para levantarme ese día. Debido al tráfico EXTREMO, llegué al estacionamiento 30 minutos después, nervioso y muy ansioso, molesto y angustiado. Entonces me di cuenta de que había olvidado la tarjeta de identificación de mi estacionamiento en casa y que mi “acuse de recibo” estaba conmigo y que ambos estábamos estresados ​​porque llegamos tarde. El guardia de seguridad no me dejó entrar y le di los números de mi placa, etc., pero aún así no me dejó entrar. Él seguía diciendo: “lo siento, señor, no puedo dejarle entrar”. Quería retroceder detrás de mí y dejar el estacionamiento, pero había un automóvil detrás de mí y estaba en una colina, así que no quería que otro automóvil entrara en él. Entonces, entré en pánico, perdí mi temperamento COMPLETAMENTE y terminé perdiendo el trabajo de mis sueños en el que había trabajado toda mi vida. Lo más triste es que tuve un gran rendimiento, me fue muy bien y me llevé muy bien con todos.

Es posible que desee revisar lo que escribí en la respuesta de los usuarios de Quora: ¿Alguna vez le ha ocurrido que debido a un pequeño evento aleatorio de baja probabilidad, sufrió una gran pérdida?