Tehnologie

Pana Workday a pornit de la propriul test de backup, iar angajații nu au putut ponta

Susan Hill
Adaugă-ne în Google

Workday, software-ul folosit de multe companii mari pentru salarizare, pontaj și gestionarea concediilor, a devenit inaccesibil clienților după ce un test al propriului sistem de backup pentru situații de urgență a eșuat. În timp ce verifica sistemele de recuperare în caz de dezastru, compania a descoperit că serviciile de backup se conectaseră pe neașteptate la bazele de date active folosite de clienți, lăsând înregistrările într-o stare inconsistentă. Workday a scos din funcțiune sistemele afectate pentru a le repara.

Pentru angajați, întreruperea a însemnat să vadă o pagină de autentificare cu mesajul „Workday este momentan indisponibil”. Personalul companiilor afectate nu a putut ponta la intrare sau la ieșire, verifica informațiile salariale, solicita concediu sau finaliza înscrierea la beneficii, iar procesele programate care transmit date către alte sisteme ale companiei puteau eșua. Plasa de siguranță menită să mențină serviciul în funcțiune în caz de dezastru a fost chiar cea care l-a scos din uz.

Amploarea problemei explică de ce efectele depășesc departamentele de resurse umane. Workday spune că peste 11.500 de organizații folosesc software-ul său, iar printre clienții prezentați public de companie se numără Walmart, Target, Netflix, Chipotle, Southwest Airlines, Departamentul Energiei al SUA și Jet Propulsion Laboratory al NASA. Compania nu a precizat câți dintre aceștia au fost afectați, descriind impactul doar ca fiind resimțit de „unii dintre clienții noștri”, astfel că postările virale care susțin că toți acești angajatori au fost scoși din funcțiune merg mai departe decât permit faptele. Potrivit UC Today, platformele de monitorizare a întreruperilor au înregistrat sesizări din SUA și India.

Explicația oferită de Workday pe pagina de stare a serviciilor pentru clienți și citată de echipa IT a Universității Washington este neobișnuit de directă. „În timpul verificării ferestrei săptămânale de mentenanță pentru mediile de recuperare în caz de dezastru, am identificat că serviciile găzduite în centrul DR s-au conectat pe neașteptate la bazele de date de producție”, se arăta în mesaj, care adăuga că datele au fost lăsate „într-o stare inconsistentă”, ceea ce putea provoca erori la deschiderea conturilor sau putea împiedica finalizarea unor sarcini. Apoi, compania a trecut în mentenanță toate mediile de producție din grupul de clienți pe care îl numește WD1 și a promis actualizări la fiecare 30 de minute.

Explicația lasă fără răspuns cea mai importantă întrebare. O copie de recuperare în caz de dezastru există tocmai pentru ca o problemă dintr-un loc să nu se extindă în celălalt, însă, în acest caz, testul a ajuns la sistemul real. Workday nu a spus cum a fost posibilă această conexiune și nici dacă s-au pierdut înregistrări sau doar au ajuns să nu mai corespundă. Modul în care a comunicat compania a stârnit, de asemenea, nemulțumiri. Administratorii de pe forumurile sysadmin și Workday de pe Reddit au spus că problema începuse cu câteva ore înainte de prima alertă trimisă clienților, o cronologie pe care Workday nu a confirmat-o, iar într-un e-mail către un client, distribuit pe forum, compania recunoștea că nu putea estima când va fi restabilit serviciul și le recomanda companiilor cu termene-limită critice să-și activeze planurile de continuitate a activității.

Pentru angajați, efectele concrete depind de momentul în care au fost afectați. Orele lucrate de personalul plătit cu ora, care nu a putut ponta, trebuie corectate manual, iar cei care se grăbeau să respecte un termen-limită pentru înscrierea la beneficii s-au lovit de o ușă închisă. Unii angajatori au prelungit termenele: Emerson College a anunțat că extinde perioada de înscriere deschisă din cauza întreruperii. Incidentul a venit și la finalul unei săptămâni dificile pentru software-ul folosit la locul de muncă, după ce o problemă cu Microsoft 365 a făcut ca serviciile de e-mail Outlook și Exchange să funcționeze nesigur până în a doua zi.

Cronologia de până acum: Emerson College a declarat că Workday a scos sistemul din funcțiune în jurul orei 17:15, ora Coastei de Est, vineri, 13 noiembrie, iar LiveNOW from FOX a relatat că Downdetector înregistrase aproape 3.000 de sesizări privind problemele la scurt timp după ora 17:00. Un purtător de cuvânt al Workday a spus că firma „lucrează de urgență pentru a investiga și a remedia problema” și și-a cerut scuze clienților afectați. Sâmbătă dimineață, Workday le-a transmis clienților că reindexarea și repunerea în funcțiune a mediilor urma să se încheie pentru majoritatea dintre ei până la ora 11:00, ora Coastei de Est, sâmbătă, 14 noiembrie, deși pentru unii putea dura mai mult; acei clienți urmau să fie contactați printr-un tichet de asistență. Perioada de înscriere prelungită de Emerson se încheie acum luni, 16 noiembrie, la prânz, ora Coastei de Est.

Reluarea serviciului nu va lămuri întrebarea mai dificilă pe care angajatorii i-o adresează acum furnizorului. Vor să afle de ce un test menit să demonstreze că Workday poate face față unui dezastru a avut acces la datele pe care trebuia să le protejeze.

Etichete: , , , , ,

Adaugă-ne în Google

Discuție

Există 0 comentarii.