`Wat de afgelopen dagen gebeurde is een van onze grootste angstvisioenen', zegt Tom Koppen, directeur ICT Servicecentrum. `Natuurlijk, je kunt niet alles voor zijn en af en toe gebeuren er nou eenmaal dingen, maar we proberen de risico's zoveel mogelijk in te perken.' Hij wuift weg dat de storingen iets te maken zouden hebben met de fusie van ICTS. `Integendeel. De samenwerking tussen de verschillende ICT-groepen is het afgelopen jaar door de fusie juist veel hechter geworden.'
De storingen van de afgelopen dagen raakten de dataopslag in het DEPT-domein. Meer dan duizend medewerkers maken hier gebruik van: de faculteit MB, alle concerndirecties en alle servicecentra. Volgens Koppen hebben de faculteiten CTW, GW, TNW en EWI `bijna niets' van de storingen gemerkt. Zwaarst gedupeerd was de faculteit MB. `Juist deze faculteit had de laatste maand veel last van alle storingen. Daarover werd volop geklaagd. En dat is begrijpelijk. Voor de meeste gebruikers is ICT een standaardgereedschap, dat gewoon altijd moet werken. Klaar uit.'
Koppen: `We hebben de gebruikersdata tot en met maandag, deels dinsdagavond, terug kunnen plaatsen. Van alle data worden dagelijks back ups gemaakt op tape. Die vormen een laatste redmiddel. Sinds de grote brand van 2002 hadden we ze niet meer hoeven gebruiken.'
Over schade, in euro's, kan hij niet veel zeggen. `De UT is geen augurkenfabriek, die eenvoudig een paar dagen omzet verliest. Maar dat het functioneren van de getroffen faculteit en diensten is beïnvloed, dat is pijnlijk helder. Die schade is niet in geld uit te drukken.'
Wat er vorige week woensdag precies gebeurde was dat alle schijven van het DEPT-domein in één keer corrupt waren. `De harde schijven raakten zodanig in de war, dat je de data niet meer kon benaderen. ICTS stond voor een raadsel hoe dit zo massaal kon gebeuren. Gelukkig lukte het afgelopen maandag de oorzaak te achterhalen, zodat nu herhaling voorkomen kan worden.'
Koppen vertelt dat de behoefte aan data-opslag het afgelopen jaar explosief is toegenomen. `Er is steeds meer verkeer met foto's, video's en mp3-tjes.' Daarom nam het ICT Servicecentrum begin oktober voor het DEPT-domein een extra zware machine in het cluster van de fileservers op. Daardoor daalde de belasting van 95% naar 5%. `De gebruikers konden sneller bij hun data, maar we merkten al snel dat het cluster instabiel werd en op een onbegrepen moment plat ging.'
`Maandag ontdekten we in de grote kennisdatabase van Microsoft een artikel met de conclusie dat je zulke fileservers met exact dezelfde glasvezeladapters en softwareversies moet aansluiten op de centrale harde schijven. Dat was bij ons niet zo en dat was dus de verklaring voor de ellende van de afgelopen weken. Externe deskundigen hebben inmiddels bevestigd dat dit de vermoedelijke oorzaak van de problemen is.'
Medewerkers van ICTS hebben vanaf woensdagmorgen tot zondagnacht non-stop gewerkt aan herstel van de dataopslag. Ook 's nachts. `Op gegeven moment hebben we sommige medewerkers naar huis moeten sturen. Bij oververmoeidheid worden immers fouten gemaakt.' Dat het allemaal zo lang duurde, komt volgens Koppen omdat het terugplaatsen vanaf tapes erg tijdrovend is.
De gebruikers kunnen weer werken, maar de calamiteit is voor ICTS nog niet gesloten. Er werd al aan een plan gewerkt voor de data-infrastructuur op langere termijn. `Dat project heeft nu de hoogste prioriteit. We schakelen daarbij externe deskundigen in. Consultants van KPMG begeleiden het proces.'
