ICT Gronings ziekenhuis synchroniseerde niet

Uitval van serverapparatuur veroorzaakte de dagenlange ict-storing bij het Universitair Medisch Centrum Groningen (UMCG). De ict-infrastructuur van het ziekenhuis is dubbel uitgevoerd, maar door de serveruitval kon niet worden gesynchroniseerd met de spiegellocatie bij de Rijksuniversiteit Groningen. Daardoor raakten veel administratieve en configuratiesystemen in de war. Dat vertelt ict-directeur René de Vink van het UMCG.

De ict-storing deed zich voor vanaf dinsdagavond 2 maart 2010 en pas maandagmiddag 8 maart werd alles na uitvoerig testen vrijgegeven. 'Alle systemen werken nu weer naar behoren', zegt De Vink met een zucht van verlichting.

'De server- en opslagapparatuur werkten al snel weer 100 procent, de vertraging deed zich voor bij de software. Die softwarematige systemen moesten we weer vanaf de grond opbouwen.' Hij trekt een vergelijking met een ordner, waarvan alle tabbladen en papieren vellen op de grond zijn gevallen.

X/Care

Vooral het ordermanagementsysteem X/Care en de elektronische uitwisselingsapplicatie Cloverleaf die dit systeem verbindt met onder meer het laboratorium, werden bij de storing getroffen. X/Care werd volgens De Vink in 2007 bij het UMCG ingevoerd.'Er trad een soort informatiefile op tussen de inschrijvingsbalie en het administratiesysteem van het lab', vertelt De Vink. Jaarlijks verwerkt Cloverleaf zo'n miljoen laboratoriumaanvragen en gebruikt daarvoor de internationale uitwisselingsstandaard HL7.

'Om te voorkomen dat patiënten bij het laboratorium verschenen terwijl hun gegevens daar niet beschikbaar waren, schakelden we over op papieren verwijzingen. Normaal is dat natuurlijk geautomatiseerd.' Bovendien werden alle niet-spoedeisende patiënten tijdelijk doorverwezen naar andere ziekenhuizen.

Kernteam

Het ziekenhuis is dagenlang met een team van ict'ers en de leverancier in de weer geweest om de storing te achterhalen. Daarbij was 24 uur per dag een roulerend kernteam van vijf personen actief: een systeembeheerder, een applicatiebeheerder, een databasebeheerder, een manager van dienst en een medewerker van de leverancier. Soms werd het team aangevuld met een functioneel beheerder.

De leverancier, die De Vink niet met naam wil noemen, doet op dit moment een root-cause analyse. Tijdens de ict-storing zijn geen gegevens verloren geraakt. De Vink: 'We hebben zowel op databaseniveau als op applicatieniveaus controles uitgevoerd en daaruit blijkt dat alles nu 100 procent goed is. Het doen van deze controles vergde het meeste tijd. 'Het duurt nu eenmaal lang om de vele terabytes te checken, zeker als een deel één voor één gebeurt.'

Windows

De meeste onderdelen van de ict-infrastructuur en applicaties bij het UMCG draait op Microsoft Windows. Het serverpark is gedeeltelijk gevirtualiseerd met VMware. Het ziekenhuis heeft volgens De Vink juist gekozen voor een dubbele (redundant) uitvoering van de infrastructuur, om problemen zoals die zich afgelopen week voordeden, te voorkomen.