Avviksrapport for Tjeneste/System
Dato: 2025-09-24
På 5 av de 6 web-serverne som utgjør UBW web-miljøet hadde sertifikatet utgått, det innebar at brukere av tjenesten ble møtt av en side som sa den var utilgjengelig. Brukere av desktop-miljøet var ikke berørt.
Beskrivelse av avviket og feilrettingsprosess
- 24.09 07:13 - Det meldes om at web-tjenesten for flere institusjoner ikke er tilgjengelig.
- 24.09 07:28 - Arbeidet med feilretting starter, varsler også ansvarlig hos Sikt om at feilretting er i gang.
- 24.09 07:54 - Feil lokalisert, utgåtte sertifikater. Starter jobben med å bestille nye sertifikater.
- 24.09 08:28 - Samtlige sertifikater godkjent og mottatt, starter jobben med å lage PFX-filen og få de på plass på serverne.
- 24.09 08:50 - Samtlige servere har fått nytt sertifikat, varsler Sikt og brukere om at de kan benytte tjenesten igjen.
- 24.09 11:07 - Får beskjed om at en av institusjonene ikke kommer inn allikevel. Manglende altname i ett sertifikat, bestiller nytt.
- 24.09 11:35 - Nytt og riktig sertifikat på plass. Får bekreftelse fra brukere om at alt er OK
Konsekvenser
Brukere av web grensesnittet til UBW fikk ikke gjort det de skulle der. Brukere av desktop-miljøet var ikke berørt.
Hva skulle vi gjort for at situasjonen ikke oppsto?
I henhold til driftsrutinene skulle vi bestilt nye sertifikater og byttet det på serverne årlig, dette skal varsles 30 dager før de gamle utløper. Hadde sertifikatene blitt byttet i henhold til disse rutinene hadde ikke situasjonen oppstått.
Feilen skjedde fordi automatikken som skal gi oss beskjed 30 dager før et sertifikat går ut på dato ikke fungerte. Skifte av leverandør av sertifikater førte til at sertifikater bestilt av gammel leverandør ikke trigget alarm.
Hva kunne IT-avdelingen gjort bedre?
Varsling for utgåtte sertifikater, også de bestilt fra gammel leverandør, skulle vært på plass, i tillegg burde det vært en redundant løsning for varsling av dette.
Tiltak
Det er nå gjennomgått samtlige servere som vi bestiller og benytter sertifikater på i Edukiosk, det er verifisert at det nå ikke er noen som snart går ut.
I tillegg er det satt opp varsling i Zabbix slik at WAP også blir varslet her når det er på tide å bytte.