2021-11-10 USIT - SO driftsmøte

Agenda
 
Tilstede:  Frank Solem, Audun Lea Hansen, Cameron Murdoch, Sjur Hernes, Mathis Aamodt, Bjørn Løn Tvedten, Dan Isak Weisser, Henrik Østgaard, Stein Håkon Bøhler.
 
Referent: Frank Solem

Sak 1: Oppfølging etter ytelsesutfordringer ved søknadsfrist og opptak

 

Status pr idag:

Det ble i møtet gjort en rask gjennomgang av anbefalinger fra avviksrapportene. SO har siden april jobbet med å identifisere og utbedre flaskehalser. 

Feil med i-like spørring er trolig kilden til problemene i juli, kanskje medvirkende i april. Spørringen ble antagelig introdusert i mars 2019. Er utbedret av SO

Planen for i høst er å finne trege spørringer og utbedre. Jobber også med oppgradering av komponenter. Ferdigstillt til nyttår. Planlegger stresstesting på nyåret. Viktig for USIT å bli informert om testing på forhånd slik at alle parter kan vurdere ytelse sett fra ulike sider av systemet.

USIT anbefaler at det innføres automatisk unit-testing av spørringer i staging-miljøet ved deployering av nye versjoner. Resultater kan sammenlignes med eldre versjoner for å se endringer.

USIT kan automatisk generer rapporter over utfordringer sett fra databasesiden. Krever ekstra ressurser  på serveren og bør skrus av i pressperioder. 

USIT Anbefaler unit-tester av spørringer i stageing miljøet og sammenligner mellom versjoner.

Avtalte oppfølgingspunkter

  • SO informerer USIT om plan og tidspunkter for stresstesting i forkant av gjennomføring
  • USIT går videre med å sette opp rapporter fra databasen

Sak 2: Overgang til ny objektlagring. Fra Ceph -> Cloudian

 

Planlagt en dag i neste uke. Blir ca 15 minutter nedetd. Krever testing fra SO i etterkant for å verifisere at lesing og skriving av dokumenter fortsatt fungerer.

SO ønsker innsyn i antall dokumenter, kvoter, ytelse  m.m.   Det er mulig å hente ut info om antall dokumenter og brukte disk fra prod-maskinen. Tilgang er sperret ned ettersom det lagres røde data. USIT kan hente ut info på forespørsel.

Ytelsestesting viser tilsvarende ytelse som i Ceph-clusteret. Det er ventet at kostnaden vil gå ned ved overgang til en felles lagringstjeneste.

Avtalte oppfølgingspunkter:

  • USIT skal jobbe med å gi SO innsyn/rapporter over bruk av objektlagringen

Sak 3: Ny versjon av Postgres

 

SO bruker PG 11 nå. USIT anbefaler overgang til 14. Mye ytelsesforbedringer i både 13 og 14. Nyeste versjon skal være bedre på å håndtere mange påkoblinger. 

SO har testet PG 14 lokalt. Ønsker 14 fra USIT om kort tid. 

Avtalte oppfølgingspunkter

  • SO bestiller oppgradering til PG 14 av UTV-miljø når de er klare for å teste ny versjon i driftsmiljøet på USIT

Sak 4:  SO informerer om planer den nærmeste tiden

 

Er det noen viktgige datoer som USIT trenger å kjenne til i tiden fremover? Både mtp valg av tidspunkt for planlagt vedlikehold og eventuelle behov for ekstra fokus fra USIT.

  • 1. februar starter søkerperioden
  • 1. mars er det en søknadsfrist, men pleier ikke være høy last
  • 20. april kl 14:00 er det søknadsfrist. Forventer høy last. Fristen er utsatt fra 15. april pga påsken. 
  • Opptaket blir i juli slik det pleier å være

SO har ikke planlagt store endringer til neste år. Men det er endel justeringer og moderniseringer, blant annet på integrasjoner.

Sak 5: Overgang til Sikt/HK-dir. 

 

Overgangen innebærer at de som jobber med SO på UNIT blir fordelt mellom Sikt og HK-dir. Hva betyr dette for tjenestene USIT leverer til SO?  

Det ligger an til at USIT fortsatt skal levere tjenesten til Sikt, men enkelte på HK-dir vil trenge tilgang. Utviklere blir i Sikt, mens forvaltningen går til HK-dir. Det er satt opp arbeidsgruppe som ser på hvordan tilganger til tjenestene skal løses for de som skal til HK-dir. Frank deltar i gruppen på vegne av USIT.

USIT anbefaler at Sikt/Hk-dir avklarer hvilke oppgaver som følger med personer til HK-dir og om de fortsatt skal ha tilgang til alle SO-systemene.

Avtalte oppfølgingspunkter:

  • Frank informerer Mathis dersom USIT gjennomfører endringer som kan påvirke hvem som får tilgang til tjenestene.  

Sak 6: Eventuelt

 

Java Runtime versjon

Vi bruker openjdk 8 i prod. Får fortsatt patcher, men er gammel. SO kan selv bytte i utv. Nyeste long time release er 17, men den er helt ny og det er for tidlig å bytte til denne.

Er ønskelig med OpenJdk 11. Den er i bruk av SO på i lokalt utviklingsmiljø. 

Avtalte oppfølgingspunkter:

  • Sjur installerer OpenJDK 11 i UTV-miljøet på USIT. 
  • SO tester og informerer når det er klart for oppgradering av Java i test/prod

Mediawiki

 

Mediawiki-installasjonen til SO ble omsider oppgradert i høst. God innsats fra SO med oppdatering av autentiseringsmodulen. 

SO benytter wiki.uio.no for interndokumentasjon. Denne tjenesten er det ikke meningen SO skal benytte. Det er i gangsatt overgang til Confluence.

uio-wiki er under flytting til comfluence. So forventer å fase ut innen 1. juni 2022.

Avtalte oppfølgingspunkter:

  • SO faser ut sin bruk av wiki.uio.no innen 1. juni 2022

Ekstra server til ElasticSearch

Usit ønsker å kjøre et odde antall servere til SO-tjenestene for å unngå feil pga split-brain i ElasticSearch. Har hatt feil pga split-brain en gang. 

Dette betyr å endre fra fire til tre eller fem servere. Tre servere ansees som ikke tilstrekkelig til å håndtere last dersom en av de stopper.

Avtalte oppfølgingspunkter

  • Frank sender kostnadsoverslag til Mathis for godkjenning før en eventuell endring.

 

Sak 7: Neste møte

 

Nytt møte ca uke 7. Frank kaller inn

 

 

Publisert 10. nov. 2021 10:52 - Sist endret 8. mai 2022 23:12