Dagens dataplattformer skal moderniseres ved at det etableres en ny dataplattform i skyen (Azure) i perioden 2024 til 2026. Dagens løsninger skal bygges på nytt på ny dataplattform for å ikke ta med seg teknisk- og data-gjeld. 

Løsningen består av om lag 100 integrasjoner og 450 datasett som i dag benyttes til økonomiske modeller og analyser. Antall brukere er om lag 200. 

Moderniseringen er organisert som et prosjekt med varighet på 2,5 år. Det er lagt opp til en trinnvis implementering av virksomhetsprosesser. Prosjektet vil forvalte produksjonssatte løsninger i på ny dataplattform i prosjektperioden etter prinsippet «You build it – your run it». Dagens og ny dataplattform vil leve i parallell mens dagens plattform gradvis fases ut. 

Det vil være behov for integrasjoner mellom ny og eksisterende løsning i denne perioden. 
I dette arbeidet er det behov for å styrke teamet med to Data Engineer på 100% til enheten Data Management. 

ANSVAR OG OPPGAVER
Relevante oppgaver blir:
Som Data Engineer vil du ha fokus på det tekniske arbeidet “i maskinrommet”. 

• Innhente data primært fra eksterne kilder (DataFactory, Python m.m.)
  
• Standardisere dataintegrasjoner (primært API og filbasert)
• Vaske, bearbeide og klargjøre data (Python)
• Tilgjengeliggjøre data i henhold til «medalion»- og lakehouse arkitektur
• Sørge for teknisk kvalitet på data.
• Veilede brukere av dataene

HOVEDKVALIFIKASJONER OG FERDIGHETER
Kompetanser: 

• Utviklingsmetodikk og rammeverk for data engineering
• Datamodellering - relasjonsmodeller, stjerneskjema, fakta og dimensjoner o.l.
• Dataarkitektur og historisering / versjonering av data
• Database/tabell/schema administrasjon
• CI/CD og DataOps 
• Python biblioteker for gjenbruk
• Konvertering av ulike filformater til parquet

Ønskelige kompetanser:

• Skyteknologi fortrinnsvis Azure
• Databricks Unity Catalog
• Airflow/python for orkestrering
• Azure Data Factory
• Azure DevOps/GitHub

Utdanning:

• Utdanning (fortrinnsvis master) innen datateknologi eller lignende retninger

Personlige egenskaper:

• Lagspiller
• Selvstendig
• Løsningsorientert