Data Engineer - Data Management
Click to see all jobs
Dagens dataplattformer skal moderniseres ved at det etableres en ny dataplattform i skyen (Azure) i perioden 2024 til 2026. Dagens løsninger skal bygges på nytt på ny dataplattform for å ikke ta med seg teknisk- og data-gjeld.
Løsningen består av om lag 100 integrasjoner og 450 datasett som i dag benyttes til økonomiske modeller og analyser. Antall brukere er om lag 200.
Moderniseringen er organisert som et prosjekt med varighet på 2,5 år. Det er lagt opp til en trinnvis implementering av virksomhetsprosesser. Prosjektet vil forvalte produksjonssatte løsninger i på ny dataplattform i prosjektperioden etter prinsippet «You build it – your run it». Dagens og ny dataplattform vil leve i parallell mens dagens plattform gradvis fases ut.
Det vil være behov for integrasjoner mellom ny og eksisterende løsning i denne perioden.
I dette arbeidet er det behov for å styrke teamet med to Data Engineer på 100% til enheten Data Management.
ANSVAR OG OPPGAVER
Relevante oppgaver blir:
Som Data Engineer vil du ha fokus på det tekniske arbeidet “i maskinrommet”.
- Innhente data primært fra eksterne kilder (DataFactory, Python m.m.)
- Standardisere dataintegrasjoner (primært API og filbasert)
- Vaske, bearbeide og klargjøre data (Python)
- Tilgjengeliggjøre data i henhold til «medalion»- og lakehouse arkitektur
- Sørge for teknisk kvalitet på data.
- Veilede brukere av dataene
HOVEDKVALIFIKASJONER OG FERDIGHETER
Kompetanser:
- Utviklingsmetodikk og rammeverk for data engineering
- Datamodellering - relasjonsmodeller, stjerneskjema, fakta og dimensjoner o.l.
- Dataarkitektur og historisering / versjonering av data
- Database/tabell/schema administrasjon
- CI/CD og DataOps
- Python biblioteker for gjenbruk
- Konvertering av ulike filformater til parquet
Ønskelige kompetanser:
- Skyteknologi fortrinnsvis Azure
- Databricks Unity Catalog
- Airflow/python for orkestrering
- Azure Data Factory
- Azure DevOps/GitHub
Utdanning:
- Utdanning (fortrinnsvis master) innen datateknologi eller lignende retninger
Personlige egenskaper:
- Lagspiller
- Selvstendig
- Løsningsorientert
Required skills:
Datamodellering
Data engineering
Dataarkitektur
CI/CD
DataOps
Python
Desired skills:
Azure
Competence area
Data warehouse and BI
Location
Oslo
Workload
100%
Languages
Norsk
Startdate
01.02.2024
Enddate
31.01.2025
Apply before
16.01.2024
Sourcing Manager
Løsningsarkitekt
Request ID: 25-02-4734 Published: 2025-02-07Brønnøysundregistrene har behov for å sikre at BVR-prosjektet («Brukervennlige registertjenester») og andre tilknyttede prosjekt har tilstrekkelig kapasitet og kompetanse i forbindelse med videreutvikling og drift av den tekniske plattformen for registertjenester.Nærmere beskrivelse av oppdraget I forbindelse med pågående utvikling av ny registerplattform ved Brønnøysundregistrene er det nødvendig å styrke arkitekturarbeidet.Formålet med denne anskaffelsen er å tilføre arkitekturressurser, slik......
Architecture
Oslo
100%
2025-03-15
2026-03-15
Norsk
Testleder
Request ID: 25-01-4333 Published: 2025-01-29Prosjektet Brukervennlige Registertjenester (BVR) skal realisere tjenestene for innrapportering og tilgjengeliggjøring nært knyttet opp mot saksbehandlingsprosessene som realiseres av BRsys-prosjektet (utvikling av felles registerplattform). Hovedfokus for dette oppdraget vil være tjenester for innrapportering. Nærmere beskrivelse av oppdragetSom testleder er konsulentens hovedoppgave å planlegge, koordinere og lede testaktiviteter for å sikre kvaliteten på våre løsninger. Konsulenten skal j......
Test and test management
Oslo
100%
2025-03-10
2025-12-31
Norsk