Senior Data Platform Engineer

- Byg og driv en dataplatform, der gør den grønne omstilling datadrevet

Kredsløb er en central aktør i den grønne omstilling og leverer datadrevne løsninger til energi, fjernvarme og genbrug, hvor store mængder realtids- og produktionsdata anvendes til at optimere kritisk infrastruktur, øge effektiviteten og understøtte mere klimavenlige løsninger gennem avanceret data engineering og analytics.

Actief Hartmanns søger for Kredsløb en Senior Data Platform Engineer, der brænder for at udvikle og vedligeholde en robust og skalerbar dataplatform, som understøtter Kredsløbs behov for data.
Du får rollen som teknisk ansvarlig for dataplatformen (platform owner-ansvar) og bliver som sådan en nøglespiller i udviklingen af datainfrastrukturen.

Du vil, i rollen, få et tæt samarbejde med data specialister, BI-udviklere og forretningens dataejere samt IT-afdelingens infrastruktur-team.
Rollen har et stærkt element af software engineering praksis. Du designer, bygger og driver en komplet dataplatform - ikke kun Databricks pipelines og Spark. Din hverdag vil handle om kodearkitektur, deployment og drift af et sammenhængende system.

Kredsløbs dataplatform bygger i dag på:

• Dagster som orkestreringsværktøj - data-ingest og afvikling af Databricks Spark notebooks styres herfra
• Databricks som compute-lag for Spark-baserede transformationer og streaming pipelines.
• Azure Data Lake Storage som centralt storage-lag
• Azure EventHub til streaming-datakilder
• En lagdelt arkitektur med lagene raw -> service -> product -> analyse.
• Infrastructure as code via Git-baserede workflows
• Power BI som det primære forretnings-præsentationslag

Sæt dig i spidsen for Kredsløbs data-ambitioner

Kredsløb arbejder for at skabe og implementere fremtidens bæredygtige løsninger inden for energi, varme og genbrug. Disse områder genererer hver for sig store mængder data både på Scada og på IT-siden. Som Senior Data Platform Engineer vil du få en central rolle i at sikre brugerne adgang til et bredt og velstruktureret datagrundlag, som sikrer grundlaget for både datadrevne beslutninger og anvendelsen af AI/maskinlæring i både drift- og udviklingsprocesser.

Du bliver en central del af et engageret og ambitiøst team, som arbejder med alle aspekter af data og analyser, og består af såvel interne som eksterne ressourcer.

Som ansvarlig for Kredsløbs dataplatform er dine primære opgaver at:

• Kontinuerligt udvikle og optimere Kredsløbs data platform til understøttelse af organisationens databehov
• Videreudvikle, designe og vedligeholde den Dagster-baserede orkestreringsplatform
• Sikre performant og skalerbar databehandling vha. Spark best practices
• Deltage i udvikling af transformations- og forretningslogik i Databricks notebooks med PySpark/Spark SQL
• Arbejde med udvikling og drift af streaming-pipelines mod Azure EventHub via Spark Structured Streaming og Delta Live Tables
• Opbygge og automatisere ETL/ELT-pipelines til integration af interne og eksterne datakilde
• Strukturere og modellere data
• Sætte standarden for datakvalitet, dokumentation og compliance (f.eks. GDPR)
• Definere udviklingsstandarder, metoder og processer, som sikrer stabile og skalerbare løsninger med høj sikkerhed
• Tage ansvar for en struktureret styring af dataplatformens drift, vedligehold og performance

Hvem er du?

Vi forestiller os, at du har 7-10 års erfaring fra tilsvarende stilling og en baggrund som fx software engineer, datalog, datamatiker eller tilsvarende relevant uddannelse. Vi lægger vægt på:

• Erfaring med Python som produktionskode - ikke kun i notebooks, men også som en struktureret, modulær og testbar kodebase
• Erfaring med Databricks og/eller Spark - PySpark/Spark SQL til transformations- og forretningslogik
• Erfaring med Git arbejdsgange og DevOps principper, herunderCI/CD og infrastructure as code
• Indgående kendskab til datamodellering, arkitektur og governance
• Indgående kendskab til Cloud-platforme - gerne Azure
• Kendskab til Power BI

Som person er du imødekommende, struktureret og god til at kommunikere med både tekniske og mindre tekniske interessenter. Du har en ambitiøs men også pragmatisk tilgang til tingene. Du er god til at skabe relationer og trives med både samarbejde og selvstændige opgaver. Du påtager dig naturligt ansvaret for dit felt, men er også åben for sparring og vidensdeling. Du er nysgerrig på nye teknologier og den værdi de kan skabe, og motiveres af at skabe de gode tekniske løsninger, som skaber værdi for organisationen.

Kredsløb som arbejdsplads

Kredsløb er en forsyningsvirksomhed, der arbejder ambitiøst med målet om bæredygtig udvikling af energiforsyning og løsninger inden for cirkulær økonomi. Hos Kredsløb får du en varieret og udfordrende hverdag med mulighed for at sætte et reelt og innovativt aftryk på den grønne omstilling i Aarhus. Du får et job med mening, hvor det du laver, påvirker fremtiden for alle, der bor og arbejder i Aarhus Kommune. 

Kredsløb har fokus på udviklingsmuligheder både fagligt og personligt og kan tilbyde et bredt og højt fagligt miljø.

Vil du være med i den grønne opstilling?

Er du interesseret i stillingen? Send din ansøgning og dit CV via ansøgningsknappen – vi ser frem til at høre fra dig.
Hvis du har spørgsmål til stillingen og ønsker at høre nærmere, er du velkommen til at kontakte senior rekrutteringskonsulent i Actief Hartmanns Anne-Mette Juncker Davidsen på mobil +45 4121 1344 eller på mail: anne-mette.davidsen@actief-hartmanns.dk. 

Actief Hartmanns A/S varetager på vegne af virksomheden hele rekrutteringsprocessen, og al kontakt bedes derfor rettet direkte til os. Vi opfordrer alle kvalificerede kandidater til at søge – uanset alder, køn, handicap, etnisk baggrund, religion eller nationalitet.
Samtaler afholdes løbende og vi forbeholder os retten til at afslutte rekrutteringsprocessen med rette kandidat inden ansøgningsfristens udløb.