Arbetsbeskrivning
Uppdrag:
Lead Data Platform Engineer
Vi söker en skicklig och driven plattformsingenjör med fokus på data för att vara med och bygga upp en ny, decentraliserad dataplattform från grunden.
Målet är att skapa en lösning där utvecklingsteam själva kan hantera, publicera och konsumera högkvalitativa dataset på ett effektivt sätt – inspirerat av principerna inom data mesh.
Plattformen ska möjliggöra självbetjäning, men samtidigt hålla gemensamma standarder för att säkerställa skalbarhet och samverkan mellan team.
Om rollen
Som Lead Data Platform Engineer får du en nyckelroll i att forma både de tekniska och strategiska aspekterna av plattformen.
Du kommer att arbeta nära infrastruktur- och utvecklingsteam för att bygga och integrera viktiga komponenter, och du bidrar praktiskt från dag ett – genom kodning, problemlösning och arkitekturella beslut.
Dina huvudsakliga uppgifter innefattar att:
- Designa och bygga kärnkomponenter som datasetkatalog, lagringsstandarder, publiceringsverktyg, orkestrering och metadatahantering
- Utvärdera och integrera open-source-verktyg såsom Flyte, Dagster, Amundsen eller DataHub
- Utforma konventioner för datasetformat (ex.
Parquet), versionshantering, åtkomstkontroll och schemadefinitioner
- Bidra till hur Databricks ska integreras och användas i plattformsstrategin
- Skapa och dokumentera bästa praxis för hur dataset produceras och konsumeras inom organisationen
- Säkerställa att plattformen blir skalbar, enkel att använda och lätt att underhålla
Vi tror att du har:
- Minst 7 års erfarenhet som utvecklare, gärna inom dataintensiva system eller plattformar
- God vana vid att arbeta med orkestreringsverktyg som Airflow, Flyte eller Dagster
- Erfarenhet av molntjänster – gärna Azure, men även GCP eller AWS är relevant
- Arbetat med Databricks och dess ekosystem
- Förståelse för metadatahantering, lineage och dataproduct ownership
- Tidigare bidragit till interna plattformar, utvecklarverktyg eller gemensamma tekniska tjänster
- Goda kunskaper i Python och CLI, samt gärna även SQL
- En pragmatisk och lösningsorienterad inställning, med förmåga att balansera mellan snabba leveranser och långsiktig struktur
- Förmåga att samarbeta över teamgränser och kommunicera tekniska koncept tydligt
Meriterande är om du har:
- Arbetat med integrationer mot Power BI, Backstage eller metadata-kataloger
- Erfarenhet av lakehouse-arkitekturer och Delta Lake
- Bakgrund inom data engineering, plattformsutveckling eller developer experience
Om Rasulson Consulting
Rasulson Consulting är ett specialiserat bemannings- och rekryteringsföretag inom IT-sektorn.
Vi samarbetar med ledande tech-bolag och innovativa startupföretag för att erbjuda spännande karriärmöjligheter för dig med intresse för digital utveckling.
Genom vår djupa tekniska förståelse och vårt starka nätverk kan vi snabbt matcha rätt kompetenser med rätt uppdrag.
Hos oss får du personlig vägledning, regelbunden återkoppling och möjligheten att ta nästa steg i din IT-karriär.