Data Engineer

Uppdragsbeskrivning

Kunden genomgår en omfattande digital transformation – och data är helt centralt i resan. De bygger en modern, decentraliserad dataplattform inspirerad av data mesh-principer, där team själva kan publicera, hitta och konsumera tillförlitliga dataprodukter på ett säkert och standardiserat sätt.

Vi söker nu en Senior Data Engineer till kundens tvärfunktionella Data Foundry-team. Teamet är ett hybridteam som både utvecklar gemensamma plattformsförmågor – som katalog, governance, orkestrering och SDK:er – och arbetar hands-on med verkliga verksamhetsnära use cases.
Genom att själva bygga dataprodukter säkerställer de att plattformen fungerar i praktiken och att de skapar affärsvärde tidigt.

Rollen är hands-on med tydlig tyngdpunkt på att bygga och vidareutveckla dataprodukter och plattformsmönster i Azure och Databricks, kombinerat med enablement av andra team när det ger störst effekt.

Det här kommer du att jobba med

• Bygga och visa vägen
  Du utvecklar dataprodukter hands-on genom att arbeta med riktiga datakällor, bygga pipelines och publicera återanvändbara dataset i Databricks.
  Du tar fram referensimplementationer enligt kundens golden path som visar hur team onboardar, transformerar och exponerar data med Unity Catalog och Databricks-native verktyg. Du utvärderar och driver designval och trade-offs mellan Spark Declarative Pipelines, Databricks Jobs, SDK-baserad orkestrering och olika deploymentsätt.
  
• Enablement och samarbete
  Du hjälper andra utvecklingsteam att onboarda sina dataprodukter till plattformen och komma igång med kundens golden path, inklusive struktur i Unity Catalog, metadatahantering och säkra accessmönster. I perioder arbetar du nära andra team för att guida dem genom uppsättning och driftsättning av deras första dataprodukter. Du samlar in feedback från verklig användning och använder den för att förbättra arkitekturmönster, tooling och dokumentation.
  
• Driva plattformen framåt
  Du bidrar till intern plattformsutveckling: SDK:er, scaffoldade templates, Databricks Asset, Bundles (DAB)-baserade workflows och CLI-verktyg.
  Du designar mönster för automation och CI/CD, till exempel med GitHub Actions, för att hantera datapipelines och Databricks-resurser.
  Du bygger in compliance och governance by design – GDPR, rätten att bli glömd (RtBF), dataklassificering och integritetsbevarande transformationer. Du arbetar kontinuerligt med att förbättra utvecklarupplevelsen baserat på feedback och insikter från hur plattformen används.

Erfarenhetskrav

• Har minst 5 års erfarenhet av praktiskt data engineering-arbete, gärna i en molnbaserad miljö.
• Har djup erfarenhet av Databricks, inklusive Unity Catalog, Jobs, Workflows samt workspace och klusterkonfiguration.
• Är trygg i att designa och orkestrera datapipelines, gärna med Databricks-native verktyg som Spark Declarative Pipelines. Erfarenhet av Dagster eller Airflow är meriterande.
• Förstår trade-offs mellan olika orkestrerings- och arkitekturmönster och kan göra pragmatiska val.
• Är bekväm med Python, SQL och Git-baserade arbetssätt.
• Har god förståelse för data governance, integritet och åtkomststyrning.
• Trivs med att arbeta tvärfunktionellt, coacha andra och dokumentera tekniska lösningar tydligt.

Meriterande

• Vana av att automatisera Databricks-miljöer med GitHub Actions.
• Kännedom om Backstage eller andra developer portals.
• Erfarenhet av att möjliggöra Power BI eller andra analytiska konsumtionsmönster.
• Erfarenhet av intern plattformsutveckling och återanvändbara templates/mönster.

Din ansökan

Låter rollen intressant och passande? Ansök i så fall omgående för vi intervjuar löpande och rollen kan tillsättas innan sista ansökningsdatum.

Vi kan enbart ta emot och bearbeta din ansökan genom att du registrerar ditt CV i vår portal. Med avseende på GDPR kan vi ej ta emot ansökningar via e-post. Varmt välkommen med din ansökan! Uppdraget är en del av Quest Consulting personaluthyrning.

Om oss

Quest Consulting är ett auktoriserat konsultbolag med kollektivavtal, försäkringar, friskvård och tjänstepension. Vi är specialiserade inom IT, Teknik, HR, Administration och Ekonomi. Vår målsättning är att vara din personliga samarbetspartner och just därför är det så viktigt för oss att arbeta efter våra kärnvärden där våra ledord är att vara Personliga, Nyskapande och Professionella.