Databricks Engineer
AE, Heverlee - Berchem - Gent - Hasselt - Groot-Bijgaarden - klantencontext
About the job
Je bouwt het dataplatform waar een organisatie over een jaar nog op verder kan.
Als Databricks Engineer bij AE zet je schaalbare dataplatformen neer waarop data producten en AI-toepassingen draaien. Je werkt in het team van een klant en neemt de dataflows en transformaties waar de business op steunt zelfstandig voor je rekening, van bron tot bruikbaar data product. AI verandert wat een data product is, want de output is steeds vaker iets dat een agent bevraagt en niet alleen een rapport. Je denkt mee over hoe dat er bij onze klanten uitziet.
Wat is je focus?
- Je bouwt dataplatformen op Databricks (Delta Lake, Unity Catalog, Spark) waarop dataproducten gebouwd worden.
- Je integreert data uit verschillende operationele bronnen in het platform.
- Je transformeert data zodat ze betrouwbaar is voor data- en AI-toepassingen, ook wanneer de vraag van de business verandert.
- Je denkt mee over de architectuur, weegt alternatieven af en stelt toolingkeuzes in vraag wanneer dat nodig is.
- Je laat AI je werk ondersteunen, bij het opzetten van pipelines, het schrijven van code en het genereren van tests, en je controleert kritisch wat het oplevert voor het bij de klant belandt.