Ben jij een Senior / Lead Data Engineer met een sterke ondernemersgeest? 🚀
Als Data Engineer help je ons bij het implementeren van de data lake om milieugegevens te verzamelen, verwerken en opslaan van diverse sites.
Concreet verwachten we dat de IT Data Engineer:
Schaalbare datapijplijnen ontwikkelt en onderhoudt met behulp van Azure Databricks.
Samenwerkt met business data-analisten om databehoeften te begrijpen en oplossingen aan te leveren.
Dataintegratie- en transformatieprocessen implementeert vanuit diverse bronnen, waaronder REST API's.
Datastromen optimaliseert en problemen oplost met het oog op performantie en betrouwbaarheid.
Zorgt voor datakwaliteit en consistentie over verschillende gestructureerde en ongestructureerde databronnen.
Op de hoogte blijft van de nieuwste trends en best practices binnen data engineering, Databricks en dataintegratietechnologieën.
Onze klant hanteert een Microsoft-first strategie en bouwt haar datalandschap op Microsoft Azure Cloud-oplossingen zoals Azure Data Lake Storage Gen2, Azure Databricks, Azure Data Factory, Azure SQL Services, enz.
Aantoonbare ervaring als Data Engineer met sterke focus op Azure Databricks en aanverwante technologieën binnen het Microsoft data-ecosysteem.
Bekend met de lakehouse medallion architecture.
Vaardig in SQL, Python en Apache Spark.
Grondige kennis van REST API’s, inclusief hoe deze op een veilige en efficiënte manier te consumeren (bijvoorbeeld via Python/Databricks notebooks); ervaring met het binnenhalen en transformeren van JSON/XML-data vanuit web API’s is een grote plus.
Ervaring met datamanagement & governance via Unity Catalog is een pluspunt.
Bereidheid en kennis om zelf (technische) rapporten in Power BI op te bouwen.
Documenteren van je werk is voor jou vanzelfsprekend tijdens analyses en ontwikkelactiviteiten (bijvoorbeeld in Wiki, DevOps, …).
Je spreekt vlot Engels. Andere Europese talen zoals Frans, Nederlands of Spaans zijn een pluspunt.
Klaar om een verschil te maken? Laten we alvast even kort kennismaken! 🙌