Back to search

Data Platform Engineer

Als Data Platform Engineer ontwikkel, beheer en verbeter je het dataplatform waarop de dataproductteams werken.

  • Brussel, Belgium
  • Contract
  • On-site
  • Posted Jan 1, 2024
INDUSTRYSoftware & InternetSaaS & Enterprise SoftwareData & Analytics

Responsibilities

  • ontwikkelt en beheert enablers, standaarden, templates en automatisering
  • integreert governance en beveiliging in het platform
  • configureert monitoring en alerting voor datapipelines
  • vertaalt de behoeften van dataproductontwikkelaars naar platformfuncties en legt deze helder vast in documentatie

Requirements

  • master in informatica, engineering of een gelijkwaardige ervaring
  • Experience in a post- en logistieke sector

Nice to have: Data Mesh, Agile/Scrum, post- en logistieke sector

Skills

Azure DatabricksAzure Data Lake StoragePythonSQLdbt CoreTerraformARM/BicepGitLabDelta Lakelakehouse-architecturenETL/ELTstreamingbatchverwerkingGrafanaGreat ExpectationsSodaAzureDatabricksDelta LakePythondbt CoreTerraformARM/BicepGitLabGrafanaGreat ExpectationsSoda

Full description

Voor een internationale organisatie in Brussel zoeken we een Data Platform Engineer die bijdraagt aan de ontwikkeling van een nieuw data-ecosysteem. Het platform steunt op Azure, Databricks en Delta Lake en stelt dataproductteams in staat om zelfstandig dataproducten te leveren. Jouw rol Als Data Platform Engineer ontwikkel, beheer en verbeter je het dataplatform waarop de dataproductteams werken. Je ontwikkelt en beheert enablers, standaarden, templates en automatisering. Je integreert governance en beveiliging in het platform. Je configureert monitoring en alerting voor datapipelines. Je vertaalt de behoeften van dataproductontwikkelaars naar platformfuncties en legt deze helder vast in documentatie. 📝 Jouw profiel Je hebt een master in informatica, engineering of een gelijkwaardige ervaring. Je brengt minstens 5 jaar ervaring mee in data engineering of cloudgebaseerde dataplatformen. Je hebt aantoonbare ervaring met Azure Databricks en Azure Data Lake Storage. Je werkt vlot met Python, gevorderde SQL en dbt Core of een vergelijkbare oplossing. Je hebt ervaring met infrastructure as code via Terraform of ARM/Bicep en met CI/CD, bijvoorbeeld met GitLab. Je bent vertrouwd met Delta Lake, lakehouse-architecturen, ETL/ELT, streaming en batchverwerking en de medallion-architectuur. Je hebt ervaring met monitoring, bijvoorbeeld Grafana, en met datakwaliteitsframeworks zoals Great Expectations of Soda. Ervaring met Data Mesh, Agile/Scrum of de post- en logistieke sector is een pluspunt. Praktisch Standplaats: Brussel, met beperkt reizen. Start: zo snel mogelijk, met een verwachte aanvang vanaf januari 2027. Werktaal: uitstekend Engels, zowel mondeling als schriftelijk. Voor de start worden je identiteit, diploma's en referenties gescreend. Interesse? Bezorg je cv.

Data Platform Engineer at EngiFlex | Referso Jobs