Fulltime | 6 maanden | Snelle opstart
Voor een internationale industriële speler in regio Brussel zoeken we een medior Data Engineer die mee wil bouwen aan een datagedreven emissie-monitoring framework binnen een complexe productieomgeving.
De opdracht is fulltime en loopt initieel 6 maanden, met mogelijkheid tot verlenging. Opstart is voorzien binnen enkele weken.
De uitdaging
Binnen deze organisatie speelt data een cruciale rol in het monitoren en analyseren van emissies. Het doel is om industriële meetdata op een schaalbare en betrouwbare manier beschikbaar te maken voor analyse, compliance en strategische besluitvorming.
Je zal werken binnen een moderne cloudomgeving waar wordt ingezet op:
* Databricks als centraal data platform
* Data Mesh-principes (domein-georiënteerde data ownership)
* Herbruikbare en gedocumenteerde data producten
* Duidelijke scheiding tussen brondata, transformatielagen en semantische modellen
Het project heeft zowel een technisch als inhoudelijk karakter: je werkt met ruwe industriële meetdata die een directe impact heeft op milieu- en rapporteringsverplichtingen.
Jouw rol
Je focus ligt in eerste instantie op het ontwikkelen van Source-Aligned data producten. Concreet betekent dit:
* Integreren van procesdata uit een industriële data historian (o.a. AVEVA PI)
* Verwerken van data uit monitoring- en analysetools
* Inladen en structureren van meteorologische data via externe API’s
* Ontwikkelen van robuuste pipelines in Databricks
* Modelleren en transformeren van data met dbt
Je zorgt ervoor dat deze data producten:
* Betrouwbaar en reproduceerbaar zijn
* Versioneerbaar en testbaar zijn
* Voldoen aan afgesproken datakwaliteitsstandaarden
* Duidelijk gedocumenteerd zijn
Na de initiële opzetfase verschuift je focus naar het uitwerken van een semantisch model dat toelaat om emissiepatronen correct te analyseren en rapporteren. Dit houdt onder meer in:
* Definiëren van businesslogica
* Harmoniseren van meeteenheden en tijdsgranulariteit
* Voorbereiden van datasets voor rapportering en analyse
Je werkt hierbij nauw samen met domeinexperten, sustainability stakeholders en analisten.
Gezocht profiel
We zoeken iemand met:
* Minimaal 2 jaar ervaring als Data Engineer (medior niveau)
* Sterke ervaring met Databricks
* Praktische kennis van dbt
* Inzicht in of ervaring met Data Mesh-principes
* Ervaring met het integreren van API-data
* Kennis van DLT (Delta Live Tables) is een plus
Daarnaast ben je iemand die:
* Complexe data kan structureren tot duidelijke modellen
* Ownership neemt over zijn/haar data producten
* Comfortabel is in een industriële of technische context
* Proactief meedenkt over performantie, schaalbaarheid en governance
Waarom dit interessant is
* Technisch uitdagend (industriële meetdata + cloud data platform)
* Grote zichtbaarheid binnen een duurzaamheidsprogramma
* Impactvolle data (compliance, rapportering, strategische inzichten)
* Moderne data-architectuur met duidelijke principes
* Hybride regeling: 1 à 2 dagen onsite in Brussel