Data engineer INTEL SWF (VDAB) via Vlaanderen connect
Role details
Job location
Tech stack
Job description
'Software factory' (SWF) is verantwoordelijk voor de ontwikkeling van bedrijfsapplicaties. Binnen deze afdeling ontwikkelen we de applicaties alsook het bewaken van de gezondheid van deze applicaties en het up-to-date houden binnen het applicatielandschap. VDAB is een omgeving met een zeer recente technologie stack waar je ruimte krijgt tot groei en je potentieel ten volle kan ontwikkelen. Je komt in een zeer open en gedreven team terecht. Om de continuïteit en de kwaliteit van het ontwikkelingsproces te garanderen, zet SWF in op interne medewerkers die deze kennis kunnen borgen.
De functiehouder zorgt ervoor dat data binnen een organisatie beschikbaar, betrouwbaar, schaalbaar en bruikbaar is voor analyses, rapportages en datagedreven beslissingen. De functiehouder bouwt en onderhoudt de data-infrastructuur die het mogelijk maakt om grote hoeveelheden data op een efficiënte, veilige en gestructureerde manier te verzamelen, verwerken en opslaan.
Het team is 40 personen groot maar bestaat uit subteams van 5-8 personen. De samenstelling van deze subteams kan variëren per kwartaal, ook afhankelijk van persoonlijke interesse.
In het team zitten verschillende profielen: 2 teamleiders, data analisten, data engineer, rapporteringsspecialisten, testers, technisch data architecten.
? Het ontwikkelen van data rapporteringen en analytics
? Je ontwikkelt (in team) data warehouses en data lakes om waardevolle informatie te ontsluiten.
? Je ontwikkelt ETL- en data gedreven Artificial Intelligence-oplossingen
? Je voorziet inzichten en oplossingen voor complexe data problemen om zo end-2-end data oplossingen te implementeren.
? Je bent verantwoordelijk voor de implementatie en onderhoud van het datawarehouse en ETL infrastructuur, waar je data zal transformeren in bruikbare data formats voor analyses
? onderhoud van dashboards
Waar ga je werken
Je werkt 1 dag in Brussel, op wandelafstand van het station Brussel Noord.
Jouw toekomstig team
Binnen het team worden nieuwe rapporteringsmogelijkheden gebouwd wanneer er nieuwe vragen en/of nieuwe operationele systemen zijn. Daarnaast is het team ook bezig aan een migratie van het oude DWH naar het nieuwe dataplatform.
Volgende technologieën worden er gebruikt binnen het team: Python, NIFI, Airflow, Spark en PySpark, Cloudera Data Platform. (on premise geïnstalleerd), Spark Streaming, Kafka en Kafka streams, JDK talen (java, scala, groovy, ...), javascript (angular, d3, .), event verwerking en JSON, Apache AVRO & Parquet, Apache Iceberg, Apache Impala, Vault Speed, SingleStore, lakehouse architectuur.
Profil
Requirements
Jouw technische vaardigheden
? Je hebt minstens 3 jaar ervaring in data engineering en ervaring in de volgende tech stack: Power BI, Data vault, Databricks, Python, Postgress.
? Je hebt minstens 5 jaar ervaring in ETL
? Je bent vertrouwd met het werken in agile omgevingen
? Je houdt van een uitdaging waarin je complexe vraagstukken tot een technisch efficiënte oplossing brengt
? Zowel streaming data vanuit meerdere bronnen als batch data geven jouw energie
? Backend Informatiesystemen; databases en SQL hebben geen geheimen voor jou.
? Passie voor Business Analytics, ETL ontwikkeling en Knowledge Discovery oplossingen. ervaring met één of meer van volgende domeinen is een plus:
? ETL tools: IBM DataStage, Microsoft SSIS, Azure Synapse, Databricks
? Database platformen: SQL Server, Oracle, DB2, Azure datalake, Snowflake
? Knowledge Discovery: Spss Modeler, R, Python
Vaardigheden
? Analytisch Vermogen: Vaardigheid in het analyseren van complexe infrastructuren en het ontwikkelen van schaalbare oplossingen.
? Communicatievaardigheden: Sterk in zowel technische als niet-technische communicatie met interne en externe partijen.
? Probleemoplossend Vermogen: Snel identificeren en oplossen van technische problemen in software architecturen
? Doelgericht: Een sterke focus op het behalen van doelstellingen is cruciaal.
? Creativiteit: Flexibiliteit en creativiteit in aanpak zijn waardevol in complexe situaties.
Benefits & conditions
Vlaanderen connect biedt een contract van 38 uur voor onbepaalde duur en een competitief salarispakket met:
? Een aantrekkelijke bruto verloning
? Een bonussysteem op basis van vast te leggen doelstellingen
? 28 dagen verlof en extra wettelijke feestdagen (11/07, 02/11 en 15/11).
