Senior Data Engineer

39EB

Senior Data Engineer

Bouw mee aan AI-powered learning tools die de toekomst van leren vormgeven. Werk aan innovatieve projecten voor organisaties binnen zorg, overheid en defensie.

Bij Next Learning Valley werken we elke dag aan de toekomst van leren. We slaan een nieuwe slag in de wereld van Learning & Development door onze eigen AI-powered learning tools te ontwikkelen. Tools die leren slimmer, persoonlijker en datagedreven maken en die organisaties helpen om écht vooruit te kijken.

Die ambities brengen ons ook bij impactvolle maatschappelijke projecten. Zo werken we aan leeroplossingen voor het Ministerie van Defensie, waar technologie, veiligheid en leren samenkomen in een complexe en betekenisvolle context.

Om deze volgende stap mogelijk te maken, zoeken we een Senior Data Engineer die energie krijgt van het bouwen van robuuste data platformen, event-driven architecturen en schaalbare data-oplossingen.

Functieomschrijving:

Als Senior Data Engineer werk je aan de ontwikkeling van ons data platform en lakehouse-ecosysteem. Je bouwt mee aan een greenfield omgeving waarin je niet alleen pipelines ontwikkelt, maar ook actief meedenkt over architectuur, schaalbaarheid en technische keuzes.

Je werkt aan data-oplossingen die de basis vormen voor AI-driven learning, learning analytics en hyperpersoonlijke leerervaringen. Daarbij speel je een belangrijke rol in het betrouwbaar verwerken, transformeren en beschikbaar maken van grote hoeveelheden data.

Je houdt je onder andere bezig met:

• Het ontwerpen, bouwen en onderhouden van schaalbare data pipelines
• Het ontwikkelen van data workflows in Python en PySpark
• Het bouwen van data processing lagen binnen een medallion architecture
• Het ontwikkelen van ons lakehouse-platform
• Het verwerken van streaming data en event-driven architecturen met Kafka
• Het beheren en optimaliseren van PostgreSQL omgevingen
• Het werken met Kubernetes workloads en containerized services
• Het verbeteren van performance, betrouwbaarheid en schaalbaarheid van het platform
• Het ondersteunen van CDC- en streamingintegraties
• Het oplossen van complexe technische vraagstukken binnen data
• infrastructuur
• Het bijdragen aan technische standaarden, documentatie en kennisdeling

Je werkt nauw samen met developers, platform engineers, consultants en productteams aan oplossingen die daadwerkelijk impact maken binnen leren en ontwikkelen.

Kwalificaties en vaardigheden:

• Sterke hands-on ervaring met Python en PySpark
• Ervaring met Apache Spark voor distributed data processing
• Kennis van Apache Iceberg en lakehouse architecturen
• Ervaring met Apache Kafka, inclusief consumer groups, partitioning en failure handling
• Sterke kennis van PostgreSQL, troubleshooting en performance tuning
• Ervaring met Kubernetes, workloads en container orchestration
• Ervaring met het bouwen van production-grade data pipelines
• Sterke analytische en probleemoplossende vaardigheden
• Goede communicatieve vaardigheden en een proactieve werkhouding

• Change Data Capture (CDC) en tools zoals Debezium
• Functioneel programmeren en composable software design
• Apache Airflow
• Apache Trino en Iceberg integraties
• S3-compatible storage zoals Ceph of SeaweedFS
• Helm en Kustomize
• Event-driven platformen en moderne data ecosystemen

Je komt terecht in een multidisciplinair team van developers, onderwijskundigen, consultants, marketeers en projectmanagers. We werken samen in een open en informele setting, waarin kwaliteit, innovatie en eigenaarschap centraal staan.

Wat je bij ons kunt verwachten:

• Werken aan AI-driven learning tools en grootschalige projecten zoals AMALT
• Een moderne techstack en ruimte om mee te denken over product en architectuur
• Hybride werken en een fijne werkplek in Utrecht
• Marktconform salaris en goede secundaire voorwaarden (zoals pensioen en laptop)
• Ruimte om door te groeien richting senior, architectuur, DevOps of technische lead
• Een cultuur waarin kennisdeling en continue verbetering vanzelfsprekend zijn

Meld Misbruik