In een dynamisch datalandschap onderzoek je in deze afstudeeropdracht welke software-engineeringpractices uit de softwareontwikkeling toegepast kunnen worden op moderne dataplatforms. Je verkent en implementeert strategieën die de potentie hebben om Python-gebaseerde ETL-pipelines te versterken. Een kans voor toekomstige data-engineers om te leren, te innoveren en bij te dragen aan de evolutie van data-integratie.

💡Interessegebieden: Data Engineering, Software Development, DevOps practices, Automatisering

De afgelopen jaren is er veel veranderd in de wereld van data. Een opvallende verschuiving is de toename van het gebruik van moderne dataplatforms, waarbij steeds vaker ETL-pipelines worden ontwikkeld met behulp van bijvoorbeeld Python. Dit geeft veel nieuwe mogelijkheden, zoals geautomatiseerd testen, objectgeoriënteerd programmeren en naadloze integratie in DevOps-pipelines. Dit nieuwe terrein vormt echter een uitdaging voor veel data-engineers, aangezien het een andere aanpak vereist dan de traditionele methoden die ze gewend zijn. Binnen het softwarelandschap worden deze concepten al geruime tijd toegepast. De vraag is: welke van deze software-engineeringpractices kunnen worden toegepast binnen de context van moderne dataplatforms?

De opdracht

Deze afstudeeropdracht richt zich op het onderzoeken en identificeren van software-engineeringpractices die succesvol kunnen worden toegepast binnen de context van moderne dataplatforms, met bijzondere aandacht voor ETL-pipelines ontwikkeld met talen zoals Python. De opdracht omvat ook de praktische implementatie van deze practices om de efficiëntie en betrouwbaarheid van data-integratieprocessen te verbeteren in deze nieuwe omgevingen.

Over Info Support

Info Support is specialist in maatwerksoftware, data/AI solutions, beheer en trainingen en actief in de sectoren Finance, Industry, Agriculture, Food & Retail, Mobility & Public en Healthcare. Wij bieden solide en innovatieve oplossingen voor complexe en bedrijfkritische softwarevraagstukken. Onze hoofdkantoren zijn gevestigd in Veenendaal (NL) en Mechelen (BE). Op dit moment zijn er circa 500 medewerkers bij Info Support in dienst.

De werkwijze van Info Support kenmerkt zich door een aantal kernwaarden: soliditeit, integriteit, vakmanschap en passie. Deze kernwaarden zijn verweven in ons werk en de manier waarop we met elkaar omgaan.

Om te zorgen dat alle medewerkers altijd op de hoogte kunnen zijn van de nieuwste ontwikkelingen beschikt Info Support over een inhouse kenniscentrum waar graag wordt voldaan aan de honger naar meer of andere kennis en vaardigheden.

Om deze opdracht te kunnen doen is B2-taalvaardigheid in het Nederlands vereist.