Opdrachtomschrijving
Wij zijn op zoek naar een ervaren Data Engineer die meewerkt aan de migratie en uitbreiding van onze data-omgeving. Je schrijft SQL-queries voor migraties, bouwt en beheert pipelines in Azure Data Factory en zorgt dat datastromen betrouwbaar, snel en goed gedocumenteerd verlopen.
Als Data Engineer werk je aan de technische fundering van onze data-architectuur. Je ontwikkelt Entity Framework-migrations, breidt het datamodel uit met nieuwe entiteiten en relaties en richt Azure Data Factory- en Azure DevOps-pipelines in voor geautomatiseerde dataverwerking. Je voert validaties en mismatch-analyses uit, monitort dagelijkse migraties en lost incidenten op. Ook verbeter je continu de performance, indexering en betrouwbaarheid van de dataflows en borg je kennis via actuele documentatie.
Werkzaamheden
- Schrijven en uitvoeren van SQL-queries voor migraties;
- Genereren en aanpassen van Entity Framework migrations;
- Uitbreiden van het datamodel met nieuwe entiteiten en relaties;
- Opzetten en beheren van Azure Data Factory- en Azure DevOps-pipelines;
- Bouwen van validaties en uitvoeren van end-to-end-tests en mismatch-analyses;
- Opzetten en onderhouden van representatieve testdata;
- Monitoren van dagelijkse migraties en oplossen van incidenten;
- Verbeteren van performance (indexen, retries, optimalisaties);
- Bijwerken van documentatie (how-to’s, wiki’s, change logs).
Gemeentelijke organisatie
De gemeentelijke organisatie bestaat uit 5 clusters, een bestuurs- en concernstaf, 7 stadsdelen en 1 stadsgebied. De stadsdelen besturen samen met de gemeenteraad, burgemeester en wethouders de stad Amsterdam. De 5 clusters zijn: Ruimte en Economie, Sociaal, Stadbeheer, Bedrijfsvoering, Digitalisering, Innovatie en Informatie. De clusters hebben expertise op een specifiek terrein, zoals sport, jeugd of parkeren. Zij werken beleid uit tot stadsbrede kaders waarbinnen de stadsdelen het uitvoerende werk kunnen doen. Ook bieden zij directe ondersteuning aan bewoners die dit nodig hebben, bijvoorbeeld op het gebied van participatie of werk. De stadsdelen houden zich onder andere bezig met de inrichting van straten en pleinen, groen en parken en welzijnswerk in de buurt. Ze zorgen ervoor dat wat ze doen, past bij de behoeften in hun stadsdeel en bij het beleid voor de hele stad. Meer informatie over de gemeentelijke organisatie is te vinden op: https://www.amsterdam.nl/.
De opdrachtgever
De Data engineer zal gaan werken voor het programma NISE (Nieuw Informatie Systeem Erfpacht en Uitgifte) welke valt onder de afdeling informatievoorziening van Ruimte en Economie voor het IV-account van de directie Grond en Ontwikkeling. De opdrachtgever is de afdelingsmanager van de afdeling Erfpacht en Uitgifte. De afdeling Erfpacht en Uitgifte werkt samen met IV aan de vernieuwing van het informatielandschap. Hiervoor is het programma NISE opgericht waarin op basis van een nieuwe doel-architectuur het huidige informatielandschap de aankomende jaren gefaseerd wordt vervangen. Erfpacht & Uitgifte (E&U) voert het Amsterdamse erfpachtstelsel uit, zodat de waarde en het gebruik van de grond ten dienste komen van de ontwikkeling van de gemeente en haar inwoners en bedrijven. Het erfpachtuitgifte en -beheerproces is onderdeel van de keten gebiedsontwikkeling. Het is in feite het sluitstuk daarvan, maar in sommige gevallen ook weer een beginpunt; denk aan transformatie en herontwikkeling van bestaande erfpachtrechten.