Data engineer - Detachering opdracht in Noord-Holland

Opdrachtomschrijving
Amsterdam is volop aan het digitaliseren. Eén van de belangrijkste opgaven is het beter en slimmer benutten van data. Jij komt te werken in het datateam Geo. Dit team voert diverse werkzaamheden uit zoals het implementeren van pipelines en cloudoplossingen om (geografische) data te verwerken en deze beschikbaar te stellen aan gemeentelijke gebruikers (bijvoorbeeld panoramabeelden en achtergrondkaarten). Adviseren over en configureren van kaarten die via een webservice (MapServer) beschikbaar worden gesteld, in samenwerking met andere datateams. Meewerken aan de inrichting van de geografische infrastructuur en het aansluiten van applicaties die door andere teams en binnen de gemeente worden gebruikt (zoals BI-tooling, GIS en gemeentelijke beheerapplicaties).Als data-engineer werk je in een Microsoft Azure cloudomgeving. Je neemt de ontwikkeling en het beheer van datapijplijnen op je die worden gedeployed in Microsoft Azure met behulp van onder andere Databricks. Je bent betrokken bij de gehele datapijplijn, van bronontsluiting tot en met het beschikbaar stellen van het uiteindelijke dataproduct en webservices. Je stelt data beschikbaar aan afnemers, afgestemd op het type gebruik, en denkt proactief mee in het ontwerpproces. Op basis hiervan maak je ontwerpkeuzes, bijvoorbeeld met betrekking tot privacywetgeving. Het gaat hierbij om geografische en complexe datasets, zoals panoramabeelden, pointclouds, raster- en InSar-data. Daarnaast werk je mee aan de ondersteuning van andere teams bij het verwerken en gebruik van geografische data.

Werkzaamheden

• Je bent verantwoordelijk voor het ontwerpen, ontwikkelen en testen van datasets, waaronder het modelleren van dataproducten, het schrijven van scripts (Python en SQL), en het inrichten van geautomatiseerde workflows in Databricks;
• Je bent verantwoordelijk voor het inrichten, beheren en onderhouden van de datapijplijn(en) in Azure;
• Je bent verantwoordelijk voor het logging, monitoring en optimalisatie van de datapijplijn;
• Je bent verantwoordelijk voor het beschikbaar stellen van dataproducten in samenwerking met andere datateams en het dataplatform;
• Je bent verantwoordelijk voor het ontwikkelen en beheren van de datapijplijn, en vanuit de Agile-gedachte, het coachen en begeleiden van junior engineers.

Gemeentelijke organisatie
De gemeentelijke organisatie bestaat uit 5 clusters, een bestuurs- en concernstaf, 7 stadsdelen en 1 stadsgebied. De stadsdelen besturen samen met de gemeenteraad, burgemeester en wethouders de stad Amsterdam. De 5 clusters zijn: Ruimte en Economie, Sociaal, Stadbeheer, Bedrijfsvoering, Digitalisering, Innovatie en Informatie. De clusters hebben expertise op een specifiek terrein, zoals sport, jeugd of parkeren. Zij werken beleid uit tot stadsbrede kaders waarbinnen de stadsdelen het uitvoerende werk kunnen doen. Ook bieden zij directe ondersteuning aan bewoners die dit nodig hebben, bijvoorbeeld op het gebied van participatie of werk. De stadsdelen houden zich onder andere bezig met de inrichting van straten en pleinen, groen en parken en welzijnswerk in de buurt. Ze zorgen ervoor dat wat ze doen, past bij de behoeften in hun stadsdeel en bij het beleid voor de hele stad. Meer informatie over de gemeentelijke organisatie is te vinden op: https://www.amsterdam.nl/.

De opdrachtgever(s)
De directie Data organiseert en regisseert alle data-activiteiten binnen onze organisatie.
Directie Data zorgt voor een stevig datafundament en voor data-governance gemeentebreed en daardoor voor een sterke data- en informatiepositie voor zowel onze organisatie als de stad. De directie is verantwoordelijk voor de leverbetrouwbaarheid en schaalbaarheid van de dataproducten en voor de kwaliteitszorg op datagebruik, -beheer en -producten.De directie heeft de missie om de gemeentedata savvy te maken, meer datagedreven te gaan laten werken en data gerelateerde kennis te bundelen binnen de organisatie en binnen de stad. De directie Data bestaat uit ongeveer 250 medewerkers, verdeeld over 9 onderdelen.

Eisen

• Eis – Toevoegen motivatie Geef in maximaal 1 A4 aan waarom uw kandidaat de meest geschikte is voor deze opdracht. Uw motivatie zal worden besproken tijdens het interview, indien de kandidaat hiervoor wordt uitgenodigd.
• Eis – Verificatie Ervaring Verificatie van de ervaring van de kandidaat.
• Eis – Verificatie kennis Verificatie van de kennis van de kandidaat.
• Eis – Werk- en denkniveau De aangeboden kandidaat beschikt minimaal over een HBO werk- en denkniveau. Dit dient duidelijk te blijken uit het cv.
• Eis – Werkervaring De aangeboden kandidaat heeft minimaal drie jaar werkervaring als data engineer, met operationele datamanagementactiviteiten en data integratie. Dit dient duidelijk te blijken uit het cv.
• Eis – Werkervaring De aangeboden kandidaat heeft minimaal 2 jaar werkervaring met Azure DevOps, GIT (branche strategy en release management) en Databricks. Dit dient duidelijk te blijken uit het cv.
• Eis – Werkervaring De aangeboden kandidaat heeft minimaal 3 jaar kennis van en ervaring met Python, SQL, databases en ETL/ELT processen. Dit dient duidelijk te blijken uit het cv.
• Eis – Werkervaring De aangeboden kandidaat heeft minimaal 1 jaar kennis van en werkervaring met geografische informatie en de daarbij behorende activiteiten als; het verzamelen, verwerken en analyseren van deze informatie. Dit dient duidelijk te blijken uit het cv.

Wensen

• Toetsing van de competentie: Analytisch vermogen [Gevorderd niveau]
• Toetsing van de competentie: Initiatief [Gevorderd niveau]
• Toetsing van de competentie: Ontwikkelingsgerichtheid (in Samenwerken) [Gevorderd niveau]
• Toetsing van de competentie: Resultaatgerichtheid [Gevorderd niveau]
• Toetsing van de competentie: Samenwerken [Gevorderd niveau]
• Wens – Werkervaring De aangeboden kandidaat heeft minimaal 1 jaar werkervaring binnen overheidsinstanties. Dit dient duidelijk te blijken uit het cv.
• Wens – Werkervaring De aangeboden kandidaat heeft een jaar werkervaring met unity catalog en het beheren van geodata. Dit dient duidelijk te blijken uit het cv.

Vul je gegevens hieronder in, dan nemen we binnen 2 uur contact met je op om samen te kijken of er een match is. Heb je nog vragen? Bel ons op verborgenof stuur een e-mail naar We helpen je graag verder!