Freelance Azure Databricks specialist (zzp)

• Graag motivatie, beschikbaarheid opnemen in het CV (geen overige informatie zoals; contactpersoon leverancier, uurtarief of bedrijfspresentatie).

• Eventuele vakantieplannen / beschikbaarheid graag opnemen in het voorstel.

• Vergelijkbare schaal voor deze rol is 10.

Achtergrond van de opdracht:

Het Hoogheemraadschap zet steeds meer in op data gedreven werken en een moderne, efficiënte en effectieve bedrijfsvoering. Hierdoor komt vaker de vraag vanuit de organisatie naar opslag en verwerking van grote hoeveelheden data en zal deze vraag naar verwachting in de toekomst verder toenemen. Tegelijkertijd wordt er meer rekenwerk met deze data uitgevoerd, bijvoorbeeld in data science projecten. Om aan deze steeds grotere vraag naar opslag- en rekencapaciteit te kunnen voldoen wordt er een cloud omgeving ingericht op basis van Azure Databricks. De eerste stappen zijn gezet: Het platform is nu ingericht om raster data te kunnen verwerken. Nu gaat dit uitgebouwd worden om ook (hoogfrequente) metingen te kunnen ontvangen, historiseren en valideren.

Wat zoeken wij?

Wij zoeken een Databricks specialist met goede data engineering skills. Je moet het leuk vinden om je kennis en ervaring met ons (nog redelijk junior) team te delen. Daarnaast moet je ons ook verder kunnen helpen met het opzetten van een goede architectuur. Door jouw goede communicatieve skills en open mindset, zet je deze samen met (en niet voor) ons op.

Naast het helpen bouwen van onze meetdata pipelines en validaties, is het overdragen van kennis een belangrijk deel van de opdracht.

Eisen en wensen:

De kandidaat dient aan de volgende eisen te voldoen:

- Minimaal 3 jaar ervaring met het opzetten van een dataplatform op Azure Databricks.

- Minimaal 5 jaar ervaring met Python scripting en/of SQL-gebaseerde ETL processen.

- Kennis van medaillon architectuur en de implicaties hiervan voor een goede implementatie.

- Kennis van de voor- en nadelen van diverse ontwerpkeuzes (bijv: DLT vs DBT)

- In staat zijn om mondeling en gedocumenteerd kennis over te dragen naar onze eigen data engineers zodat zij zelfstandig in staat zijn de ingerichte omgeving te beheren en uit te breiden.

- Inzet op locatie in Heerhugowaard (Noord-Holland).

Naast de gestelde eisen heeft het HHNK de volgende wensen:

- Een teamspeler die gewend is in een agile DevOps team samen te werken.

- Kennis en ervaring met meetdata en/of IOT data.

- Ervaring bij een waterschap.

- Nederlandstalig is een pré maar geen eis.