Medior Data Engineer

Opdrachtgever De Centrale Commissie Mensgebonden Onderzoek (CCMO) is een commissie ingesteld op basis van de Wet Medisch- wetenschappelijk Onderzoek met mensen (WMO). De CCMO valt onder het Ministerie VWS. Naast de WMO voert de CCMO de Embryowet uit. De CCMO waarborgt de bescherming van onderzoekdeelnemers betrokken bij medisch- wetenschappelijk onderzoek, middels toetsing aan de daarvoor gestelde wettelijke bepalingen en met inachtneming van het belang van de voortgang van de medische wetenschap. De CCMO zelf beoordeelt medisch-wetenschappelijk onderzoek bijvoorbeeld op het gebied van somatische celtherapie en gentherapie. Zij fungeert ook als Bevoegde Instantie voor geneesmiddelenonderzoek, als toezichthouder van de erkende medisch-ethische toetsingscommissies (METC’s) en zij treedt op als beroepsinstantie. Project De CCMO beoogd om met de inzet van een Agile DevOps team onder leiding van een eigen CCMO productowner, een senior data architect en een medior data engineer een centraal dataplatform in Microsoft Azure, gebaseerd op Databricks, Delta Lake en Power BI te realiseren. Dit platform vervangt de huidige versnipperde en grotendeels handmatige manier van rapporteren en biedt op termijn ondersteuning aan de kernprocessen Sturen & Verantwoorden, Beoordelen en Onderzoeken. Dit datateam wordt verder ondersteund door onze cloud platform en securityteams. Opdrachtomschrijving De CCMO is een groeiende organisatie met een ambitieus strategisch businessplan wat resulteert in een strategische IV/IT-behoefte. Medewerkers en stakeholders van de CCMO worden ondersteund bij de uitvoering van de medisch-ethische toetsing door gebruiksvriendelijke en digitaal weerbare IT-systemen en een duurzame informatievoorziening. We werken hierbij vanuit een Cloud-first en Cloud-native IT-strategie. De CCMO start met de realisatie van een centraal dataplatform in Microsoft Azure, gebaseerd op Microsoft Fabric en/of Azure Databricks, Delta Lake en Power BI. Dit platform vervangt de huidige versnipperde en grotendeels handmatige manier van rapporteren en biedt op termijn ondersteuning aan de kernprocessen Sturen & Verantwoorden, Beoordelen en Onderzoeken. Fase 1 richt zich op het inrichten van het platformfundament en het beschikbaar stellen van betrouwbare, uniforme data voor rapportages en dashboards ten behoeve van Sturen & Verantwoorden. De CCMO is op zoek naar een Medior Data Engineer om samen met het CCMO-datateam dit dataplatform in te richten, datasets te bouwen en te beheren. In deze opdracht is alle ruimte voor jou als Medior Data Engineer om vanaf de start een zichtbare bijdrage te leveren aan het opzetten van een nieuw dataplatform. Zo draag je bij aan onze belangrijke maatschappelijke missie: de bescherming van deelnemers betrokken bij medisch-wetenschappelijk onderzoek en het stimuleren van de voortgang van de medische wetenschap. Over de functie Als Medior Data Engineer draag je bij aan het opzetten en doorontwikkelen van het centrale dataplatform van de CCMO in Microsoft Azure. Je werkt in nauwe samenwerking met de Platform Owner, Data Architect en de functioneel en technisch beheerders. Je vertaalt databronnen en informatiebehoeften naar betrouwbare datapijplijnen, datasets en rapportageproducten. Jouw rol Als Medior Data Engineer bouw en onderhoud je datapijplijnen waarmee gegevens uit databases, applicaties en API’s worden ontsloten, verwerkt en beschikbaar gesteld voor rapportages en dashboards. Je werkt binnen de vastgestelde platformarchitectuur en lagenstructuur. Je draagt bij aan de ontwikkeling van herbruikbare ingest- en transformatielogica met Python, SQL en waar nodig PySpark. Je werkt met moderne Azure-dataplatformtechnologieën zoals Microsoft Fabric, Azure Databricks, Azure Synapse, Azure Data Factory, Delta Lake en Apache Airflow. Van kandidaten wordt niet verwacht dat zij al specialist zijn in al deze technologieën. Wel wordt verwacht dat zij beschikken over een goede basis in Microsoft Azure en aantoonbaar in staat zijn zich nieuwe technologieën snel eigen te maken. Je draagt onder andere bij aan het ontsluiten van gegevens uit SQL-databases, applicaties en REST API’s, het bouwen en onderhouden van ingest- en transformatiepijplijnen, het aansluiten van datasets op Power BI en andere rapportageoplossingen en het veilig en beheersbaar verwerken van gegevens binnen de Azure-omgeving. Waarom CCMO? Bij de CCMO werk je mee aan de opbouw van een nieuw dataplatform vanaf de fundamenten. Dit biedt jou de kans om vanaf dag één een rol te spelen in de architectuur, bouw en doorontwikkeling van een modern, cloud-native dataplatform dat de organisatie helpt bij het nemen van datagedreven beslissingen. Om succesvol te zijn in deze rol is het belangrijk dat je zelfstandig en proactief werkt, structuur aanbrengt in een omgeving die nog in opbouw is, en initiatief neemt. We waarderen een hands-onmentaliteit, sterke communicatieve vaardigheden en ervaring met het navigeren door de opbouw Van een dataplatform.