Schiphol · 2026 · Actief

Schiphol-dataplatform

Databricks en AI-adoptie opschalen met Terraform inner sourcing binnen de organisatie Data, AI & Analytics van Schiphol.

Klant
Vakgebied
Engineering van cloud-dataplatformen
Jaar
2026
Status
Actief

01 / De uitdaging

De uitdaging

Binnen de divisie Data & Analytics van Schiphol is Databricks de kerntechnologie voor het beheer van data op grote schaal. Er was een Data Product Infrastructure (DPI) opgezet met Terraform, maar de adoptie door Data Product-teams bleef beperkt. NexOps werd ingezet als kwartiermaker om de adoptie van de DPI zelfstandig te stimuleren, zowel binnen als buiten de organisatie Data, AI & Analytics: de infrastructuur uitbreiden, inner sourcing van Terraform-code mogelijk maken en het platform toegankelijk maken voor breder gebruik binnen Schiphol. Naast het kernwerk aan de DPI zorgde NexOps ook voor verbeteringen in de automatisering van het hele platform en bouwde het geautomatiseerde workflows voor beveiligingsbeoordeling, zodat alle dataproducten compliant blijven.

02 / Onze aanpak

Onze aanpak

  1. Requirements verzameld bij meerdere Data Product-teams en user stories op de backlog gezet, in samenwerking met de Product Owner Platform Technology & IoT
  2. Een geïntegreerd implementatieplan opgesteld voor de uitbreiding van de DPI, de uitrol van inner sourcing en de onboarding van teams, verdeeld over vier fasen.
  3. Nieuwe Terraform-modules gebouwd en Databricks Asset Bundles (DABs) ingevoerd als declaratieve automatiseringsstandaard binnen de afdeling, zodat teams jobs, pipelines en ML-workflows als code definiëren met consistente, reproduceerbare deployments
  4. DABs uitgerold bij meerdere Data Product-teams, met templates, documentatie en hands-on onboarding ter vervanging van ad-hocmethoden voor deployment door beheerde, declaratieve pipelines
  5. AI- en ML-workloads op Databricks mogelijk gemaakt: GPU-clusters, MLflow-tracking en Feature Store ingericht voor datascienceteams in de hele organisatie
  6. Inner sourcing van Terraform-scripts ingericht: infrastructuurcode beschikbaar gemaakt in de codeomgeving van Schiphol, zodat teams buiten Data & Analytics die zelf kunnen gebruiken
  7. De Databricks Security Analysis Tool (SAT) samen met het team geïmplementeerd op het hele platform, voor geautomatiseerde beoordelingen van de beveiligingshouding, detectie van misconfiguraties en compliancerapportage op best practices voor alle Databricks-workspaces
  8. Geautomatiseerde workflows voor beveiligingsbeoordeling ingericht, waaronder compliancechecks op basis van SAT, vulnerability scanning en policy-as-code-validaties, geïntegreerd in CI/CD-pipelines om beveiligingsstandaarden voor alle dataproducten af te dwingen
  9. Eigenaar van monitoring en onderhoud van alle Databricks-workspaces bij Schiphol, inclusief health checks van clusters, alerting bij falende jobs, audits van workspaceconfiguraties, kostenbewaking en proactief capaciteitsbeheer voor een stabiel en goed presterend platform
  10. Verdere infrastructuurautomatisering gebouwd voor het inrichten van omgevingen, detectie van configuratiedrift en geautomatiseerd herstel, om handmatig operationeel werk te verminderen
  11. Afgestemd met de Technical Solution Architect en het DevOps Automation-team over infrastructuurstandaarden, beveiligingsbaselines en deploymentpatronen

03 / Resultaten

Wat er voor de klant veranderde

Resultaten zoals gemeld voor dit project.

  • 01

    Data Product- en AI-teams die de Data Product Infrastructure actief inzetten voor hun producten, met duidelijke onboardingroutes en documentatie

  • 02

    Databricks Asset Bundles (DABs) vastgelegd als een van de standaard deploymentmodellen: teams deployen jobs en pipelines declaratief, met volledig versiebeheer en CI/CD-integratie

  • 03

    Operationele Databricks AI/ML-workspaces, waarmee datascienceteams modellen ontwikkelen en uitrollen op beheerste infrastructuur

  • 04

    Terraform-broncode beschikbaar in de repository van Schiphol, wat inner sourcing en self-service inrichting van infrastructuur in de hele organisatie mogelijk maakt

  • 05

    De Databricks Security Analysis Tool (SAT) zorgt voor doorlopend inzicht in de beveiligingshouding en geautomatiseerde compliancerapportage voor alle workspaces

  • 06

    Geautomatiseerde beveiligingsbeoordelingen verminderen de handmatige compliancereview en zorgen voor consistente handhaving van beleid over dataproducten heen

  • 07

    Alle Databricks-workspaces doorlopend gemonitord en onderhouden, met proactieve alerting, regelmatige health checks en geen ongeplande platformuitval

  • 08

    Uitgebreide documentatie en procesbeschrijvingen gepubliceerd in Confluence, voor kennisoverdracht en duurzaamheid op lange termijn

  • 09

    Tweewekelijkse voortgangsupdates aan de Product Owner, met meetbare adoptiecijfers per team

Volgende stap

Iets vergelijkbaars nodig?

We leveren dataplatformen en AI-oplossingen voor productie aan zakelijke klanten. Vertel ons over je uitdaging, dan zeggen we of we kunnen helpen.

Open voor projecten in Q4 2026