Opdrachtomschrijving
Wat ga je doen? Je stelt infrastructure-as-code processen op en geeft -werkwijze verder vorm op Azure, waarbij je zorgt voor robuuste, geautomatiseerde uitrol van de Databricks infrastructuur op Azure realiseert. Je werkt met Azure Databricks en sluit onze bronsystemen aan via Kafka Connect om data betrouwbaar te ontsluiten, verwerken en beschikbaar te maken. Je zorgt dat onze cloudomgeving (Azure) aansluit op de eisen van de overheid op het gebied van beveiliging en regelgeving. Je werkt samen met ons bestaande team en neemt hen mee in de gekozen oplossingen, zodat zij na jouw vertrek verder kunnen. Je draagt actief kennis over (documentatie, uitleg, sessies) zodat DataOps niet aan één persoon blijft hangen. Wat zoeken we? Een cloud engineer met aantoonbare ervaring in Azure. Sterke kennis van Azure Databricks en DataOps-principes (CI/CD voor data, automatisering, monitoring, reproducibility). Ervaring met Kafka Connect of vergelijkbare tooling voor batch en streaming data integratie. Ervaring met Git en GitOps

Ervaring met het opzetten van IaC op basis van ARM/Bicep/Terraform of vergelijkbaar

Ervaring met Azure netwerksecurity: hub/spoke, NSG's, Private Endpoints, UDR's en micro segmentatie.

Ervaring met het inrichten van monitoring: Azure Monitor, Log Analytics (KQL) en/of Splunk.

Ervaring van het inrichten van toegangsbeheer voor Databricks: Entra ID/IAM, Unity Catalog rechten en workspace toegang. (Pre)

Ervaring met Azure infrastructuurbeveiliging: Defender for Cloud, Sentinel (SIEM), SOC processen en KQL detecties. (Pre)

Certificering Databricks Data Engineer Associate of Microsoft DP 750 (Azure Databricks)

Ervaring met werken binnen de overheid, zodat je bekend bent met de bijbehorende processen en kaders. Vermogen om mensen mee te nemen, kennis over te dragen en een team op een volwassen manier te begeleiden in nieuwe werkwijzen.

Achtergrond opdracht
We zijn op zoek naar een senior data engineer met uitgebreide ervaring in Azure, Databricks en DataOps, die het data team helpt Azure Landing Zone professioneel en schaalbaar in te richten. In deze rol ligt de nadruk op het opzetten en automatiseren van data-processen in de cloud. Waarom deze rol? We hebben iemand nodig met voldoende kennis en ervaring om Azure Databricks professioneel in te richten. Binnen het huidige team ontbreekt op dit moment nog de benodigde expertise om dit proces zelfstandig vorm te geven en te implementeren. Om de gewenste voortgang te realiseren, is externe expertise noodzakelijk.

Deze kan niet alleen helpen bij de inrichting,

maar ook bij het versneld overdragen van kennis en vaardigheden aan het team,

zodat het de benodigde werkwijze op termijn zelfstandig kan uitvoeren

Eisen

• Algemeen:
  1.    Je kunt infrastructure-as-code processen opstellen en geeft -werkwijze verder vorm op Azure, waarbij je zorgt voor robuuste, geautomatiseerde uitrol van de Databricks infrastructuur op Azure realiseert.
  2.    Je kunt met Azure Databricks bronsystemen ontsluiten aan via Kafka Connect om data betrouwbaar te ontsluiten, verwerken en beschikbaar te maken.
•  Specifiek:
  1.    Ervaring van het inrichten van toegangsbeheer voor Databricks: Entra ID/IAM, Unity Catalogrechten en workspacetoegang.
  2.    Ervaring met Azureinfrastructuurbeveiliging: Defender for Cloud, Sentinel (SIEM), SOCprocessen en KQLdetecties.
  3.    (Pre) Certificering Databricks Data Engineer Associate of Microsoft DP750 (Azure Databricks)
  4.    Ervaring met werken binnen de overheid, zodat je bekend bent met de bijbehorende processen en kaders.
•  Vereisten Profiel:
  1.    Sterke kennis van Azure Databricks en DataOps-principes (CI/CD voor data, automatisering, monitoring, reproducibility).
  2.    Ervaring met Kafka Connect of vergelijkbare tooling voor batch en streaming data integratie.
  3.    Ervaring met het opzetten van IaC op basis van ARM/Bicep/Terraform of vergelijkbaar • Ervaring met Azurenetwerksecurity: hub/spoke, NSG’s, Private Endpoints, UDR’s en microsegmentatie. 
  4.    Ervaring met het inrichten van monitoring: Azure Monitor, Log Analytics (KQL) en/of Splunk.
  

Competenties

• Competenties:
  1.    Vermogen om mensen mee te nemen, kennis over te dragen en een team op een volwassen manier te begeleiden in nieuwe werkwijzen.
  2.    Ervaring met ontwikkeling en samenwerking binnen de Rijksoverheid of andere publieke organisaties.
  3.    Ervaring met het coördineren van ontwikkeling over meerdere teams, domeinen of organisaties heen.
  

Aanvullende Informatie
Wanneer u bij ons als leverancier een professional aanbiedt en deze wordt geplaatst, hebben we informatie van u als contractpartij nodig, onder andere met betrekking tot de Wet keten- en inlenersaansprakelijkheid. De ‘WKA’ heeft als doel om misbruik te voorkomen bij de afdracht van loonheffingen bij alle schakels in de keten; van leverancier tot opdrachtgever. Wij dekken deze risico’s voor onze opdrachtgevers af middels een geblokkeerde rekening, de G-rekening. Dit is een rekening waarop een gedeelte van het factuurbedrag wordt gestort en waarvan u de loonheffingen en BTW kunt betalen aan de Belastingdienst. Het af te storten % hangt ervan af of u een SNA-certificering (NEN-4400-1 of NEN-4400-2) heeft of niet en of uw bedrijf in Nederland of daarbuiten is gevestigd. De G-rekening kunt u aanvragen bij de Belastingdienst. Indien u geen G-rekening kunt krijgen (en u kunt hier bewijs van de Belastingdienst van overleggen) dan heeft u ook de mogelijkheid elk kwartaal een accountantsverklaring (assurance report inzake inlening personeel) aan te leveren. Hierin zal een gecertificeerd accountant (AA of RA) een verklaring afgeven over de juistheid, volledigheid en tijdigheid van de afdrachten. Let wel, de kosten voor deze verklaring komen voor uw eigen rekening.