Senior Apache NiFi DevOps Engineer / Consultant

Project overview

Für ein anspruchsvolles Kundenprojekt im Bereich Datenbank- und Lakehouse-Management suchen wir einen erfahrenen Senior Apache NiFi DevOps Engineer / Consultant zur Überprüfung, Härtung und Weiterentwicklung einer bestehenden Apache-NiFi-Infrastruktur in einer hybriden Kubernetes- und Azure-Umgebung.

Responsibilities

• Review, Härtung und Betriebsoptimierung der bestehenden Apache-NiFi-Infrastruktur
• Analyse und Optimierung des bestehenden Kubernetes-Deployments sowie des Cluster-Sizings
• Überprüfung und Optimierung von Content-Repository-Storage und NiFi Registry
• Beratung zur Skalierung der Infrastruktur im Hinblick auf steigende Pipeline-Volumen und neue Datenanbindungen
• Enge Zusammenarbeit mit den NiFi- und Kafka-Entwickler zur Abstimmung der Infrastruktur-Anforderungen
• Unterstützung beim Aufbau und bei der Optimierung von Monitoring, Logging und Observability
• Sicherstellung der Nachvollziehbarkeit von Datenflüssen und Betriebszuständen
• Beratung und Umsetzung von High-Availability- und Disaster-Recovery-Konzepten für Apache NiFi in hybriden Kubernetes- und Azure-Umgebungen
• Überprüfung und Verbesserung der Security- und Hardening-Massnahmen für die NiFi-Infrastruktur
• Wissenstransfer, Workshops und Training des internen DevOps-Teams mit dem Ziel, den eigenständigen Betrieb, die Härtung und Skalierung der Infrastruktur sicherzustellen
• Überprüfung und Vervollständigung der technischen Dokumentation

Requirements

• Mehrjährige praktische Erfahrung mit Apache NiFi in produktiven Unternehmensumgebungen
• Nachweisbare Erfahrung im Betrieb, in der Härtung und Skalierung von Apache-NiFi-Clustern auf Kubernetes
• Fundierte Kenntnisse im Kubernetes-Umfeld, idealerweise mit dem Stackable Operator for Apache NiFi
• Erfahrung mit Apache NiFi Registry sowie Flow-Versionierung und Flow-Verwaltung
• Fundierte Kenntnisse im Aufbau und Betrieb von High-Availability- und Disaster-Recovery-Lösungen
• Erfahrung mit hybriden Infrastrukturumgebungen auf Basis von Kubernetes und Microsoft Azure
• Praktische Erfahrung mit Monitoring, Logging und Observability für komplexe Dateninfrastrukturen
• Kenntnisse in der Absicherung und im Hardening von NiFi-Infrastrukturen in Kubernetes- und Azure-Umgebungen
• Erfahrung in der technischen Zusammenarbeit mit NiFi- und Kafka-Entwicklungsteams
• Erfahrung im Coaching und Wissenstransfer an interne DevOps-Teams

Nice to have

Rahmenbedingungen:

Interessiert? Bitte Profil, Verfügbarkeit und Stundensatz (CHF) zusenden.

• Erfahrung mit CI/CD-Pipelines für NiFi-Deployments in Kubernetes- und Azure-Umgebungen
• Start: Nach Vereinbarung
• Dauer: 6 Monate; alternativ flexibel für einen konzentrierten Einsatz
• Pensum: 30–60 %
• Einsatzort: Zürich Oerlikon, Schweiz
• Arbeitsmodell: Vorwiegend vor Ort, punktueller Remote-Anteil nach Absprache
• Level: Experte