Required skills
- Python
- PySpark
- AWS CDK
- AWS Lambda
- AWS Glue
- Amazon RDS
- AWS Step Functions
- Amazon Athena
- GitLab CI
- Infrastructure as Code
- APIs
- ETL
Languages: German
Job description
Project overview
Liebes Netzwerk,
aktuell suchen wir einen Senior AWS Data Engineer (m/w/d) Python, PySpark, AWS CDK
Responsibilities
Muss-Anforderungen:
Soll-Anforderungen:
Wir würden uns freuen Ihnen ein tolles Projekt vorzustellen.
Ich freue mich daher sehr auf die Zusendung Ihres Profils unter der Angabe Ihrer Verfügbarkeit und Ihren Konditionen (remote u. ggf. vor Ort).
- Entwicklung und Betrieb einer Cloud-Anwendung auf Basis von Amazon AWS
- Entwicklung und Betrieb von ETL-Pipelines zur Datenanbindung/-aufbereitung mit Python inkl. Datenanbindung z.B. via APIs oder per Cross-Account-Zugriff
- Entwicklung und Betrieb von Datenbanken, basierend auf PostgreSQL / AWS RDS
- (Weiter-)Entwicklung automatisierter Unit-/Integrationstests, Data Quality Tests sowie von Monitoring, Logging und Alerting
- (Weiter-)Entwicklung automatisierter GitLab-CI/CD-Pipelines inkl. Integration von Security-Scannern (SAST, SCA, Dependency-Scans)
- Durchführen von Code-Reviews, Fehlerbehebung und Optimierung der Anwendungs-Performance
- Implementierung von Data Governance- und Sicherheitsrichtlinien
- Mehr als 3 Jahre Erfahrung in Softwareentwicklung mit Python (inkl. Testing, Code-Qualität, Wartbarkeit)
- Mehr als 3 Jahre Erfahrung in der Entwicklung von AWS-Cloud-Anwendungen mit Lambda, Glue, RDS, Step Functions, Athena
- Mehr als 3 Jahre Erfahrung als Data Engineer in der Entwicklung von ETL-Pipelines in Python bzw. PySpark inkl. Datenanbindung via APIs oder Cross-Account-Zugriff
- Mehr als 3 Jahre Erfahrung in der Bereitstellung von Infrastruktur mittels Infrastructure as Code mit AWS CDK (Python)
- Mehr als 3 Jahre Erfahrung im Aufbau und der Pflege von CI/CD-Pipelines mit GitLab CI zur automatisierten Bereitstellung von Anwendungscode und Infrastruktur
- Bis zu 3 Jahre Erfahrung in der Architekturkonzeption (inkl. Ausarbeitung von ADR) für Cloud-Anwendungen
- Mehr als 3 Jahre Erfahrung in Implementierung relationaler Datenbanken mit PostgreSQL / AWS RDS
- Mehr als 3 Jahre Erfahrung in der Umsetzung von AWS-IAM- und Data-Governance-Konzepten (Rollen, Policies, Least-Privilege-Prinzip, feingranulare Zugriffssteuerung mit AWS Lake Formation)
- Bis zu 3 Jahre Erfahrung in der Arbeit mit Daten des Schienenverkehrs
Project details
01.01.2027 - 31.12.2027 ++
Ort: Remote 172 PT, Frankfurt am Main 8 PT
100%, Deutschsprachig
Indexed by 9am's meta-search. You are a job provider? Claim or manage this listing
Found on FreelancerMap DE