Devops Engineer

Project overview

Szukamy osoby, która dołączy do zespołu rozwijającego i utrzymującego platformę danych. Głównym obszarem tej roli jest automatyzacja infrastruktury i konfiguracji z wykorzystaniem Infrastructure as Code oraz rozwój procesów CI/CD dla infrastruktury. Część czasu (ok. 20%) zajmuje wsparcie operacyjne platformy — monitorowanie i reagowanie na incydenty.

Cloudera jest jednym z używanych przez nas środowisk, ale nie wymagamy specjalizacji wyłącznie w tym produkcie. Najważniejsze jest praktyczne doświadczenie z automatyzacją, IaC i podstawami infrastruktury.

Oferujemy

• udział w rozwoju platformy danych o znaczeniu biznesowym,
• pracę z technologiami on-premise i cloud-native,
• duży wpływ na rozwój automatyzacji i standardów IaC,
• możliwość zdobycia doświadczenia z Kubernetes i Snowflake,
• współpracę z zespołami infrastruktury, Data Engineering i Security.
• Rozwój i utrzymanie kodu Ansible (mile widziany Terraform),
• Automatyzacja provisioningu, konfiguracji i zmian infrastruktury,
• Budowa i utrzymanie pipeline'ów CI/CD dla infrastruktury,
• Przygotowywanie reużywalnych modułów, ról i szablonów,
• Automatyzacja wdrożeń na środowiskach DEV, TEST, PREPROD i PROD,
• Walidacja zmian, code review oraz kontrola rozbieżności (configuration drift) między kodem a rzeczywistym stanem infrastruktury,
• Diagnozowanie problemów i wsparcie zespołów korzystających z platformy,
• Monitorowanie aplikacji oraz procesów ETL (Spark) i strumieniowych (Kafka) na platformie, wraz z reagowaniem na incydenty i wznawianiem przerwanych przetwarzań,
• Współpraca przy rozwoju środowisk Kubernetes oraz migracji do Snowflake,
• Tworzenie i utrzymanie dokumentacji technicznej oraz runbooków.
• praktyczne doświadczenie w pracy z Infrastructure as Code,
• znajomość Ansible lub innego narzędzia automatyzacji konfiguracji,
• doświadczenie z CI/CD dla infrastruktury i konfiguracji,
• dobra znajomość Git,
• znajomość systemów Linux,
• umiejętność skryptowania w Bashu, Pythonie lub podobnym języku,
• podstawowa znajomość konteneryzacji i Kubernetes,
• znajomość podstaw działania Spark i Kafka na poziomie operacyjnym
• rozumienie, co oznacza nieudany job, zatrzymany consumer czy rosnący lag,
• umiejętność czytania logów i metryk aplikacji rozproszonych (Spark UI / History Server, logi konsumentów Kafka),
• znajomość monitoringu, np. Prometheus, Grafana lub ELK,
• umiejętność samodzielnego rozwiązywania problemów i pracy z dokumentacją.
• Mile widziane
• doświadczenie z TeamCity,
• znajomość Terraform lub podobnego narzędzia IaC,
• znajomość ekosystemu Cloudera/Hadoop, np. HDFS, Hive, Impala, Kudu, HBase,
• doświadczenie z Kubernetes w środowisku produkcyjnym,
• znajomość Snowflake lub Databricks,
• doświadczenie w środowisku enterprise — bankowym, ubezpieczeniowym lub innym regulowanym
• znajomość zarządzania sekretami i podstaw IAM.

Project details

• Start: ASAP
• Location: Warszawa Śródmieście, PL
• Rate: 145-160 EUR/h