Mid / Senior Data Engineer (Python | Confluent Cloud | Kafka)

Project overview

Szukamy doświadczonego Data Engineera, który wzmocni nasz zespół w obszarze przetwarzania danych w czasie rzeczywistym i architektury opartej na zdarzeniach.

Warunki zaangażowania:

Obszar: Consulting IT

Lokalizacja: 100% zdalnie

Delegacje: nie

Project details

ASAP (akceptujemy kandydatury z max 1msc dostępnością do startu)

Stawka (ustalana indywidualnie): 140 - 155 PLN netto + VAT / h

Zaangażowanie: B2B (outsourcing z 1dea), full-time, długofalowo (6msc + przedłużenie)

Mile widziane:

• Projektowanie, wdrażanie i utrzymanie strumieniowych rurociągów danych (Data Pipelines) w oparciu o Apache Kafka oraz Confluent Cloud.
• Integracja rozproszonych systemów i źródeł danych z wykorzystaniem podejścia Event-driven Architecture.
• Tworzenie i optymalizacja kodu w języku Python oraz skomplikowanych zapytania/skryptów SQL.
• Konfiguracja i obsługa procesów przechwytywania zmian w bazach danych (CDC Tools).
• Współpraca przy integracji rozwiązań chmurowych (GCP) oraz nierelacyjnych baz danych (MongoDB).
• Dbanie o wysoką wydajność, niezawodność oraz skalowalność architektury przepływu danych
• Confluent Cloud (kluczowe – mile widziany certyfikat, ale nie jest on warunkiem koniecznym)
• Kafka (praktyczna znajomość i doświadczenie komercyjne)
• Bardzo dobra znajomość Pythona
• Bardzo dobra znajomość języka SQL
• Angielski na poziomie swobodnej komunikacji w mowie i piśmie (B2+)
• Znajomość wzorców Event-driven Architecture
• Doświadczenie z narzędziami CDC (Change Data Capture)
• Znajomość chmury GCP (Google Cloud Platform)
• Doświadczenie w pracy z MongoDB
• Start: ASAP
• Location: Remote, Warszawa, PL
• Rate: 140-155 EUR/h