Data Platform Developer-Analyst (Kafka)

Project overview

Clurgo to firma stworzona przez developerów dla developerów. Nasze zespoły łączą pełne spektrum kompetencji

✅Dołącz do projektu dla klienta z branży bankowej, w którym jako programista-analityk będziesz odpowiadać za projektowanie i budowę nowoczesnych rozwiązań. Będziesz analizować wymagania i mapować dane między systemami źródłowymi, platformą streamingową a bazą ODS, współpracując z analitykami oraz zespołami IT.

✅Technologie i narzędzia: Apache Kafka, Kafka Connect, MongoDB, GraphQL, Apache Iceberg, Java, Spring Boot, Python

✅Model hybrydowy: Wrocław (1 dzień w biurze / 4 dni zdalnie)

Szukamy Ciebie, jeśli:

👉Masz minimum 3 lata praktycznego doświadczenia w środowiskach produkcyjnych

👉Posiadasz znajomość brokerów Apache Kafka, w tym topików, partycjonowania, schematów i replikacji, a także biegłą znajomość Kafka Streams oraz kSQL

👉Potrafisz sprawnie konfigurować i rozwijać konektory Kafka Connect (zarówno gotowe, jak i własne)

👉Znasz MongoDB pod kątem projektowania schematów dokumentowych, indeksowania oraz optymalizacji zapytań

👉Masz doświadczenie w implementacji serwisów GraphQL, definiowaniu schematów oraz resolverów

👉Posiadasz dobrą znajomość Java i Spring Boot

👉Wyróżniasz się świetną komunikatywnością i myśleniem analitycznym – potrafisz rozmawiać z interesariuszami, rozumieć ich potrzeby i przekształcać je w techniczną specyfikację

👉Posługujesz się językiem angielskim na poziomie minimum B2

Mile widziane:

Zadania:

Czego możesz się spodziewać:

Poznaj nas lepiej👉 https://www.facebook.com/clurgo/

Proces rekrutacji:

• od rozwoju oprogramowania i infrastruktury, przez analizę oraz testy, aż po strategiczne zarządzanie produktem i procesami. Realizujemy różnorodne projekty IT dla klientów z wielu branż, dbając o dobre praktyki programistyczne i zachowanie work-life balance. Tworzymy rozwiązania, które mają znaczenie
• dla firm w Polsce i na całym świecie.
• Podstawowa znajomość formatu tabel i zarządzania metadanymi (Apache Iceberg)
• Znajomość Python
• Doświadczenie z narzędziami monitoringu i obserwowalności: Prometheus, Grafana, OpenTelemetry
• Znajomość zagadnień bezpieczeństwa i szyfrowania danych: TLS, SASL, ACL
• Spotkania z analitykami oraz zespołami IT w celu dokładnego zrozumienia procesów biznesowych i struktur danych
• Tworzenie szczegółowej dokumentacji funkcyjnej (use cases, user stories) oraz technicznej (diagramy danych, mapowanie pól)
• Projektowanie topików Kafka (nazewnictwo, partycjonowanie, schematy Avro)
• Definiowanie struktur kolekcji w MongoDB oraz modeli w GraphQL i tabel Iceberg
• Budowanie mikroserwisów w Spring Boot (producent, konsument, stream processing)
• Implementacja warstwy GraphQL udostępniającej dane zgromadzone w MongoDB
• Konfiguracja, wdrażanie oraz rozwój konektorów Kafka Connect
• Tworzenie dedykowanych rozwiązań Single Message Transforms (SMT) i konwerterów danych
• Implementacja metryk, logowania i mechanizmów śledzenia przepływu zdarzeń (Prometheus, Grafana, Vector, ELK, Dynatrace)
• Diagnozowanie opóźnień, problemów z replikacją i niespójnością danych oraz optymalizacja konfiguracji systemów pod kątem wydajności
• Aktywna praca w zespole Agile oraz dzielenie się wiedzą z innymi inżynierami i analitykami (warsztaty, dokumentacja, code-review)
• współpracy w oparciu o kontrakt B2B
• pracy hybrydowej 1 dzień w tygodniu w biurze klienta we Wrocławiu
• 🏃‍♀️benefitów: opieka medyczna, karta multisport, lekcje języka angielskiego
• 🎉integracji
• lubimy spędzać razem czas
• profesjonalnego procesu rekrutacyjnego – zawsze otrzymasz od nas feedback niezależnie od decyzji
• Rozmowa rekrutacyjna
• Rozmowa dotycząca doświadczenia i kompetencji
• Informacja zwrotna po zakończeniu procesu

Project details

• Start: flexible
• Remote: hybrid
• Location: Wrocław, ., PL
• Rate: 120-150 EUR/h