Senior Data Engineer

Project overview

Opis projektu:

Poszukujemy Senior Data Engineera, który wesprze projekt budowy dedykowanego data martu na potrzeby procesów związanych z obsługą kancelarii prawniczych.

Projekt obejmuje integrację danych pochodzących z wielu systemów źródłowych, ich przetwarzanie oraz udostępnianie na potrzeby raportowania i analiz biznesowych. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie modeli danych, budowę procesów ETL oraz przygotowanie wydajnej warstwy danych wykorzystywanej m.in. przez Power BI.

Twój zakres obowiązków:

Nasze wymagania:

To oferujemy:

• Analiza wymagań biznesowych oraz współpraca z interesariuszami przy definiowaniu potrzeb dotyczących danych.
• Projektowanie i rozwój modeli danych oraz data martu.
• Budowa i utrzymanie procesów integracyjnych oraz ETL zasilających dane z różnych źródeł.
• Integracja danych z baz Oracle, Microsoft SQL Server, komunikatów Kafka oraz plików JSON, XML i TXT.
• Transformacja, mapowanie i walidacja danych do docelowego modelu relacyjnego.
• Tworzenie wydajnych procedur składowanych, funkcji i widoków.
• Przygotowywanie oraz utrzymanie warstwy danych wykorzystywanej przez raporty i dashboardy Power BI.
• Optymalizacja struktur danych i wydajności zapytań.
• Diagnozowanie i rozwiązywanie problemów związanych z przetwarzaniem oraz jakością danych, również na środowiskach produkcyjnych.
• Przygotowywanie dokumentacji technicznej.
• Minimum 5 lat doświadczenia w pracy z Microsoft SQL Server, w tym projektowania, rozwoju i utrzymania baz danych.
• Bardzo dobra znajomość T-SQL, w tym tworzenia procedur składowanych, funkcji, widoków oraz optymalizacji zapytań.
• Bardzo duże doświadczenie w pracy z SSIS (SQL Server Integration Services), szczególnie w zakresie budowy, utrzymania i diagnostyki procesów ETL.
• Doświadczenie w projektowaniu i budowie hurtowni danych oraz data martów.
• Praktyczna znajomość przetwarzania danych w formatach JSON, XML oraz plikach tekstowych.
• Doświadczenie w modelowaniu danych i optymalizacji struktur na potrzeby raportowania i analiz.
• Doświadczenie w integracji danych z różnych źródeł, w szczególności Oracle, Microsoft SQL Server, Kafka oraz plików wymiany danych.
• Umiejętność projektowania procesów zasilania danych obejmujących ich pozyskiwanie, transformację, walidację i udostępnianie.
• Umiejętność samodzielnej współpracy z interesariuszami biznesowymi i technicznymi oraz przekładania wymagań biznesowych na rozwiązania techniczne.
• Doświadczenie w diagnozowaniu i rozwiązywaniu problemów na środowiskach produkcyjnych.
• Umiejętność tworzenia i utrzymywania dokumentacji technicznej.
• Udział w projekcie budowy dedykowanego data martu.
• Pracę z danymi pochodzącymi z wielu systemów źródłowych.
• Współpracę z interesariuszami biznesowymi, analitykami, zespołami raportowymi i właścicielami systemów źródłowych.
• Możliwość rozwoju rozwiązań wspierających raportowanie i analitykę biznesową.
• Praca głównie w trybie zdalnym: okresowa obecność w biurze podczas istotnych spotkań projektowych.
• Możliwość świadczenia usług stacjonarnie w Warszawie, Katowicach, Krakowie lub Tarnowie.

Project details

• Start: flexible
• Remote: remote
• Location: Katowice, Warszawa, Kraków, Tarnów, PL
• Rate: 160-160 EUR/h