Geforderte Skills
- Azure Databricks
- Apache Spark
- Python
- SQL
- Unity Catalog
- ADLS Gen2
- Declarative Automation Bundles
- ETL/ELT
- Data Modeling
- CI/CD
- Git
Sprachen: Polish · English
Jobbeschreibung
Project overview
Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT dla polskich i międzynarodowych firm. Wspieramy klientów w pozyskiwaniu ekspertów z obszarów software development, AI, data, cloud, cybersecurity, ERP, CRM oraz zarządzania IT.
Stawiamy na znajomość technologii, przejrzystą komunikację i partnerskie podejście, dzięki którym skutecznie dopasowujemy kandydatów do potrzeb organizacji i realizowanych projektów.
Obecnie dla naszego klienta poszukujemy osoby na stanowisko: Azure Data Engineer.
Zakres obowiązków:
Oczekujemy:
Oferujemy:
- Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów.
- Dołączenie do zorientowanego biznesowo zespołu PL Data Readiness z dużą energią oraz praca z najnowszymi technologiami inżynierii danych w międzynarodowym, opartym na współpracy środowisku.
- Współtworzenie produktów danych (data products) dla dynamicznie rozwijającego się obszaru łańcucha dostaw w produkcji (production supply chain).
- Projektowanie, rozwój oraz optymalizacja data pipeline oraz przepływów pracy (workflows) z wykorzystaniem Azure Databricks, Spark, Python oraz SQL.
- Tworzenie i utrzymywanie produktów danych udostępnianych poprzez Unity Catalog.
- Wdrażanie i zarządzanie obciążeniami (workloads) w Databricks as a code przy użyciu Declarative Automation Bundles (dawniej Databricks Asset Bundles, DAB).
- Ścisła współpraca z analitykami biznesowymi i architektami danych w celu przekładania wymagań na rozwiązania techniczne.
- Zapewnianie jakości, bezpieczeństwa oraz zgodności (compliance) danych.
- Ciągłe doskonalenie wydajności, efektywności kosztowej oraz skalowalności systemów danych.
- Eksperckiej wiedzy z zakresu Azure Databricks, Spark oraz Python (wymóg konieczny).
- Bardzo dobrej znajomości SQL, w tym pisania złożonych zapytań, transformacji oraz optymalizacji wydajności (performance tuning) (wymóg konieczny).
- Doświadczenia z Declarative Automation Bundles (DAB).
- Solidnego doświadczenia z Unity Catalog oraz ADLS Gen2.
- Dobrego zrozumienia procesów ETL/ELT, modelowania danych oraz zasad architektury danych.
- Znajomości CI/CD pipeline oraz Git.
- Silnych umiejętności rozwiązywania problemów oraz ustrukturyzowanego sposobu pracy w zwinnym modelu dostarczania (Agile).
- Doskonałych umiejętności komunikacyjnych oraz otwartości na współpracę z interesariuszami biznesowymi i zespołami interdyscyplinarnymi.
- Mile widziane:
- Doświadczenie z dbt (preferowane dbt-databricks).
- Doświadczenie w pakietowaniu kodu Python jako pakiety wheel.
- Doświadczenie w pracy z API (REST lub równoważne).
- Doświadczenie ze Structured Streaming w Databricks.
- Wiedza z zakresu data governance, lineage oraz najlepszych praktyk bezpieczeństwa.
- Znajomość Power BI lub podobnych narzędzi do wizualizacji danych.
- Gotowości do współpracy w modelu hybrydowym tj. 2 dni w tygodniu obecności w biurze we Wrocławiu.
- Znajomość języka angielskiego na poziomie B2 lub C1 umożliwiająca swobodną komunikację w międzynarodowym środowisku
- Mile widziana dostępność ASAP; akceptowalny jest maksymalnie miesięczny okres wypowiedzenia ze skutkiem na koniec miesiąca
- Długofalowa współpraca z wynagrodzeniem w przedziale 110-140 PLN netto/godz. + VAT.
- Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia.
- Sprawny proces rekrutacyjny
- dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie).
- Współpraca w modelu hybrydowym w wymiarze 2 dni w tygodniu z biura we Wrocławiu.
- Benefity
- prywatna opieka medyczna, karta Multisport.
- Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.
Project details
- Start: flexible
- Remote: hybrid
- Location: Wrocław, Śródmieście, PL
- Rate: 110-140 EUR/h
- Languages: Polish, English
Indexiert von der 9am-Meta-Suche. Du bist Job-Anbieter? Listing beanspruchen oder verwalten
Gefunden auf justjoin.it