Azure Data Engineer

Be in IT specjalizuje się w kompleksowej rekrutacji specjalistów IT dla polskich i międzynarodowych firm. Wspieramy klientów w pozyskiwaniu ekspertów z obszarów software development, AI, data, cloud, cybersecurity, ERP, CRM oraz zarządzania IT.

Stawiamy na znajomość technologii, przejrzystą komunikację i partnerskie podejście, dzięki którym skutecznie dopasowujemy kandydatów do potrzeb organizacji i realizowanych projektów.

Obecnie dla naszego klienta poszukujemy osoby na stanowisko: Data Engineer. 

Zakres obowiązków:

• Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadczącą usługi IT dla dużych i średnich firm z różnorodnych sektorów.

• Do zespołu realizującego nowoczesne platformy danych i rozwiązania data-driven dla klientów z sektora Financial Services oraz Investment Banking poszukujemy Data Engineera. Osoba na tym stanowisku będzie odpowiedzialna za budowę, integrację i rozwój skalowalnych pipeline’ów danych wykorzystywanych m.in. w obszarach analityki, ryzyka, raportowania regulacyjnego oraz business intelligence.

• Projektowanie, rozwój i utrzymanie pipeline’ów ETL/ELT dla danych strukturalnych i półstrukturalnych.

• Budowa oraz optymalizacja rozwiązań typu Data Lake/Lakehouse.

• Integracja danych z wielu źródeł: baz danych, API, plików oraz systemów eventowych i streamingowych.

• Transformacja, walidacja oraz kontrola jakości danych w całym procesie przetwarzania.

• Optymalizacja wydajności pipeline’ów oraz procesów przetwarzania dużych wolumenów danych.

• Współpraca z Business Analystami, Architektami, QA oraz zespołami platformowymi.

• Przekładanie wymagań biznesowych na rozwiązania techniczne i modele danych.

• Wsparcie środowisk produkcyjnych oraz analiza incydentów i problemów wydajnościowych.

• Zapewnienie zgodności rozwiązań ze standardami data governance, security oraz regulacjami obowiązującymi w sektorze finansowym.

Oczekujemy:

• Minimum 3–7+ lat doświadczenia na stanowisku Data Engineer lub podobnym.

• Doświadczenie w projektach realizowanych dla sektora finansowego.

• Bardzo dobra znajomość Python, SQL oraz PySpark.

• Praktyczne doświadczenie z Databricks, w tym Delta Lake i mile widziane DLT.

• Doświadczenie w budowie rozwiązań opartych o architekturę Data Lake/Lakehouse.

• Bardzo dobra znajomość środowiska Azure, w szczególności ADLS, Azure Data Factory oraz Synapse lub analogicznych usług chmurowych.

• Doświadczenie w integracji, transformacji oraz modelowaniu danych.

• Znajomość architektury Medallion oraz modeli dimensional.

• Doświadczenie z integracją poprzez REST API oraz procesami batchowymi i streamingowymi.

• Znajomość Git oraz CI/CD.

• Doświadczenie z Azure DevOps lub podobnymi narzędziami.

• Dobra znajomość zagadnień związanych z jakością danych, skalowalnością oraz performance tuningiem.

• Doświadczenie w pracy w środowisku Agile/Scrum.

• Gotowość do pracy w wymiarze 60% z biura (Wrocław lub Poznań), 40% zdalnie - liczone w skali miesiąca. 

• Znajomości języka angielskiego na poziomie B2 lub C1 - umożliwiająca swobodną komunikację w międzynarodowym środowisku.

• Mile widziana jest dostępność ASAP, akceptowalny jest maksymalnie miesięczny okres wypowiedzenia, ze skutkiem na koniec miesiąca.

Oferujemy:

• Długofalowa współpraca z wynagrodzeniem w przedziale 100-140 PLN netto/godz. + VAT.

• Wsparcie przy zakładaniu i prowadzeniu działalności gospodarczej, dla osób bez takiego doświadczenia. 

• Sprawny proces rekrutacyjny - dwie rozmowy techniczne z managerami, online (każda maksymalnie po godzinie). 

• Współpraca w modelu hybrydowym w biurze we Wrocławiu lub Poznaniu, w wymiarze 60% z biura, 40% zdalnie, rozliczane w skali miesiąca. 

• Benefity - prywatna opieka medyczna, karta Multisport. 

• Nowoczesny sprzęt zapewniany przez firmę, wraz z softem i konfiguracją.