Senior Data Engineer (k/m)

Kim jesteśmy?

Lumicode Sp. z o.o. jest częścią Grupy Pentacomp - od blisko 30 lat dostarczającej rozwiązania IT i usługi technologiczne dla największych przedsiębiorstw oraz instytucji sektora publicznego.

Do zespołu Reinsurance Technology szukamy Senior Data Engineera, który dołączy do strategicznego projektu migracji danych z rozwiązania on-premise do chmurowej platformy Moody’s Risk Modeler.

Co oferujemy?

• Stawka: 150 PLN/h/ B2B

• Udział w strategicznym projekcie migracji do rozwiązania chmurowego

• Możliwość korzystania z dofinansowania do karty sportowej

• Możliwość skorzystania z prywatnej opieki zdrowotnej

Twój zakres obowiązków

• Projektowanie i rozwijanie skalowalnych pipeline’ów danych oraz produktów danych.

• Projektowanie repozytoriów dla danych ekspozycyjnych i danych o stratach wykorzystywanych w modelowaniu katastroficznym.

• Integracja wyników modeli ryzyka z systemami wyceny reasekuracyjnej za pomocą API i warstw integracyjnych.

• Rozwijanie rozwiązań opartych na Pythonie, SQL, Snowflake, Azure, GCP i dbt.

• Monitorowanie jakości, poprawności i dostępności danych oraz optymalizacja wydajności pipeline’ów.

• Projektowanie i wdrażanie walidacji danych, mechanizmów lineage oraz monitoringu.

• Udział w code review, testowaniu i automatyzacji procesów.

• Współpraca z Data Engineerami, Software Engineerami, Data Scientistami, Product Ownerami oraz biznesem.

• Przygotowywanie dokumentacji technicznej i runbooków wspierających utrzymanie rozwiązań.

Wymagane umiejętności

Szukamy osoby z co najmniej 5-letnim doświadczeniem w Data Engineering, która swobodnie porusza się w obszarze przetwarzania i integracji danych.

Najważniejsze technologie i obszary:

• Bardzo dobra znajomość Python i SQL.

• Praktyczne doświadczenie z Azure SQL.

• Doświadczenie w pracy z chmurą, szczególnie Azure i GCP.

• Znajomość Snowflake lub podobnych hurtowni danych.

• Doświadczenie z narzędziami do orkiestracji, takimi jak Prefect, Apache Airflow lub Azure Data Factory.

• Praktyczna znajomość dbt lub podobnych narzędzi do transformacji danych.

• Doświadczenie z CI/CD i automatycznym testowaniem rozwiązań danych.

• Znajomość modelowania danych w podejściu OLTP i OLAP.

• Doświadczenie w pracy zarówno z danymi strukturalnymi, jak i półstrukturalnymi.

• Znajomość relacyjnych baz danych oraz przynajmniej ekspozycja na rozwiązania NoSQL.

• Doświadczenie w pracy w środowisku Agile.

• Angielski na poziomie minimum B2+.

Mile widziane

• Doświadczenie w projektach związanych z migracją danych i modernizacją środowisk on-premise do chmury.

• Znajomość domeny ubezpieczeniowej lub reasekuracyjnej.

• Doświadczenie z rozwiązaniami wspierającymi modelowanie ryzyka i analizę danych.