Data Architecture and Analytics (m/k)

Technologie, których używamy

Wymagane

• Apache Iceberg
• Apache Spark
• DBT
• Terraform
• Airflow
• Docker
• Kubernetes
• Python

O projekcie

Projektowanie modelu danych oraz kierunku rozwoju Data Lakehouse wspierającego inicjatywy analityczne organizacji.

Twój zakres obowiązków

Świadczenie usług w zakresie:

1.Architektura danych Data Lakehouse

• definiowanie docelowej architektury danych DLH,

• projektowanie warstw danych i sposobu ich wykorzystania,

• przygotowanie standardów modelowania danych,

• zarządzanie zgodnością architektury danych z potrzebami biznesowymi.

2. Rozwój obszaru analitycznego DLH

• projektowanie nowych domen danych i obszarów biznesowych,

• wsparcie rozwoju rozwiązań analitycznych,

• definiowanie standardów udostępniania danych dla raportowania i analiz,

• rozwój architektury wspierającej self-service analytics.

3. Katalog Danych – warstwa merytoryczna

• definiowanie modelu metadanych,

• określanie standardów klasyfikacji danych,

• przygotowanie zasad opisu, wyszukiwania i zarządzania zasobami danych,

• współpraca przy wdrożeniu katalogu danych.

4. Zarządzanie jakością i ładem danych

• definiowanie standardów Data Governance,

• projektowanie procesów kontroli jakości danych,

• rekomendacje dotyczące monitorowania jakości danych,

• wsparcie obszaru zarządzania metadanymi.

5. Architektura przepływów danych

• projektowanie logicznych przepływów danych pomiędzy źródłami i DLH,

• modelowanie procesów integracyjnych,

• definiowanie standardów wymiany danych,

• wsparcie projektów wdrażających nowe domeny biznesowe.

Oczekiwane rezultaty

• modele danych i dokumentacja analityczna,

• standardy Data Governance,

• architektura metadanych,

• roadmapy rozwoju analityki,

• wytyczne dla zespołów projektowych i deweloperskich.

Nasze wymagania

• Pełnienie roli lidera technicznego rozwiązania,
• Budowa i utrzymanie architektury Platformy Data Lakehouse,
• Planowanie zadań dla zespołu Data Engineers,
• Nadzór nad wykonywaniem zadań technicznych, code review, wsparcie wdrożenia do zespołu,
• Dobór technologii i rozwiązywanie problemów technicznych,
• Współpraca z inżynierami infrastruktury w budowie i utrzymaniu infrastruktury dla platformy,
• Specyfikowanie komponentów rozwiązania (np. źródła danych, transformacje, repozytoria),
• Zapewnienie mechanizmów monitorowania i testowania platformy,
• Znajomość technologii: Apache Iceberg, Apache Spark, DBT, Terraform, Airflow, Docker, Kubernetes, narzędzia monitorujące, CI/CD, Python,
• Minimum 10 lat doświadczenia zawodowego, w tym minimum 3 lata na adekwatnym stanowisku,
• Wykształcenie wyższe,
• Znajomość języka angielskiego na poziomie komunikatywnym,
• Chęć rozwoju osobistego.

Mile widziane

• Doświadczenie w branży elektroenergetycznej
• Doświadczenie w rozwiązaniach typu Data Lakehouse np. Dremio

To oferujemy

• Udział w projektach greenfield mających strategiczny wpływ na sektor energetyczny w Polsce i w Europie
• Pracę w przyjaznej atmosferze i wsparcie zespołu nastawionego na dzielenie się wiedzą oraz doświadczeniami

PSE INNOWACJE SP Z O O

PSE Innowacje jest spółką powstałą w 2012 na zlecenie operatora systemu przesyłowego - PSE S.A. Od 2012 roku realizujemy takie zadania jak: prowadzenie analiz i badań, w tym analiz techniczno-ekonomicznych, prowadzenie prac badawczo-rozwojowych, budowa nowych oraz rozwój i modernizacja istniejących systemów informatycznych wspierających prowadzenie ruchu sieciowego. Naszą misją jest dbałość o niezawodną i efektywną pracę systemu elektroenergetycznego w Polsce oraz jego stały rozwój. Jesteśmy jednostką do innowacyjnych zadań specjalnych w branży elektroenergetycznej.

Tak się u nas pracuje