Architekt Data Platform – Infrastruktura (m/k)

Technologie, których używamy

Wymagane

• Apache Iceberg
• Apache Spark
• DBT
• Terraform
• Airflow
• Docker
• Kubernetes
• Python

O projekcie

Projektowanie, rozwój i nadzór nad architekturą techniczną Platformy Data Lakehouse, obejmującą infrastrukturę, środowiska uruchomieniowe, bezpieczeństwo, monitoring oraz integrację komponentów platformowych.

Twój zakres obowiązków

Świadczenie usług w zakresie:

1. Architektura platformy

• Definiowanie docelowej architektury technicznej Platformy Data Lakehouse.

• Opracowanie roadmapy rozwoju platformy na lata 2027-2029.

• Dobór technologii oraz standardów technicznych.

• Nadzór nad zgodnością wdrażanych rozwiązań z architekturą referencyjną.

2. Środowiska i infrastruktura

• Planowanie rozwoju środowisk.

• Nadzór nad migracją i utrzymaniem środowiska produkcyjnego.

• Zarządzanie wymaganiami dotyczącymi zasobów infrastrukturalnych oraz pojemności środowisk.

• Współpraca z zespołami infrastrukturalnymi w zakresie dostępności, wydajności i bezpieczeństwa platformy.

3. Monitoring

• Projektowanie architektury monitoringu platformy.

• Definiowanie standardów logowania, metryk, alertów i dashboardów operacyjnych.

• Nadzór nad wdrażaniem narzędzi monitorujących.

• Definiowanie KPI technicznych dla platformy.

• Definiowanie standardów zarządzania użytkownikami, środowiskami i zasobami.

• Projektowanie mechanizmów automatyzacji operacyjnej oraz administracyjnej.

• Nadzór nad implementacją polityk bezpieczeństwa i dostępu.

4. Integracja i architektura techniczna procesów

• Projektowanie architektury integracyjnej platformy.

• Zaprojektowanie wykorzystania Apache Kafka w architekturze docelowej.

• Definiowanie wzorców komunikacji między komponentami platformy.

5. Bezpieczeństwo i ciągłość działania

• Projektowanie architektury wysokiej dostępności.

• Definiowanie procedur Disaster Recovery i Backup.

• Nadzór nad bezpieczeństwem infrastruktury i konfiguracją komponentów platformowych.

• Współpraca z zespołami bezpieczeństwa i infrastruktury.

Nasze wymagania

• Pełnienie roli lidera technicznego rozwiązania,
• Nadzór nad wykonywaniem zadań technicznych, code review oraz wsparcie wdrożenia do zespołu,
• Dobór technologii i rozwiązywanie problemów technicznych,
• Współpraca z inżynierami infrastruktury w budowie i utrzymaniu infrastruktury dla platformy,
• Specyfikowanie komponentów rozwiązania (np. źródeł danych, transformacji, repozytoriów),
• Zapewnienie mechanizmów monitorowania i testowania platformy,
• Znajomość technologii: Apache Iceberg, Apache Spark, DBT, Terraform, Airflow, Docker, Kubernetes, narzędzi monitorujących, CI/CD, Python,
• Minimum 10 lat doświadczenia zawodowego, w tym minimum 3 lata na stanowisku architekta,
• Minimum 5 lat doświadczenia w implementacji rozwiązań Big Data, Data Lake lub Data Lakehouse,
• Wykształcenie wyższe,
• Znajomość języka angielskiego na poziomie komunikatywnym,
• Chęć rozwoju osobistego.

Mile widziane

• doświadczenie w branży elektroenergetycznej
• doświadczenie w rozwiązaniach typu Data Lakehouse np. Dremio

To oferujemy

• Udział w projektach greenfield mających strategiczny wpływ na sektor energetyczny w Polsce i w Europie
• Pracę w przyjaznej atmosferze i wsparcie zespołu nastawionego na dzielenie się wiedzą oraz doświadczeniami

PSE INNOWACJE SP Z O O

PSE Innowacje jest spółką powstałą w 2012 na zlecenie operatora systemu przesyłowego - PSE S.A. Od 2012 roku realizujemy takie zadania jak: prowadzenie analiz i badań, w tym analiz techniczno-ekonomicznych, prowadzenie prac badawczo-rozwojowych, budowa nowych oraz rozwój

i modernizacja istniejących systemów informatycznych wspierających prowadzenie ruchu sieciowego. Naszą misją jest dbałość o niezawodną i efektywną pracę systemu elektroenergetycznego w Polsce oraz jego stały rozwój. Jesteśmy jednostką do innowacyjnych zadań specjalnych w branży elektroenergetycznej.

Tak się u nas pracuje