Data Engineer

Technologie, których używamy

Wymagane

• GCP
• BigQuery
• Ab Initio
• Data Lake
• Data Warehouse
• CI/CD

Twój zakres obowiązków

• Projektowanie, rozwój i wdrażanie wysokowydajnych pipeline'ów danych w modelu batch i streaming.
• Projektowanie i implementacja skalowalnych systemów przetwarzania danych oraz pipeline'ów na Google Cloud.
• Budowa i utrzymanie bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Udział w projektach migracji i transformacji danych.
• Projektowanie rozwiązań chmurowych klasy enterprise.
• Prowadzenie projektów klienckich od etapu projektowania do skutecznego wdrożenia.
• Praca z BigQuery i Ab Initio.
• Automatyzacja provisioningu infrastruktury oraz procesów DevOps.
• Projektowanie i utrzymanie procesów CI/CD.
• Współpraca z zespołami Google Cloud oraz klientami przy wdrażaniu produktów i rozwiązań GCP.
• Współpraca z Data Scientists, Data Analysts oraz Software Engineers przy realizacji złożonych potrzeb związanych z danymi.

Nasze wymagania

• Minimum 5 lat doświadczenia w projektowaniu, tworzeniu i wdrażaniu wysokowydajnych pipeline'ów danych – batch i streaming.
• Doświadczenie w budowie i utrzymaniu bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Doświadczenie w projektowaniu rozwiązań chmurowych klasy enterprise.
• Doświadczenie w prowadzeniu projektów klienckich do zakończenia.
• Bardzo dobra znajomość BigQuery i Ab Initio.
• Doświadczenie w automatyzacji provisioningu infrastruktury.
• Znajomość DevOps oraz CI/CD.
• Certyfikat Google Cloud Professional Data Engineer.
• Płynna znajomość języka angielskiego - C1.

Mile widziane

• Znajomość języka niemieckiego.
• Doświadczenie w technical consultingu.
• Zaawansowana znajomość SQL tuning i optymalizacji pod kątem kosztów i wydajności.
• Doświadczenie w budowie pipeline'ów do przetwarzania danych streamingowych oraz znajomość mechanizmów dostarczania zdarzeń (event delivery semantics).
• Doświadczenie w projektowaniu i tworzeniu produkcyjnych, wielkoskalowych rozwiązań Big Data na public cloud.
• Doświadczenie w projektowaniu rozwiązań typu internet-scale.
• Doświadczenie we współpracy z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi.

To oferujemy

• Pracę przy projektach klienckich i produktach własnych
• Realny wpływ na rozwiązania biznesowe i technologiczne w ramach realizowanych projektów
• Szkolenia oraz wsparcie w określeniu ścieżki rozwoju
• Eventy firmowe, dostęp do usług medycznych oraz pakietów sportowych
• Zatrudnienie na umowę B2B / UZ Student
• Pracę w trybie zdalnym/ hybrydowym (Warszawa)
• Krótki proces rekrutacji