Wymagane, Apache Iceberg, Apache Spark, DBT, Terraform, Airflow, Docker, Kubernetes, Python

O projekcie, Projektowanie, rozwój i nadzór nad architekturą techniczną Platformy Data Lakehouse, obejmującą infrastrukturę, środowiska uruchomieniowe, bezpieczeństwo, monitoring oraz integrację komponentów platformowych.

Twój zakres obowiązków, Świadczenie usług w zakresie:, 1. Architektura platformy, •Definiowanie docelowej architektury technicznej Platformy Data Lakehouse., •Opracowanie roadmapy rozwoju platformy na lata 2027-2029., •Dobór technologii oraz standardów technicznych., •Nadzór nad zgodnością wdrażanych rozwiązań z architekturą referencyjną., , 2. Środowiska i infrastruktura, •Planowanie rozwoju środowisk., •Nadzór nad migracją i utrzymaniem środowiska produkcyjnego., •Zarządzanie wymaganiami dotyczącymi zasobów infrastrukturalnych oraz pojemności środowisk., •Współpraca z zespołami infrastrukturalnymi w zakresie dostępności, wydajności i bezpieczeństwa platformy., , 3. Monitoring, •Projektowanie architektury monitoringu platformy., •Definiowanie standardów logowania, metryk, alertów i dashboardów operacyjnych., •Nadzór nad wdrażaniem narzędzi monitorujących., •Definiowanie KPI technicznych dla platformy., •Definiowanie standardów zarządzania użytkownikami, środowiskami i zasobami., •Projektowanie mechanizmów automatyzacji operacyjnej oraz administracyjnej., •Nadzór nad implementacją polityk bezpieczeństwa i dostępu., , 4. Integracja i architektura techniczna procesów, •Projektowanie architektury integracyjnej platformy., •Zaprojektowanie wykorzystania Apache Kafka w architekturze docelowej., •Definiowanie wzorców komunikacji między komponentami platformy., , 5. Bezpieczeństwo i ciągłość działania, •Projektowanie architektury wysokiej dostępności., •Definiowanie procedur Disaster Recovery i Backup., •Nadzór nad bezpieczeństwem infrastruktury i konfiguracją komponentów platformowych., •Współpraca z zespołami bezpieczeństwa i infrastruktury.

Pełnienie roli lidera technicznego rozwiązania,, Nadzór nad wykonywaniem zadań technicznych, code review oraz wsparcie wdrożenia do zespołu,, Dobór technologii i rozwiązywanie problemów technicznych,, Współpraca z inżynierami infrastruktury w budowie i utrzymaniu infrastruktury dla platformy,, Specyfikowanie komponentów rozwiązania (np. źródeł danych, transformacji, repozytoriów),, Zapewnienie mechanizmów monitorowania i testowania platformy,, Znajomość technologii: Apache Iceberg, Apache Spark, DBT, Terraform, Airflow, Docker, Kubernetes, narzędzi monitorujących, CI/CD, Python,, Minimum 10 lat doświadczenia zawodowego, w tym minimum 3 lata na stanowisku architekta,, Minimum 5 lat doświadczenia w implementacji rozwiązań Big Data, Data Lake lub Data Lakehouse,, Wykształcenie wyższe,, Znajomość języka angielskiego na poziomie komunikatywnym,, Chęć rozwoju osobistego.

Mile widziane, doświadczenie w branży elektroenergetycznej, doświadczenie w rozwiązaniach typu Data Lakehouse np. Dremio

To oferujemy, Udział w projektach greenfield mających strategiczny wpływ na sektor energetyczny w Polsce i w Europie, Pracę w przyjaznej atmosferze i wsparcie zespołu nastawionego na dzielenie się wiedzą oraz doświadczeniami

PSE INNOWACJE SP Z O O, PSE Innowacje jest spółką powstałą w 2012 na zlecenie operatora systemu przesyłowego - PSE S.A. Od 2012 roku realizujemy takie zadania jak: prowadzenie analiz i badań, w tym analiz techniczno-ekonomicznych, prowadzenie prac badawczo-rozwojowych, budowa nowych oraz rozwój, i modernizacja istniejących systemów informatycznych wspierających prowadzenie ruchu sieciowego. Naszą misją jest dbałość o niezawodną i efektywną pracę systemu elektroenergetycznego w Polsce oraz jego stały rozwój. Jesteśmy jednostką do innowacyjnych zadań specjalnych w branży elektroenergetycznej.

Tak się u nas pracuje,

Architekt Data Platform - Infrastruktura (m/k)

Zacznij od adresu e-mail