Opis oferty

Senior Data Engineer w Warszawa, Polska

GET IT TOGETHER SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ

Warszawa, Polska

1 dzień temu

Twój zakres obowiązków

Projektowanie i rozwój wysokowydajnych platform danych oraz rozwiązań analitycznych.
Budowa i utrzymanie pipeline'ów przetwarzania danych w środowiskach batch i streaming.
Wdrażanie oraz optymalizacja systemów działających w czasie rzeczywistym.
Rozwój rozwiązań wspierających projekty z obszaru Machine Learning, rekomendacji i scoringu.
Dbanie o wydajność, skalowalność oraz wysoką dostępność platform danych.
Współpraca z zespołami deweloperskimi, analitycznymi i data science przy realizacji inicjatyw biznesowych.

Wykształcenie wyższe (informatyka, matematyka, statystyka, fizyka, data science, AI lub kierunki pokrewne).
Minimum 5 lat doświadczenia w Data Engineering, Software Engineering lub analityce danych.
Doświadczenie w projektowaniu i wdrażaniu systemów przetwarzania danych działających w czasie rzeczywistym.
Doświadczenie w projektach Machine Learning, systemach rekomendacyjnych lub scoringowych.
Doświadczenie w budowie systemów wysokiej dostępności, wysokiej przepustowości i niskich opóźnieniach.
Bardzo dobra znajomość Python oraz Apache Spark.
Praktyczna znajomość technologii streamingu danych (Kafka, Flink, Spark Streaming).
Doświadczenie z Apache Airflow i/lub Argo Workflows.
Znajomość baz danych Redis, MongoDB, FoundationDB oraz ClickHouse.
Umiejętność projektowania skalowalnych i niezawodnych systemów oraz znajomość wzorców architektonicznych.

Ładowanie podobnych ofert…