Budujemy „mózg” biddera RTB — systemu, który w imieniu klientów e-commerce kupuje powierzchnię reklamową w aukcjach czasu rzeczywistego. Nasze modele ML decydują, jaką kampanię wyświetlić, jak powinna wyglądać reklama oraz czy i za ile licytować.
Działamy na dużą skalę: setki tysięcy zapytań na sekundę, dziesiątki miliardów decyzji modeli ML dziennie i setki milionów wierszy logów aukcyjnych trafiających każdego dnia do bazy danych.
Jako Data Engineer będziesz rozwijać procesy dostarczające dane do tych modeli. Kluczową częścią Twojej pracy będzie monitorowanie i weryfikowanie jakości danych oraz zrozumienie ich wpływu na działanie modeli. Zajmiesz się również optymalizacją procesów przetwarzania i obliczeń, aby sprawnie obsługiwały skalę naszego systemu.
Tak organizujemy naszą pracę
Tak pracujemy
wewnątrz organizacji
koncentrujesz się na jednym projekcie
rozwijasz kilka projektów jednocześnie
koncentrujesz się na rozwoju produktu
koncentrujesz się na utrzymaniu kodu
Twój zakres obowiązków
Budowa i optymalizacja procesów zasilających modele danymi.
Projektowanie oraz optymalizacja warstwy przechowywania danych, w tym schematów i indeksowania pod kątem wydajności analityki oraz systemów Real-Time.
Tworzenie warstwy obserwowalności danych wejściowych, obejmującej dashboardy i alerty wykrywające anomalie oraz spadki jakości danych zasilających modele.
Opracowywanie narzędzi do monitorowania modeli produkcyjnych, w tym wykrywania zjawiska distribution shift.
Wdrażanie praktyk CI/CD wspierających proces tworzenia, testowania i wdrażania modeli predykcyjnych.
Nasze wymagania
Minimum 3 lata komercyjnego doświadczenia w Data Engineering lub pokrewnej roli związanej z przetwarzaniem danych.
Bardzo dobra znajomość Pythona oraz SQL
Doświadczenie w przetwarzaniu dużych wolumenów danych z wykorzystaniem narzędzi takich jak Spark i Polars
Doświadczenie z analitycznymi bazami danych typu kolumnowego
Silne kompetencje techniczne: umiejętności programistyczne poparte zrozumieniem działania skomplikowanych systemów
Doświadczenie w pracy w sektorze operującym na dużej skali danych
Doświadczenie w projektowaniu i modelowaniu struktur danych na potrzeby zaawansowanej analityki oraz systemów działających w czasie zbliżonym do rzeczywistego
Mile widziane
Znajomość konkretnych silników analitycznych: ClickHouse i/lub StarRocks
Znajomość Kubernetes oraz narzędzi GitOps (ArgoCD)
Doświadczenie w branży RTB (Real-Time Bidding) lub programmatic advertising
Doświadczenie w projektach z obszaru uczenia maszynowego (ML)
Znajomość języka Go (Golang)
To oferujemy
Pracę u technologicznego lidera i partnera pierwszego wyboru – tworzymy treści, usługi i rozrywkę, które towarzyszą milionom Polaków każdego dnia
Darmowy dostęp do naszych produktów, takich jak Pilot WP czy Audioteka -chcemy, żebyś czuł się częścią tego, co tworzymy ❤️
Worksmile i elastyczny pakiet benefitów - to Ty wybierasz, co jest dla Ciebie ważne
Dostęp do bezpłatnych i anonimowych konsultacji psychologicznych
Możliwość pracy hybrydowej - pracujemy 3 dni w biurze oraz 2 dni z domu łącząc swobodę pracy zdalnej z tym, co najlepsze w biurze
Wydarzenia, które zbliżają - od sezonowych akcji (Dzień Dziecka to nasz ulubieniec!) po webinary o zdrowiu i neuroróżnorodności
Możliwość rozwoju dzięki szkoleniom w ramach programu WP Akademia
Szansę na nowe wyzwania i kierunki w ramach spółek WP Holding - wewnętrzne rekrutacje są na wyciągnięcie ręki
Tak pracujemy nad projektem
Clean Code
Continuous Deployment
Continuous Integration
Benefity
dofinansowanie zajęć sportowych
prywatna opieka medyczna
ubezpieczenie na życie
zniżki na firmowe produkty i usługi
brak dress code’u
inicjatywy dobroczynne
Wirtualna Polska Media S.A.
Wirtualna Polska Media S.A. - jest partnerem pierwszego wyboru Polaków: dostarczamy angażujące informacje, rozrywkę i usługi oraz inspirujemy w codziennych decyzjach. Działamy w obszarach e-commerce, reklamy i mediów spójnie łącząc technologie.
Wszystkie informacje o przetwarzaniu danych osobowych w tej rekrutacji znajdziesz w formularzu aplikacyjnym, po kliknięciu w przycisk "Aplikuj Teraz".
... informacji na potrzeby AI,, analiza i optymalizacja wydajności oraz niezawodności procesów przetwarzania danych,, współpraca z zespołami rozwijającymi rozwiązania Data Engineering oraz AI,, model realizacji usług: hybrydowo – 1 dzień w tygodniu z biura w Warszawie,, budżet projektu: do 140 PLN/h + VAT, w zależności od doświadczenia ...
Data Engineer Miejsce pracy: Kętrzyn Technologies we use Expected - SAP - Microsoft Excel About the project This is an exciting job opportunity for you to light the way as a Data Engineer in Kętrzyn (Poland) with Signify. You will interact with various departments from the factory, R&D, product management, and more around ...
... produkcyjnych, wielkoskalowych rozwiązań Big Data na public cloud., Doświadczenie w projektowaniu rozwiązań typu internet-scale., Doświadczenie we współpracy z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi. To oferujemy, Pracę przy projektach klienckich i produktach ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - GCP - BigQuery - Ab Initio - Data Lake - Data Warehouse - CI/CD Twój zakres obowiązków - Projektowanie, rozwój i wdrażanie wysokowydajnych pipeline'ów danych w modelu batch i streaming. - Projektowanie i implementacja skalowalnych systemów przetwarzania ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Google Cloud Platform - BigQuery - Cloud Storage - Pub/Sub - Oracle - SQL - Python Mile widziane - PostgreSQL System operacyjny - Windows O projekcie W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów ...
... Informatica Platinum Partner Enterprise, od ponad 20 lat dostarcza nowoczesne rozwiązania IT dla biznesu, oferując usługi m.in. w zakresie integracji danych, Data Engineering (Big Data) oraz Data Governance. Specjalizując się w rekrutacji pracowników z branży IT, nie tylko w obszarze danych, pomaga Klientom powiększać zespoły ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Python - Rust - Kafka - Linux - PostgreSQL Mile widziane - Docker - Kubernetes O projekcie W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ...
... środowiska bazodanowego Oracle do Google Cloud Platform, z wykorzystaniem BigQuery, Pub/Sub oraz Cloud Storage,, projektowanie, implementację i rozwój rozwiązań Data Engineering na platformie GCP, w szczególności z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub,, migrację oraz przebudowę procesów przetwarzania i zasilania ...
Data Engineer Miejsce pracy: Gdańsk Technologie, których używamy Wymagane - SQL - Python - Git - Jenkins Mile widziane - Jira - Confluence System operacyjny - Linux O projekcie Projekt obejmuje ingestowanie danych do Hadoop z wykorzystaniem ARC Ingestion Framework. Zakres prac koncentruje się na przygotowaniu i testowaniu ...
... Windows About the project, We're looking for a talented Data Engineer to join our client's team and take a central role in building and optimizing high-performance data workflows. If you love working with large datasets, PySpark, and solving tough data challenges, this opportunity is for you! This is how we work, at the client's ...
Expected, Python, SQL, pyspark, Databricks, BigData, GCP About the project, As a Data Engineer, you will play an important role in designing, building and maintaining reliable data solutions that support Kingfisher’s data platforms and products., , Working as part of a collaborative engineering team, you will contribute ...