We’re looking for a Mid Data Engineer to take ownership of our data lake — the system of record for millions of financial events every day, including bets , wallet transactions, and live odds, serving 12M+ active users. You’ll be responsible for designing and maintaining reliable data pipelines and defining how data is ingested, stored, retained, reconciled, and governed across AWS S3 and Snowflake/Databricks. Your work will ensure that Analytics, Finance, and Regulatory teams have access to accurate, consistent, and fully traceable data — with zero drift from source systems.
Location: Kraków, Poland. Hybrid — 2 days per week from the office .
What you will do:
Own the lakehouse architecture: bronze/silver/gold layers, Iceberg/Delta tables, schema evolution.
Land operational data via CDC streaming (Kafka, Debezium), handling late and duplicate events.
Design data layout for speed and cost: partitioning, compaction, file sizing, query performance on Trino/Athena/Snowflake.
Own retention and archival: storage tiering, regulatory retention, immutability, GDPR deletion.
Guarantee correctness: freshness SLAs, drift detection, reconciliation against the source wallet and ledger systems.
Own governance: catalog and lineage, row/column access control, PII masking, encryption, audit trails.
Monitor ingestion health, data anomalies, and cloud storage/compute spend.
REQUIREMENTS
Must-have:
+ years of hands -on in a production lakehouse environment.
Lakehouse architecture — bronze/silver/gold layering, an open table format (Iceberg, Delta, or Hudi), schema evolution.
Data layout & query optimization at TB+ scale — partitioning, compaction, file sizing, query performance on Trino/Athena/Snowflake.
Cloud lakehouse/DWH in production — Snowflake, Databricks, or BigQuery.
CDC & streaming ingestion — Kafka + Debezium or equivalent; late, duplicate, and out-of-order events.
Strong SQL and data modeling — enough relational grounding to reason about the OLTP systems you capture from. Critical for financial ledgers.
... informacji na potrzeby AI,, analiza i optymalizacja wydajności oraz niezawodności procesów przetwarzania danych,, współpraca z zespołami rozwijającymi rozwiązania Data Engineering oraz AI,, model realizacji usług: hybrydowo – 1 dzień w tygodniu z biura w Warszawie,, budżet projektu: do 140 PLN/h + VAT, w zależności od doświadczenia ...
Data Engineer Miejsce pracy: Kętrzyn Technologies we use Expected - SAP - Microsoft Excel About the project This is an exciting job opportunity for you to light the way as a Data Engineer in Kętrzyn (Poland) with Signify. You will interact with various departments from the factory, R&D, product management, and more around ...
... produkcyjnych, wielkoskalowych rozwiązań Big Data na public cloud., Doświadczenie w projektowaniu rozwiązań typu internet-scale., Doświadczenie we współpracy z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi. To oferujemy, Pracę przy projektach klienckich i produktach ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - GCP - BigQuery - Ab Initio - Data Lake - Data Warehouse - CI/CD Twój zakres obowiązków - Projektowanie, rozwój i wdrażanie wysokowydajnych pipeline'ów danych w modelu batch i streaming. - Projektowanie i implementacja skalowalnych systemów przetwarzania ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Google Cloud Platform - BigQuery - Cloud Storage - Pub/Sub - Oracle - SQL - Python Mile widziane - PostgreSQL System operacyjny - Windows O projekcie W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów ...
... Informatica Platinum Partner Enterprise, od ponad 20 lat dostarcza nowoczesne rozwiązania IT dla biznesu, oferując usługi m.in. w zakresie integracji danych, Data Engineering (Big Data) oraz Data Governance. Specjalizując się w rekrutacji pracowników z branży IT, nie tylko w obszarze danych, pomaga Klientom powiększać zespoły ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Python - Rust - Kafka - Linux - PostgreSQL Mile widziane - Docker - Kubernetes O projekcie W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ...
... środowiska bazodanowego Oracle do Google Cloud Platform, z wykorzystaniem BigQuery, Pub/Sub oraz Cloud Storage,, projektowanie, implementację i rozwój rozwiązań Data Engineering na platformie GCP, w szczególności z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub,, migrację oraz przebudowę procesów przetwarzania i zasilania ...
Data Engineer Miejsce pracy: Gdańsk Technologie, których używamy Wymagane - SQL - Python - Git - Jenkins Mile widziane - Jira - Confluence System operacyjny - Linux O projekcie Projekt obejmuje ingestowanie danych do Hadoop z wykorzystaniem ARC Ingestion Framework. Zakres prac koncentruje się na przygotowaniu i testowaniu ...
... Windows About the project, We're looking for a talented Data Engineer to join our client's team and take a central role in building and optimizing high-performance data workflows. If you love working with large datasets, PySpark, and solving tough data challenges, this opportunity is for you! This is how we work, at the client's ...
Expected, Python, SQL, pyspark, Databricks, BigData, GCP About the project, As a Data Engineer, you will play an important role in designing, building and maintaining reliable data solutions that support Kingfisher’s data platforms and products., , Working as part of a collaborative engineering team, you will contribute ...