We’re looking for a Mid Data Engineer to take ownership of our data lake — the system of record for millions of financial events every day, including bets , wallet transactions, and live odds, serving 12M+ active users. You’ll be responsible for designing and maintaining reliable data pipelines and defining how data is ingested, stored, retained, reconciled, and governed across AWS S3 and Snowflake/Databricks. Your work will ensure that Analytics, Finance, and Regulatory teams have access to accurate, consistent, and fully traceable data — with zero drift from source systems.
Location: Kraków, Poland. Hybrid — 2 days per week from the office .
What you will do:
Own the lakehouse architecture: bronze/silver/gold layers, Iceberg/Delta tables, schema evolution.
Land operational data via CDC streaming (Kafka, Debezium), handling late and duplicate events.
Design data layout for speed and cost: partitioning, compaction, file sizing, query performance on Trino/Athena/Snowflake.
Own retention and archival: storage tiering, regulatory retention, immutability, GDPR deletion.
Guarantee correctness: freshness SLAs, drift detection, reconciliation against the source wallet and ledger systems.
Own governance: catalog and lineage, row/column access control, PII masking, encryption, audit trails.
Monitor ingestion health, data anomalies, and cloud storage/compute spend.
REQUIREMENTS
Must-have:
+ years of hands -on in a production lakehouse environment.
Lakehouse architecture — bronze/silver/gold layering, an open table format (Iceberg, Delta, or Hudi), schema evolution.
Data layout & query optimization at TB+ scale — partitioning, compaction, file sizing, query performance on Trino/Athena/Snowflake.
Cloud lakehouse/DWH in production — Snowflake, Databricks, or BigQuery.
CDC & streaming ingestion — Kafka + Debezium or equivalent; late, duplicate, and out-of-order events.
Strong SQL and data modeling — enough relational grounding to reason about the OLTP systems you capture from. Critical for financial ledgers.
... informacji na potrzeby AI,, analiza i optymalizacja wydajności oraz niezawodności procesów przetwarzania danych,, współpraca z zespołami rozwijającymi rozwiązania Data Engineering oraz AI,, model realizacji usług: hybrydowo – 1 dzień w tygodniu z biura w Warszawie,, budżet projektu: do 140 PLN/h + VAT, w zależności od doświadczenia ...
Data Engineer Miejsce pracy: Kętrzyn Technologies we use Expected - SAP - Microsoft Excel About the project This is an exciting job opportunity for you to light the way as a Data Engineer in Kętrzyn (Poland) with Signify. You will interact with various departments from the factory, R&D, product management, and more around ...
... produkcyjnych, wielkoskalowych rozwiązań Big Data na public cloud., Doświadczenie w projektowaniu rozwiązań typu internet-scale., Doświadczenie we współpracy z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi. To oferujemy, Pracę przy projektach klienckich i produktach ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - GCP - BigQuery - Ab Initio - Data Lake - Data Warehouse - CI/CD Twój zakres obowiązków - Projektowanie, rozwój i wdrażanie wysokowydajnych pipeline'ów danych w modelu batch i streaming. - Projektowanie i implementacja skalowalnych systemów przetwarzania ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Google Cloud Platform - BigQuery - Cloud Storage - Pub/Sub - Oracle - SQL - Python Mile widziane - PostgreSQL System operacyjny - Windows O projekcie W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów ...
... Informatica Platinum Partner Enterprise, od ponad 20 lat dostarcza nowoczesne rozwiązania IT dla biznesu, oferując usługi m.in. w zakresie integracji danych, Data Engineering (Big Data) oraz Data Governance. Specjalizując się w rekrutacji pracowników z branży IT, nie tylko w obszarze danych, pomaga Klientom powiększać zespoły ...
Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Python - Rust - Kafka - Linux - PostgreSQL Mile widziane - Docker - Kubernetes O projekcie W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ...
... środowiska bazodanowego Oracle do Google Cloud Platform, z wykorzystaniem BigQuery, Pub/Sub oraz Cloud Storage,, projektowanie, implementację i rozwój rozwiązań Data Engineering na platformie GCP, w szczególności z wykorzystaniem BigQuery, Cloud Storage i Pub/Sub,, migrację oraz przebudowę procesów przetwarzania i zasilania ...
Data Engineer Miejsce pracy: Gdańsk Technologie, których używamy Wymagane - SQL - Python - Git - Jenkins Mile widziane - Jira - Confluence System operacyjny - Linux O projekcie Projekt obejmuje ingestowanie danych do Hadoop z wykorzystaniem ARC Ingestion Framework. Zakres prac koncentruje się na przygotowaniu i testowaniu ...
Expected, Python, SQL, pyspark, Databricks, BigData, GCP About the project, As a Data Engineer, you will play an important role in designing, building and maintaining reliable data solutions that support Kingfisher’s data platforms and products., , Working as part of a collaborative engineering team, you will contribute ...
... Windows About the project, We're looking for a talented Data Engineer to join our client's team and take a central role in building and optimizing high-performance data workflows. If you love working with large datasets, PySpark, and solving tough data challenges, this opportunity is for you! This is how we work, at the client's ...