Wróć do listy

Opis oferty

Data Lakehouse Developer w Wrocław, Polska

B3 Consulting Poland

Wrocław, Polska

We are part of an international organization listed on Nasdaq Stockholm, operating in 11 countries. In Poland, we work with full autonomy. We independently choose our technologies, processes, and ways of working while maintaining the highest professional standards.

We deliver a wide range of IT projects in Poland and internationally, across multiple domains and technologies. This allows our consultants to develop their competencies and gain experience aligned with their professional ambitions.

Our collaboration is built around the CARE philosophy. For us, it means responsible project matching, transparent cooperation, and a long-term approach to professional growth.

Join us as Data Lakehouse Developer. The project focuses on building and maintaining a scalable Data Lakehouse architecture—using Apache Iceberg, Delta Lake, or Apache Hudi—to process data across the entire pipeline, from raw lake ingestion to refined presentation layers

Grow in an environment that cares about your development as much as you do.

Your responsibilities

  • Data Lakehouse & Architecture: Design and maintain versioned data layers (Bronze, Silver, Gold) using Apache Iceberg, Delta Lake, or Apache Hudi, including CI/CD for schema evolution.

  • Spark & MongoDB Integration: Build PySpark/Spark-SQL pipelines for data reconciliation between MongoDB and source systems, optimizing reads using partitioning and match push-down.

  • Performance & Cost Tuning: Optimize Spark jobs (AQE, caching, broadcast joins) to lower latency and minimize Data Lakehouse processing costs.

  • Quality, Monitoring & SLAs: Implement automated data quality checks, SLA/SLO tracking, and distributed monitoring for batch/streaming pipelines using Prometheus, Grafana, and Dynatrace.

  • Kubernetes & Automation: Automate Spark application deployments on Kubernetes using Docker, Spark Operator, and CI/CD pipelines.

  • Delivery & Collaboration: Diagnose data discrepancies, maintain technical runbooks, conduct code reviews, and collaborate in Agile teams (Scrum/Kanban).

Requirements

  • 4+ years of hands-on production experience in data engineering.

  • Strong proficiency in Python, PySpark, Spark-SQL, DataFrames, and Structured Streaming.

  • Proven experience with MongoDB (Spark Connector, indexing) and Apache Iceberg (table versioning, upserts/merges).

  • Hands-on background in CI/CD automation (Jenkins) and containerized deployments on Kubernetes.

  • You need to live in Poland and/or be eligible to work here.

What we offer

• Work in a Scandinavian culture built on logic and dialogue.

• Health and sports benefits tailored to your needs.

• Speed Coaching – short sessions that provide new perspectives and solutions.

• Sports training, an internal team, and opportunities to take part in competitions.

• Team events and development-focused meetups.

Apply today!

Podobne oferty

Więcej podobnych stanowisk

  • Zdalnie

140 - 175 zł / stawka godzinowa

... rozwijaniu zaawansowanej architektury danych. Skupisz się na projektowaniu rozwiązań rekoncyliacji danych w warstwie ODS oraz budowie nowoczesnego środowiska Data Lakehouse. Praca zdalna, wizyta w biurze we Wrocławiu 1 dzień w miesiącu. Twój zakres obowiązków, Projektowanie i implementacja rozwiązań rekoncyliacji danych ...

Wrocław, Polska

HIBERUS POLAND SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ

Spark / Data Lakehouse Developer

  • Zdalnie

18480 - 21840 zł

... Spark, MongoDB, Jenkins, Python, Prometheus, Grafana, Jira, Confluence O projekcie, Dla naszego Klienta z sektora finansowego poszukujemy doświadczonego Spark / Data Lakehouse Developera, który dołączy do zespołu Data Platform., , Osoba na tym stanowisku będzie odpowiedzialna za projektowanie i rozwój rozwiązań do rekoncyliacji ...

Wrocław, Polska

  • Zdalnie
  • Kontrakt

140 - 175 zł / stawka godzinowa

Spark / Data Lakehouse Developer Miejsce pracy: Wrocław Technologie, których używamy Wymagane - Apache Spark - PySpark - Spark - MongoDB - Apache - Jenkins - Python - Prometheus - Grafana O projekcie Poszukujemy doświadczonego inżyniera danych do zespołu Data Platform dla jednego z naszych klientów z sektora finansowego. ...

Wrocław, Polska

  • Kontrakt
Spark / Data Lakehouse Developer (m/k/n) Miejsce pracy: Wrocław Technologie, których używamy Wymagane - Apache Iceberg - MongoDB - Python - PySPark - Prometheus - Grafana - Jenkins Mile widziane - MongoSB Spark Connector - Structured Streaming - Delta Lake - Apache Hudi O projekcie Projekt realizowany w ramach zespołu Data ...

Wrocław, Polska

  • Zdalnie
  • Hybrydowo

115 - 135 zł / stawka godzinowa

... project, We are looking for an experienced Spark / Data Lakehouse Developer to join our Data Platform team. In this role, you will design, develop, and implement data reconciliation solutions within the Operational Data Store (ODS) layer, based on MongoDB, ensuring data consistency and synchronization with multiple source systems., ...

Kraków, Polska

  • Zdalnie
  • Hybrydowo

115 - 135 zł / stawka godzinowa

... project, We are looking for an experienced Spark / Data Lakehouse Developer to join our Data Platform team. In this role, you will design, develop, and implement data reconciliation solutions within the Operational Data Store (ODS) layer, based on MongoDB, ensuring data consistency and synchronization with multiple source systems., ...

Kraków, Polska

  • Zdalnie
  • Kontrakt
  • Business Intelligence

22000 - 26000 zł

Wymagane, SQL, Power BI, Microsoft Fabric, Power query, Dax, Etl, Data factory, Lakehouse Mile widziane, R, Python, Linux, OpenAI GPT O projekcie, Wspólnie z naszym Partnerem z branży ubezpieczeniowej poszukujemy doświadczonego/ej specjalisty/ki do świadczenia usług jako Power BI Developer., , Projekt dotyczy rozwijania ...

Warszawa, Polska

UPVANTA SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ

Data Engineer (Spark)

  • Zdalnie
  • Kontrakt
  • IT
  • Zarzadzanie projektami
  • Zarzadzanie produktem
  • Data Science
  • +1

1200 zł PLN

... opartej na MongoDB, oraz ich synchronizację z systemami źródłowymi w branży bankowej. Osoba na tym stanowisku będzie również rozwijać i utrzymywać architekturę Data Lakehouse, obejmującą przetwarzanie danych od warstwy surowej po warstwy prezentacyjne (bronze, silver, gold), z wykorzystaniem Apache Spark oraz Apache Iceberg. ...

Wrocław, Polska

  • Zdalnie
  • Hybrydowo
  • Kontrakt
... dashboardów Power BI / MS Fabric, Projektowanie modeli semantycznych i modelowanie danych (DAX, Power Query), Projektowanie warstw danych Microsoft Fabric (OneLake, Lakehouse, Data Factory, Pipelines), Automatyzacja raportowania i integracji danych (ETL, API), Analiza danych i procesów biznesowych na potrzeby projektowania rozwiązań ...

Warszawa, Polska

Brunata ZENNER Sp. z o.o.

Data Platform Engineer (K/M/N)

  • DevOps
  • Business Intelligence
... automatyzacji przetwarzania danych (np. Python); - doświadczenie w pracy z co najmniej jednym narzędziem do orkiestracji procesów danych, takim jak Apache Airflow, Azure Data Factory lub pipelines w Microsoft Fabric; - praktyczna znajomość Microsoft Fabric, w tym komponentów Lakehouse, Data Factory Pipelines i Dataflows; - doświadczenie ...

Łódź, Polska