O projekcie Dla naszego klienta, firmy z sektora bankowego realizującej nowoczesne projekty z obszaru Data & Technology, poszukujemy doświadczonego Data Platform Developera, który dołączy do zespołu rozwijającego skalowalną platformę danych opartą na architekturze event-driven. Szukamy osoby, która dobrze czuje się w świecie Apache Kafka i Java, ma doświadczenie w budowaniu mikroserwisów oraz rozumie zagadnienia związane z integracją danych, DevOps, monitoringiem i środowiskami produkcyjnymi. Twój zakres odpowiedzialności projektowanie i rozwój rozwiązań opartych na architekturze event-driven z wykorzystaniem Apache Kafka, tworzenie mikroserwisów w Java / Spring Boot obsługujących zdarzenia Kafka, praca z Kafka Streams oraz kSQL, projektowanie i wersjonowanie schematów danych: Avro, Protobuf, JSON Schema, konfiguracja i rozwój Kafka Connect, w tym konektorów source/sink, integracja Kafki z MongoDB, S3, Apache Iceberg oraz innymi bazami i systemami, implementacja transformacji danych z wykorzystaniem Single Message Transforms (SMT) oraz własnych konwerterów, rozwój warstwy API GraphQL udostępniającej dane z MongoDB, automatyzacja konfiguracji topiców, konektorów Kafka Connect, streamów kSQL oraz aplikacji Kafka Streams, wdrażanie rozwiązań związanych z monitoringiem i obserwowalnością – Prometheus, Grafana, OpenTelemetry, diagnostyka problemów związanych z replikacją, opóźnieniami oraz przetwarzaniem danych, optymalizacja konfiguracji Apache Kafka, m.in. partycji, retencji i mechanizmów replikacji, współpraca z Data Engineerami, DevOpsami oraz analitykami w środowisku Agile, dokumentowanie rozwiązań oraz dzielenie się wiedzą z zespołem. Czego oczekujemy? Must-have Minimum 3 lata praktycznego doświadczenia w środowiskach produkcyjnych. Apache Kafka – znajomość brokerów, topiców, konsumentów, producentów, logów oraz mechanizmów replikacji. Biegła znajomość Kafka Streams i kSQL. Kafka Connect – doświadczenie w konfiguracji i rozwoju konektorów, zarówno gotowych, jak i własnych. Wymagania Java i Spring – bardzo dobra znajomość frameworka Spring, w szczególności Spring Boot, Spring Cloud, Spring Security, Spring Data. MongoDB – doświadczenie w projektowaniu schematów dokumentowych, indeksowaniu oraz optymalizacji zapytań. GraphQL – doświadczenie w implementacji serwisów GraphQL, definiowaniu schematów i resolverów. Apache Iceberg – podstawowa znajomość formatu tabel oraz zarządzania metadanymi. Java i Python – praktyczna znajomość języków. Monitoring i observability – Prometheus, Grafana, OpenTelemetry. Bezpieczeństwo – znajomość TLS, SASL, ACL oraz szyfrowania danych w spoczynku i tranzycie. Agile – doświadczenie w pracy w Scrum/Kanban oraz znajomość Jira i Confluence.
... Boot, MongoDB, GraphQL i Apache Iceberg, ale także będzie odpowiedzialny za analizę wymagań biznesowych oraz mapowanie danych pomiędzy systemami źródłowymi, platformą streamingową i bazą ODS opartą o MongoDB i usługi graphQL. Idealny kandydat potrafi rozmawiać z interesariuszami, przekształcać ich potrzeby w techniczne specyfikacje ...
... Linux About the project, As a Senior Scala Developer – Data & AI Platforms, you will be working for our client, an industry leader dedicated to advancing product data validation and analysis through cutting-edge technology solutions. Join a team that shapes the future of e-commerce data integrity—fostering innovation and promoting ...
... teams to improve database schema design, query performance, and data modelling., •Optimize data access patterns and indexing strategies for relational and NoSQL databases., •Support teams in designing systems that scale efficiently under high load., , Developer Experience & Platform Tooling, •Build and maintain self-service ...
... Twój zakres obowiązków, Platforma Databricks, •Pełnienie roli Tech Leada dla rozwoju platformy Databricks Lakehouse., •Wsparcie zespołów w budowie produktów dataowych (best practices, wzorce, narzędzia)., •Projektowanie warstw abstrakcji i frameworków upraszczających pracę developerów., •Rozwój platformy zgodnie z podejściem ...
... complex technical challenges. You will partner with data engineers and development teams to design robust solutions and promote reusable golden paths across teams. You will lead automation efforts, improve developer experience, and stay current with Data Engineering, DevOps, Cloud Platforms, and AI-powered development
... zespołami platformowymi., Wsparcie w rozwiązywaniu incydentów, testowaniu rozwiązań oraz ciągłym doskonaleniu usług i procesów. Doświadczenie na stanowisku Service Developer lub w podobnej roli., Doświadczenie w pracy z BMC Helix, Digital Workplace lub podobnymi platformami., Doświadczenie w tworzeniu usług, przepływów pracy i ...
... pracy z umiejętnością ustalania priorytetów Mile widziane, Wykorzystanie Azure DevOps w rozwiązaniach Power Platform, Doświadczenie w integracji między Power Platform przy użyciu Azure Functions, Azure Logic Apps i usług REST, Integracja Power Platform z systemami zewnętrznymi poprzez API, OData, Web Services, Tworzenie niestandardowych ...
Operating system, Windows About the project, About our team, , The Data Mesh and AI Platforms team is part of the Integration and AI unit. We provide the integration platforms that connect Nordea, including Kong and Kafka, and we are now extending that same platform approach to an AI Gateway covering LLMs, MCP, and A2A. ...
... priorities and engineering standards, break them into concrete tasks, and deliver working outcomes with quality and discipline. - * You are curious about AI platforms: You want to help make data and AI capabilities available in a controlled, scalable, and developer-friendly way. - * You collaborate well: You communicate ...
... We at Sigma Software offer the opportunity to work on meaningful products used globally, collaborate with experienced engineers, and contribute to long-term platform evolution in a flexible remote environment. Customer Our Customer is a global cybersecurity company delivering advanced digital protection solutions for individuals, ...
... pracy w modelu 70% backend i 30% frontend Mile widziane Doświadczenie przy budowie systemów kampanijnych Znajomość Campaign Management oraz Marketing Automation Doświadczenie z Docker, Kubernetes, GKE lub Anthos Znajomość Kafka lub IBM MQ Doświadczenie jako Data Engineer lub Data Analyst Znajomość nierelacyjnych baz danych
Spark / Data Lakehouse Developer Miejsce pracy: Wrocław Technologie, których używamy Wymagane - PySpark - Spark - SQL - MongoDB - Apache Iceberg - Prometheus - Grafana - Jira - Confluence System operacyjny - Windows O projekcie Dołącz do zespołu Data Platform, gdzie będziesz odpowiadać za kluczowe rozwiązania w zakresie ...
... bioinformatics, natural sciences, engineering, or a related area. Nice to Have A scientific background or previous experience working directly with scientists and research data. Knowledge of SQL, relational databases, APIs, or modern data platforms. Experience with statistical analysis or scientific computing. Familiarity with development ...
... solutions such as Flux or ArgoCDFamiliarity with Crossplane, Pulumi, and AWS Controllers for Kubernetes to manage cloud resourcesExperience using internal developer platforms like Backstage, Humanitec, or OpsLevel to improve developer productivityUnderstanding of high availability, high performance multi-data center systems ...
... solutions such as Flux or ArgoCDFamiliarity with Crossplane, Pulumi, and AWS Controllers for Kubernetes to manage cloud resourcesExperience using internal developer platforms like Backstage, Humanitec, or OpsLevel to improve developer productivityUnderstanding of high availability, high performance multi-data center systems ...
... solutions such as Flux or ArgoCDFamiliarity with Crossplane, Pulumi, and AWS Controllers for Kubernetes to manage cloud resourcesExperience using internal developer platforms like Backstage, Humanitec, or OpsLevel to improve developer productivityUnderstanding of high availability, high performance multi-data center systems ...
... like Flux or ArgoCDFamiliarity with cloud resource management tools including Crossplane, Pulumi, and AWS Controllers for KubernetesExperience with internal developer platforms such as Backstage, Humanitec, or OpsLevelKnowledge of high availability, high performance, multi-data center systems, and hybrid cloud environmentsScripting ...
... like Flux or ArgoCDFamiliarity with cloud resource management tools including Crossplane, Pulumi, and AWS Controllers for KubernetesExperience with internal developer platforms such as Backstage, Humanitec, or OpsLevelKnowledge of high availability, high performance, multi-data center systems, and hybrid cloud environmentsScripting ...
... like Flux or ArgoCDFamiliarity with cloud resource management tools including Crossplane, Pulumi, and AWS Controllers for KubernetesExperience with internal developer platforms such as Backstage, Humanitec, or OpsLevelKnowledge of high availability, high performance, multi-data center systems, and hybrid cloud environmentsScripting ...