... Rearchitecture of Spark applications to Cloud Dataproc or BigQuery SQL. Automation with Cloud Composer. Data analytics platform for an investing company Azure-based data platform with Databricks as the central component. Complex ETL processes enriching investment data with Spark jobs in Scala. External data integrations, data ...
Unlock the future of financial markets—drive transformative change through strategic data and process innovation! Krakow-based opportunity with hybrid work model (up to 3 days remote per week). As a Senior Markets & Securities Services Business Analyst – Data & Process Optimization, you will be working for our client, a ...
... and Generative AI (LLMs, Agentic AI) Working hand-in-hand with our Data Engineers who support the heavy-lifting of data processing on GCP Working closely with Analysts, PMs, and Developers to ensure the solutions you build integrate seamlessly into broader initiatives Leveraging diverse data types, moving beyond tabular data ...
... developing and maintaining ETL processes to integrate data from diverse sources, including market data feeds, customer information systems, and transactional databases ensuring data quality, security, and compliance with regulatory requirements collaborating with business owners, data analysts and scientists, software engineers, ...
... Experience delivering IT solutions as a part of an international team. • To be creative, resourceful, and proactive in finding solutions to complex problems. • Ability in applying analytical thinking and synthesis to present results of your work. • Ability to learn quickly in a friendly but challenging international environment. ...
... nad projektami dla sektora farmaceutycznego w Warszawie. Rola obejmuje projektowanie i rozwijanie skalowalnych architektur danych, tworzenie hurtowni danych i Data Lake, a także implementację złożonych procesów ETL/ELT w środowisku AWS. Wymagana jest praktyczna wiedza z zakresu Big Data, baz danych oraz optymalizacji wydajności ...
... dotyczące platformy., •Monitoring i optymalizacja kosztów Databricks., •Współpraca przy skalowaniu i governance platformy., , Integracje technologiczne, •Integracja Databricks z narzędziami takimi jak:, - Power BI,, - Microsoft Fabric,, - inne systemy konsumpcji danych,, •Wsparcie zespołów na styku data platformy i BI., , Leadership, ...
Branża: bankowość Lokalizacja: Praca zdalna z okazjonalnymi wizytami w biurze w Warszawie, Poznaniu lub Wrocławiu Stawka: do 130 zł/h netto na b2b Poszukujemy doświadczonego Project Managera do projektu związanego ze zmianą zasilania hurtowni danych oraz Cloud Data Lake danymi z nowo utworzonych domen biznesowych. Kluczowe ...
... przetwarzania danych w chmurze. Jeżeli jesteś osobą, która swobodnie porusza się w świecie Big Data, chmurowych technologii i architektury danych, to ta rola jest dla Ciebie! Job title Databricks Tech Lead - Zespół Data & Cloud Job title description Projektowanie i rozwój skalowalnych rozwiązań analitycznych na platformie Databricks ...
... Experience in data engineering, data science, or related field. Proficiency with data architecture and data processing tools. Certifications: Azure Associate Data Engineer (DP-203), Databricks Professional Data Engineer, Apache Spark Developer Associate, Professional Data Engineer. Experience with Power BI, DAX, and Tabular ...
Job Description: Data Engineer, LDWH Migration Programme Level: Senior / Mid-Senior Main Responsibilities: Develop and maintain data pipelines using Azure Databricks. Implement ETL processes, ensuring data quality and integrity. Read and comprehend complex SQL stored procedures. Translate architecture direction into engineering ...
... patterns to enable trusted self-service analytics across global business units. Data Quality & Governance: Setting up data contracts, lineage tracking, and observability tools in a high-scale environment. AI & ML Readiness: Supporting feature engineering, pipeline reproducibility, and freshness guarantees for Data Science teams. ...
... roli Data Engineer lub podobnej. Doświadczenie komercyjne w pracy w środowisku AWS oraz technologiami Spark, Python i SQL. Praktyczna znajomość architektury Data Mesh oraz rozwiązań do przetwarzania dużych zbiorów danych. Doświadczenie w budowie skalowalnych i wysokowydajnych rozwiązań data engineeringowych w środowisku ...
... build self-serve tools and accelerate Data/GTM workflows. Establish trust and strong relationships across business and technical teams, ensuring alignment on data strategy and execution. Implement systems that guarantee data quality, governance, and availability. About you 3+ years of hands-on experience in Data Engineering ...
... Data Scientist i razem z nami buduj przyszłość Internetu! Jakie działania będą należeć do Ciebie? Projektowanie i wdrażanie modeli ML rozwiązujących problemy biznesowe: (prediction, ranking, recommendation, optimization). Budowa systemów decyzyjnych i optymalizacyjnych (pricing, bidding, personalization, allocation). End-to-end ...
... Automatyzacja procesów raportowania i ograniczanie manualnej pracy • Rozwijanie istniejących raportów oraz optymalizacja ich wydajności • Współpraca z zespołami IT, Data oraz biznesem • Wspieranie użytkowników biznesowych w efektywnym wykorzystaniu Power BI i self-service analytics • Dokumentowanie przygotowanych rozwiązań oraz ...
... and build a more sustainable, more inclusive world. Your Team Insights & Data delivers state-of-the-art Data solutions. Our expertise primarily lies in Cloud & Big Data engineering, where we develop robust systems capable of processing extensive and complex datasets, utilizing specialized Cloud Data services across platforms ...
... modern data architectures such as Data Mesh. You will work closely with international, cross-functional teams to deliver scalable, secure, and cost-efficient data products that support global business objectives. Key Responsibilities Design and implement automation strategies for onboarding new customers into the data platform, ...
... Microsoft SQL Server, PostgreSQL Optional, Microsoft Azure, Google Cloud Platform, AWS, Databricks, Apache Spark, PySpark, Apache Airflow, GitHub Actions, Terraform, Bicep About the project, At Cloudfide, we engineer solutions where data truly becomes an accelerator for innovation. We build and evolve large-scale Big Data and ...
... reading. Your responsibilities, Design & Build, •Build and improve GCP data solutions using BigQuery, Cloud Composer, and Cloud Storage, •Build and maintain data pipelines and transformations with Python, dbt, and Airflow, •Model data across Data Warehouses, Lakehouses and Data Lakes within an established architecture, ...