Projektowanie i implementacja end-to-end procesów ETL/ELT oraz workflowów orkiestracji.
Implementacja data contracts oraz zarządzanie ewolucją schematów danych.
Projektowanie i utrzymanie Enterprise Data Warehouses, Data Lakes i Data Lakehouses.
Budowanie i rozwój rozwiązań Business Intelligence.
Implementacja mechanizmów data quality oraz monitorowania kondycji danych.
Praca z data observability, w tym data lineage i freshness, oraz definiowanie i monitorowanie SLA/SLO.
Optymalizacja kosztów i wydajności platform BI oraz hurtowni danych poprzez m.in.: partitioning, caching, clustering, query optimisation, resource scaling.
Zbieranie i analiza wymagań biznesowych dotyczących pipeline'ów, storage'u i raportowania.
Wspieranie self-service BI poprzez przygotowywanie curated datasets, certified reports oraz wsparcie i szkolenia użytkowników.
Projektowanie nowoczesnych architektur BI dla środowisk cloud, on-premises i hybrid.
Implementacja warstw data virtualisation, zapewniających zunifikowany dostęp do heterogenicznych źródeł danych.
Projektowanie i rozwój aplikacji raportowych i analitycznych – dashboardów, KPI oraz narzędzi self-service BI.
Projektowanie modeli danych, w tym dimensional models, zgodnie z wymaganiami biznesowymi.
Projektowanie i optymalizacja fizycznych schematów baz danych poprzez indexing, partitioning i odpowiednie strategie storage.
Analiza wydajności, query tuning i optymalizacja zasobów, zgodnie z kierunkiem wyznaczonym przez Technical/Solution Architect.
Projektowanie i realizacja testów dla rozwiązań BI, w tym: data validation, regression testing, contract testing, automated pipelines zintegrowanych z CI/CD.
Deployment i konfiguracja systemów BI z wykorzystaniem infrastructure-as-code, version control oraz environment management.
Nasze wymagania
Wykształcenie:
Master's degree + min. 5 lat doświadczenia zawodowego, lub
Bachelor's degree + min. 7 lat doświadczenia, lub
wykształcenie średnie + min. 12 lat doświadczenia.
Praktyczne doświadczenie w projektowaniu i implementacji procesów ETL/ELT.
Doświadczenie w dimensional modelling i projektowaniu hurtowni danych.
Doświadczenie z architekturą Data Lakehouse.
Doświadczenie w obszarze data governance i data lineage.
Znajomość wymagań GDPR w kontekście platform danych i raportowania.
Bardzo dobra znajomość języka angielskiego – min. B2.
Umiejętność pracy zarówno z zespołami technicznymi, jak i interesariuszami biznesowymi.
Analityczne, uporządkowane i szczegółowe podejście do pracy.
Wymagane, Data Lakehouse O projekcie, Dla jednego z naszych klientów szukamy BI Data Engineera, który będzie odpowiedzialny za projektowanie i rozwój procesów ETL/ELT, hurtowni danych, architektury Data Lakehouse oraz rozwiązań BI. To rola łącząca Data Engineering, Business Intelligence, Data Warehousing i Data Governance. ...
... data-driven insights supporting decision-making (For Data Engineers), Support development of data infrastructure and processing environments (including on-premise systems)] Requirements: SQL, Power BI, Qlik, Looker, ETL, Data modeling, Python, Data analytics, Communication skills, Security, Data warehouse, Data Lake, AWS, Azure
... Sumary of the job: The Project Manager – Data Integration / ETL leads the end-to-end delivery of data integration projects, from planning through go-live and stabilization. Acting as the key link between business stakeholders - Product Data Management, Sales, Commercial, Finance and IT - and the engineering team, the role ...
Analityk BI/DWH (ETL, GCP, bankowość) - k/m/n Miejsce pracy: Warszawa Technologie, których używamy Wymagane - SQL - ETL - DWH Mile widziane - Enterprise Architect - MS Visio - BigQuery - Dataflow - CloudSQL - Data Lake - Data Lakehouse - GCP System operacyjny - Windows O projekcie Rozwój nowoczesnych rozwiązań danych dla ...
Warszawa, Polska
Zobacz ofertę
NEXT ENTERPRISES SPÓŁKA Z OGRANICZONĄ ODPOWIDZIALNOŚCIĄ
... Data Engineer. - Ekspercka znajomość języka SQL oraz zaawansowana znajomość Python. - Praktyczne doświadczenie w pracy z narzędziami do przetwarzania dużych zbiorów danych (Apache Spark, Databricks). - Doświadczenie w orkiestracji procesów ETL (np. Apache Airflow, Prefect) oraz pracy z narzędziem dbt. - Praktyka w pracy ...
BI & Data Warehouse Architect Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Oracle - UML - BPMN - Microsoft Azure - SAS - SAS Viya Mile widziane - Oracle Exadata - Databricks Twój zakres obowiązków - Projektowanie architektury nowoczesnych systemów analitycznych we współpracy z architektami domenowymi, ...
... procesów wytwarzania i utrzymania rozwiązań HD/BI zgodnie z praktykami DataOps. - Znajomość technologii CI/CD, GitOps oraz Infrastructure as Code. - Znajomość Data Governance, Data Quality, Metadata Management i Data Lineage. - Znajomość platform danych Oracle (mile widziane Oracle Exadata). - Znajomość praktyk DataOps oraz ...
... compliance and operational stability - Oversee all RTB incidents, demands, and issues to maintain smooth data operations Our requirements - 5+ years of experience in Data Engineering within the banking industry - Strong expertise in Data Transformation and ETL solutions such as Informatica, Datastage, or Talend - Proven track record ...
... compliance and operational stability - Oversee all RTB incidents, demands, and issues to maintain smooth data operations Our requirements - 5+ years of experience in Data Engineering within the banking industry - Strong expertise in Data Transformation and ETL solutions such as Informatica, Datastage, or Talend - Proven track record ...