... such as Databricks Workflows, compute engines, including Spark, SQL, and Python, and storage strategies, including Delta Lake, ADLS, and Online Feature Stores Data Quality, Governance & Observability - establishing robust data quality monitoring, lineage tracking, metadata management, and anomaly detection processes - collaborating ...
... in a similar role - Hands-on experience with SQL, Databricks, Python (advanced) - Hands-on experience building scalable data pipelines, processing high-volume data in batch as well as stream for near real-time analytics - Hands-on usage of AI in engineering SDLC. - Experience with Big Data, Data Warehouse, and Data Lake ...
EPAM Campus offers a free Data Science training program to help you gain market-oriented hard and soft skills alongside IT professionals. In this intensive course, you will dive deep into statistics & data analysis, understand regression, classification and clustering techniques, as well as explore neural network basics. ...
Infrastructure Data Engineer Dołącz do globalnego zespołu naszego klienta pracującego nad zaawansowaną platformą analityczną w obszarze cyberbezpieczeństwa na stanowisko Infrastructure Data Engineer. Lokalizacja: praca w modelu hybrydowym 6 dni na miesiąc z biura w Krakowie Współpraca: B2B O projekcie Zespół Cybersecurity ...
... data platform solutions. In this role, you will act as a technical leader and solutions architect, driving automation strategies, API enablement, and modern data architectures such as Data Mesh. You will work closely with international, cross-functional teams to deliver scalable, secure, and cost-efficient data products ...
... beginning. With Hiberus, you can build a long-term career. Opis stanowiska Dla naszego klienta szukamy doświadczonego Senior Data Engineera do projektu z obszaru data engineering, skoncentrowanego na budowie i rozwoju skalowalnych rozwiązań chmurowych. Główne obowiązki : Projektowanie, rozwój i utrzymanie skalowalnych data ...
... komercyjne na stanowisku Data Engineer, - pracowałeś z chmurą publiczną (AWS i/lub GCP i/lub Azure), - masz praktyczne doświadczenie z Apache Airflow, - znasz Databricks i ekosystem Spark, - swobodnie poruszasz się w SQL oraz jednym z języków programowania (Python/Scala), - potrafisz pracować samodzielnie w środowisku rozproszonym. ...
... AWS/GCP experience is equally valuable., Strong Python skills - ability to write maintainable, production-ready code in distributed data environments., Advanced SQL proficiency and experience with relational databases (SQL Server, PostgreSQL, etc.)., Expertise in DWH data modeling, ETL/ELT architectures, and modern data design ...
... reading. Your responsibilities, Design & Build, •Build and improve GCP data solutions using BigQuery, Cloud Composer, and Cloud Storage, •Build and maintain data pipelines and transformations with Python, dbt, and Airflow, •Model data across Data Warehouses, Lakehouses and Data Lakes within an established architecture, ...
... reports of data flow and data quality metrics, operational statuses, and catalog operationsGuide implementation team efforts in integration and harmonization of data from different sources, construction of analytical data products (including real-time streaming analytical data products) on its basis within the data platform, ...
O projekcie Dla naszego klienta, firmy z sektora bankowego realizującej nowoczesne projekty z obszaru Data & Technology, poszukujemy doświadczonego Data Platform Developera, który dołączy do zespołu rozwijającego skalowalną platformę danych opartą na architekturze event-driven. Szukamy osoby, która dobrze czuje się w świecie ...
We are looking for a passionate Senior Data Scientist who is eager to make an impact on their career and take on a new challenge! P&G Scaled Data Science Hub in Warsaw is dynamically growing and making impact across most key algorithmic investments of the Company. We work across problems and algorithmic products related ...
... data engineering. Code in Python (65% of tasks in the team) and JVM languages (Java, Kotlin, Scala; 35%). Know about Google Cloud Platform (BigQuery, Composer, Dataproc, Cloud Run) or other public cloud providers. Have a deep SQL and PySpark knowledge. Work leveraging good practices of software development: TDD, Clean Code, ...
EPAM Campus offers a free Data Science training program to help you gain market-oriented hard and soft skills alongside IT professionals. In this intensive course, you will dive deep into statistics & data analysis, understand regression, classification and clustering techniques, as well as explore neural network basics. ...
... przetwarzania języka naturalnego, modeli przetwarzania obrazów; - doświadczenia w trenowaniu i wdrażaniu modeli uczenia maszynowego; - znajomości języków programowania SQL, Python; - znajomości frameworków: TensorFlow, PyTorch; - umiejętności analitycznego myślenia oraz efektywnego przyswajania wiedzy; - znajomości języka angielskiego ...
... Danych, ze szczególnym uwzględnieniem budowy platform SaaS. Głęboka, praktyczna znajomość ekosystemu Google Cloud Platform (BigQuery, Cloud Storage, Pub/Sub, Dataflow, Datastream, Cloud SQL/PostgreSQL). Ekspercka wiedza z zakresu modelowania danych relacyjnych (3NF) oraz projektowania zoptymalizowanych schematów dla rozwiązań ...
... decision traceability by linking research, strategies and portfolio actions in a lineage graphIdentify and integrate structured, unstructured and semi-structured data sourcesDevelop logical data models and establish comprehensive data catalogs with metadata registrationImplement Role-Based Access Control (RBAC) and Property-Based ...
... wysokoczęstotliwościowego stanu live floty robotów; implementacja Pub/Sub i Streams do dystrybucji telemetrii; monitorowanie i optymalizacja wydajności. PostgreSQL - dane trwałe Projektowanie schematu baz danych: mapy, roboty, użytkownicy, logi audytowe; tworzenie i zarządzanie migracjami, indeksami i strategiami partycjonowania; ...
Data Engineer (m/k) Miejsce pracy: Warszawa Technologie, których używamy Wymagane - Microsoft Azure - Azure DataBricks - Azure Data Factory - Unity Catalog - SQL - Python Tak organizujemy naszą pracę Tak pracujemy - wewnątrz organizacji Twój zakres obowiązków - Projektowanie, implementacja i utrzymanie procesów ...
Data Engineer (K/M) Miejsce pracy: Warszawa Technologie, których używamy Wymagane - SQL - GCP - Big Data - Data Warehouse - Data Lake - ETL/ELT - Feature Store - Customer 360 - Golden Record - CRM O projekcie Cześć! Z tej strony Neontri - jesteśmy firmą liczącą ponad 120 osób. Specjalizujemy się w dwóch obszarach: ...