Projekt obejmuje ingestowanie danych do Hadoop z wykorzystaniem ARC Ingestion Framework. Zakres prac koncentruje się na przygotowaniu i testowaniu konfiguracji źródeł danych oraz utrzymaniu źródeł już wdrożonych na produkcji.
Tak organizujemy naszą pracę
Tak pracujemy
rozwijasz kilka projektów jednocześnie
Twój zakres obowiązków
Przygotowywanie konfiguracji do ingestowania źródeł danych do Hadoop
Testowanie konfiguracji źródeł danych przed wdrożeniem
Utrzymanie źródeł danych działających na produkcji
Nasze wymagania
Unix
SQL
git
jenkins
python
Doświadczenie w pracy w środowisku Unix
Doświadczenie w pisaniu i optymalizacji zapytań SQL
Doświadczenie w programowaniu w Pythonie
Doświadczenie w pracy z systemem kontroli wersji git
Doświadczenie w konfiguracji i obsłudze Jenkinsa
Angielski min. B2
Mile widziane
Robot Framework
Jira
Confluence
Tak pracujemy nad projektem
dokumentacja
narzędzia do trackowania zadań
https://jobeax.com/link/SOT7uu5CykSNkxdj S.A.
B2Bnetwork jest polską firmą, specjalizującą się w obszarze Quality Assurance oraz Outsourcingu specjalistów IT. Od 2015r. zarządzamy w całości procesami testowymi u naszych klientów oraz wspieramy w znalezieniu odpowiednich kompetencji w innych obszarach IT.
Aplikując, wyraża Pani/Pan zgodę na przetwarzanie przez B2BNetwork swoich danych osobowych zawartych w niniejszym kwestionariuszu aplikacyjnym i aplikacji na potrzeby rekrutacji. Jednocześnie oświadczasz, że podanie przez Panią/Pana danych wykraczających poza katalog określony w Kodeksie pracy i innych właściwych ustaw jest dobrowolne i dla Pani/Pana korzystne.
... Wymagania Minimum 5 lat doświadczenia w obszarze data engineering, ETL lub technologii big data oraz praktyczna znajomość Databricks, Kafka i GitHub. Znajomość SAP Datasphere będzie dodatkowym atutem. Doświadczenie w projektowaniu i optymalizacji procesów ETL/ELT z wykorzystaniem Airflow, Azure Data Factory, Azure Synapse i Databricks. ...
Wymagane, Google Cloud Platform, Oracle, SQL, Informatica PowerCenter, Python Mile widziane, PostgreSQL O projekcie, Poszukujemy Middle Data Engineerów, którzy dołączą do projektu migracji danych i procesów przetwarzania ze środowiska on-premise/Oracle do Google Cloud Platform., , Projekt koncentruje się na budowie i przebudowie ...
Wymagane, SQL, Python, Git, Jenkins Mile widziane, Jira, Confluence System operacyjny, Linux O projekcie, Projekt obejmuje ingestowanie danych do Hadoop z wykorzystaniem ARC Ingestion Framework.
... SQL, used on large-scale datasets., Hands-on ETL/ELT design in a lakehouse environment., Comfort with infrastructure as code (Terraform) and DevOps work., Solid data modeling and integration, with the discipline to keep data trustworthy. Optional, Apache Spark and Azure Databricks. We build on Databricks, so this is a real ...
... dedykowane zespoły projektowe., , Cześć! Poznaj możliwości współpracy ze Scalo! Twój zakres obowiązków, realizację projektu dotyczącego zaprojektowania i wdrożenia data martu wspierającego potrzeby raportowe i analityczne w obszarze biznesowym banku,, zaimplementowanie procesów integracyjnych i ETL umożliwiających cykliczne pozyskiwanie ...
... Informatica Platinum Partner Enterprise, od ponad 20 lat dostarcza nowoczesne rozwiązania IT dla biznesu, oferując usługi m.in. w zakresie integracji danych, Data Engineering (Big Data) oraz Data Governance. Specjalizując się w rekrutacji pracowników z branży IT, nie tylko w obszarze danych, pomaga Klientom powiększać zespoły ...
... zapytań na sekundę, dziesiątki miliardów decyzji modeli ML dziennie i setki milionów wierszy logów aukcyjnych trafiających każdego dnia do bazy danych., , Jako Data Engineer będziesz rozwijać procesy dostarczające dane do tych modeli. Kluczową częścią Twojej pracy będzie monitorowanie i weryfikowanie jakości danych oraz zrozumienie ...
... źródłowych, API, baz danych, narzędzi CRM/finance/marketing oraz aplikacji produktowych do hurtowni danych. Minimum 4 lata doświadczenia w obszarze inżynierii danych / Data Engineeringu., Bardzo dobra znajomość SQL oraz praktyczne doświadczenie w pracy z dbt., Doświadczenie w pracy z chmurowymi hurtowniami danych (Snowflake, BigQuery ...
... business with deal and pricing analysis, providing data-driven insights and suggestions for cost improvement, Collaborate with product management and product engineers in New Product Introduction projects, Contribute to the central data engineering community and participate in cross-factory projects The ideal educational ...
... informacji na potrzeby AI,, analiza i optymalizacja wydajności oraz niezawodności procesów przetwarzania danych,, współpraca z zespołami rozwijającymi rozwiązania Data Engineering oraz AI,, model realizacji usług: hybrydowo – 1 dzień w tygodniu z biura w Warszawie,, budżet projektu: do 140 PLN/h + VAT, w zależności od doświadczenia ...
Data Engineer Miejsce pracy: Kętrzyn Technologies we use Expected - SAP - Microsoft Excel About the project This is an exciting job opportunity for you to light the way as a Data Engineer in Kętrzyn (Poland) with Signify. You will interact with various departments from the factory, R&D, product management, and more around ...