Data Engineer
6 dni temu
Lokalizacja: praca zdalna/hybrydowa z Warszawy
Wynagrodzenie: 90- 120 pln/h
Forma zatrudnienia: B2B
Projekt: komercyjny, telco.
Pracodawca to jeden z kluczowych operatorów telekomunikacyjnych w Polsce, działający w ramach międzynarodowej grupy. Firma mocno stawia na innowacje, digital transformation oraz rozwój technologii wspierających biznes na dużą skalę.
Dołączysz do zespołu odpowiedzialnego za migrację Hurtowni Danych Oracle na Google Cloud Platform (GCP) oraz budowę skalowalnych procesów przetwarzania danych w środowisku chmurowym.
Zakres obowiązków:
Budowa i utrzymanie procesów pobierania danych z wielu źródeł do Data Lake.
Projektowanie i rozwój złożonych potoków danych oraz ich optymalizacja.
Tworzenie i utrzymanie frameworków ułatwiających budowę data pipelines.
Implementacja frameworków testowych dla potoków danych.
Ścisła współpraca z analitykami i data scientistami.
Zapewnienie wysokich standardów w zakresie data governance, bezpieczeństwa i jakości danych.
Analiza, wdrażanie i testowanie nowych technologii zwiększających wydajność procesów.
Integracja danych z różnych typów źródeł: Kafka, MQ, SFTP, bazy danych, API, udziały plików.
Technologie w projekcie:
Apache Kafka, Apache Spark
Cloudera Hadoop stack
GCP (Google Cloud Platform)
SQL / PL/SQL
Python, Scala (mile widziane)
Linux, Bash
ETL, SFTP, MQ, API, file share
Umiejętność przełożenia wiedzy technicznej na praktyczne rozwiązania i realną wartość biznesową
Wymagania must-have
Bardzo dobra znajomość GCP (warunek kluczowy).
Min. 3 lata doświadczenia jako Data Analyst / Data Quality Analyst / Data Engineer.
Udokumentowane doświadczenie w zarządzaniu jakością danych i data governance.
Zaawansowany SQL oraz PL/SQL.
Bardzo dobra znajomość Python; Scala jako plus.
Doświadczenie z Linuxem i bash scripting.
Praktyczna znajomość technologii Cloudera Hadoop (Spark, Kafka).
Zrozumienie zasad ETL i przetwarzania danych w czasie rzeczywistym.
Mile widziane
Doświadczenie z CI/CD i narzędziami automatyzacji.
Znajomość zasad data governance (metadata, data quality frameworks).
Doświadczenie z różnymi źródłami danych: Kafka, MQ, SFTP, API, DB, file shares.
Praca w środowisku międzynarodowym.
Umiejętność przekładania zagadnień technicznych na język biznesowy.
Angielski na poziomie B2+.
Proaktywność, dokładność i chęć ciągłego rozwoju.
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska Hirexa Pełny etat 18 zł - 333 złJob Title: DATA ENGINEERLocation: WARSAW Employment Type: PERMANENT About Hirexa Solutions:Hirexa Solutions is a leading player in the recruitment ecosystem across the United States, United Kingdom, Europe, and India. As the fastest-growing next-generation provider of technology talent, we empower our clients to become resourceful, achieve higher...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska best HR and PM solutions Pełny etat 26 zł - 880 złClient: specialises in providing high-quality global geospatial and POI (Point of Interest) datasets, enriched with advanced machine learning to enable smarter business decisions. Their solutions cover mobility insights, audience segmentation, catchment and foot-traffic analysis across industries such as retail, AdTech/MarTech, FMCG, consulting and market...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska Hirexa Pełny etat 18 złJob Title:Data EngineerLocation:Warsaw,PolandEmployment Type:Permanent About Hirexa Solutions:Hirexa Solutions is a leading player in the recruitment ecosystem across the United States, United Kingdom, Europe, and India. As the fastest-growing next-generation provider of technology talent, we empower our clients to become resourceful, achieve higher...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska emagine Polska Pełny etatIndustry: Fintech Location: WarsawRemote work: flexible hybrid model (3 days onsite)Project language: English (required), PolishType of assignment: B2B / UoPIntroduction & Summary:We are seeking a skilled Data Engineer to join our Credit Risk and IRB Modelling Tech team. The ideal candidate will possess a strong background in ETL solutions, advanced SQL...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska emagine Polska Pełny etatIndustry: PharmaProject language: EnglishProject length: 6 months contracts + option for prolongations; full-timeStart: ASAPAssignment type: B2BAbout the RoleJoin the Global Commercial IT team as a Senior Analytics Engineer and take part in transforming our Common Data Platform (CDP), which integrates and delivers business-critical data across 43 European...
-
Cloud Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska Dogtronic Pełny etatInżynier Danych (Data Engineer)Miejsce pracy: WarszawaTwój zakres obowiązków:Analizowanie biznesowych celów i potrzeb organizacji, a następnie projektowania, mechanizmów przepływu danychProjektowanie i utrzymywanie modelu danych firmy,Tworzenie i dbanie o dokumentację i najlepsze praktyki Data Governance, takie jak katalog danychIdentyfikacja i...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska Upvanta sp. z o.o. Pełny etat 20 zł - 160 złWe are looking for an experienced Data Engineer to join our team and help us build and optimize cutting-edge big data, cloud, and advanced analytics solutions.Requirements:Minimum 5 years of experience in the Data Engineering fieldAt least 2 years of hands-on experience with DatabricksStrong proficiency in SQL, PySpark, and PythonSolid background in data...
-
Data Engineer
1 tydzień temu
Warszawa, mazowieckie, Polska Capital.com Pełny etat 16 złWe are a leading trading platform that is ambitiously expanding to the four corners of the globe. Our top-rated products have won prestigious industry awards for their cutting-edge technology and seamless client experience. We deliver only the best, so we are always in search of the best people to join our ever-growing talented team.We’re looking for a...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska Kyotu Technology Pełny etat 17 zł - 600 złData EngineerLocation: Poland / 100% remoteContract: B2BCapacity: Full-time Who we areKyotu Technology is a boutique software house based in Wrocław and Warsaw, working fully remotely or in hybrid mode from anywhere in Poland. We partner with companies from Germany, Switzerland, Western Europe, the United States, and the Middle East, focusing on complex,...
-
Data Engineer
4 tygodni temu
Warszawa, mazowieckie, Polska SIX Pełny etatData EngineerWarsaw | working from home up to 40% | Reference 7217Are you curious about the stock market and passionate about data engineering? Would you like to work on cutting-edge technology at one of the most innovative and stable stock exchanges in the world? We are looking for a motivated Data Engineer to join our Data Management team. In this role,...