Data Engineer Architekt Spłaszczający Dane
6 dni temu
Wymagania i obowiązki
Data Engineer Architekt Spłaszczający Dane w chmurze w firmie speedapp
Opis stanowiska
Praca ta obejmuje projektowanie i implementację systemów przetwarzania danych w chmurze z wykorzystaniem DataBricks i AWS.
Udział w procesach
- Projektowanie i implementacja systemów przetwarzania danych w chmurze z wykorzystaniem DataBricks i AWS.
- Tworzenie procesów ETL oraz implementacja transformat z wykorzystaniem PySpark i SQL.
- Zrozumienie Medalion Architecture i zarządzanie danymi na różnych warstwach procesu.
- Uczestniczenie w procesach ingestion i transformacji danych oraz ich wpływie na biznes.
- Obsługa źródeł danych takich jak Kafka, RDBS (Postgres), filesystem (CSV), w tym CDC (Change Data Capture).
- Implementacja infrastruktury jako kod (Terraform) w AWS oraz zarządzanie CI/CD (CircleCI).
- Wsparcie on-call 24/7 (dodatkowo płatne), z czasem reakcji do 30 minut.
Wymagania
- Min. 8 lat doświadczenia na stanowisku Data Engineer.
- Obowiązkowe doświadczenie z DataBricks (Unity Catalog, Workflows, Jobs, DataFrames API w Sparku).
- Znajomość Python, PySpark, SQL.
- Doświadczenie w pracy z AWS (S3, Docker, Kubernetes).
- Umiejętność implementacji i zarządzania infrastrukturą za pomocą Terraform.
- Znajomość CI/CD (CircleCI).
- Zrozumienie architektury Medalion oraz procesów ingestion.
- Angielski na poziomie B2 lub wyżej.
- Umiejętność szerokiego spojrzenia na systemy danych i ich wpływ na biznes.
Mile widziane
- Znajomość ML (Machine Learning).
- Doświadczenie z Kedro, Airbyte.
- Umiejętność pracy z Kubernetes i CI/CD.
Co oferujemy
- Współpracę w oparciu o umowę B2B i stawkę do 215zł/h.
- Pracę 100% zdalną.
- Wsparcie dedykowanego opiekuna.
- Wydarzenia oraz spotkania integracyjne.
- Dostęp do oferty benefitów (opieka medyczna, ubezpieczenie na życie, karta Multisport).
Jak wygląda rekrutacja?
Zgłoszenie: Zaaplikuj i prześlij swoje CV.
Po weryfikacji aplikacji rekruter skontaktuje się telefonicznie z wybranymi kandydatami.
Screening: Porozmawiaj z rekruterem speedapp o Twoim doświadczeniu.
Kolejne etapy: Rekruter speedapp przedstawi Ci jak wygląda proces rekrutacji na dane stanowisko.
Rekruter speedapp pozostanie z Tobą w kontakcie podczas całego procesu.
O speedapp
W speedapp wierzymy, że organizacja jest tak dobra jak tworzący ją ludzie.
speedapp to firma z doświadczeniem w projektowaniu i implementacji systemów w chmurze.
Pracujemy z klientami na całym świecie, pomagając im w budowaniu zespołów IT.
9 lat doświadczenia
+100 klientów na całym świecie
+300 zatrudnień rocznie
speedapp to laureat Diamentów Forbes (2022, 2023, 2024), członek sieci Fast Growth Icons oraz FinTech Poland.
Masz pytania?
Skontaktuj się z rekruterem odpowiedzialnym za ten proces.
Magdalena Dobies-Seroczyńska
Senior Delivery Consultant
magdalena.dobies-seroczynska@speedapp.pl
+48 662 788 508
-
Data Engineer Architekt w Chmurze
1 tydzień temu
Warszawa, Mazovia, Polska speedapp Pełny etatOpis StanowiskaDołącz do zespołu SpeedApp jako Data Engineer Architekt w Chmurze. Zadania:Projektowanie i implementacja systemów przetwarzania danych w chmurze z wykorzystaniem DataBricks i AWS.Tworzenie procesów ETL oraz implementacja transformat z wykorzystaniem PySpark i SQL.Zrozumienie Medalion Architecture i zarządzanie danymi na różnych...
-
Asystent architekta/Architekt
2 tygodni temu
Warszawa, Mazovia, Polska Grupa Unibep Pełny etatOpis stanowiskaDołącz do naszego zespołu w Grupie Unibep, jednej z największych firm w branży budowlanej w Europie. Szukamy doświadczonego Asystenta architekta/Architekta, który będzie odpowiedzialny za projektowanie budynków i obiektów.Twoje zadaniaOpracowywanie detali architektonicznych na wybranych kontraktachPoszukiwanie odpowiednich...
-
Software Engineer
2 tygodni temu
Warszawa, Mazovia, Polska Neontri Pełny etatPrzesłanki do rekrutacjiDo zespołu Neontri poszukujemy doświadczonego Software Engineer - Wieloobszarowego Architekta Oprogramowania, który będzie wspierał naszych klientów w tworzeniu innowacyjnych rozwiązań IT.Obowiązki:Zapewnienie projektowania i wdrażania nowych systemów informatycznychWspieranie klientów w rekrutacji specjalistów i doborze...
-
Data Engineer z Snowflake
6 dni temu
Warszawa, Mazovia, Polska IT Performance Pełny etatWchodzi w skład zespołu IT Performance jako Data Engineer with Snowflake. Praca jest dedykowana dla międzynarodowej firmy medycznej/farmaceutycznej.Projekt:Produkt Service Analytics umożliwia usługom i aplikacjom dostarczanie wglądu w dane dotyczące obsługi klienta komercyjnego oraz proaktywnej konserwacji i napraw laboratoriom Customer i Klienta....
-
Architekt IT
3 tygodni temu
Warszawa, Mazovia, Polska Jit Team Pełny etatOpis stanowiskaPoszukujemy doświadczonego Architekta IT, który będzie odpowiedzialny za rozwijanie narzędzia klasy PPM do zarządzania portfelem projektów i produktów zwinnych w projekcie bankowym.WymaganiaMinimum 5 lat doświadczenia w pracy z narzędziami Atlassian, w tym minimum 3 lata jako Jira DeveloperDoświadczenie w tworzeniu skryptów Groovy w...
-
Security Systems Engineer, EMEA
2 tygodni temu
Warszawa, Mazovia, Polska Vantage Data Centers Pełny etatAbout Vantage Data CentersVantage Data Centers is a world-class provider of data center services, committed to delivering exceptional security and reliability to its clients. As a key member of our team, you will play a vital role in ensuring the security and integrity of our data centers.Job SummaryWe are seeking an experienced Security Systems Engineer to...
-
Dane z Naszymi Specjalistami Oprogramowania
24 godzin temu
Warszawa, Mazovia, Polska SCALO Sp. z o.o. Pełny etatJeśli szukasz pracy, która pozwoli Ci rozwinąć swoje umiejętności i doświadczenie w dziedzinie danych, a także pracować z nowoczesnymi technologiami, to ta oferta jest idealna dla Ciebie. Oto najważniejsze informacje: ZarobkiWynagrodzenie za pracę w Scalo Sp. z o.o. może wynosić maksymalnie 180 złotych netto na godzinę, w zależności od...
-
Architekt IT
2 tygodni temu
Warszawa, Mazovia, Polska Jit Team Pełny etatOpis stanowiskaPoszukujemy doświadczonego Architekta IT, który będzie odpowiedzialny za rozwijanie narzędzia klasy PPM do zarządzania portfelem projektów i produktów zwinnych w projekcie bankowym.Osoba na tym stanowisku będzie aktywnie uczestniczyć w implementacji i optymalizacji procesów biznesowych, wykorzystując narzędzia...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska emagine Polska Pełny etatJob Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at emagine Polska. As a Data Engineer, you will be responsible for designing, building, and maintaining large-scale data pipelines and systems.Key Responsibilities:Design and implement data pipelines using SQL, Redshift, and/or PySparkDevelop and maintain data...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska Square One Resources Sp. z o.o. Pełny etatData Engineer (Python/SQL/ETL) Part-TimeWe are seeking a skilled Data Engineer to contribute to our data management project. This project aims to provide critical data and applications that facilitate strategic decision-making, aligning project portfolios with business strategies. As a Data Engineer, you will play a vital role in executing projects and...
-
Senior Cloud Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska hirely Pełny etatOpis StanowiskaPoszukujemy doświadczonego Senior Cloud Data Engineer, który dołączy do dynamicznego zespołu IT. Jeśli masz pasję do pracy z danymi, znasz technologię chmurową i potrafisz optymalizować oraz monitorować rozwiązania w chmurze, to stanowisko jest dla Ciebie.WymaganiaMinimum 5 lat doświadczenia w branży IT, w tym co najmniej 3,5...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska RITS Pełny etatJob Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at RITS, a global leader in the financial services industry. As a Data Engineer, you will play a critical role in designing, building, and maintaining our data platforms, ensuring the seamless flow of data across our systems.Key Responsibilities:Design and implement data...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska Square One Resources Sp. z o.o. Pełny etatJob Title: Data Engineer 0,5 FTEAt Square One Resources Sp. z o.o., we are seeking a highly skilled Data Engineer to join our team. As a Data Engineer, you will play a crucial role in designing, building, and maintaining scalable data pipelines to integrate and model datasets from various sources.Key Responsibilities:Design and implement end-to-end data...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska SoftwareOne Pełny etatAbout SoftwareOneSoftwareOne is a leading global software and cloud solutions provider that empowers businesses to unlock the value of technology. With a portfolio of 7,500 software brands and sales and delivery capabilities in over 60 countries, we help clients migrate and modernize their workloads and applications.Our team is driven to deliver exceptional...
-
Architekt Danych w Chmurze
2 tygodni temu
Warszawa, Mazovia, Polska HIRELY Pełny etatJesteśmy poszukiwaniem doświadczonego Architekta Danych w Chmurze, który dołączy do naszego zespołu na projekcie realizowanym dla klienta z Wielkiej Brytanii.Projekt jest związany z zarządzaniem i przetwarzaniem danych, a także tworzeniem architektury systemu do rejestrowania i zarządzania obligacjami na rynkach globalnych. Kandydat powinien...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska Devoteam Pełny etatJob Title: Data Services EngineerDevoteam is seeking a highly motivated Data Services Engineer to join our team. As a Data Services Engineer, you will be responsible for designing and implementing data pipelines and architecture using Google Cloud Platform (GCP) products.Key Responsibilities:Design and construct data pipelines and architecture using GCP...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska Ecovadis Pełny etatJob Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at EcoVadis. As a Data Engineer, you will play a crucial role in designing, building, and maintaining our data systems, ensuring they are secure, scalable, and efficient.Key Responsibilities:Design and implement data pipelines using cloud-native technologies such as Google...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska b2bnetwork Pełny etatJob Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at b2bnetwork. As a Data Engineer, you will be responsible for designing, building, and maintaining large-scale data processing systems.Key Responsibilities:Design and implement distributed data processing pipelines using Spark and HadoopDevelop and maintain data storage...
-
Architekt Danych w Biurze Zarządzania Danymi i Big Data
3 tygodni temu
Warszawa, Mazovia, Polska Bank Pekao Pełny etatOpis StanowiskaPoszukujemy doświadczonego Architekta Danych, który będzie odpowiedzialny za zaprojektowanie i wdrożenie korporacyjnego modelu informacji (KMI) oraz zarządzanie nim. Będziesz pracować w zespole odpowiedzialnym za zarządzanie danymi w Banku Pekao.ObowiązkiWypracowanie i aktualizacja KMI, a także jego właścicielstwo.Współpraca w...
-
Data Engineer
3 tygodni temu
Warszawa, Mazovia, Polska Experis Manpower Group Pełny etatData Engineer Job DescriptionWe are seeking a highly skilled Data Engineer to join our team at Experis Manpower Group. As a Data Engineer, you will play a crucial role in developing and maintaining our clients' applications, ensuring the efficient operation of our organization's systems, and driving innovation in data engineering.Key Responsibilities:Design...