Data Engineer Architekt Spłaszczający Dane

6 dni temu


Warszawa, Mazovia, Polska speedapp Pełny etat

Wymagania i obowiązki


Data Engineer Architekt Spłaszczający Dane w chmurze w firmie speedapp


Opis stanowiska


Praca ta obejmuje projektowanie i implementację systemów przetwarzania danych w chmurze z wykorzystaniem DataBricks i AWS.


Udział w procesach



  • Projektowanie i implementacja systemów przetwarzania danych w chmurze z wykorzystaniem DataBricks i AWS.
  • Tworzenie procesów ETL oraz implementacja transformat z wykorzystaniem PySpark i SQL.
  • Zrozumienie Medalion Architecture i zarządzanie danymi na różnych warstwach procesu.
  • Uczestniczenie w procesach ingestion i transformacji danych oraz ich wpływie na biznes.
  • Obsługa źródeł danych takich jak Kafka, RDBS (Postgres), filesystem (CSV), w tym CDC (Change Data Capture).
  • Implementacja infrastruktury jako kod (Terraform) w AWS oraz zarządzanie CI/CD (CircleCI).
  • Wsparcie on-call 24/7 (dodatkowo płatne), z czasem reakcji do 30 minut.

Wymagania



  • Min. 8 lat doświadczenia na stanowisku Data Engineer.
  • Obowiązkowe doświadczenie z DataBricks (Unity Catalog, Workflows, Jobs, DataFrames API w Sparku).
  • Znajomość Python, PySpark, SQL.
  • Doświadczenie w pracy z AWS (S3, Docker, Kubernetes).
  • Umiejętność implementacji i zarządzania infrastrukturą za pomocą Terraform.
  • Znajomość CI/CD (CircleCI).
  • Zrozumienie architektury Medalion oraz procesów ingestion.
  • Angielski na poziomie B2 lub wyżej.
  • Umiejętność szerokiego spojrzenia na systemy danych i ich wpływ na biznes.

Mile widziane



  • Znajomość ML (Machine Learning).
  • Doświadczenie z Kedro, Airbyte.
  • Umiejętność pracy z Kubernetes i CI/CD.

Co oferujemy



  • Współpracę w oparciu o umowę B2B i stawkę do 215zł/h.
  • Pracę 100% zdalną.
  • Wsparcie dedykowanego opiekuna.
  • Wydarzenia oraz spotkania integracyjne.
  • Dostęp do oferty benefitów (opieka medyczna, ubezpieczenie na życie, karta Multisport).

Jak wygląda rekrutacja?


Zgłoszenie: Zaaplikuj i prześlij swoje CV.


Po weryfikacji aplikacji rekruter skontaktuje się telefonicznie z wybranymi kandydatami.


Screening: Porozmawiaj z rekruterem speedapp o Twoim doświadczeniu.


Kolejne etapy: Rekruter speedapp przedstawi Ci jak wygląda proces rekrutacji na dane stanowisko.


Rekruter speedapp pozostanie z Tobą w kontakcie podczas całego procesu.


O speedapp


W speedapp wierzymy, że organizacja jest tak dobra jak tworzący ją ludzie.


speedapp to firma z doświadczeniem w projektowaniu i implementacji systemów w chmurze.


Pracujemy z klientami na całym świecie, pomagając im w budowaniu zespołów IT.


9 lat doświadczenia


+100 klientów na całym świecie


+300 zatrudnień rocznie


speedapp to laureat Diamentów Forbes (2022, 2023, 2024), członek sieci Fast Growth Icons oraz FinTech Poland.


Masz pytania?


Skontaktuj się z rekruterem odpowiedzialnym za ten proces.


Magdalena Dobies-Seroczyńska


Senior Delivery Consultant


magdalena.dobies-seroczynska@speedapp.pl


+48 662 788 508



  • Warszawa, Mazovia, Polska speedapp Pełny etat

    Opis StanowiskaDołącz do zespołu SpeedApp jako Data Engineer Architekt w Chmurze. Zadania:Projektowanie i implementacja systemów przetwarzania danych w chmurze z wykorzystaniem DataBricks i AWS.Tworzenie procesów ETL oraz implementacja transformat z wykorzystaniem PySpark i SQL.Zrozumienie Medalion Architecture i zarządzanie danymi na różnych...


  • Warszawa, Mazovia, Polska Grupa Unibep Pełny etat

    Opis stanowiskaDołącz do naszego zespołu w Grupie Unibep, jednej z największych firm w branży budowlanej w Europie. Szukamy doświadczonego Asystenta architekta/Architekta, który będzie odpowiedzialny za projektowanie budynków i obiektów.Twoje zadaniaOpracowywanie detali architektonicznych na wybranych kontraktachPoszukiwanie odpowiednich...

  • Software Engineer

    2 tygodni temu


    Warszawa, Mazovia, Polska Neontri Pełny etat

    Przesłanki do rekrutacjiDo zespołu Neontri poszukujemy doświadczonego Software Engineer - Wieloobszarowego Architekta Oprogramowania, który będzie wspierał naszych klientów w tworzeniu innowacyjnych rozwiązań IT.Obowiązki:Zapewnienie projektowania i wdrażania nowych systemów informatycznychWspieranie klientów w rekrutacji specjalistów i doborze...


  • Warszawa, Mazovia, Polska IT Performance Pełny etat

    Wchodzi w skład zespołu IT Performance jako Data Engineer with Snowflake. Praca jest dedykowana dla międzynarodowej firmy medycznej/farmaceutycznej.Projekt:Produkt Service Analytics umożliwia usługom i aplikacjom dostarczanie wglądu w dane dotyczące obsługi klienta komercyjnego oraz proaktywnej konserwacji i napraw laboratoriom Customer i Klienta....

  • Architekt IT

    3 tygodni temu


    Warszawa, Mazovia, Polska Jit Team Pełny etat

    Opis stanowiskaPoszukujemy doświadczonego Architekta IT, który będzie odpowiedzialny za rozwijanie narzędzia klasy PPM do zarządzania portfelem projektów i produktów zwinnych w projekcie bankowym.WymaganiaMinimum 5 lat doświadczenia w pracy z narzędziami Atlassian, w tym minimum 3 lata jako Jira DeveloperDoświadczenie w tworzeniu skryptów Groovy w...


  • Warszawa, Mazovia, Polska Vantage Data Centers Pełny etat

    About Vantage Data CentersVantage Data Centers is a world-class provider of data center services, committed to delivering exceptional security and reliability to its clients. As a key member of our team, you will play a vital role in ensuring the security and integrity of our data centers.Job SummaryWe are seeking an experienced Security Systems Engineer to...


  • Warszawa, Mazovia, Polska SCALO Sp. z o.o. Pełny etat

    Jeśli szukasz pracy, która pozwoli Ci rozwinąć swoje umiejętności i doświadczenie w dziedzinie danych, a także pracować z nowoczesnymi technologiami, to ta oferta jest idealna dla Ciebie. Oto najważniejsze informacje: ZarobkiWynagrodzenie za pracę w Scalo Sp. z o.o. może wynosić maksymalnie 180 złotych netto na godzinę, w zależności od...

  • Architekt IT

    2 tygodni temu


    Warszawa, Mazovia, Polska Jit Team Pełny etat

    Opis stanowiskaPoszukujemy doświadczonego Architekta IT, który będzie odpowiedzialny za rozwijanie narzędzia klasy PPM do zarządzania portfelem projektów i produktów zwinnych w projekcie bankowym.Osoba na tym stanowisku będzie aktywnie uczestniczyć w implementacji i optymalizacji procesów biznesowych, wykorzystując narzędzia...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska emagine Polska Pełny etat

    Job Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at emagine Polska. As a Data Engineer, you will be responsible for designing, building, and maintaining large-scale data pipelines and systems.Key Responsibilities:Design and implement data pipelines using SQL, Redshift, and/or PySparkDevelop and maintain data...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska Square One Resources Sp. z o.o. Pełny etat

    Data Engineer (Python/SQL/ETL) Part-TimeWe are seeking a skilled Data Engineer to contribute to our data management project. This project aims to provide critical data and applications that facilitate strategic decision-making, aligning project portfolios with business strategies. As a Data Engineer, you will play a vital role in executing projects and...


  • Warszawa, Mazovia, Polska hirely Pełny etat

    Opis StanowiskaPoszukujemy doświadczonego Senior Cloud Data Engineer, który dołączy do dynamicznego zespołu IT. Jeśli masz pasję do pracy z danymi, znasz technologię chmurową i potrafisz optymalizować oraz monitorować rozwiązania w chmurze, to stanowisko jest dla Ciebie.WymaganiaMinimum 5 lat doświadczenia w branży IT, w tym co najmniej 3,5...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska RITS Pełny etat

    Job Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at RITS, a global leader in the financial services industry. As a Data Engineer, you will play a critical role in designing, building, and maintaining our data platforms, ensuring the seamless flow of data across our systems.Key Responsibilities:Design and implement data...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska Square One Resources Sp. z o.o. Pełny etat

    Job Title: Data Engineer 0,5 FTEAt Square One Resources Sp. z o.o., we are seeking a highly skilled Data Engineer to join our team. As a Data Engineer, you will play a crucial role in designing, building, and maintaining scalable data pipelines to integrate and model datasets from various sources.Key Responsibilities:Design and implement end-to-end data...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska SoftwareOne Pełny etat

    About SoftwareOneSoftwareOne is a leading global software and cloud solutions provider that empowers businesses to unlock the value of technology. With a portfolio of 7,500 software brands and sales and delivery capabilities in over 60 countries, we help clients migrate and modernize their workloads and applications.Our team is driven to deliver exceptional...


  • Warszawa, Mazovia, Polska HIRELY Pełny etat

    Jesteśmy poszukiwaniem doświadczonego Architekta Danych w Chmurze, który dołączy do naszego zespołu na projekcie realizowanym dla klienta z Wielkiej Brytanii.Projekt jest związany z zarządzaniem i przetwarzaniem danych, a także tworzeniem architektury systemu do rejestrowania i zarządzania obligacjami na rynkach globalnych. Kandydat powinien...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska Devoteam Pełny etat

    Job Title: Data Services EngineerDevoteam is seeking a highly motivated Data Services Engineer to join our team. As a Data Services Engineer, you will be responsible for designing and implementing data pipelines and architecture using Google Cloud Platform (GCP) products.Key Responsibilities:Design and construct data pipelines and architecture using GCP...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska Ecovadis Pełny etat

    Job Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at EcoVadis. As a Data Engineer, you will play a crucial role in designing, building, and maintaining our data systems, ensuring they are secure, scalable, and efficient.Key Responsibilities:Design and implement data pipelines using cloud-native technologies such as Google...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska b2bnetwork Pełny etat

    Job Title: Data EngineerWe are seeking a highly skilled Data Engineer to join our team at b2bnetwork. As a Data Engineer, you will be responsible for designing, building, and maintaining large-scale data processing systems.Key Responsibilities:Design and implement distributed data processing pipelines using Spark and HadoopDevelop and maintain data storage...


  • Warszawa, Mazovia, Polska Bank Pekao Pełny etat

    Opis StanowiskaPoszukujemy doświadczonego Architekta Danych, który będzie odpowiedzialny za zaprojektowanie i wdrożenie korporacyjnego modelu informacji (KMI) oraz zarządzanie nim. Będziesz pracować w zespole odpowiedzialnym za zarządzanie danymi w Banku Pekao.ObowiązkiWypracowanie i aktualizacja KMI, a także jego właścicielstwo.Współpraca w...

  • Data Engineer

    3 tygodni temu


    Warszawa, Mazovia, Polska Experis Manpower Group Pełny etat

    Data Engineer Job DescriptionWe are seeking a highly skilled Data Engineer to join our team at Experis Manpower Group. As a Data Engineer, you will play a crucial role in developing and maintaining our clients' applications, ensuring the efficient operation of our organization's systems, and driving innovation in data engineering.Key Responsibilities:Design...