Data Engineer GCP

1 dzień temu

Warszawa, mazowieckie, Polska Shimi Sp. z o.o. Pełny etat 26 zł - 880 zł

We współpracy z naszym partnerem biznesowym szukamy specjalisty na stanowisko Data Engineer z GCP do rozszerzenia zespołu u jednego z klientów.


O nas

SHIMI Poland wspiera globalnych partnerów technologicznych w budowie i rozwoju zespołów inżynierii danych, które tworzą nowoczesne, skalowalne środowiska analityczne w chmurze.

Aktualnie dołączamy do projektu dla międzynarodowego klienta, który stawia na transformację danych w oparciu o Google Cloud Platform (GCP) oraz zaawansowane narzędzia analityczne.


Poszukujemy doświadczonego Data Engineera z praktycznym doświadczeniem w środowisku Google Cloud Platform (GCP).

Osoba na tym stanowisku będzie odpowiedzialna za projektowanie, budowę i utrzymanie skalowalnych potoków danych (ETL/ELT), integrację źródeł danych oraz optymalizację procesów analitycznych w architekturze chmurowej.

Projekt realizowany jest dla międzynarodowego klienta o wysokich wymaganiach dotyczących jakości danych, niezawodności systemów oraz efektywności kosztowej infrastruktury.


Stack technologiczny:

  • GCP: BigQuery, Cloud Functions, Cloud Storage, IAM

  • ETL / Orkiestracja: Airflow @ Kubernetes (K8s), dbt, Airbyte

  • Infrastructure as Code: Terraform

  • Języki programowania: Python (pandas, requests, datetime), SQL

  • Monitoring / Alerting: PagerDuty, Prometheus, Grafana


Zakres obowiązków:

  • Projektowanie, implementacja i utrzymanie potoków danych (ETL/ELT) w środowisku GCP.

  • Tworzenie i rozwój warstw transformacyjnych danych przy użyciu dbt (Data Build Tool).

  • Integracja danych z wielu źródeł przy użyciu Airbyte oraz zapewnienie spójności i integralności danych.

  • Utrzymanie i rozwój infrastruktury danych w oparciu o Terraform oraz standardy IaC.

  • Programowanie w Pythonie z wykorzystaniem bibliotek analitycznych (pandas) oraz tworzenie funkcji w Cloud Functions.

  • Modelowanie danych i optymalizacja zapytań SQL w środowisku BigQuery.

  • Wdrażanie procesów monitorowania, alertowania i obsługi incydentów (PagerDuty).

  • Współpraca z zespołami Data Science, BI i DevOps przy wdrażaniu nowych źródeł danych i narzędzi analitycznych.

  • Dbanie o bezpieczeństwo, jakość i zgodność procesów danych z najlepszymi praktykami DataOps.


Wymagania:

  • Minimum 3 lata doświadczenia w pracy jako Data Engineer lub w podobnej roli w środowisku chmurowym.

  • Bardzo dobra znajomość Google Cloud Platform (BigQuery, Cloud Functions, Cloud Storage).

  • Praktyczne doświadczenie z narzędziami: Airflow, dbt, Airbyte.

  • Znajomość Terraform i podejścia Infrastructure as Code.

  • Zaawansowana znajomość SQL oraz umiejętność optymalizacji zapytań w dużych zbiorach danych.

  • Doświadczenie w programowaniu w Pythonie, ze znajomością bibliotek pandas, logging, datetime.

  • Zrozumienie zasad DataOps, CI/CD dla danych oraz zarządzania jakością danych.

  • Znajomość języka angielskiego na poziomie B2+ (środowisko międzynarodowe).


Mile widziane:

  • Doświadczenie w architekturze event-driven (Pub/Sub, Dataflow, Kafka).

  • Wiedza z zakresu optymalizacji kosztów w BigQuery i GCP.

  • Znajomość narzędzi testowania danych (pytest, Great Expectations).

  • Praktyka w projektach zorientowanych na dane produktowe lub analityczne.


Oferta:

  • Stawka: do 175 PLN/h netto + VAT

  • Start: ASAP

  • Kontrakt: B2B z SHIMI

  • Praca: 100% zdalna

  • Możliwość rozwoju w kierunku Data Architect / Cloud Data Engineer Lead

  • Udział w globalnym projekcie opartym o GCP i nowoczesny ekosystem danych

  • Realny wpływ na projektowanie architektury danych i procesów DataOps

  • Data Engineer GCP

    4 tygodni temu

    Warszawa, mazowieckie, Polska Randlab Pełny etat 16 zł - 800 zł

    Projekt realizowany jest w obszarze budowy i utrzymania Customer Data Platform (CDP) opartej o architekturę Data Lakehouse w środowisku Google Cloud Platform (GCP).Zakres współpracy obejmuje tworzenie i rozwój potoków danych batch/stream, integracje CDC (Change Data Capture) oraz budowę warstw danych Bronze / Silver / Gold w BigQuery.Priorytetem jest...

  • Data Engineer GCP

    4 tygodni temu

    Warszawa, mazowieckie, Polska TQLO SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ Pełny etat 23 zł - 520 zł

    Nasz Klient to międzynarodowa organizacja technologiczna, która buduje i rozwija zaawansowany ekosystem danych w środowisku Google Cloud Platform. Zespół odpowiada za projektowanie, rozwój i optymalizację architektury danych, wspierającej kluczowe procesy biznesowe i decyzyjne w skali globalnej.Dołączysz do zespołu ekspertów, w którym jako Data...

  • Data Engineer GCP Terraform

    4 tygodni temu

    Warszawa, mazowieckie, Polska emagine Polska Pełny etat 7 zł - 560 zł

    Summary:The primary objective of this role is to spearhead a data migration project focused on transferring data pipelines from a third-party orchestration tool to native Google Cloud Platform (GCP) services. The ideal candidate should possess 5+ years of experience as a Data Engineer with strong competencies in Google Cloud Platform, Python, and...

  • Senior Data Engineer GCP

    4 tygodni temu

    Warszawa, mazowieckie, Polska TQLO SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ Pełny etat 29 zł - 400 zł

    Nasz Klient to międzynarodowa organizacja technologiczna, która buduje nowoczesny ekosystem danych w chmurze Google Cloud Platform. Zespół odpowiada za projektowanie, rozwój i optymalizację hurtowni danych oraz procesów przetwarzania dużych wolumenów informacji.Szukamy doświadczonego Senior Data Engineera z GCP, który wesprze zespół w tworzeniu...

  • GCP Data Engineer

    4 tygodni temu

    Warszawa, mazowieckie, Polska Lingaro Pełny etat

    Growth through diversity, equity, and inclusion. As an ethical business, we do what is right — including ensuring equal opportunities and fostering a safe, respectful workplace for each of us. We believe diversity fuels both personal and business growth. We're committed to building an inclusive community where all our people thrive regardless of their...

  • Data Engineer

    2 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Capgemini Polska Pełny etat

    Data Engineer (GCP)Miejsce pracy: WarszawaTechnologies we useOperating systemWindowsLinuxAbout the projectChoosing Capgemini means choosing a company where you will be empowered to shape your career in the way you’d like, where you’ll be supported and inspired by a collaborative community of colleagues around the world, and where you’ll be able to...

  • Senior Data Engineer GCP Developer ETL

    3 tygodni temu

    Warszawa, mazowieckie, Polska RITS Professional Services Pełny etat 23 zł - 520 zł

    Senior Data Engineer GCP / Developer ETLRITS Group to firma informatyczna, która oferuje najwyższej jakości usługi programistyczne zarówno dla rynku polskiego, jak i międzynarodowego. Jesteśmy dumni, że należymy do grona najszybciej rozwijających się spółek technologicznych. Naszym priorytetem jest jakość oraz innowacyjność dostarczanych...

  • Senior GCP Data Engineer

    4 tygodni temu

    Warszawa, mazowieckie, Polska Lingaro Pełny etat

    Growth through diversity, equity, and inclusion. As an ethical business, we do what is right — including ensuring equal opportunities and fostering a safe, respectful workplace for each of us. We believe diversity fuels both personal and business growth. We're committed to building an inclusive community where all our people thrive regardless of their...

  • Senior Data Engineer GCP

    2 tygodni temu

    Warszawa, mazowieckie, Polska DS STREAM Pełny etat 25 zł - 200 zł

    We are looking for experienced Data Engineers to join our team at DS STREAM!Role OverviewWe are looking for a data engineer to support ongoing data platform and pipeline initiatives. This role focuses on assisting with the development, testing, and maintenance of data workflows, ensuring data quality, and supporting integration with external APIs. The...

  • Data Engineer GCP

    4 tygodni temu

    Warszawa, mazowieckie, Polska Capgemini Polska Pełny etat

    Choosing Capgemini means choosing a company where you will be empowered to shape your career in the way you’d like, where you’ll be supported and inspired by a collaborative community of colleagues around the world, and where you’ll be able to reimagine what’s possible. Join us and help the world’s leading organizations unlock the value of...