Data Engineer GCP

1 dzień temu

Warsaw, Polska Shimi Sp. z o.o. Pełny etat

We współpracy z naszym partnerem biznesowym szukamy specjalisty na stanowisko Data Engineer z GCP do rozszerzenia zespołu u jednego z klientów. O nas SHIMI Poland wspiera globalnych partnerów technologicznych w budowie i rozwoju zespołów inżynierii danych, które tworzą nowoczesne, skalowalne środowiska analityczne w chmurze. Aktualnie dołączamy do projektu dla międzynarodowego klienta, który stawia na transformację danych w oparciu o Google Cloud Platform (GCP) oraz zaawansowane narzędzia analityczne. Poszukujemy doświadczonego Data Engineera z praktycznym doświadczeniem w środowisku Google Cloud Platform (GCP). Osoba na tym stanowisku będzie odpowiedzialna za projektowanie, budowę i utrzymanie skalowalnych potoków danych (ETL/ELT), integrację źródeł danych oraz optymalizację procesów analitycznych w architekturze chmurowej. Projekt realizowany jest dla międzynarodowego klienta o wysokich wymaganiach dotyczących jakości danych, niezawodności systemów oraz efektywności kosztowej infrastruktury. Stack technologiczny: GCP: BigQuery, Cloud Functions, Cloud Storage, IAM ETL / Orkiestracja : Airflow @ Kubernetes (K8s), dbt, Airbyte Infrastructure as Code : Terraform Języki programowania: Python (pandas, requests, datetime), SQL Monitoring / Alerting : PagerDuty, Prometheus, Grafana Zakres obowiązków: Projektowanie, implementacja i utrzymanie potoków danych (ETL/ELT) w środowisku GCP. Tworzenie i rozwój warstw transformacyjnych danych przy użyciu dbt (Data Build Tool). Integracja danych z wielu źródeł przy użyciu Airbyte oraz zapewnienie spójności i integralności danych. Utrzymanie i rozwój infrastruktury danych w oparciu o Terraform oraz standardy IaC. Programowanie w Pythonie z wykorzystaniem bibliotek analitycznych (pandas) oraz tworzenie funkcji w Cloud Functions. Modelowanie danych i optymalizacja zapytań SQL w środowisku BigQuery. Wdrażanie procesów monitorowania, alertowania i obsługi incydentów (PagerDuty). Współpraca z zespołami Data Science, BI i DevOps przy wdrażaniu nowych źródeł danych i narzędzi analitycznych. Dbanie o bezpieczeństwo, jakość i zgodność procesów danych z najlepszymi praktykami DataOps. Wymagania: Minimum 3 lata doświadczenia w pracy jako Data Engineer lub w podobnej roli w środowisku chmurowym. Bardzo dobra znajomość Google Cloud Platform (BigQuery, Cloud Functions, Cloud Storage). Praktyczne doświadczenie z narzędziami: Airflow, dbt, Airbyte. Znajomość Terraform i podejścia Infrastructure as Code . Zaawansowana znajomość SQL oraz umiejętność optymalizacji zapytań w dużych zbiorach danych. Doświadczenie w programowaniu w Pythonie , ze znajomością bibliotek pandas, logging, datetime . Zrozumienie zasad DataOps, CI/CD dla danych oraz zarządzania jakością danych. Znajomość języka angielskiego na poziomie B2 (środowisko międzynarodowe). Mile widziane: Doświadczenie w architekturze event-driven (Pub/Sub, Dataflow, Kafka). Wiedza z zakresu optymalizacji kosztów w BigQuery i GCP. Znajomość narzędzi testowania danych (pytest, Great Expectations). Praktyka w projektach zorientowanych na dane produktowe lub analityczne. Oferta: Stawka: do 175 PLN/h netto VAT Start: ASAP Kontrakt: B2B z SHIMI Praca: 100% zdalna Możliwość rozwoju w kierunku Data Architect / Cloud Data Engineer Lead Udział w globalnym projekcie opartym o GCP i nowoczesny ekosystem danych Realny wpływ na projektowanie architektury danych i procesów DataOps

  • Data Engineer GCP

    5 dni temu

    Warsaw, Polska TQLO SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ Pełny etat

    Nasz Klient to międzynarodowa organizacja technologiczna, która buduje i rozwija zaawansowany ekosystem danych w środowisku Google Cloud Platform . Zespół odpowiada za projektowanie, rozwój i optymalizację architektury danych, wspierającej kluczowe procesy biznesowe i decyzyjne w skali globalnej. Dołączysz do zespołu ekspertów, w którym jako...

  • Senior Data Engineer GCP

    5 dni temu

    Warsaw, Polska TQLO SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ Pełny etat

    Nasz Klient to międzynarodowa organizacja technologiczna, która buduje nowoczesny ekosystem danych w chmurze Google Cloud Platform. Zespół odpowiada za projektowanie, rozwój i optymalizację hurtowni danych oraz procesów przetwarzania dużych wolumenów informacji. Szukamy doświadczonego Senior Data Engineera z GCP , który wesprze zespół w...

  • Data Engineer

    4 tygodni temu

    Warsaw, Polska Capgemini Polska Pełny etat

    Data Engineer (GCP) Miejsce pracy: Warszawa Technologies we use Operating system Windows Linux About the project Choosing Capgemini means choosing a company where you will be empowered to shape your career in the way you'd like, where you'll be supported and inspired by a collaborative community of colleagues around the world, and where you'll be able to...

  • GCP Data Engineer

    5 dni temu

    Warsaw, Polska Lingaro Pełny etat

    Growth through diversity, equity, and inclusion. As an ethical business, we do what is right — including ensuring equal opportunities and fostering a safe, respectful workplace for each of us. We believe diversity fuels both personal and business growth. We're committed to building an inclusive community where all our people thrive regardless of their...

  • Data Engineer

    3 tygodni temu

    Warsaw, Polska NEONTRI SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ Pełny etat

    Data Engineer (ETL/GCP) Miejsce pracy: Warszawa Technologie, których używamy Wymagane SQL PL/SQL Oracle PostgreSQL BigQuery Python GCP Informatica PowerCenter Kafka Mile widziane Java Groovy Grafana O projekcie Obecnie dla naszego Klienta z branży bankowej poszukujemy Data Engineera (ETL/GCP) Projekt: prace związane z przetwarzaniem danych w hurtowniach...

  • Senior Data Engineer GCP BigQuery DBT

    2 tygodni temu

    Warsaw, Polska DCV Technologies Pełny etat

    Role Description We are looking for a skilled Data Engineer to design, build, and optimize data solutions on Google Cloud Platform (GCP) . The role involves migrating existing solutions, developing new data products, and collaborating closely with architects, business experts, and data teams to support analytics and Machine Learning/AI initiatives....

  • Senior Data Engineer GCP Developer ETL

    3 tygodni temu

    Warsaw, Polska RITS Professional Services Pełny etat

    Senior Data Engineer GCP / Developer ETL RITS Group to firma informatyczna, która oferuje najwyższej jakości usługi programistyczne zarówno dla rynku polskiego, jak i międzynarodowego. Jesteśmy dumni, że należymy do grona najszybciej rozwijających się spółek technologicznych. Naszym priorytetem jest jakość oraz innowacyjność dostarczanych...

  • DevOps Engineer

    4 tygodni temu

    Warsaw, Polska RANDLAB SOFTWARE sp. z o.o. Pełny etat

    DevOps Engineer (GCP) Miejsce pracy: Warszawa Technologie, których używamy Wymagane GCP Terraform Jenkins Docker Kubernetes Linux Git Python Bash Mile widziane Ansible Tower Prometheus Grafana ELK Stack Helm ArgoCD Cloud SQL BigQuery Pub/Sub Data Fusion Airflow Java Go System operacyjny Linux O projekcie Projekt obejmuje rozwój i utrzymanie stabilnych...

  • Data Engineer

    2 tygodni temu

    Warsaw, Polska Capgemini Polska Pełny etat

    Data Engineer (GCP) Miejsce pracy: Warszawa Technologies we use Expected SQL Python GitLab Snowflake Optional Microsoft SSIS Microsoft SSAS Microsoft SSRS Operating system Windows Linux About the project Choosing Capgemini means choosing a company where you will be empowered to shape your career in the way you'd like, where you'll be supported and inspired...

  • GCP Cloud Engineer

    2 tygodni temu

    Warsaw, Polska T-Mobile Pełny etat

    GCP Cloud Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane GCP Terraform Prometheus Grafana Opensearch Dynatrace JIRA Confluence Git GitLab Mile widziane Vertex AI Looker BigQuery Dataproc Python Bash System operacyjny Linux O projekcie Zespół Cloud T-Mobile jest odpowiedzialny za tworzenie AWS Landing Zone Mozart oraz nowej Landing...