Data Quality Engineer

4 tygodni temu

Gdańsk, Trójmiasto, Polska Upvanta sp. z o.o. Pełny etat

Data Quality Engineer

Miejsce pracy: 100% zdalnie

Rodzaj współpracy: długoterminowa współpraca, pełny etat



Opis projektu

Poszukujemy doświadczonego Data Quality Engineera, którego zadaniem będzie zapewnienie spójności, integralności i wiarygodności danych w hurtowni Snowflake.


Rola koncentruje się na projektowaniu i wdrażaniu procesów kontroli jakości danych - tak, aby dane były zgodne na każdym etapie przetwarzania: od źródła, przez transformacje, aż po warstwę raportową. Kandydat będzie blisko współpracował z Data Engineerami oraz zespołami biznesowymi, monitorując przepływy danych, wychwytując anomalie i proponując usprawnienia.


Zakres obowiązków

  • Projektowanie i implementacja procesów monitorowania oraz poprawy jakości danych (reguły DQ, testy porównawcze).

  • Tworzenie struktur i przepływów wspierających audyt i kontrolę danych.

  • Walidacja zgodności danych – od wejścia, przez transformacje, aż po warstwę wynikową.

  • Automatyzacja procesów monitorowania jakości z wykorzystaniem Airflow i Python.

  • Współpraca i dzielenie się wiedzą w ramach zespołu scrumowego.

  • Praca w języku polskim z lokalnym zespołem oraz w języku angielskim z zespołami międzynarodowymi.


Wymagania

Doświadczenie:

  • Praca z hurtowniami danych w chmurze (preferowane Snowflake).

  • Realizacja projektów z zakresu Data Quality (walidacja przepływów danych, projektowanie reguł DQ, porównania danych źródłowych i wynikowych).


Bardzo dobra znajomość:

  • Snowflake (projektowanie, walidacja, monitorowanie danych).

  • SQL (tworzenie zapytań kontrolnych, reguł walidacyjnych).

  • Airflow (automatyzacja procesów monitorowania jakości).

  • Python (implementacja testów jakości danych, porównań danych).


Dodatkowe kompetencje (min. średni poziom):

  • AWS (S3, Batch, Kinesis, Firehose, Lambda).

  • GitLab (kontrola wersji, CI/CD dla procesów DQ).


Warunki współpracy

  • Start: od zaraz.

  • Czas trwania: długoterminowa współpraca.

  • Tryb pracy: 100% zdalnie.

  • Senior Data Engineer

    4 tygodni temu

    Gdańsk, Trójmiasto, Polska Link Group Pełny etat 18 zł - 480 zł

    Senior Data Engineer – AWS / Databricks / Python Remote | Long-term cooperationWe are currently looking for an experienced Senior Data Engineer to join an international team and work on cutting-edge data projects. In this role, you’ll design and build scalable data pipelines, shape data transformation frameworks, and collaborate closely with analysts...

  • AWS Data Engineer Architect

    4 tygodni temu

    Gdańsk, Trójmiasto, Polska Link Group Pełny etat

    AWS Data Engineer / ArchitectLocation: Gdańsk (on-site)Working hours: European time zoneExperience: 4+ yearsRole overview:Data expert responsible for designing, building, and maintaining modern Data Lake and Data Warehouse solutions within the AWS cloud environment.Key responsibilities:Design and implement cloud-based data architectures (Data Lake / Data...

  • Data Engineer SQL Specialist

    4 tygodni temu

    Gdańsk, Trójmiasto, Polska emagine Polska Pełny etat

    Start: ASAPContract: B2B 12 months + prologantionsWork mode: 100% remoteProject language: EnglishRecruitment process: 1 screening + 2 interviewsSummary:The primary objective of the Data Engineer / SQL Specialist role is to enhance the organization's analytical capabilities by developing and managing SQL-based data solutions on the Databricks platform. This...

  • Implementation Engineer Data Engineer

    4 tygodni temu

    Gdańsk, Trójmiasto, Polska Upvanta sp. z o.o. Pełny etat

    Implementation Engineer / Data Engineer Lokalizacja: praca zdalna / hybrydowa (do ustalenia) Rodzaj współpracy: B2B Poziom: Mid / Senior Opis stanowiskaPoszukujemy Implementation Engineer / Data Engineer, czyli osoby, która łączy analityczne myślenie z umiejętnościami technicznymi i potrafi samodzielnie dostarczać kompleksowe, data-driven...

  • Senior Data Engineer Architect

    1 tydzień temu

    Gdańsk, Trójmiasto, Polska BRAVER IT SPÓŁKA AKCYJNA Pełny etat 28 zł

    We are looking for an experienced Senior Data Engineer/Architect to help design and implement a modern data lakehouse platform from scratch. This role combines hands-on engineering with strategic decision-making around scalable data solutions. Responsibilities:Design and implement a greenfield data lakehouse architecture.Build and optimize data models,...

  • Data Engineer

    3 tygodni temu

    Gdańsk, Trójmiasto, Polska Inuits Pełny etat 21 zł - 840 zł

    We’re seeking a Data Engineer to join our team and lead data infrastructure development for a well-funded healthtech startup building a wearable-driven platform. You’ll design, implement, and scale the cloud data systems powering continuous health analytics for up to one million active users.About the ProjectYou’ll build and maintain data pipelines and...

  • Data Engineer

    4 tygodni temu

    Gdańsk, Trójmiasto, Polska Scalo Pełny etat

    W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom. Obszary...

  • Data Engineer

    1 tydzień temu

    Gdańsk, pomorskie, Trójmiasto, Polska Capgemini Polska Pełny etat

    Data Engineer (GCP)Miejsce pracy: GdańskTechnologies we useOperating systemWindowsLinuxAbout the projectChoosing Capgemini means choosing a company where you will be empowered to shape your career in the way you’d like, where you’ll be supported and inspired by a collaborative community of colleagues around the world, and where you’ll be able to...

  • Lead Data Engineer Snowflake Airflow

    4 tygodni temu

    Gdańsk, Trójmiasto, Polska EPAM Systems Pełny etat

    We’re building a world-class, AI-native data engineering team – and we’re looking for a Lead Data Engineer to help shape the data backbone of a cutting-edge quantitative investment platform.You’ll guide technical direction, mentor others and build scalable systems that empower smarter decision-making. You’ll be at the center of innovation, working...

  • Software Quality Expert

    1 tydzień temu

    Gdańsk, pomorskie, Trójmiasto, Polska Lufthansa Systems Pełny etat

    Software Quality Expert Miejsce pracy: GdańskTechnologies we useOperating systemmacOSLinuxAbout the projectWe are looking for a Software Quality Expert (Test Engineer+) to join our team and help us in our journey towards a world-class quality culture. Working at Lufthansa Systems Poland, as part of the Digital Hangar (DH), provides a unique opportunity to...