Programista Big Data

6 dni temu


Gdańsk, Polska Detable Pełny etat

Dołącz do  Detable Sp. Z o.o.  - prężnie rozwijającej się firmy, która stawia na długofalową współpracę z doświadczonymi profesjonalistami. Od ponad 2 lat jesteśmy partnerem dla instytucji z sektora publicznego, współpracujemy m.in. z Centrum e-zdrowia, Aplikacjami Krytycznymi Ministerstwa Finansów, Głównym Urzędem Nadzoru Budowlanego, Urzędem Do Spraw Cudzoziemców Narodowym Funduszem Zdrowia  i wieloma innymi.

Nasi konsultanci pracują nad rozwojem aplikacji i systemów, z których korzystają miliony Polaków Z sukcesem działamy na rzecz informatyzacji polskiej służby zdrowia. Bierzemy udział w rozwijaniu systemu  e-zdrowie -P1 (e-recepty, gabinet gov.pl, KSO – krajowa sieć onkologiczna) a także e-krew oraz RIZM - Centralny Rejestr Osób Uprawnionych do Wykonywania Zawodu Medycznego.

Możemy pochwalić się także udziałem w realizacji kluczowych projektów w obszarze finansowym, takich jak KSeF - Krajowy System e-Faktur,  JSP  - Jednolity System Podatkowy.

Jeśli chcesz pracować nad aplikacjami, z których będziesz potem korzystać w codziennym życiu, dołącz do naszego zespołu jako  Programista Big Data.

 

Ta rola jest właśnie dla Ciebie jeśli:

  • posiadasz minimum 5 lat doświadczenia w pracy na stanowisku Programista Big Data;
  • możesz pochwalić się realizacją minimum 3 projektów przetwarzających bardzo duże zbiory danych;
  • umiesz programować w języku Python;
  • nie jest Ci obca praca w środowisku obliczeniowym on-premise;
  • na co dzień pracujesz w środowisku Apache Spark;
  • SQL nie ma przed Tobą tajemnic;
  • znasz Apache Airflow i zagadnienia Hadoop;
  • miałeś okazję pracować w obszarze Hurtowni Danych;
  • posiadasz doświadczenie w obszarze ochrony zdrowia;
  • biegle posługujesz się językiem polskim;
  • możesz przedstawić następujące certyfikaty:  Agile PM lub równoważny, Airflow Fundamentals lub równoważny, Dag Authoring lub równoważny, Spark Developer Associate lub równoważny, W3Schools SQL Certificate lub równoważny.

Jeśli dołączysz do naszego zespołu Twoim zadaniem będzie:

  • przetwarzanie i analiza dużych zbiorów danych:

-projektowanie, implementacja i optymalizacja procesów przetwarzania miliardowych zbiorów danych,

-wykorzystywanie technologii Apache Spark do równoległego przetwarzania danych,

-tworzenie i zarządzanie przepływami danych w Apache Airflow.

  • tworzenie i rozwój procesów ETL/ELT:

-projektowanie i implementacja procesów integracji danych,

-automatyzacja oraz optymalizacja przepływów danych w oparciu o Apache Airflow,

-monitorowanie, diagnostyka oraz utrzymanie procesów przetwarzania danych,

  • programowanie w Python i SQL:

-implementacja skryptów w języku Python do analizy i transformacji danych,

-tworzenie i optymalizacja zapytań SQL dla hurtowni danych,

-integracja kodu z innymi systemami oraz dostosowywanie go do wymagań biznesowych,

  • zarządzanie i utrzymanie środowiska obliczeniowego on-premise:

-konfiguracja i optymalizacja środowiska Hadoop oraz powiązanych technologii,

-praca w środowisku lokalnym, zapewniająca stabilność i wydajność systemu,

  • udział w projektach analizy i przetwarzania danych:

-współpraca z zespołami analitycznymi i biznesowymi w celu określenia wymagań,

-implementacja rozwiązań wspierających raportowanie i analizę danych,

-tworzenie dokumentacji technicznej dotyczącej przetwarzanych danych i procesów,

  • implementacja i zarządzanie procesami CI/CD:

-wdrażanie oraz utrzymanie procesów ciągłej integracji i wdrażania kodu,

-użycie systemu kontroli wersji Git do zarządzania kodem źródłowym,

  • współpraca i rozwój osobisty:

-aktywna współpraca w zespołach projektowych i scrumowych,

-uczestnictwo w procesach planowania, estymacji i doskonalenia procesów,

-stałe podnoszenie kwalifikacji i poszerzanie wiedzy w obszarze Big Data.

Z naszej strony możesz liczyć na :

  • konkurencyjne wynagrodzenie w oparciu o kontrakt B2B (140 – 155 pln netto/h);
  • długofalową współpracę opartą o wzajemny szacunek i partnerstwo;
  • dedykowanego opiekuna kontraktu po stronie Detable;
  • możliwość 100% pracy zdalnej lub z naszego biura w Białymstoku;
  • możliwość podnoszenia swoich kwalifikacji poprzez skorzystanie z budżetu szkoleniowego;
  • realny wpływ na rozwój projektu;
  • atrakcyjny program poleceń pracowniczych;
  • zdalny proces rekrutacji.

Jak wygląda u nas proces rekrutacji?

  • rozmowa HR z naszą IT Rekruterką;
  • weryfikacja umiejętności technicznych przez naszego Lidera technicznego;
  • spotkanie z klientem;
  • decyzja i rozpoczęcie współpracy



  • Gdańsk, Pomerania, Polska Asseco Data Systems S.A. Pełny etat

    Zapewniamy doskonałe warunki pracyNasz zespół składa się z doświadczonych programistów, analityków i specjalistów ds. projektów. Będziesz częścią tej ekipy!Jesteśmy elastycznym i otwartym na nowe pomysły zespołem, dlatego nie powstrzymujemy się przed wprowadzaniem innowacji, które zmieniają grę. Praca w naszym zespole daje Ci możność...


  • Gdańsk, Pomerania, Polska Capgemini Pełny etat

    Job DescriptionWe are looking for a highly skilled professional to join our team as a Big Data Solutions Specialist. This role involves developing and optimizing big data solutions based on Azure cloud platform.About the RoleDevelop and optimize modern big data solutions using Azure cloud platform.Improve data processing efficiency and migrate from on-prem...

  • Big Data Expert

    7 dni temu


    Gdańsk, Polska DCG Pełny etat

    At DCG, we understand that every business relies on the expertise of experienced professionals. Our management style and partnership approach enable us to meet your needs and provide continuous support.We are currently looking for a Big Data Expert to join our team.Responsibilities:Support the CBA Downstream area (CBA Hadoop ecosystem)Receive and resolve all...


  • Gdańsk, Polska Link Group Pełny etat

    Big Data Engineer (Scala, Spark)At Link Group, we specialize in building tech teams for Fortune 500 companies and some of the world's most exciting startups. Our mission is to connect talented professionals with opportunities that align with their skills, interests, and career aspirations.We are currently looking for a Big Data Engineer with expertise in...


  • Gdańsk, Polska Wirtualna Polska Media S.A. Pełny etat

    Cześć!  Wirtualna Polska jest partnerem pierwszego wyboru, który dostarcza angażujące informacje, rozrywkę i usługi oraz inspiruje w codziennych decyzjach. Działamy w obszarach e-commerce, reklamy i mediów spójnie łącząc technologie. Codziennie pomagamy naszym użytkownikom w sprawach ważnych i nietypowych. Dołącz do Wirtualnej Polski...


  • Gdańsk, Polska Grid Dynamics Poland Pełny etat

    We are seeking a highly skilled Big Data Engineer with a strong background in data engineering, real-time streaming, and large-scale distributed data processing. The engineer will be a part of the team responsible for building critical risk and fraud detection applications. The ideal candidate will have expertise in big data technologies, real-time data...


  • Gdańsk, Polska emagine Polska Pełny etat

    Role: Senior Hadoop / Big Data Developer (with the potential to grow to an Expert IT Developer)Location: 1x/week in the office in Gdynia/Gdańsk/Warszawa/ŁódźRemuneration: up to 170 zl/h net+vatType of contract: B2BIndustry: BankingDuration: long-term cooperationWelcome to the Backend Application capability team. We add value by supporting key projects...

  • Project Manager

    3 tygodni temu


    Gdańsk, Polska Addepto Pełny etat

    Addepto is a leading consulting and technology company specializing in AI and Big Data, helping clients deliver innovative data projects. We partner with top-tier global enterprises and pioneering startups, including Rolls Royce, Continental, Porsche, ABB, and WGU. Our exclusive focus on AI and Big Data has earned us recognition by Forbes as one of the top...


  • Gdańsk, Polska ERGO Technology & Services Pełny etat

    About UsERGO Technology & Services S.A. is a leading provider of cutting-edge IT solutions that drive business growth. With a strong focus on innovation, we empower our customers to succeed in the ever-evolving digital landscape.Our company was established in 2021 through the integration of ERGO Digital IT and Atena, combining their strengths and best...


  • Gdańsk, Polska emagine Polska Pełny etat

    Welcome to emagine Polska, a dynamic team driving innovation in the Banking industry. We're seeking an exceptional Senior Hadoop Big Data Developer to join our Backend Application capability team.As a key member of our team, you'll play a crucial role in supporting high-impact projects and initiatives within GBS - IT/Technology cluster. With your expertise...


  • aleja Grunwaldzka , Gdańsk, Polska Grid Dynamics Poland Pełny etat

    We are a leading provider of technology consulting, platform and product engineering, AI, and advanced analytics services. Our team at Grid Dynamics is dedicated to solving the most pressing technical challenges and enabling positive business outcomes for enterprise companies undergoing digital transformation.We are currently seeking an experienced Senior...


  • Gdańsk, Polska Xebia sp. z o.o. Pełny etat

    building and maintaining architecture patterns for data processing, workflow definitions, and system to system integrations using Big Data and Cloud technologies,  evaluating and translating technical design to workable technical solutions/code and technical specifications at par with industry standards,  driving creation of re-usable artifacts,  writing...

  • Big Data Engineer

    6 dni temu


    Gdańsk, Polska OpsTalent Pełny etat

    Do you enjoy creating new data solutions and working with cutting-edge technologies, especially in the cloud? Do you thrive in a fast-paced environment and find satisfaction in solving complex data challenges? We are currently looking for a Data Engineer with AWS experience to join our company and help us develop advanced data solutions. Design,...


  • aleja Grunwaldzka , Gdańsk, Polska Grid Dynamics Poland Pełny etat

    Our customer is one of the world's largest technology companies based in Silicon Valley with operations all over the world. In this project, we are working on the bleeding edge of Big Data technology to develop a high-performance data analytics platform, which handles petabytes datasets.We are looking for an experienced Big Data...


  • Gdańsk, Polska ERGO Technology & Services Pełny etat

    About UsERGO Technology & Services S.A. (ET&S S.A.) was established in January 2021 following the integration of ERGO Digital IT and Atena into one entity, leveraging both companies' strengths and best practices. As a part of ERGO Technology & Services Management AG, the technology holding of ERGO Group AG, we support millions of internal and external...


  • Gdańsk, Polska ER Group Pełny etat

    Dla naszego klienta, rozpoznawalnej firmy z branży finansowej, poszukujemy odpowiedniej osoby na stanowisko: Dyrektor ds. rozwoju (produkty big data)    Zakres obowiązków:  Opracowywanie produktów i usług na podstawie analizy danych i potrzeb rynku Odpowiedzialność za strategię rozwoju działu i P&L Sprzedaż opracowanych rozwiązań...


  • Gdańsk, Pomerania, Polska Jit Team Pełny etat

    Job DescriptionThis role involves designing and implementing efficient and scalable test automation scripts for a Big Data and ETL-based environment. The ideal candidate will have proven experience in developing test automation scripts using Python and expertise in Robot Framework testing.ResponsibilitiesDeveloping test automation scripts using PythonTesting...


  • Gdańsk, Pomerania, Polska Asseco Data Systems S.A. Pełny etat

    Zadania:- realizacja zadań projektowych związanych z rozwojem systemu LEO wspierającego globalną obsługę prowadzenia umów leasingowych,- współpraca w ramach zespołu zwinnego (PM, analityk, programista, wdrożeniowiec).


  • Gdańsk, Polska ERGO Technology & Services Pełny etat

    ERGO Technology & Services S.A. (was established in January 2021 following the integration of ERGO Digital IT and Atena into one entity, leveraging both companies’ strengths and best practices. As a part of ERGO Technology & Services Management AG, the technology holding of ERGO Group AG, we support millions of internal and external customers with...


  • aleja Grunwaldzka c, Gdańsk, Polska Grid Dynamics Poland Pełny etat

    Are you an experienced SDET with a desire to transition into Big Data, or a Junior Big Data Engineer looking to grow your testing expertise? Join our team as we build cutting-edge test infrastructure, tools, and data validation/conversion solutions This role offers a fantastic opportunity to work on advanced Java-based technology with potential exposure to...