Senior Data Engineer

3 tygodni temu


Warsaw, Polska Polski Standard Płatności S.A. Pełny etat

Senior Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane Python O projekcie Szukamy samodzielnych seniorów, którzy chcą mieć realny wpływ, a nie tylko "dowodzić tickety". Pracujemy w modelu "wolno, drogo, ale dobrze". Budujemy platformę danych od zera, kształtujemy kulturę data-driven w całej organizacji i decydujemy, jak będzie wyglądał ekosystem danych na najbliższe lata. Pracujemy na nowoczesnym stacku opartym o Google Cloud, BigQuery, Python. Przetwarzamy miliardy eventów, a przy tym dbamy, żeby była przestrzeń na eksperymenty, dyskusje architektoniczne i zwykłą radość z rozwiązywania trudnych problemów (i czytanie whitepaperów o algorytmach i strukturach danych). Projekt nie ma "daty końca", a większość przed nami. Jesteśmy nowym, autonomicznym zespołem w BLIKu i naprawdę interesujemy się tym, co robimy i jak to działa kilka poziomów abstrakcji pod spodem. Techniczne wyzwania i sensowny wpływ na biznes - to jest dokładnie to miejsce. Twój zakres obowiązków Praca przy tworzeniu globalnej platformy analitycznej w firmie, z myślą o skalowalności i kosztach. Projektowanie i rozwój data pipeline'ów (batch, streaming). Tworzenie i utrzymywanie kontraktów danych, testów i metryk jakości (freshness, completeness, accuracy). Projektowanie algorytmów (deduplikacja, windowing, segmentacja) i struktur danych zoptymalizowanych dla tysięcy eventów na sekundę. Zbieranie, analiza i synteza wymagań od zespołów produktowych, analityków i Data Science. Propagowanie kultury data-driven w organizacji. Tworzenie dokumentacji oraz proponowanie nowych rozwiązań i kierunków dalszego rozwoju. Nasze wymagania Minimum 6 lat komercyjnego doświadczenia w programowaniu w języku Python lub Go Doświadczenie w pracy z co najmniej jednym z narzędzi: Apache Airflow, Spark, Beam, NiFi, Flink Biegłość w SQL (PostgreSQL) i NoSQL - key-value, dokumentowe, time-series oraz kolumnowe DWH Pisanie kodu wg zasad Clean Code (np. "Meaningful Variable and Function Names", "Keep Functions and Methods Short.) Doświadczenie z silnikami kolejek Znajomość powszechnie stosowanych formatów, algorytmów i struktur danych Mile widziane Doświadczenie w pracy w chmurach publicznych (wykorzystujemy Google Cloud, natomiast jeśli znasz dobrze inną - na pewno dojdziemy do porozumienia) Znajomość technologii CI/CD oraz IaC (Terraform, Ansible) To oferujemy Możliwość pracy nad kluczowym systemem płatniczym w Polsce, mającym realny wpływ na codzienne życie milionów użytkowników Autonomię w podejmowaniu decyzji technicznych i możliwość wprowadzania innowacyjnych rozwiązań Pracę w środowisku, które ceni wiedzę ekspercką, argumenty merytoryczne i wspiera kulturę ciągłego uczenia się Elastyczne godziny pracy, praca hybrydowa Pakiet standardowych benefitów (zawierający m.in. opiekę medyczną, ubezpieczenie na życie, naukę języka angielskiego, nieograniczony dostęp do dużej platformy e-learningowej, MyBenefit) Budżet szkoleniowy i konferencyjny Benefity dofinansowanie zajęć sportowych prywatna opieka medyczna dofinansowanie nauki języków dofinansowanie szkoleń i kursów ubezpieczenie na życie spotkania integracyjne parking dla pracowników dodatkowe świadczenia socjalne Wszystkie informacje o przetwarzaniu danych osobowych w tej rekrutacji znajdziesz w formularzu aplikacyjnym, po kliknięciu w przycisk "Aplikuj Teraz".


  • Senior Data Engineer

    1 tydzień temu


    Warsaw, Polska Insightify Pełny etat

    We are seeking a highly skilled and experienced Senior Data Engineer with solid expertise in AWS, Azure & GCP, along with proficiency in modern data transformation tools such as dbt and Databricks. Tasks In the role of Senior Data Engineer, you will be entrusted with the task of conceptualizing and implementing scalable and secure cloud-based data...


  • Warsaw, Polska Experis Manpower Group Pełny etat

    Experis to światowy lider rekrutacji specjalistów i kadry zarządzającej w kluczowych obszarach IT. Z nami znajdziesz konkurencyjne oferty zatrudnienia oraz ciekawe projekty IT skierowane zarówno do ekspertów z wieloletnim doświadczeniem, jak i osób, które dopiero zaczynają swoją przygodę w branży IT. Senior Azure Data Engineer – Hybrid...


  • Warsaw, Polska P&P Solutions Pełny etat

    Our client from the insurance industry is developing an advanced dashboard that presents key risk metrics for investors as well as performance indicators for the investment portfolio. The tool includes complex visualizations and reports that are frequently reviewed by senior leadership. As a Senior Data Engineer, you will be responsible for maintaining and...

  • Senior Data Engineer

    2 tygodni temu


    Warsaw, Polska emagine Polska Pełny etat

    Rate: B2B – 37-42 EUR/h. Work model: fully remote. Project length: 12 months extensions. Start date for assignment: ASAP/ 1 month. Project language: English, Polish. Industry: pharmaceutical. Recruitment process : 2 interviews with the client. Workload: Full time. Job Description Are you passionate about data engineering and developing data products that...

  • Senior Software Engineer

    2 tygodni temu


    Warsaw, Polska STARBURST DATA POLSKA sp. z o.o. Pełny etat

    Senior Software Engineer Miejsce pracy: Warszawa Technologies we use Expected - Java - Typescript - Pulumi - Terraform Optional - Trino Operating system - macOS About the project As a Senior Software Engineer on the fully distributed Starburst Galaxy Reliability, Scalability, & Efficiency team, you’ll own the reliability, scalability and...

  • Senior Software Engineer

    2 tygodni temu


    Warsaw, Polska STARBURST DATA POLSKA sp. z o.o. Pełny etat

    Senior Software Engineer Miejsce pracy: Warszawa Technologies we use Expected Java Typescript Pulumi Terraform Optional Trino Operating system macOS About the project As a Senior Software Engineer on the fully distributed Starburst Galaxy Reliability, Scalability, & Efficiency team, you'll own the reliability, scalability and efficiency (performance/$) of...


  • Warsaw, Polska Procter & Gamble Pełny etat

    Job Description The Senior Data Engineer is responsible for designing, developing, and implementing data and analytics Microsoft Azure Databricks Platform and pipelines that acquire, cleanse, transform, and publish data from a wide variety of sources. Key Responsibilities: Assemble large complex data sets which meet functional and non-functional business...

  • Senior Data Engineer

    4 tygodni temu


    Warsaw, Polska Bayer Sp. z o.o. Pełny etat

    At Bayer we're visionaries, driven to solve the world's toughest challenges and striving for a world where ,Health for all, Hunger for none' is no longer a dream, but a real possibility. We're doing it with energy, curiosity and sheer dedication, always learning from unique perspectives of those around us, expanding our thinking, growing our capabilities and...

  • Senior Software Engineer

    3 tygodni temu


    Warsaw, Polska STARBURST DATA POLSKA sp. z o.o. Pełny etat

    Senior Software Engineer Miejsce pracy: Warszawa Technologies we use Expected Java Operating system Windows About the project Starburst is looking for strong Java engineers to work with our globally distributed engineering team on the core of Starburst's software. This is a great opportunity to deepen your expertise in a rapidly evolving technology and make...

  • Senior Data Engineer

    1 dzień temu


    Warsaw, Polska KUBO Pełny etat

    Ready to build high-performance, real-time data pipelines at scale? At KUBO, we're looking for a Senior Data Engineer to support a major data modernization project for a financial services client. The project is focused on Change Data Capture (CDC) , real-time streaming, and analytics, helping the client handle large volumes of transactional data...