DBT Airflow Architect

DBT Airflow Architect (ETL Modernization) Miejsce pracy: Wrocław Technologie, których używamy Wymagane Airflow dbt SQL Terraform Docker Linux CI/CD Oracle Cloud Infrastructure Mile widziane Informatica PowerCenter DataOps Git GitLab Jira Azure DevOps O projekcie Dołączysz do projektu modernizującego istniejące środowisko ETL, w którym cała logika z Informatica PowerCenter przenoszona jest do nowoczesnej architektury opartej na Airflow i dbt. Celem inicjatywy jest zbudowanie skalowalnego, modularnego frameworka ETL/ELT nowej generacji, wspierającego wydajne przetwarzanie i orkiestrację danych w środowisku enterprise. W roli DBT Airflow Architect będziesz współtworzyć architekturę, przepisywać logikę procesów, definiować standardy oraz wspierać zespoły developerskie, pracując z narzędziami takimi jak Terraform, Docker, Linux i CI/CD, w środowisku on-premise z integracją z Oracle Cloud Infrastructure. Twój zakres obowiązków Projektowanie architektury platformy Airflow dbt na potrzeby migracji z Informatica PowerCenter. Budowa skalowalnego, modularnego frameworka ETL/ELT następnej generacji. Przepisywanie, modernizacja i optymalizacja istniejącej logiki ETL do dbt oraz Airflow. Definiowanie standardów, best practices, naming conventions i zasad pracy z pipeline'ami. Integracja pipeline'ów z narzędziami IaC (Terraform) i Docker. Współpraca z zespołami developerskimi, wsparcie techniczne oraz mentoring. Analiza wymagań biznesowych i technicznych oraz projektowanie rozwiązań end-to-end. Wsparcie wdrożeń produkcyjnych i rozwiązywanie problemów związanych z pipeline'ami danych. Nasze wymagania Bardzo dobra praktyczna znajomość Airflow (ok. 5 lat lub równoważne doświadczenie). Doświadczenie komercyjne z dbt (modele, testy, dokumentacja). Doświadczenie w budowaniu frameworków ETL/ELT, w tym podejście metadata-driven i modularne pipeline'y. Bardzo silne umiejętności SQL (tuning, modelowanie, diagnostyka). Bardzo dobra znajomość Docker. Doświadczenie z Terraform (IaC). Znajomość Linux oraz narzędzi CI/CD. Znajomość Oracle Cloud Infrastructure lub łatwa adaptacja do cloud enterprise. Proaktywność i samodzielność w pracy. Umiejętność proponowania rozwiązań architektonicznych. Myślenie end-to-end – od analizy wymagań po wdrożenia produkcyjne. Mile widziane Doświadczenie z Informatica PowerCenter (duży plus w kontekście migracji). Doświadczenie w migracjach ETL → ELT. Znajomość wzorców DataOps. Doświadczenie w pracy z narzędziami: Git, GitLab, Jira, Azure DevOps. Zrozumienie zagadnień wydajnościowych i optymalizacji pipeline'ów. Umiejętność integracji pipeline'ów z systemami tworzonymi np. w C++. To oferujemy Praca w firmie, która otrzymała nagrodę Great Place to Work Award i Diamentowy Certyfikat Forbesa. System premiowania za polecenia. Doskonałe imprezy integracyjne. Środowisko pracy ludzi otwartych na dzielenie się i wymianę wiedzą IT. Benefity dofinansowanie zajęć sportowych prywatna opieka medyczna dofinansowanie nauki języków dofinansowanie szkoleń i kursów ubezpieczenie na życie elastyczny czas pracy spotkania integracyjne brak dress code'u Etapy rekrutacji Screening Rozmowa z Project Manager'em projektu Decyzja BCF Software Sp. z o.o. Bright coders' factory - our name speaks for ourselves, as our software sits in the hearts of global companies. We provide customers with the most modern technologies. We are a software development company with over 150 developers of various seniority. Our potential continues to grow, which proves the Forbes Diamond and Great Place to Work awards won in 2023. We write code to make people's lives easier. In BCF, you will find your place and see that your work matters. Our portfolio includes projects in more than 15 industries - you will find something interesting. :) Depending on the stage of your career, we will choose the right project that allows you to fulfill yourself professionally. The rest belongs to you. Klikając w przycisk "Aplikuj" lub w inny sposób wysyłając zgłoszenie rekrutacyjne, zgadzasz się na przetwarzanie Twoich danych osobowych przez BCF Software Sp. z o.o. z siedzibą w: Technologiczna 2, 45-837 Opole (Pracodawca), jako administratora danych osobowych w celu przeprowadzenia rekrutacji na stanowisko wskazane w ogłoszeniu. Twoje dane osobowe będą przetwarzane w oparciu o następujące podstawy prawne: (a) aby podjąć działania na Twoje żądanie przed zawarciem umowy (np. informacje o oczekiwanym wynagrodzeniu i dostępności do rozpoczęcia pracy); (b) w oparciu o nasz prawnie uzasadniony interes (np. imię, nazwisko, data urodzenia, dane kontaktowe, wykształcenie, kwalifikacje zawodowe, przebieg dotychczasowego zatrudnienia); c) w oparciu o Twoją zgodę, która wyrażona jest poprzez przeslanie dokumentów aplikacyjnych zawierających takie informacje jak np. wizerunek czy zainteresowania.Podanie wszystkich danych osobowych, o których mowa powyżej jest dobrowolne, natomiast dane wymienione w lit. a) i b) są niezbędne do wzięcia udziału w rekrutacji. Niepodanie danych skutkuje brakiem możliwości rozpatrzenia kandydatury. Podanie pozostałych danych jest dobrowolne, ale może pomóc w sprawnym przeprowadzeniu procesu rekrutacji.Masz prawo żądać dostępu do Twoich danych (w tym uzyskania ich kopii), sprostowania danych, ich usunięcia, ograniczenia przetwarzania, przeniesienia, jak również wniesienia sprzeciwu wobec ich przetwarzania. Masz także prawo wniesienia skargi do Prezesa Urzędu Ochrony Danych Osobowych.Twoje dane osobowe mogą zostać przekazane dostawcom usługi publikacji ogłoszeń o pracę, dostawcom systemów do zarządzania rekrutacjami, dostawcom usług IT (hosting), dostawcom systemów informatycznych.Podane przez Ciebie dane osobowe nie będą wykorzystywane w celu profilowania albo podejmowania decyzji w sposób zautomatyzowany.Twoje dane osobowe będą przetwarzane przez okres maks. 1 roku od zakończenia publikacji ogłoszenia, chyba, że wyraziłeś odrębną zgodę na wykorzystanie Twoich danych osobowych w przyszłych rekrutacjach.W celu realizacji praw lub w przypadku jakichkolwiek pytań związanych z przetwarzaniem Twoich danych osobowych skontaktuj się z nami pod adresem: contact@bcf-software.pl.