Hadoop Administrator

7 dni temu


Warsaw, Polska CRESTT sp. z o.o. Pełny etat

technologies-expected :
Hadoop
Linux
Red Hat
Bash
Ansible

about-project :
Poszukujemy Hadoop Administratora (mid + senior) z doświadczeniem w instalowaniu oraz zarządzaniu platformą CDP (Cloudera Data Platform).
Lokalizacja: 100% zdalnie, z możliwością spotkań w biurze w Warszawie (Mokotów) początkowo 1x w tygodniu.

responsibilities :
Instalacja oraz konfiguracja platformy CDP

requirements-expected :
Minimum 2 letnie doświadczenie w pracy na platformie Hadoop z dystrybucji CDP, CDH lub HDP (preferowana platforma CDP)
Znajomość pracy komponentów środowiska Apache Hadoop takich jak: HDFS, YARN, Kafka, Spark, Ranger oraz Atlas
MID: Doświadczenie w zarządzaniu oraz konfiguracji platformy CDP a w szczególności: Kerberyzacja klastra, Przywracanie serwisów po awarii, dodawanie węzłów klastra Hadoop, migracja serwisów, konfiguracja HA (High Availability)
SENIOR: Doświadczenie zabezpieczaniu platformy Hadoop (Hadoop Hardening) w szczególności: Kerberyzacja klastra, Zabezpieczanie serwisów http (zarządzanie certyfikatami SSL), Zarzadzanie politykami Ranger z wykorzystaniem Apache Atlas, Konfiguracja HA (High Availability) dla serwisów CDP
SENIOR: Doświadczenie praktyczne w pracy na klastrze w szczególności: Dodawanie węzłów klastra Hadoop, Migracja serwisów pomiędzy hostami, Balansowanie HDFS, Rozwiązywanie błędów brakujących bloków HDFS
Dodatkowo konieczna znajomość: Linux z rodziny Red Hat, Bash, Ansible
Wskazana znajomość Apache Airflow oraz Jupyter

benefits :
dofinansowanie zajęć sportowych
prywatna opieka medyczna
dofinansowanie nauki języków
ubezpieczenie na życie
możliwość pracy zdalnej
spotkania integracyjne



  • Warsaw, Polska L.M. GROUP POLAND Sp. z o.o. Pełny etat

    We are an international recruitment agency established in 1987 in Israel and operating in Poland since 2014. We specialize in permanent and temporary recruitment. Our headquarters are located in Poznań, and we also have branches in Warsaw, Gdańsk, and Wrocław.Currently, for our clients in the BPO/SSC industry, we are looking for a talented individual for...


  • Warsaw, Polska L.M. GROUP POLAND Sp. z o.o. Pełny etat

    We are an international recruitment agency established in 1987 in Israel and operating in Poland since 2014. We specialize in permanent and temporary recruitment. Our headquarters are located in Poznań, and we also have branches in Warsaw, Gdańsk, and Wrocław.Currently, for our clients in the BPO/SSC industry, we are looking for a talented individual for...


  • Warsaw, Polska Centralne Biuro Antykorupcyjne Pełny etat

    Młodszy Administrator Systemów IT Miejsce pracy: Warszawa Technologie, których używamy Wymagane Linux debian Linux ubuntu Docker Elasticsearch Mile widziane •Proxmox •Kubernetes GitLab Gitops System operacyjny Windows macOS Linux Twój zakres obowiązków administrowanie serwerami, systemami operacyjnymi i bazami danych zapewnienie...

  • T Hub

    1 dzień temu


    Warsaw, Polska T-Mobile Polska Pełny etat

    Working at T Hub will offer you an unique and highly rewarding experience on IT market. As a leader in the telecommunications industry, we do not only provide a platform to hone your technical skills but also empower you to be a catalyst for innovation. You'll have the opportunity to work at the forefront of modern technologies, from 5G to IoT and AI,...

  • T Hub

    2 miesięcy temu


    Warsaw, Polska T-Mobile Polska S.A. Pełny etat

    Form of Employment: CoE or B2B​Location: Warsaw/hybrid modelHave you ever asked yourself whether you'd rather work in a big-tech, software house or startup? At home or in the office? In international teams or polish? At T Hub, there's one answer - YES!T Hub Poland is a dynamic, forward-thinking division in T-Mobile Poland, where technology matters!...

  • DevOps Engineer

    4 dni temu


    Warsaw, Polska Jit Team sp. z o.o. Pełny etat

    DevOps Engineer Miejsce pracy: Warszawa Technologies we use Expected Ansible Python Docker Kubernetes Jenkins Git Groovy Optional AWS Hadoop PostgreSQL Operating system Windows macOS Linux About the project We are looking for Senior DevOps specialist with good knowledge of CI/CD topics. The project is building ecosystem around our client's data...

  • Data Engineer

    5 dni temu


    Warsaw, Polska Scalo Sp. z o.o. Pełny etat

    Data Engineer Miejsce pracy: Warszawa Technologie, których używamy Wymagane Python Scala SQL Mile widziane Java Confluence Jira Kafka System operacyjny Windows Twój zakres obowiązków uczestnictwo w projekcie dot. rozwoju i utrzymania systemów przetwarzania danych w departamencie hurtowni danych. Przygotowanie środowisk do procesu migracji na...

  • Inżynier Danych

    2 tygodni temu


    Warsaw, Polska POLSKA PRESS SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ Pełny etat

    Inżynier Danych Miejsce pracy: Warszawa Technologie, których używamy Wymagane SQLPythonSystem operacyjny WindowsO projekcie Jakie obszary nas interesują?•stack technologiczny Google Cloud Platform•praca w metodologii "BIG DATA"•praca z użyciem: Python, Pandas, Terraform, Kedro, Docker oraz KubernetesJeżeli są to umiejętności zbieżne z Twoimi...

  • Big Data Developer

    4 dni temu


    Warsaw, Polska ITDS Polska Sp. z o.o. Pełny etat

    Big Data Developer Miejsce pracy: Warszawa Technologies we use Expected Python Scala Java Hive Kudu HBase Kafka Apache Nifi Ansible Optional Kubeflow Operating system Windows Linux About the project As a Big Data Developer, you will be working for our client, one of the leaders in online banking, contributing to the implementation and design of...

  • Analityk Danych

    4 tygodni temu


    Warsaw, Polska Cyfrowy Polsat S.A. Pełny etat

    Opis stanowiska Eksploracja i analiza danych CRM abonentów Plusa i Polsat Box. m.in. Posiadane usługi oraz charakterystyka ich wykorzystania; Eksploracja i analiza danych ecommerce portali plus.pl / plushbezlimitu.pl / polsatbox.pl; Utrzymanie/optymalizacja istniejących oraz tworzenie nowych procesów ETL oraz modeli danych; Projektowanie i...

  • Analityk Danych

    2 miesięcy temu


    Warsaw, Polska Cyfrowy Polsat S.A. Pełny etat

    Opis stanowiska Eksploracja i analiza danych CRM abonentów Plusa i Polsat Box. m.in. Posiadane usługi oraz charakterystyka ich wykorzystania; Eksploracja i analiza danych ecommerce portali plus.pl / plushbezlimitu.pl / polsatbox.pl; Utrzymanie/optymalizacja istniejących oraz tworzenie nowych procesów ETL oraz modeli danych; Projektowanie i...

  • T Hub

    2 miesięcy temu


    Warsaw, Polska T-Mobile Polska S.A. Pełny etat

    Form of Employment: Contract of Employment, B2B Contract​Location: Warszawa, RemoteHave you ever asked yourself whether you'd rather work in a big-tech, software house or startup? At home or in the office? In international teams or polish? At T Hub, there's one answer - YES!T Hub Poland is a dynamic, forward-thinking division in T-Mobile Poland, where...

  • T Hub

    4 tygodni temu


    Warsaw, Polska T-Mobile Polska S.A. Pełny etat

    Form of Employment: Contract of Employment, B2B Contract​Location: Warszawa, RemoteHave you ever asked yourself whether you'd rather work in a big-tech, software house or startup? At home or in the office? In international teams or polish? At T Hub, there's one answer - YES!T Hub Poland is a dynamic, forward-thinking division in T-Mobile Poland, where...