Hadoop Developer

4 tygodni temu

Warszawa, mazowieckie, Polska Sii Pełny etat

Dołącz do projektu realizowanego dla sektora finansowego, w którym rozwijamy strategiczne rozwiązania oparte na analizie i przetwarzaniu danych na dużą skalę.

Pracując w naszym zespole będziesz wspierać inicjatywy w ramach obszaru IT/Technology, dostarczając kluczowe kompetencje w zakresie Big Data, Hadoop, Java, SQL i pokrewnych technologii.


Twoje zadania

  1. Rozwój i utrzymanie rozwiązań Big Data opartych o Hadoop i technologie przetwarzania danych

  2. Tworzenie, optymalizacja i wdrażanie kodu w Java 8+ i/lub Scala

  3. Implementacja procesów przetwarzania danych przy użyciu Spark

  4. Automatyzacja i wsparcie operacyjne z wykorzystaniem Linux Shell

  5. Współpraca z zespołem projektowym oraz interesariuszami biznesowymi w celu dostarczania funkcjonalnych usprawnień


Wymagania

  1. Minimum 4 lata doświadczenia w pracy z Java 8+ i/lub Scala

  2. Wcześniejsza praca z Apache Spark

  3. Wiedza z zakresu Linux Shell Scripting oraz znajomość SQL

  4. Doświadczenie z narzędziami ekosystemu Hadoop (np. YARN, Sqoop, Hive, Impala, MapReduce, Oozie)

  5. Znajomość narzędzi CI/CD (Git, Ansible, Bamboo, Jenkins lub podobne)

  6. Znajomość języka angielskiego na poziomie min. B2

  7. Dyspozycyjność do pracy z biura 2 dni w tygodniu

  8. Wymagane przebywanie na terenie Polski oraz płynna znajomość języka polskiego

  • Hadoop Developer

    2 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Hadoop DeveloperMiejsce pracy: WarszawaTechnologie, których używamyWymaganeApache SparkJavaSQLLinuxHadoopGitAnsibleJenkinsSystem operacyjnyLinuxO projekcieDołącz do projektu realizowanego dla sektora finansowego, w którym rozwijamy strategiczne rozwiązania oparte na analizie i przetwarzaniu danych na dużą skalę.Pracując w naszym zespole będziesz...

  • Hadoop Developer

    4 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Hadoop DeveloperMiejsce pracy: WarszawaTechnologie, których używamyWymaganeApache SparkApache HadoopJavaSQLScalaLinuxShellGitAnsibleBambooJenkinsSystem operacyjnyLinuxO projekcieDołącz do projektu realizowanego dla sektora finansowego, w którym rozwijamy strategiczne rozwiązania oparte na analizie i przetwarzaniu danych na dużą skalę.Pracując w...

  • Hadoop Big Data Developer

    4 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Hadoop Big Data DeveloperMiejsce pracy: WarszawaTechnologies we useExpectedJava 8+ScalaApache SparkApache HadoopYarnSqoopHiveIMPALAMapReduceOozieSQLOracle DBLinux Shell/ BashGitJenkinsBambooAnsibleOptionalApache FlinkApache KafkaAWSMicrosoft AzureGCPPythonGrafanaPrometheusELK...

  • Hadoop Big Data Developer

    3 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Hadoop Big Data DeveloperMiejsce pracy: WarszawaTechnologies we useExpectedScalaApache SparkApache HadoopYarnSqoopHiveIMPALAMapReduceOozieSQLGitJenkinsBambooAnsibleLinuxShellBashOracleJavaOptionalApache FlinkApache KafkaAWSMicrosoft AzurePythonGrafanaPrometheusELK StackElasticsearchLogstashKibanaJupyterzeppelinDockerKubernetesTerraformAnibleApache...

  • Staff Site Reliability Engineer

    5 dni temu

    Warszawa, mazowieckie, Polska VISA Pełny etat

    Company DescriptionVisa is a world leader in payments and technology, with over 259 billion payments transactions flowing safely between consumers, merchants, financial institutions, and government entities in more than 200 countries and territories each year. Our mission is to connect the world through the most innovative, convenient, reliable, and secure...

  • Staff Site Reliability Engineer

    3 dni temu

    Warszawa, mazowieckie, mazowieckie, Polska Visa Technology Europe sp. z o.o. Pełny etat

    Staff Site Reliability Engineer - (Hadoop)Miejsce pracy: WarszawaTechnologies we useExpectedKubernetesAWSOperating systemLinuxYour responsibilitiesHadoop/Big-Data:•Sound knowledge on managing large scale Hadoop platforms including monitoring the platform, debugging issues, and tuning the performance of the cluster.•In-depth knowledge of the Hadoop...

  • Abinitio Developer

    4 tygodni temu

    Warszawa, mazowieckie, Polska Mpower Plus Pełny etat

    Role : Abinitio DeveloperLocation : Warsaw, Poland (Hybrid work)Contract duration : 6 to 12 months (Extendable) Job description:Hands-on experience in designing and building big data lake/warehouse for data integration from enterprise wide applications/systems along with maintaining data pipelines, with a focus on writing scalable, clean, and fault-tolerant...

  • Java Scala Developer with Big Data

    4 tygodni temu

    Warszawa, mazowieckie, Polska emagine Polska Pełny etat 28 zł - 560 zł

    Project information:Industry:: bankingB2B: up to 170 zł/h (depend on experience)Start: ASAP/to determinateLocation: Warsaw/ Lodz/ Gdańsk or Gdynia (2-3 days per week in the office)Summary: We are looking for a Senior Hadoop/Big Data Developer to join our Backend Application team, focusing on key IT projects within the Group Business Support cluster. The...

  • Programista -ka Python

    1 tydzień temu

    Warszawa, mazowieckie, Polska Axians IT Poland Pełny etat

    Programista/-ka PythonJakie będę Twoje główne obowiązki?Projektowanie i implementacja procesów ETL/ELT w środowisku on-premise.Tworzenie i optymalizacja kodu w Python w projektach Big Data.Budowa i zarządzanie DAG-ami w Apache Airflow (orkiestracja procesów).Przetwarzanie dużych zbiorów danych z wykorzystaniem Apache Spark i Hadoop.Optymalizacja...

  • AI ML Developer

    7 dni temu

    Warszawa, mazowieckie, Polska in4ge sp. z o.o. Pełny etat

    Everything is possible with the right peopleIn4ge jest firmą rekrutacyjną, w której wierzymy, że wszystko jest możliwe dzięki odpowiednim ludziom. Naszym celem jest połączenie najbardziej utalentowanych pracowników z odpowiednimi firmami, tworząc synergiczne relacje, które przyczyniają się do wzrostu i sukcesu każdej ze stron. Uważamy, że...