Big Data Engineer with Spark and Scala

4 tygodni temu

Warszawa, mazowieckie, Polska Sii Pełny etat

We are looking for an experienced Big Data Engineer to join our data engineering team responsible for creating and evolving a next-generation data platform. This platform plays a key role in supporting a variety of business functions and engaging with multiple stakeholders across the organization.


Your tasks

  • Design, develop, and maintain scalable data pipelines and processing systems

  • Build efficient solutions for collecting, transforming, and integrating data from diverse sources

  • Translate business and analytical needs into technical requirements and data models

  • Optimize data workflows to ensure high performance, reliability, and resilience

  • Develop and maintain Spark/Scala-based jobs for data ingestion and transformation

  • Participate in code reviews and contribute to continuous improvement initiatives

  • Work collaboratively within an Agile (Scrum) environment, delivering business value in short iterations

  • Follow best engineering practices such as TDD, BDD, clean coding, and DevOps principles

  • Create and maintain technical documentation and test plans


Requirements

  • Min. 5 years of professional experience in Big Data engineering, preferably in the banking or financial services sector

  • Proficiency in Spark, Scala, and SQL

  • Working knowledge of additional tools and technologies such as Python, Java, Airflow, DevOps, CI/CD pipelines, APIs, microservices, and Git

  • Excellent analytical and troubleshooting skills

  • Strong communication and teamwork abilities

  • Proactive, self-driven approach to work

  • Ability to collaborate effectively with international teams across different time zones

  • Solid organizational and prioritization skills

  • Fluency in English and Polish, both spoken and written

  • Open to a hybrid work model (2-3 days per week on-site)

  • Residing in Poland required

  • Data Engineer

    4 tygodni temu

    Warszawa, mazowieckie, Polska Link Group Pełny etat 22 zł

    Data Engineer – Spark, Scala/JavaKey Responsibilities:Developing, managing, and optimizing data pipelines.Engaging with team developers and architects to shape the process implementation framework.Estimating workload and regularly updating progress on solution development.Cooperating closely with stakeholders to refine solution details and validate...

  • Java Scala Developer with Big Data

    4 tygodni temu

    Warszawa, mazowieckie, Polska emagine Polska Pełny etat 28 zł - 560 zł

    Project information:Industry:: bankingB2B: up to 170 zł/h (depend on experience)Start: ASAP/to determinateLocation: Warsaw/ Lodz/ Gdańsk or Gdynia (2-3 days per week in the office)Summary: We are looking for a Senior Hadoop/Big Data Developer to join our Backend Application team, focusing on key IT projects within the Group Business Support cluster. The...

  • Big Data Developer

    1 tydzień temu

    Warszawa, mazowieckie, mazowieckie, Polska Connectis Pełny etat

    Big Data DeveloperMiejsce pracy: WarszawaTechnologie, których używamyWymaganeSparkScalaSQLHiveMile widzianePythonJavaAzure DevopsAirflowGitSystem operacyjnyLinuxO projekcieRazem z naszym Partnerem, jednym z europejskich liderów w branży bankowej, poszukujemy osób na stanowiska Big Data / Data Engineer. Projekty dotyczą bankowości B2B i B2C, obejmując...

  • Big Data Developer

    1 tydzień temu

    Warszawa, mazowieckie, Polska Connectis Pełny etat 30 zł - 240 zł

    Razem z naszym Partnerem, jednym z europejskich liderów w branży bankowej, poszukujemy osób na stanowiska Big Data / Data Engineer. Projekty dotyczą bankowości B2B i B2C, obejmując platformy dla dużych kredytów i profesjonalnych pożyczek oraz aplikacje wspierające transformację cyfrową.‍ TWOJA ROLA:Zapewnienie jakości oprogramowania poprzez...

  • Programista Big Data Spark Hadoop SQL Regular

    4 tygodni temu

    Warszawa, mazowieckie, Polska RITS Professional Services Pełny etat 16 zł - 800 zł

    RITS Group to firma informatyczna, która oferuje najwyższej jakości usługi programistyczne zarówno dla rynku polskiego, jak i międzynarodowego. Jesteśmy dumni, że należymy do grona najszybciej rozwijających się spółek technologicznych. Naszym priorytetem jest jakość oraz innowacyjność dostarczanych rozwiązań, a nasza kultura organizacyjna...

  • Backend Developer – Big Data

    4 tygodni temu

    Warszawa, mazowieckie, Polska Hirexa Pełny etat 900 zł - 1 zł

    Work Mode: 1 day in the office (Warsaw) every 1-2 monthsABOUT THE PROJECT We are focusing on developing global solutions across different geographical locations for various regulatory reporting needs. Our main aim is to create efficient, user-friendly and scalable solutions that could be used by different teams in our company. We believe that strong and...

  • Senior Big Data Engineer

    4 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Senior Big Data EngineerMiejsce pracy: WarszawaTechnologies we useExpectedApache SparkApache Hadoopmap-reduceDelta LakeApache KafkaJavaScalaOptionalHbaseCassandraAbout the projectJoin our Competency Center Digital and a new team that focuses on real-time data capture and decisioning. You will work on high-traffic, high-visibility applications, handling...

  • Scala Developer Spark

    4 tygodni temu

    Warszawa, mazowieckie, Polska Scalo Pełny etat 28 zł - 560 zł

    W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom. Obszary...

  • Hadoop Big Data Developer

    4 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Hadoop Big Data DeveloperMiejsce pracy: WarszawaTechnologies we useExpectedJava 8+ScalaApache SparkApache HadoopYarnSqoopHiveIMPALAMapReduceOozieSQLOracle DBLinux Shell/ BashGitJenkinsBambooAnsibleOptionalApache FlinkApache KafkaAWSMicrosoft AzureGCPPythonGrafanaPrometheusELK...

  • Hadoop Big Data Developer

    3 tygodni temu

    Warszawa, mazowieckie, mazowieckie, Polska Sii Sp. z o.o. Pełny etat

    Hadoop Big Data DeveloperMiejsce pracy: WarszawaTechnologies we useExpectedScalaApache SparkApache HadoopYarnSqoopHiveIMPALAMapReduceOozieSQLGitJenkinsBambooAnsibleLinuxShellBashOracleJavaOptionalApache FlinkApache KafkaAWSMicrosoft AzurePythonGrafanaPrometheusELK StackElasticsearchLogstashKibanaJupyterzeppelinDockerKubernetesTerraformAnibleApache...