Desenvolvedor(a) Backend Spark / Scala – Métricas de Risco
Grupo Data São Paulo, São Paulo, Brazil
IT Services and IT Consulting · 201-500 employees
Applying here? Try the free cover letter tool — paste this posting and your résumé, no account needed.
About the role
Develop and maintain backend solutions for risk metrics and regulatory reporting using Apache Spark and Scala. Orchestrate data ingestion, transformation, and validation processes while ensuring performance and scalability.
What they look for
Requirements
Requires experience in backend or Big Data development with proficiency in Apache Spark, Scala, SQL, and PL/SQL. Candidates must have experience in the banking sector and possess conversational skills in both English and Spanish.
Full description
Estamos buscando um(a) Desenvolvedor(a) Backend para atuar em um projeto internacional do mercado financeiro, desenvolvendo soluções de processamento de dados para métricas de risco e reporting regulatório, com foco em Apache Spark, Scala, PL/SQL e Control-M.
Principais responsabilidades
- Desenvolver e manter soluções backend utilizando Apache Spark e Scala;
- Implementar processos de ingestão, transformação, validação e publicação de grandes volumes de dados;
- Desenvolver consultas e rotinas em SQL e PL/SQL;
- Planejar e orquestrar processos utilizando Control-M;
- Desenvolver e manter pipelines de dados para métricas e relatórios regulatórios;
- Otimizar o desempenho, a confiabilidade e a escalabilidade dos processos Spark;
- Realizar testes unitários e integrados e apoiar testes de aceitação (UAT);
- Investigar incidentes, identificar suas causas e resolver problemas em produção;
- Participar de todo o ciclo de desenvolvimento, da análise de necessidades à implantação e ao suporte;
- Colaborar com equipes internacionais em ambiente Agile.
Requisitos obrigatórios
- Experiência em desenvolvimento backend ou Big Data, com atuação em Apache Spark e Scala;
- Conhecimento de SQL e PL/SQL;
- Experiência com pipelines de dados e Datalake;
- Conhecimento de Control-M e Airflow;
- Conhecimento de Databricks, Azure, AWS Compute e/ou YARN;
- Experiência com CI/CD e ferramentas como GitHub, Jenkins e Sonar;
- Conhecimento de Power BI;
- Conhecimento de ServiceNow e experiência em monitoramento e suporte de produção;
- Experiência com testes unitários, integrados e validações em UAT e produção;
- Conhecimentos de qualidade e rastreabilidade de dados;
- Experiência no setor bancário, especialmente com riscos, métricas regulatórias, P&L, avaliações financeiras, exposição, limites, ratings ou reporting;
- Inglês em nível de conversação;
- Espanhol em nível de conversação;
- Disponibilidade para atuar no fuso horário da Espanha.
Interessados(as): enviem seu CV ou candidatem-se pela vaga.
Apache Spark | Scala | SQL | PL/SQL | Control-M | Pipelines de Dados | Métricas de Risco | Reporting Regulatório
Similar roles
-
Director, Software Engineering (14+ years, Scala, Spark, Data Pipeline, GenAI) Spark,
Visa Bengaluru, Karnataka, India
-
Data Engineer with Scala and Spark/ Pyspark
Capco Gurugram, Haryana, India
-
SENIOR SCALA / DATA ENGINEER
TECDATA ENGINEERING Spain
-
Ingeniero de datos Senior Scala
TECDATA ENGINEERING Spain
-
TTT - Scala and Spark developers - Staff
EY Noida, Uttar Pradesh, India
-
Senior Consultant_ Scala Spark_UK
Infosys Greater London, England, United Kingdom