Engenharia de Dados | Remota - 136061 (Alphaville - Barueri, BR, 06.454-000)

O que buscamos

Buscamos um(a) Engenheiro(a) de Dados para atuar no projeto à Reforma Tributária, integrando o time responsável pela construção, evolução e sustentação de soluções de dados em ambiente Cloud.

O profissional será responsável pelo desenvolvimento de pipelines de dados escaláveis, processos de ingestão, transformação e disponibilização de dados para consumo analítico, trabalhando com Databricks, Azure Data Factory, SQL, Python/PySpark e arquitetura de dados em Cloud.

Responsabilidades

• Desenvolver e manter pipelines de dados escaláveis e eficientes;
• Atuar na ingestão, transformação e disponibilização de dados para consumo analítico;
• Trabalhar com arquitetura de dados em ambiente Cloud;
• Desenvolver soluções de engenharia de dados utilizando Databricks;
• Utilizar Azure Data Factory para orquestração de pipelines;
• Garantir a qualidade, governança e performance dos dados;
• Desenvolver e manter processos de ETL/ELT;
• Monitorar processos de integração e processamento de dados;
• Identificar e implementar melhorias de performance e eficiência;
• Colaborar com times de Engenharia, Analytics e Negócio para entendimento de requisitos;
• Transformar requisitos de negócio em soluções de dados;
• Atuar na construção, evolução e sustentação das soluções de dados do projeto;
• Contribuir para a integração e disponibilização de dados para análises e consumo pelas áreas envolvidas.

Requisitos Obrigatórios

• Experiência profissional em Engenharia de Dados;
• Conhecimento em Databricks para processamento e engenharia de dados;
• Experiência com Azure Data Factory para orquestração de pipelines;
• Conhecimento em SQL e modelagem de dados;
• Experiência com Python ou Spark (PySpark);
• Experiência com ambientes Cloud, preferencialmente Azure;
• Conhecimento em práticas de ETL/ELT;
• Conhecimento em integração de dados;
• Capacidade de desenvolver e manter pipelines de dados escaláveis;
• Conhecimento em práticas de qualidade, governança e performance de dados.

Diferenciais

• Experiência com arquitetura moderna de dados, como Data Lake e Lakehouse;
• Conhecimento em governança e qualidade de dados;
• Experiência em ambientes com grande volume de dados;
• Certificações Databricks, como:
  • Databricks Certified Data Engineer Associate/Professional;
  • Databricks Certified Data Analyst Associate;
  • Databricks Certified Machine Learning Associate/Professional;
• Experiência em projetos dos segmentos:
  • Financeiro;
  • Bancário;
  • Segurador;
  • Contábil;
• Conhecimento em Data Management;
• Conhecimento em Data Analysis.

Competências Comportamentais

• Perfil analítico e orientado à resolução de problemas;
• Proatividade na identificação de melhorias;
• Organização e atenção à qualidade dos dados;
• Boa comunicação;
• Capacidade de trabalhar de forma colaborativa com equipes multidisciplinares;
• Capacidade de compreender requisitos técnicos e de negócio;
• Comprometimento com qualidade e entrega;
• Capacidade de atuar em ambientes de alta complexidade e grande volume de dados.

Originally posted on Himalayas