Engenharia de Dados | Remota - 136061 (Alphaville - Barueri, BR, 06.454-000)

O que buscamos Buscamos um(a) Engenheiro(a) de Dados para atuar no projeto à Reforma Tributária, integrando o time responsável pela construção, evolução e sustentação de soluções de dados em ambiente Cloud. O profissional será responsável pelo desenvolvimento de pipelines de dados escaláveis, processos de ingestão, transformação e disponibilização de dados para consumo analítico, trabalhando com Databricks, Azure Data Factory, SQL, Python/PySpark e arquitetura de dados em Cloud. Responsabilidades - Desenvolver e manter pipelines de dados escaláveis e eficientes; - Atuar na ingestão, transformação e disponibilização de dados para consumo analítico; - Trabalhar com arquitetura de dados em ambiente Cloud; - Desenvolver soluções de engenharia de dados utilizando Databricks; - Utilizar Azure Data Factory para orquestração de pipelines; - Garantir a qualidade, governança e performance dos dados; - Desenvolver e manter processos de ETL/ELT; - Monitorar processos de integração e processamento de dados; - Identificar e implementar melhorias de performance e eficiência; - Colaborar com times de Engenharia, Analytics e Negócio para entendimento de requisitos; - Transformar requisitos de negócio em soluções de dados; - Atuar na construção, evolução e sustentação das soluções de dados do projeto; - Contribuir para a integração e disponibilização de dados para análises e consumo pelas áreas envolvidas. Requisitos Obrigatórios - Experiência profissional em Engenharia de Dados; - Conhecimento em Databricks para processamento e engenharia de dados; - Experiência com Azure Data Factory para orquestração de pipelines; - Conhecimento em SQL e modelagem de dados; - Experiência com Python ou Spark (PySpark); - Experiência com ambientes Cloud, preferencialmente Azure; - Conhecimento em práticas de ETL/ELT; - Conhecimento em integração de dados; - Capacidade de desenvolver e manter pipelines de dados escaláveis; - Conhecimento em práticas de qualidade, governança e performance de dados. Diferenciais - Experiência com arquitetura moderna de dados, como Data Lake e Lakehouse; - Conhecimento em governança e qualidade de dados; - Experiência em ambientes com grande volume de dados; - Certificações Databricks, como: - Databricks Certified Data Engineer Associate/Professional; - Databricks Certified Data Analyst Associate; - Databricks Certified Machine Learning Associate/Professional; - Experiência em projetos dos segmentos: - Financeiro; - Bancário; - Segurador; - Contábil; - Conhecimento em Data Management; - Conhecimento em Data Analysis. Competências Comportamentais - Perfil analítico e orientado à resolução de problemas; - Proatividade na identificação de melhorias; - Organização e atenção à qualidade dos dados; - Boa comunicação; - Capacidade de trabalhar de forma colaborativa com equipes multidisciplinares; - Capacidade de compreender requisitos técnicos e de negócio; - Comprometimento com qualidade e entrega; - Capacidade de atuar em ambientes de alta complexidade e grande volume de dados. Originally posted on Himalayas