<span>Descrição da vaga<br><br>Responsabilidades e atribuições<br><br><ul><li>Atuar no desenvolvimento, implementação e evolução de soluções de Engenharia de Dados utilizando o ecossistema Databricks;</li><li>Definir e implementar arquiteturas de dados escaláveis, baseadas no modelo Lakehouse e na arquitetura Medallion (Bronze, Silver e Gold);</li><li>Desenvolver, otimizar e manter pipelines de dados utilizando Databricks, PySpark, Spark SQL e Delta Lake;</li><li>Implementar soluções de ingestão, processamento e integração de dados, incluindo CDC e Structured Streaming;</li><li>Atuar na orquestração de pipelines e integração de sistemas por meio do Azure Data Factory (ADF);</li><li>Desenvolver APIs REST, microsserviços e automações utilizando Python;</li><li>Garantir a governança, segurança, linhagem e controle de acesso aos dados;</li><li>Realizar otimizações de performance, escalabilidade e custos de processamento;</li><li>Atuar na observabilidade, monitoramento e sustentação de pipelines em produção;</li><li>Ser referência técnica para o time, orientando profissionais e estabelecendo boas práticas de Engenharia de Dados.<br><br></li></ul>Requisitos e qualificações<br><br><ul><li>Experiência sólida e avançada em projetos produtivos com Databricks;</li><li>Domínio de PySpark, Spark SQL, Delta Lake e Apache Spark;</li><li>Experiência com DLT / Lakeflow Spark Declarative Pipelines, CDC e Structured Streaming;</li><li>Experiência com Liquid Clustering, Auto Loader e otimização de tabelas Delta;</li><li>Conhecimento avançado em Unity Catalog, governança, segurança, linhagem e controle de acesso;</li><li>Experiência na definição de arquiteturas de dados, modelo Lakehouse e arquitetura Medallion;</li><li>Experiência com Azure Data Factory (ADF) para orquestração, ingestão e integração de dados;</li><li>Domínio de Python para desenvolvimento de APIs REST, microsserviços e automações;</li><li>Experiência com Spark Performance Tuning, Photon, particionamento, shuffle e análise de planos de execução;</li><li>Conhecimento em Databricks Workflows, CI/CD, Git e Declarative Automation Bundles;</li><li>Experiência com otimização de workloads, dimensionamento de recursos computacionais e redução de custos;</li><li>Vivência com observabilidade, monitoramento e sustentação de pipelines em produção;</li><li>Autonomia na resolução de problemas técnicos complexos e capacidade de tomada de decisão arquitetural;</li><li>Experiência como referência técnica, apoiando e orientando outros profissionais.<br><br></li></ul>Certificações: Fortemente desejável: Databricks Certified Data Engineer Associate. Databricks Certified Data Engineer Professional. Diferencial: Databricks Certified Associate Developer for Apache Spark.<br><br><ul><li>Desejável: certificações AWS, Azure ou GCP relacionadas à Engenharia de Dados e Arquitetura de Soluções.<br><br></li></ul>Informações adicionais<br><br><strong>Benefícios<br><br></strong><ul><li>Vale-alimentação e/ou vale-refeição;</li><li>Plano de saúde e plano odontológico;</li><li>Plano de saúde para o seu pet;</li><li>Auxílio home office (para vagas remotas);</li><li>Kit de boas-vindas no onboarding;</li><li>Seguro de vida;</li><li>Zenklub, com acompanhamento psicológico e nutricional;</li><li>TotalPass;</li><li>Programa de Certificações e Capacitação Contínua com parceiros (Adobe, Anthropic, AWS, Google, Microsoft, Salesforce);</li><li>Parcerias e descontos para o seu desenvolvimento;</li><li>Acesso ao conteúdo UOL;</li><li>Kit maternidade;</li><li>Licença maternidade e paternidade estendidas; </li><li>Programa de indicações.<br><br></li></ul>Become a Compasser, be part of AI/R.<br><br>Compass UOL is a global firm and part of the AI Revolution Company, together transforming organizations using Artificial Intelligence, Generative AI, and other of today’s most advanced technologies.<br><br>We equip our team with proprietary and external AI-driven tools to design and build digital-native platforms, integrating cutting-edge technologies and enabling companies to innovate, transform their businesses, and drive success in their markets.<br><br>To achieve this, we attract and develop the best talent, creating opportunities that enhance people’s lives and highlight the positive impact of disruptive technologies.<br><br>We empower borderless talent and promote knowledge and opportunities in the latest market trends, driving significant personal and professional growth.<br><br><strong>Join us and be part of the AI-driven revolution.</strong></span>