<span>Descrição da vaga<br><br>Responsabilidades e atribuições<br><br><ul><li>Projetar e desenvolver pipelines de dados escaláveis utilizando Databricks (PySpark) para processamento e análise de grandes conjuntos de dados;</li><li>Colaborar com as equipes de engenharia e ciência de dados para entender os requisitos e fornecer soluções eficientes;</li><li>Implementar transformações de dados complexas, limpeza de dados e agregações usando PySpark e otimizar o desempenho do código; </li><li>Utilizar Python ElementTree para manipulação eficiente de dados XML e integração de dados heterogêneos;</li><li>Desenvolver scripts em Python utilizando Pandas para manipulação e análise de dados estruturados;</li><li>Garantir a qualidade e integridade dos dados, implementando práticas de teste e monitoramento;</li><li>Colaborar na definição e implementação de melhores práticas de engenharia de dados e arquitetura de dados;</li><li>Manter documentação técnica abrangente para os processos e soluções implementadas.<br><br></li></ul>Requisitos e qualificações<br><br><ul><li>Experiência no desenvolvimento de soluções de dados utilizando Python;</li><li>Experiência em construção e manutenção de pipelines de dados com Databricks (PySpark);</li><li>Vivência com processamento, transformação e análise de grandes volumes de dados;</li><li>Experiência com manipulação e tratamento de dados utilizando Pandas;</li><li>Conhecimento em leitura, processamento e integração de dados XML utilizando Python ElementTree;</li><li>Experiência com plataformas de nuvem, especialmente Microsoft Azure;</li><li>Conhecimento em práticas de qualidade, integridade e monitoramento de dados;</li><li>Vivência na definição e implementação de boas práticas de engenharia e arquitetura de dados.<br><br></li></ul>Desejáveis:<br><br><ul><li>Experiência na colaboração com times de Engenharia de Dados, Analytics e Ciência de Dados;</li><li>Conhecimento em otimização de performance de pipelines e processamento distribuído;</li><li>Familiaridade com documentação técnica de processos, pipelines e soluções de dados.<br><br></li></ul>Informações adicionais<br><br><strong>Benefícios<br><br></strong><ul><li>Vale-alimentação e/ou vale-refeição;</li><li>Plano de saúde e plano odontológico;</li><li>Plano de saúde para o seu pet;</li><li>Auxílio home office (para vagas remotas);</li><li>Kit de boas-vindas no onboarding;</li><li>Seguro de vida;</li><li>Zenklub, com acompanhamento psicológico e nutricional;</li><li>TotalPass;</li><li>Programa de Certificações e Capacitação Contínua com parceiros (Adobe, Anthropic, AWS, Google, Microsoft, Salesforce);</li><li>Parcerias e descontos para o seu desenvolvimento;</li><li>Acesso ao conteúdo UOL;</li><li>Kit maternidade;</li><li>Licença maternidade e paternidade estendidas; </li><li>Programa de indicações.<br><br></li></ul>Become a Compasser, be part of AI/R.<br><br>Compass UOL is a global firm and part of the AI Revolution Company, together transforming organizations using Artificial Intelligence, Generative AI, and other of today’s most advanced technologies.<br><br>We equip our team with proprietary and external AI-driven tools to design and build digital-native platforms, integrating cutting-edge technologies and enabling companies to innovate, transform their businesses, and drive success in their markets.<br><br>To achieve this, we attract and develop the best talent, creating opportunities that enhance people’s lives and highlight the positive impact of disruptive technologies.<br><br>We empower borderless talent and promote knowledge and opportunities in the latest market trends, driving significant personal and professional growth.<br><br><strong>Join us and be part of the AI-driven revolution.</strong><button><span><span><span>…</span><span> more</span></span></span></button></span>