
25 - Data Engineer
Publicada 20 de SetembroProcuras uma empresa que seja especializada nas áreas de Project Management, Business Analysis e Agile Transformation?
A PPM Coachers apresenta uma oferta de serviços completa e integrada, tanto nas componentes tradicionais como nas abordagens Agile e que vai desde a Consultoria Estratégica com o desenho de modelos de Demand Management Office (DMO), Project Management Office (PMO) e Service Managament Office (SMO), até a Implementação e Operacionalização de processos, técnicas e ferramentas, passando pelo Reforço da Capacidade (outsourcing) e Desenvolvimento de Competências como uma ferramenta indispensável para suportar a transformação organizacional inerente aos processos de evolução.
Porquê a PPM Coachers?
- Terás oportunidade de participar em projetos chave com os maiores players nacionais e internacionais do mercado, onde colocarás em prática todo o teu conhecimento dentro das áreas de Project Management, Business Analysis e Agile Transformation.
- Dispomos de uma equipa experiente, sólida e dinâmica que te irá acompanhar de forma personalizada nesta tua jornada e te ajudará a desenvolver competências nas áreas em que somos especialistas.
- Poderás usufruir de um pacote de benefícios amplo e flexível: Seguro de saúde, descontos e benefícios, plano de telecomunicações e muito mais.
A PPM Coachers está a recrutar para a função de Data Engineer!
A tua missão:
- Projetar, desenvolver e manter arquiteturas de dados escaláveis e eficientes para coleta, processamento e armazenamento de dados.
- Criar e gerir pipelines de dados para mover, limpar, transformar e integrar dados de várias fontes para armazenamento e análise.
- Projetar esquemas de bancos de dados e estruturas de armazenamento que atendam aos requisitos específicos de aplicativos e análises.
- Garantir a qualidade dos dados, identificar problemas e implementar soluções para limpar e melhorar a integridade dos dados.
- Identificar e implementar melhorias para otimizar o desempenho dos pipelines e bancos de dados, visando a eficiência e a velocidade no processamento.
- Implementar medidas de segurança para proteger os dados, garantindo conformidade com regulamentos e políticas de privacidade.
- Selecionar e integrar ferramentas e tecnologias adequadas para manipulação, armazenamento e processamento de dados, como bancos de dados NoSQL, Hadoop, Spark, entre outros.
- Trabalhar em estreita colaboração com Data Scientists, Software Engineers e outras equipas para entender os requisitos de dados e fornecer suporte necessário.
- Documentar processos, procedimentos e práticas recomendadas para garantir a consistência e facilitar a colaboração entre as equipas.
- Monitorizar regularmente o desempenho dos sistemas, identificar problemas e realizar manutenção preventiva para garantir a disponibilidade e a confiabilidade dos dados.
Requisitos mínimos
O que procuramos:
- Mais de 3 anos de experiência na função;
- Experiência comprovada no desenvolvimento e manutenção de pipelines de dados seguros e eficientes, utilizando tecnologias como Azure Data Factory, Azure Synapse, Microsoft Fabric, Databricks e Azure SQL; (obrigatório)
- Fortes competências em programação, com foco em linguagens como PySpark e SQL;
- Capacidade de desenhar, implementar e otimizar processos em SQL, funções e procedimentos armazenados para satisfazer as necessidades de análise e processamento de dados;
- Colaboração com Data Scientists e outros Data Engineers para garantir a qualidade e integridade dos dados;
- Implementação de soluções de modelação de BI para suportar a tomada de decisões baseada em dados;
- Monitorização e melhoria do desempenho dos processos de transformação de dados ETL e ELT;
- Experiência em projetos com novas arquiteturas de dados orientadas para a Cloud, suportadas por sistemas como Lakehouses;
- Seguimento das boas práticas definidas para cada tecnologia, com um sentido crítico voltado para a melhoria contínua;
- Inglês (B2/C1); (obrigatório)
Local de Trabalho: Lisboa
Modelo de Trabalho: Hibrido (2/3 dias no escritório)