Engenheiro de Dados Pleno (Tech) – Edify Education – Home Office
Responsabilidades e atribuições
O Engenheiro de Dados é o responsável pela criação/manutenção da nossa plataforma de dados, por garantir a escalabilidade, economia de recursos, padrões e garantir a disseminação da qualidade técnica do time, e também cooperar com outras equipes alinhadas com estratégias da empresa.
Nesta posição, você irá trabalhar no Squad de Data Engineering do Edify contribuindo para a nossa missão de alcançar 300 mil alunos estudando e praticando inglês todos os dias usando nossas soluções.
Projetar, desenvolver e manter um data lake eficiente e escalável na AWS;
Integrar dados de origens diversas via API para o data lake;
Implementar soluções de ETL utilizando serviços AWS como Glue para processamento e disponibilização de dados;
Colaborar com engenheiros de dados e analistas de negócios para entender requisitos de dados e fornecer soluções adequadas;
Otimizar o desempenho de consultas e processos de dados;
Garantir a qualidade, integridade e segurança dos dados no data lake;
Desenvolver e manter documentação técnica dos sistemas e processos de dados;
Manter-se atualizado com as últimas tecnologias e melhores práticas em engenharia de dados;
Colaborar com a equipe de infraestrutura para garantir a escalabilidade e eficiência dos sistemas de dados;
Participar em discussões técnicas e compartilhar conhecimentos com a equipe.
Requisitos e qualificações
O que preciso ter para me candidatar para essa vaga?
Data View em MS Power BI e todo o ecossistema de dados PowerBI
Engineering skills no stack Python
Experiência em desenvolvimento e otimização de pipelines de dados;
Vivência com arquitetura de dados e sistemas de processamento em larga escala;
Experiência em ambientes de cloud computing;
Vivência com a cloud AWS e seus serviços;
Experiência prévia com temas relacionados a Inteligência Artificial;
Quais são as habilidades exigidas para esta vaga?
Inglês avançado.
Conhecimento técnico em Engenharia de Dados.