Engenheiro de Dados Pleno
Como Engenheiro de Dados Pleno, você será responsável por construir e manter a infraestrutura de dados, garantindo que os dados sejam organizados, acessíveis e disponíveis para decisões estratégicas. Você terá um papel importante na evolução de nossos processos e na construção de soluções de dados escaláveis e eficientes.
Principais responsabilidades:
Manutenção e Otimização de Infraestrutura de Dados: Manter e otimizar a infraestrutura de dados em plataformas em nuvem, com foco especial em serviços da AWS, como o AWS Athena, assegurando desempenho, escalabilidade e eficiência no processamento de dados.Criação e Monitoramento de Pipelines ETL: Desenvolver, manter e monitorar pipelines de dados ETL (extração, transformação e carga) utilizando ferramentas como Apache Airflow, garantindo fluxos de dados robustos e confiáveis.Gestão de Catálogo de Dados: Trabalhar com catálogos de dados utilizando soluções como DataHub ou Open Metadata, promovendo a governança, rastreabilidade e organização eficiente dos ativos de dados da empresa.Qualidade e Integridade dos Dados: Garantir a qualidade e integridade dos dados por meio de testes automatizados e processos contínuos de monitoramento, minimizando erros e inconsistências.Colaboração com Equipes de Desenvolvimento: Atuar em parceria com equipes técnicas e de produto para entender as necessidades de dados e implementar soluções que atendam aos requisitos do negócio.Criação de Dashboards e Relatórios: Participar da construção e manutenção de dashboards e relatórios analíticos, apoiando a tomada de decisões estratégicas com informações precisas e atualizadas.Definição de Boas Práticas em Dados: Auxiliar na definição, documentação e aplicação de melhores práticas para o gerenciamento, manipulação e consumo de dados em toda a organização.
Requisitos técnicos:
O que esperamos de você:Experiência com plataformas de dados em nuvem (com foco em AWS e Athena).Conhecimento em ferramentas de ETL e orquestração de dados (como Airflow).Experiência em modelagem e arquitetura de dados.Conhecimento em bancos de dados SQL e NoSQL.Habilidade em programação, preferencialmente com Python.Capacidade de trabalhar de forma autônoma e colaborar com equipes.Boa comunicação e organização para lidar com múltiplos projetos.Diferenciais:Familiaridade com soluções de catálogo de dados, como Datahub ou Open Metadata.Familiaridade com testes automatizados e práticas de DevOps aplicadas a pipelines de dados.Familiaridade com práticas de segurança em dados e conformidade (GDPR, LGPD).Experiência em ambientes de startups ou empresas em crescimento rápido.
Perfil comportamental:
?? Proatividade e Autonomia: Gosta de identificar gargalos em pipelines e propor soluções escaláveis? Se você tem iniciativa para otimizar infraestruturas de dados e manter ambientes eficientes, esse é o seu lugar!?? Raciocínio Lógico e Pensamento Analítico: Consegue identificar padrões em grandes volumes de dados e transformar isso em ações práticas? Seu olhar analítico será essencial para garantir a integridade e qualidade dos dados.?? Colaboração e Comunicação Eficiente: Consegue explicar pipelines complexos de forma clara e colaborar com outras áreas técnicas? Sua habilidade de comunicação será chave para integrar dados com diferentes frentes da empresa.?? Foco em Performance e Escalabilidade: É movido por eficiência e gosta de construir soluções de dados robustas e performáticas? Se você se preocupa com escalabilidade e manutenção a longo prazo, vai se destacar por aqui!?? Atenção aos Detalhes e Governança: Preza por organização, documentação e boas práticas? Se você valoriza a governança e o controle dos dados, sua postura será altamente valorizada.????? Capacidade de Gerenciar Múltiplos Projetos: Consegue tocar diferentes demandas simultaneamente sem perder a qualidade? Se você é organizado e sabe priorizar, vai contribuir muito com o time!?? Flexibilidade e Espírito de Equipe: Está sempre aberto a aprender e colaborar com colegas de outras áreas? Se você curte ambientes dinâmicos e troca constante de conhecimento, será uma peça chave no time!
Requisitos
Estudos
Sobre YAPP
Somos um sistema de gestão de candidatos de ponta a ponta essencial para otimizar tempo e esforços, além e aprimorar todo o processo de recrutamento e seleção de uma empresa.
Com o yapp você centraliza toda a gestão do processo de recrutamento em um só lugar, além de acompanhar em tempo real o avanço das vagas abertas, a eficiência da sua equipe, a seleção e experiência dos candidatos, e tenha suporte da IA (de verdade) do início ao fim da jornada de contratação.