Data Engineer Specialist
Descrição da vaga
🔎 #Conheça um pouco sobre a área:
Estamos em busca de um Data Engineer Especialista para liderar iniciativas estratégicas e impulsionar a evolução da nossa plataforma de dados no time de Inovação. Este profissional será a referência técnica na concepção, desenvolvimento e otimização de arquiteturas de dados complexas e de alta performance, garantindo a escalabilidade, segurança e governança de ponta a ponta. Sua atuação será crucial na definição de padrões, mentoring de equipes e na exploração de novas tecnologias para resolver os desafios mais críticos relacionados a grandes volumes e variedade de dados. Se você é um(a) visionário(a) em dados, com expertise consolidada e paixão por transformar requisitos de negócio em soluções de dados inovadoras, queremos você no nosso time!
Responsabilidades e atribuições
🎯#Desafios que você vai encontrar:
- Liderar o design, implementação e evolução de arquiteturas de dados complexas e escaláveis em larga escala, com foco em resiliência e otimização de custos.
- Definir e implementar estratégias avançadas de otimização para pipelines de dados Apache Spark e cargas de trabalho Databricks, visando performance e eficiência.
- Estabelecer e disseminar boas práticas de engenharia de dados, governança e segurança da informação para todo o time, atuando como um mentor técnico.
- Explorar e implementar novas tecnologias e ferramentas no ecossistema AWS (e outras nuvens, se aplicável) para resolver desafios de dados complexos, como streaming de dados em tempo real, data mesh, data fabric, entre outros.
- Atuar como referência técnica para a equipe, revisando códigos, auxiliando na resolução de problemas críticos e promovendo a capacitação técnica.
- Colaborar intensamente com arquitetos de solução, cientistas de dados, analistas e lideranças, traduzindo necessidades de negócio em soluções de dados estratégicas e inovadoras.
- Desenvolver e implementar estratégias de monitoramento, alerta e recuperação de desastres para garantir a alta disponibilidade e integridade dos dados.
- Projetar e supervisionar a implementação de modelos de dados complexos (dimensional, Data Vault, etc.) e a integração de fontes de dados heterogêneas.
- Contribuir ativamente na definição da roadmap tecnológica da área de dados, identificando oportunidades de melhoria contínua e inovação.
Requisitos e qualificações
✔️ #Conhecimentos importantes para a posição:
- Formação em Ciência da Computação, Engenharia de Dados, Sistemas de Informação ou áreas correlatas.
- Experiência comprovada e sólida como Data Engineer Sênior ou Especialista, atuando no design e implementação de soluções de dados em larga escala.
- Expertise avançada em Apache Spark, com profunda compreensão de otimizações de performance e arquiteturas distribuídas.
- Domínio da plataforma Databricks, incluindo Delta Lake, MLflow e otimizações de custo/performance.
- Profundo conhecimento e experiência em orquestração de pipelines de dados com Apache Airflow, incluindo custom operators e estratégias de reprocessamento robustas.
- Experiência arquitetando e implementando soluções de dados abrangentes na AWS, com expertise em serviços como S3, RDS, DynamoDB, ECS, EKS (Kubernetes), Glue, Lambda, Redshift, Kinesis, Lake Formation e DMS.
- Habilidade de modelar dados complexos e otimizar esquemas para diferentes casos de uso (analítico, transacional, etc.).
- Fluência em Python para desenvolvimento de pipelines e ferramentas de dados.
- Sólidos conhecimentos em SQL avançado e otimização de consultas em grandes volumes de dados.
- Experiência com ferramentas de ETL/ELT e padrões de integração de dados (Batch, Streaming, CDC).
- Forte capacidade de liderança técnica, mentoring e comunicação clara para diferentes públicos.
- Experiência com CI/CD e automação de infraestrutura (IaC - Infrastructure as Code, ex: Terraform).
⭐ #Diferencial para a posição:
- Experiência com outras plataformas de nuvem, como Azure ou Google Cloud, e estratégias multi-cloud.
- Certificações avançadas em AWS (ex: Solutions Architect Professional, Data Analytics Specialty) ou Databricks.
- Conhecimento e experiência em Data Governance, Data Quality e MDM (Master Data Management).
- Experiência com Data Streaming e tecnologias como Kafka ou Kinesis.
- Participação ativa em comunidades de engenharia de dados ou contribuição para projetos open source.
- Habilidade para influenciar decisões técnicas e estratégicas dentro da organização.
Informações adicionais
💜 #PraVocê Nossos Beneficios:
PraVocê no dia a dia 🌞:
- Vale Refeição e Alimentação;
- Gympass/TotalPass;
- Vittude;
- Auxílio home-office;
PraVocê & Família👩👩👧👦:
- Plano de Saúde e Plano Odontológico (odonto é opcional);
- Auxílio creche (até os 6 anos completos da criança):
- Licença-Maternidade, Paternidade e Adotante Estendidas (#todasasfamíliasimportam);
- Seguro de Vida;
- Day Off de Aniversário (Um dia de folga para tirar no dia ou durante o mês do seu aniversário.);
- Dia da Família (Um dia de folga para mamães e papais tirarem entre os meses de maio e agosto e aproveitar como quiserem.);
- Pausa Mental (Uma semana corrida de folga em dezembro para que descansem e recarreguem as baterias.
*Benefícios de acordo com a política vigente*
PraVocê AINDA MAIS🔝:
● Senso de propósito ao fazer parte de um time que está construindo algo que será perene e trará frutos para a sociedade, seja a Cortex em si enquanto "startup" em rápido crescimento que gerará cada vez mais empregos, seja o produto Plataforma Cortex, que será usado por cada vez mais usuários no Brasil e exterior.
● Ambiente de trabalho descontraído, jovem, empreendedor e meritocrático, sem espaço para política.. ;-)
● Oportunidade de desenvolvimento de carreira e crescimento numa empresa que não para de crescer.
Valorizamos, cultivamos e respeitamos as diferenças, por isso proporcionamos um ambiente aberto e inclusivo.
Todas as nossas posições são elegíveis para pessoas com deficiência.
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Screening People 📞
- Etapa 3: Talk People 💬
- Etapa 4: Avaliação Técnica 📝
- Etapa 5: Match Cultural 💜
- Etapa 6: Proposta 💰
- Etapa 7: Contratação
Tecnológica, inquieta e ousada, bem-vindo à Cortex!🚀
Somos a Cortex, a plataforma brasileira líder em inteligência de Go-To-Market e o maior investimento em Inteligência Artificial aplicada a negócios na América Latina. Nosso propósito é transformar com inteligência o caminho de pessoas e negócios.
Usamos IA e Ciência de Dados para promover uma gestão completa e contínua do Go-to-Market de marcas líderes no país. Nossa plataforma é a única que coleta e normaliza dados externos, sejam eles firmográficos, de mídia ou de localização, e os unifica com dados internos de clientes para criar painéis de analytics flexíveis, análises geográficas e fluxos de trabalho baseados em dados.
Grandes investidores acreditam no nosso negócio. Temos como parceiros alguns dos maiores e principais fundos de investimento em tecnologia, como Lightrock, Riverwood Capital e SoftBank.
VEM FAZER PARTE DO TIME!
Aqui na Cortex você encontrará um ambiente receptivo às diferenças e às necessidades das pessoas. Crescemos rápido porque crescemos juntos.
Tudo isso faz com que ser cortexiano seja uma experiência única de descobertas, transformação e crescimento a partir de um ambiente colaborativo de criação e realização. Vamos juntos?
#BeCortex
Conheça mais sobre nós 🚀