- Ciandt
- Brazil,
- 10 days ago
[Job-31931]Senior Data Engineer , Brazil.
Before you go
Before you leave us, sign up for our email alerts
We don't do job spam, just the best digital jobs delivered straight to your inbox.
[Job-31931]Senior Data Engineer , Brazil: our view in 3 lines...
- The Role:This role is for a senior data engineer building scalable data solutions with AWS and AI-enabled technology at a global technology consultancy.
- The Person:The person will develop and evolve data ingestion applications, optimize pipelines and jobs, build orchestration and monitoring, review code, deploy to production, and manage incidents.
- Requirements:The ideal candidate has solid knowledge of Python and PySpark, experience with AWS, and experience in modelagem de dados, automação de testes unitários, banco de dados relacional, and FinOps.
About the role
Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.
Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.
Somos 8.000 CI&Ters em mais de 25 paÃses, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluÃmos e inovamos todos os dias.
Estamos em busca de uma pessoa para atuar como Data Developer, integrando nosso time e contribuindo na construção de soluções escaláveis e inteligentes para grandes volumes de dados.
Se você é apaixonado por dados, tem experiência sólida com AWS e modelagem de dados, gosta de resolver problemas complexos e colaborar com equipes multidisciplinares, essa vaga é para você!
Responsabilidades:
- Atuar no desenvolvimento e evolução de aplicações para ingestão de dados utilizando ferramentas AWS, tanto em arquitetura serveless (glue, lambda, sns, sqs, kafka, etc) quanto com arquiteturas que usam ECS;
- Realizar o entendimento das necessidades técnicas, participando de inceptions e refinamentos;
- Codificar e estruturar testes automatizados para garantia de qualidade dos entregáveis;
- Realizar code review e Deploy em produção;
- Gestão de Incidentes;
- Otimizar jobs e pipelines de dados, atuando em particionamento de dados, balanceamento de dados (skew) e tuning de performance;
Projetar e manter orquestrações de pipelines utilizando AWS Step Functions e AWS EventBridge;
- Configurar e acompanhar monitoria/observabilidade utilizando AWS CloudWatch e, de forma desejável, ferramentas como Datadog;
- Atuar com foco em FinOps, garantindo uso eficiente de recursos na nuvem e buscando oportunidades de otimização de custo nas soluções de dados.
Requisitos para este desafio:
Sólidos conhecimentos em Python e Experiência prática com PySpark;
Cloud com AWS (S3, glue, EC2, lambda, athena);
Automação de testes unitários;
Banco de dados Relacional;
Experiência em tuning e melhora de performance dos pipelines;
Desenvolvimento de testes automatizados usando a estratégia de pirâmide de testes;
Refinamento técnico de histórias e de solução;
Qualidade de código e boas práticas de programação;
Comunicação para garantir o alinhamento com time e stakeholers;
Capacidade de execução e proatividade;
Otimização de custos em nuvem e boas práticas de FinOps aplicadas a pipelines de dados;
Diferenciais:
Uso de IA generativa, agents e skills para agilizar o trabalho
Localstack com recursos AWS (infraestrutura as a code);
Arquitetura Serveless;
Datadog;
Mensageria (Kafka, SQS, SNS);
Estamos em busca de uma pessoa para atuar como Data Developer, integrando nosso time e contribuindo na construção de soluções escaláveis e inteligentes para grandes volumes de dados.
Se você é apaixonado por dados, tem experiência sólida com AWS e modelagem de dados, gosta de resolver problemas complexos e colaborar com equipes multidisciplinares, essa vaga é para você!
Responsabilidades:
- Atuar no desenvolvimento e evolução de aplicações para ingestão de dados utilizando ferramentas AWS, tanto em arquitetura serveless (glue, lambda, sns, sqs, kafka, etc) quanto com arquiteturas que usam ECS;
- Realizar o entendimento das necessidades técnicas, participando de inceptions e refinamentos;
- Codificar e estruturar testes automatizados para garantia de qualidade dos entregáveis;
- Realizar code review e Deploy em produção;
- Gestão de Incidentes;
- Otimizar jobs e pipelines de dados, atuando em particionamento de dados, balanceamento de dados (skew) e tuning de performance;
Projetar e manter orquestrações de pipelines utilizando AWS Step Functions e AWS EventBridge;
- Configurar e acompanhar monitoria/observabilidade utilizando AWS CloudWatch e, de forma desejável, ferramentas como Datadog;
- Atuar com foco em FinOps, garantindo uso eficiente de recursos na nuvem e buscando oportunidades de otimização de custo nas soluções de dados.
Requisitos para este desafio:
Sólidos conhecimentos em Python e Experiência prática com PySpark;
Cloud com AWS (S3, glue, EC2, lambda, athena);
Automação de testes unitários;
Banco de dados Relacional;
Experiência em tuning e melhora de performance dos pipelines;
Desenvolvimento de testes automatizados usando a estratégia de pirâmide de testes;
Refinamento técnico de histórias e de solução;
Qualidade de código e boas práticas de programação;
Comunicação para garantir o alinhamento com time e stakeholers;
Capacidade de execução e proatividade;
Otimização de custos em nuvem e boas práticas de FinOps aplicadas a pipelines de dados;
Diferenciais:
Uso de IA generativa, agents e skills para agilizar o trabalho
Localstack com recursos AWS (infraestrutura as a code);
Arquitetura Serveless;
Datadog;
Mensageria (Kafka, SQS, SNS);