AWS Data Engineer | Senior (Remote)

.

Responsabilidades e atribuiçõesResponsável pela implementação técnica dos produtos de dados, materializando as definições realizadas nas etapas de discovery e mapeamento;Atuação na construção, evolução, sustentação e operação de pipelines e produtos de dados em ambiente AWS;Desenvolvimento de soluções escaláveis, seguras e aderentes aos padrões arquiteturais e de governança de dados;Participação na pavimentação da arquitetura de dados, garantindo performance, observabilidade e qualidade das entregas;Colaboração com times de negócio, analytics e engenharia para definição e evolução das soluções de dados.

Requisitos e qualificaçõesExperiência sólida com engenharia de dados em ambientes AWS;Domínio de Amazon EMR, AWS Glue e AWS Step Functions;Experiência prática com desenvolvimento de pipelines de dados em larga escala;Conhecimento avançado em PySpark e SQL;Vivência com arquiteturas Data Lakehouse utilizando S3, Glue Catalog, Athena e/ou Redshift;Conhecimento em segurança e monitoramento na AWS (IAM, CloudWatch);Experiência com GitHub e GitHub Actions para versionamento, CI/CD e automação de deploys;Vivência com práticas de DataOps.

Responsável pela implementação técnica dos produtos de dados, materializando as definições realizadas nas etapas de discovery e mapeamento;

Atuação na construção, evolução, sustentação e operação de pipelines e produtos de dados em ambiente AWS;

Desenvolvimento de soluções escaláveis, seguras e aderentes aos padrões arquiteturais e de governança de dados;

Participação na pavimentação da arquitetura de dados, garantindo performance, observabilidade e qualidade das entregas;

Colaboração com times de negócio, analytics e engenharia para definição e evolução das soluções de dados.

Experiência sólida com engenharia de dados em ambientes AWS;

Domínio de Amazon EMR, AWS Glue e AWS Step Functions;

Experiência prática com desenvolvimento de pipelines de dados em larga escala;

Conhecimento avançado em PySpark e SQL;

Vivência com arquiteturas Data Lakehouse utilizando S3, Glue Catalog, Athena e/ou Redshift;

Conhecimento em segurança e monitoramento na AWS (IAM, CloudWatch);

Experiência com GitHub e GitHub Actions para versionamento, CI/CD e automação de deploys;

Vivência com práticas de DataOps.