Banco de Talentos- Arquiteto de Dados (AWS)

💡 Profissionais com interesse em tecnologia e no universo de dados podem se cadastrar em nosso Banco de Talentos – Arquiteto de Dados (AWS). Sobre a DataEX: Com 12 anos de atuação no mercado, a DataEX é uma consultoria especializada em Dados e IA, com parcerias estratégicas com Microsoft, AWS e Databricks, atuando em projetos de alto impacto para grandes clientes. Valorizamos a inovação, a colaboração, o desenvolvimento contínuo e a qualidade de vida, com incentivos para certificações e bem-estar. Contexto: Buscamos um(a) Especialista em Arquitetura de Dados para liderar o desenho, a manutenção e a evolução do nosso ecossistema analítico. O desafio principal é consolidar um Data Lakehouse escalável de alta performance na AWS, garantindo excelência técnica, governança rigorosa e, fundamentalmente, eficiência de custos (FinOps). Escopo de atuação: Desenhar e implementar a arquitetura do Data Lakehouse. Definir padrões de modelagem de dados (ex: arquitetura medalhão) e estratégias de ingestão (batch e event-driven) Liderar a adoção de formatos de tabela abertos para viabilizar o Lakehouse e evitar vendor lock-in. FinOps Analítico: Monitorar, prever e otimizar implacavelmente os custos de processamento e armazenamento em nuvem. Ajustar particionamento, refatorar consultas pesadas e dimensionar clusters corretamente para garantir o máximo de ROI. Estabelecer políticas de governança, catálogos de dados e controle de acesso granular de ponta a ponta (LGPD compliance). Definir SLAs de qualidade de dados (Data Quality) e mecanismos de observabilidade dos pipelines. Evoluir a arquitetura para suportar o aumento de volumetria e novos casos de uso analíticos avançados e de IA. Atuar como referência técnica (mentor) para os times de Engenharia e Análise de Dados, promovendo as melhores práticas. Requisitos Técnicos Ecossistema AWS: Domínio em armazenamento e processamento: Amazon S3, AWS Glue, Amazon Athena e Amazon Redshift. Governança e Segurança: Experiência sólida na implementação do AWS Lake Formation. Integração e Performance: Vivência com Amazon EventBridge (arquiteturas orientadas a eventos) e Amazon ElastiCache (Redis). Ecossistema Open Source / Modern Data Stack: Experiência prática na adoção e configuração do Apache Iceberg como formato de tabela transacional no Data Lake. Domínio de orquestração de dados complexos com Apache Airflow. Proficiência na modelagem e transformação de dados utilizando dbt (Data Build Tool). Skills de Arquitetura: Sólida experiência prévia atuando no design de arquiteturas de dados complexas (não apenas operando). Mentalidade Cloud FinOps: capacidade comprovada de desenhar soluções equilibrando performance e custo.