Banco De Talentos- Arquiteto De Dados

Profissionais com interesse em tecnologia e no universo de dados podem se cadastrar em nosso Banco de Talentos – Arquiteto de Dados (AWS).

Sobre a DataEX:

Com 12 anos de atuação no mercado, a DataEX é uma consultoria especializada em Dados e IA, com parcerias estratégicas com Microsoft, AWS e Databricks, atuando em projetos de alto impacto para grandes clientes. Valorizamos a inovação, a colaboração, o desenvolvimento contínuo e a qualidade de vida, com incentivos para certificações e bem-estar.

Contexto:

Buscamos um(a) Especialista em Arquitetura de Dados para liderar o desenho, a manutenção e a evolução do nosso ecossistema analítico. O desafio principal é consolidar um Data Lakehouse escalável de alta performance na AWS, garantindo excelência técnica, governança rigorosa e, fundamentalmente, eficiência de custos (FinOps).

Escopo de atuação:

• Desenhar e implementar a arquitetura do Data Lakehouse.
• Definir padrões de modelagem de dados (ex: arquitetura medalhão) e estratégias de ingestão (batch e event-driven)
• Liderar a adoção de formatos de tabela abertos para viabilizar o Lakehouse e evitar vendor lock-in.
• FinOps Analítico: Monitorar, prever e otimizar implacavelmente os custos de processamento e armazenamento em nuvem. Ajustar particionamento, refatorar consultas pesadas e dimensionar clusters corretamente para garantir o máximo de ROI.
• Estabelecer políticas de governança, catálogos de dados e controle de acesso granular de ponta a ponta (LGPD compliance).
• Definir SLAs de qualidade de dados (Data Quality) e mecanismos de observabilidade dos pipelines.
• Evoluir a arquitetura para suportar o aumento de volumetria e novos casos de uso analíticos avançados e de IA.
• Atuar como referência técnica (mentor) para os times de Engenharia e Análise de Dados, promovendo as melhores práticas.

Requisitos Técnicos

Ecossistema AWS:

• Domínio em armazenamento e processamento: Amazon S3, AWS Glue, Amazon Athena e Amazon Redshift.
• Governança e Segurança: Experiência sólida na implementação do AWS Lake Formation.
• Integração e Performance: Vivência com Amazon EventBridge (arquiteturas orientadas a eventos) e Amazon ElastiCache (Redis).

Ecossistema Open Source / Modern Data Stack:

• Experiência prática na adoção e configuração do Apache Iceberg como formato de tabela transacional no Data Lake.
• Domínio de orquestração de dados complexos com Apache Airflow.
• Proficiência na modelagem e transformação de dados utilizando dbt (Data Build Tool).

Skills de Arquitetura:

• Sólida experiência prévia atuando no design de arquiteturas de dados complexas (não apenas operando).
• Mentalidade Cloud FinOps: capacidade comprovada de desenhar soluções equilibrando performance e custo.