Responsabilidades
1 – Imersão & Planejamento
Definir padrões de nomenclatura, versionamento e melhores práticas.• Revisar backlog técnico, estimar esforço e priorizar sprints.• Conduzir workshops de detalhamento de arquitetura e riscos com stakeholders.
2 – Setup de Infraestrutura
Especificar e validar IaC (Terraform) para GCP (VPCs, buckets, BigQuery, KMS).• Garantir integração segura com AD + SSO e configurar RBAC mínimo privilégio.• Criar esteira CI/CD e aprovar gates de qualidade.
3 – Ingestão & Organização de Dados
Modelar camadas RAW / REFINED, definindo particionamento, clustering, formatos (Parquet/Delta).• Revisar código dos pipelines Dataflow/Beam, assegurando performance e resiliência.• Implantar monitoramento e KPIs de ingestão.
4 – Governança, Segurança & LGPD
Classificar PII, aplicar políticas de DLP/mascaramento e validar conformidade LGPD.• Estruturar glossário, domínios e regras de qualidade/lindagem no Data Catalog.• Definir indicadores de qualidade de dados e metas de cobertura.
5 – Testes, Validação & Sustentação
Orquestrar testes de performance, segurança e DR.• Conduzir sessões de KT e hand-over executando demos end-to-end.• Liderar diagnóstico de incidentes críticos e orientar plano de melhoria contínua.
Requisitos
Descrição perfil técnico:
Arquitetura em Nuvem (GCP): BigQuery, Dataproc/Spark, Dataflow/Beam, Cloud Storage, Pub/Sub, Cloud Composer, Vertex AI.
Modelagem Lake House: camadas RAW-REFINED-TRUSTED, padrões Delta/Parquet, design orientado a domínio.
Engenharia de Dados: Python, SQL avançado, Spark, otimização de consultas, tuning de slots BigQuery.
Automação & DevOps: Terraform, Git, Azure DevOps/Jenkins, GitOps, pipelines CI/CD, políticas “shift-left” de segurança.
Segurança & Compliance: IAM, KMS, VPC-SC, GCP DLP.
Governança & Qualidade: Data Catalog, Data Lineage, métricas de DQ, DAMA-DMBOK.
FinOps: monitoramento de custo, definição de quotas e alertas de consumo.
Certificações Desejadas: Google Cloud Professional Data Engineer e/ou Cloud Architect.
Soft Skills:
- Liderança inclusiva e mentoring de engenheiros, governança, DevOps e segurança.
- Negociação técnica-executiva, traduzindo arquitetura em benefícios de negócio.
- Pensamento analítico & foco em riscos, antecipando gargalos e desenhando planos de mitigação.
- Comunicação clara, adequando linguagem para C-level, PO e time técnico.
- Agilidade & adaptabilidade, guiando repriorizações de backlog sem perder visão global.
- Mentalidade de melhoria contínua, fomentando retrospectivas e métricas de eficiência.
