Qualidade, governança e organização — Dados
Os três sub-galhos anteriores construíram a plataforma: fundamentos, modelo dimensional, e os pipelines que a preenchem. Este sub-galho (fase Magus) é sobre confiar no que a plataforma entrega e sobre como organizá-la numa empresa de verdade. Um pipeline pode extrair, transformar e servir dado tecnicamente perfeito e ainda assim falhar como produto: se o número silenciosamente muda sem ninguém perceber (qualidade/observabilidade), se o produtor quebra o consumidor sem aviso (data contracts), se ninguém sabe de onde o dado veio nem quem pode vê-lo (governança/catálogo/lineage/PII), ou se a arquitetura de times não escala com a organização (centralizado vs data mesh).
Notas
- 01 - Qualidade e observabilidade de dados
- 02 - Data contracts e schema evolution
- 03 - Governança, catálogo e lineage
- 04 - Arquiteturas organizacionais
Veja também
- Dados — o galho-pai
- Pipelines: movimentação e transformação — o anterior, cujo produto este sub-galho aprende a confiar
- Operação — a observabilidade de sistema que a nota 01 recorta para o ângulo de dados
- Comunicação entre Sistemas — schema registry e contratos que a nota 02 referencia
- Segurança — a proteção de PII/LGPD que a nota 03 recorta para o ângulo de dados