06. Linhagem e análise de impacto

Uma mudança em um campo pode afetar diversos indicadores, relatórios e modelos. Para decidir como corrigi-la, precisamos conhecer dependências e significado, não apenas a localização da tabela. Linhagem técnica e de negócio descrevem essas relações em níveis complementares. O capítulo também apresenta análise de impacto e proveniência, mostrando como reconstruir a produção de um dado e localizar os consumidores que podem ter sido afetados por uma alteração.

Depois de aprender a examinar os dados, organizamos as responsabilidades que os mantêm compreensíveis, corretos, protegidos e utilizáveis durante todo o ciclo de vida. Este é o capítulo 6 de 20 da disciplina Qualidade e Governança de Dados. Ele retoma Catálogo e descoberta de dados e utiliza essa base para avançar. Na sequência, estudaremos Dimensões da qualidade de dados.

O fio condutor

Ciência de Dados começa com uma pergunta e termina com uma decisão que precisa ser compreendida, avaliada e acompanhada. Entre esses dois pontos, dados são coletados, examinados e transformados; métodos são escolhidos; resultados são validados; e limitações são comunicadas. Nenhuma etapa compensa automaticamente uma falha grave ocorrida na etapa anterior.

Neste capítulo, use Linhagem e análise de impacto para acompanhar três dimensões: o problema que se deseja resolver, a evidência disponível e o critério usado para avaliar o resultado. Essa separação ajuda a evitar soluções tecnicamente sofisticadas que não respondem à necessidade real.

Linhagem técnica

Começamos por Linhagem técnica, pois essa base organiza os conceitos e exemplos que aparecerão no restante do capítulo.

Linhagem técnica mostra fluxo entre tabelas, campos e processos.

Linhagem técnica representa o fluxo entre fontes, tabelas, campos e processos. Ela pode mostrar que uma coluna foi copiada, agregada ou combinada em uma transformação. O nível de detalhe importa: saber que um relatório depende de uma base não identifica necessariamente qual campo alterado o afeta. Capture versões, regras e execuções quando necessário para reconstrução histórica. Processos manuais, arquivos externos e consultas dinâmicas podem deixar lacunas. Uma ferramenta de descoberta automática precisa ter sua cobertura conhecida, em vez de ser tratada como representação perfeita do ambiente.

Linhagem de negócio

Depois de compreender Linhagem técnica, passamos a Linhagem de negócio. A nova seção acrescenta outra etapa ao mesmo raciocínio e mostra como as decisões anteriores influenciam as próximas.

Linhagem de negócio relaciona indicadores e conceitos às fontes.