04. Direct Lake e atualização incremental

Direct Lake e atualização incremental reduzem movimentos de dados por caminhos diferentes. O primeiro aproxima o modelo das tabelas do OneLake; a segunda divide uma carga Import para reprocessar somente períodos necessários.

O modelo semântico transforma tabelas em conceitos de negócio. Grão, relações, modos de armazenamento e DAX precisam funcionar como um sistema para que cada filtro produza um número correto e compreensível. Este é o capítulo 4 de 13 da disciplina Implementar e gerenciar modelos semânticos. A leitura parte do que foi construído em Modos de armazenamento. Depois dele, o estudo avança para Modelos compostos.

Duas variantes e comportamentos de fallback

Direct Lake on OneLake trabalha diretamente com itens compatíveis e não usa fallback para DirectQuery pelo endpoint SQL. Direct Lake on SQL endpoint pode ter fallback conforme configuração e limitações. A variante muda o diagnóstico e não deve ser omitida.

Com essa base, o capítulo segue para Framing atualiza a visão do modelo. O conceito que acabou de ser apresentado passa a funcionar como ponto de partida para a decisão seguinte.

Framing atualiza a visão do modelo

Quando novos arquivos ou metadados aparecem, o framing torna esse estado elegível para o modelo Direct Lake. Ele não copia todas as linhas para um cache Import tradicional. Atualidade do dado e atualização dos metadados relacionados são aspectos diferentes.

A decisão anterior ainda não encerra o problema. Em Incremental pertence ao mundo Import, veremos o que muda quando esse mecanismo encontra outra camada, outro contexto ou uma necessidade mais específica.

Incremental pertence ao mundo Import

RangeStart e RangeEnd são parâmetros de data/hora usados para filtrar períodos e criar partições. A primeira atualização prepara o histórico necessário; as seguintes processam a janela definida, com opção de detectar mudanças quando configurada.

Resta ligar esse mecanismo a Planejar histórico, janela e validação. Essa passagem completa o fluxo e permite avaliar o resultado como um todo, em vez de conferir apenas uma configuração isolada.

Planejar histórico, janela e validação

Filtro precisa dobrar corretamente e respeitar fronteiras sem duplicar ou omitir registros. Partições não consertam esquema inconsistente. Compare contagens por período, acompanhe duração e documente o que ocorre quando o Direct Lake encontra um guardrail.

Com as quatro partes reunidas, já é possível sair das definições e acompanhar uma situação completa. O exemplo seguinte mostra como as decisões aparecem em conjunto e em que momento cada uma precisa ser conferida.