← Professional Data Engineer: pipelines e decisões de dados
07 / 8 · 40 MIN

Análise, partilha e avaliação ML

Entrega dados úteis sem perder âmbito de acesso nem validade da avaliação.

Conceito e mecanismo

O consumo de dados precisa de um contrato tão claro como a ingestão. Uma authorized view pode expor uma projeção adequada sem dar leitura direta da tabela base, mas não contorna automaticamente controlos de coluna. Testa com a identidade real do consumidor e inclui os campos que o requisito permite. Um linked dataset de BigQuery sharing é uma referência de leitura, não uma cópia independente para recuperação. Para dashboards, materialized views podem reduzir trabalho repetido, mas requerem análise de SQL suportado, frescura e custo de refresh, consulta e armazenamento. BI Engine usa memória gerida separadamente das reservas de slots; não confundas as unidades ao planear capacidade.

Aplicação guiada

Num caso fictício, um modelo encaminha tickets APS. Se variantes do mesmo incidente aparecem em treino e teste, a métrica pode refletir familiaridade em vez de generalização. Se usa notas de resolução que só existem depois do encaminhamento, recebe informação que não terá em produção. Define a unidade de separação e disponibilidade temporal de cada atributo, conservando avaliação representativa. Em pesquisa vetorial, um índice pode reduzir latência com approximate nearest neighbor, mas recuperar menos vizinhos do que brute force. Mede recall com exemplos relevantes e decide o compromisso com custo e desempenho. Rapidez da pesquisa não dispensa autorização dos documentos. A qualidade do resultado deve ser avaliada no percurso completo que o utilizador realmente usa.

NA PRÁTICA

Teste excelente com duplicados entre conjuntos não demonstra bom encaminhamento de incidentes novos.

Armadilhas comuns

Vista como bypass; linked dataset como backup; índice como recall perfeito; informação futura como feature disponível.

Tópicos relacionados: Desenho, governance e identidade · Qualidade, migração e cutover · Streaming, tempo e efeitos

Leva esta ideia contigo

Valida acesso, frescura e representatividade no consumo real.

Criar conta

Referência: BigQuery authorized views · Current linked standard guide (document title v4.2); edition date unconfirmed (2026-09-30 inspection)

Google Cloud é uma marca comercial de Google LLC. A dr.pt é uma plataforma de preparação independente e não está afiliada, associada, patrocinada, autorizada nem aprovada por Google. Os conteúdos e as perguntas são originais, não são perguntas oficiais de exame, e concluir os nossos testes não atribui nem garante qualquer certificação. Os nomes são usados apenas para identificar o tema. Todas as outras marcas pertencem aos respetivos titulares.