APRENDER. PRATICAR. EVOLUIR.Conceito e mecanismo
Dados estruturados seguem uma organização definida, como linhas e colunas; documentos JSON podem ter estrutura flexível e propriedades opcionais. Áudio e imagens continuam não estruturados mesmo quando o catálogo dos ficheiros tem campos bem definidos. Formato e motor são decisões diferentes. CSV facilita intercâmbio tabular, JSON e XML representam hierarquias, Parquet organiza dados por colunas e Avro por registos. A escolha deve considerar leitores, tipos e padrões de acesso. OLTP mantém estado operacional com operações curtas; OLAP favorece exploração e agregação de histórico. Numa transação, atomicidade exige que as alterações incluídas confirmem ou sejam desfeitas como uma unidade.
Aplicação guiada
Num fecho fictício, o job pode terminar sem carregar todos os movimentos. Define contagens, totais de controlo e encaminhamento de rejeições antes do handover. O DBA acompanha segurança, disponibilidade e recuperação da base. O engenheiro de dados constrói e opera ingestão e transformação. O analista trabalha com negócio sobre significado, modelos e visualizações. Uma pessoa pode acumular funções, mas as responsabilidades continuam a precisar de identificação. Para aliviar reporting pesado sobre produção, avalia um destino analítico com atraso aceitável explícito. A decisão não termina ao copiar dados: é necessário saber quem confirma completude, quem corrige falhas e quem aceita um resultado parcial.
Entrada de 120 000 e carga de 118 400 exigem explicar 1600 rejeições, mesmo com o job verde.
Armadilhas comuns
Formato como motor; metadados como conteúdo; sucesso técnico como completude; cloud como ausência de responsáveis.
Tópicos relacionados: Modelo relacional, integridade e SQL · Serviços relacionais e compatibilidade · Armazenamento não relacional e acesso
Define o contrato dos dados e os responsáveis pelo seu cumprimento.
Referência: Structured semi-structured and unstructured data · DP-900 skills measured 2026-07-21