1. Contratar a fonte antes de a ligar
Numa migração fictícia de middleware, o produtor envia autenticações, alterações de configuração e eventos de rede. Antes de criar a integração, identifica o significado de cada campo, a classe do evento, o relógio de origem e a informação que pode conter dados sensíveis.
Uma custom source de Security Lake deve entregar OCSF em Parquet; o crawler não transforma automaticamente qualquer JSON no modelo correto. Mantém cada classe num objeto compatível e separa fontes quando necessário. O contrato deve ter um exemplo permitido, um registo inválido e a responsabilidade por rejeições.
No handover, pede evidência de que os registos inválidos são visíveis ao operador, em vez de simplesmente desaparecerem numa contagem agregada de sucesso.
2. Tornar a cobertura observável
A partição eventDay usa o dia UTC do evento. Um batch perto da meia-noite local pode pertencer ao dia UTC anterior; usa o offset do timestamp e evita inferir o dia pela localização do bucket. Constrói uma matriz conta, Region, fonte e consumidor com responsável e evento de prova.
Uma consulta com resultados não demonstra que todas as linhas da matriz funcionam. Distingue a configuração regional do estado de recolha: ListDataLakes informa sobre o data lake e GetDataLakeSources sobre fontes e contas. Regista o instante do ensaio e acompanha a latência observada até ao consumidor.
O objetivo operacional é conseguir explicar uma ausência: fonte silenciosa, entrega falhada, partição errada ou consulta incompleta exigem ações diferentes. Oficina de cobertura: há seis células, duas fontes em cada uma de R1/R2/R3. O contrato exige prova consultável de menos de 15 minutos.
As quatro células de R1/R2 têm prova de cinco minutos; R3 tem uma prova de duas horas e uma ausência. Resolução: 4/6 atuais. Diagnostica a prova desatualizada e integra ou comprova a fonte ausente; não reduzas o denominador para quatro. Listar a configuração da Região não substitui estes eventos de prova.
3. Escolher como o consumidor acede
Um SIEM que lê objetos novos pode usar o subscriber S3 e notificações HTTPS ou SQS. Um analista que consulta tabelas usa o caminho LAKEFORMATION. Escolhe pelo contrato do consumidor, sem assumir que uma modalidade configura a outra.
Na partilha de consulta entre contas, há trabalho do lado do subscriber: aceitar a partilha RAM válida e criar o resource link para a base partilhada. O processo também depende das permissões e configuração Lake Formation apropriadas. Para aceitar a integração, executa a consulta com a identidade efetiva do consumidor e uma fonte autorizada, e demonstra que uma fonte fora do âmbito não é acessível.
Guarda identificadores de partilha e responsáveis pelo ciclo de renovação da integração.
4. Consolidar sem perder controlo do ciclo de vida
Um rollup pode consolidar várias Regions, mas não pode ser contribuinte de outro rollup. Desenha contribuições diretas e confirma a residência aprovada, a chave e as permissões de replicação antes de aceitar o percurso. A retenção deve ser gerida através de Security Lake: uma regra S3 ampla pode remover metadata necessária.
Object Lock no bucket gerido também não é uma solução universal; não é suportado e a retenção por defeito interrompe a entrega normalizada. Se a política exigir uma cópia imutável, trata-a como um percurso separado a desenhar e validar. No plano de projeto, inclui custo, responsáveis, recuperação, verificação de leitura e descomissionamento.
Ter uma retenção longa sem conseguir consultar não satisfaz a necessidade do SOC. Oficina de desenho: O deve entregar a R1 e R2, ambos aprovados. Substitui O→R1→R2 por contribuições diretas O→R1 e O→R2.
Antes de retirar acesso local em O, demonstra o mesmo intervalo nos dois destinos. Noutro requisito, um arquivo imutável separado contém 90 dos 100 eventos esperados: a negação de eliminação dos 90 não prova entrega dos dez em falta. São critérios independentes de topologia, entrega, retenção e leitura que devem constar da aceitação.
5. Ler o contrato de entrega CloudWatch
Na subscrição CloudWatch, desfaz base64 e gzip antes de interpretar o documento. Com transformer ativo e applyOnTransformedLogs=true, o subscription filter compara o evento transformado; alterar nomes de campos exige rever os padrões. Confirma a opção efetiva em vez de inferir a versão comparada só pela existência do transformer.
Usa Standard para grupos que precisam de subscrições. A operação deve distinguir erros recuperáveis, com retries limitados a até 24 horas, de AccessDenied ou destino inexistente, que podem suspender o filtro e deixar logs ignorados no intervalo.
Uma correção de permissões seguida de um evento novo comprova o caminho atual, não o passado. Define como reconciliar a origem retida com o SOC, identificar eventos já recebidos e recuperar apenas o necessário sem criar alertas duplicados. Esse procedimento deve existir antes do primeiro incidente.
6. Ensaiar o circuito e entregar a RUN
Uma cadeia Firehose, S3 e Lambda pode voltar a ingerir os logs produzidos pelo próprio processamento. Identifica esses grupos e configura exclusões na subscrição de conta com selectionCriteria. Não generalizes a exceção documentada da Lambda diretamente usada como destino para qualquer Lambda posterior no circuito.
No exercício local, compara IDs esperados e recebidos: a diferença revela lacunas e as repetições revelam duplicados. Este modelo só trabalha com inventário fictício; não substitui uma reconciliação real do serviço. Termina o handover com um evento de prova, uma falha controlada, recuperação, métricas de entrega e contacto de escalada.
O resumo para gestão deve indicar âmbito demonstrado, limitações, tempo de recuperação observado e o que ainda não foi ensaiado. Oficina de reconciliação: a origem contém A/1,A/2,B/1,B/2,C/1,C/2; o destino apresenta A/1,A/2,B/1,B/1,C/2,D/9.
Neste inventário, a identidade é conta/evento. Prevê o resultado antes de executar o modelo: faltam B/2 e C/1, B/1 está repetido e D/9 é externo. Há seis linhas, mas só quatro eventos esperados distintos.
Recupera os dois em falta através do processo aprovado, trata duplicação e o evento externo e volta a comparar. Deduplicar só pelo número mistura contas. O modelo exige um inventário esperado não vazio, sem IDs repetidos ou vazios; não demonstra que o inventário fornecido cobre todas as fontes reais.
# Original fictional reconciliation model, not a CloudWatch replay tool.
# No credentials, network calls, or AWS changes.
from collections import Counter
def reconcile(expected, received):
if not isinstance(expected, list) or not isinstance(received, list):
raise ValueError("expected and received must be lists")
if not expected or any(not isinstance(x, str) or not x.strip()
for x in expected + received):
raise ValueError("nonempty expected inventory and nonblank string IDs required")
if len(set(expected)) != len(expected):
raise ValueError("expected IDs must be unique within the declared scope")
counts = Counter(received)
return (set(expected) - set(received), {k for k,v in counts.items() if v > 1}, set(received) - set(expected))
assert reconcile(['a','b'], ['a','b']) == (set(),set(),set())
assert reconcile(['a','b'], ['b'])[0] == {'a'}
assert reconcile(['a'], ['a','a'])[1] == {'a'}
assert reconcile(['a'], ['a','z'])[2] == {'z'}
assert reconcile(['a'], [])[0] == {'a'}
print('five reconciliation cases passed; no logs were recovered')
expected = ["A/1", "A/2", "B/1", "B/2", "C/1", "C/2"]
received = ["A/1", "A/2", "B/1", "B/1", "C/2", "D/9"]
assert reconcile(expected, received) == ({"B/2", "C/1"}, {"B/1"}, {"D/9"})
# Supplied corrected inventory, not an executed replay.
corrected = ["A/1", "A/2", "B/1", "B/2", "C/1", "C/2"]
assert reconcile(expected, corrected) == (set(), set(), set())
print("equal row counts can conceal gaps; supplied IDs only")
Às 02:09 o SOC volta a receber eventos, mas o intervalo desde as 02:00 permanece por reconciliar.
Armadilhas comuns
JSON como Parquet; dia local como UTC; query parcial como cobertura; retries como replay garantido.
Tópicos relacionados: Evidência e aceitação operacional · Segurança e continuidade
Demonstra o caminho e a completude do intervalo; uma integração criada ainda precisa de aceitação operacional.
Referências
- Security Lake custom sources · AWS documentation consulted 2026-10-12
- Security Lake subscriber data access · AWS documentation consulted 2026-10-12
- Security Lake subscriber query access · AWS documentation consulted 2026-10-12
- Create a query subscriber · AWS documentation consulted 2026-10-12
- Query subscriber prerequisites · AWS documentation consulted 2026-10-12
- Security Lake lifecycle management · AWS documentation consulted 2026-10-12
- Security Lake rollup Regions · AWS documentation consulted 2026-10-12
- Managing Security Lake Regions · AWS documentation consulted 2026-10-12
- CloudWatch Logs subscriptions · AWS documentation consulted 2026-10-12
- Log recursion prevention · AWS documentation consulted 2026-10-12
- SCS-C03 Detection · SCS-C03
- PutSubscriptionFilter: transformed-event selection · AWS API reference consulted 2026-10-12