Pular para conteúdo

Propostas — Engenharia de Dados (captura Oracle → Data Lake)

Projeto: DSB26201 · Assessment de Arquitetura e Integrações · Energisa Elaborado por: Syntropy Labs (Castellani) Status: Brainstorming de consultoria — não é achado confirmado nem arquitetura To-Be oficial

Aviso metodológico

Esta proposta nasceu de uma discussão técnica sobre o volume de tópicos Kafka gerado pela captura CDC das bases Oracle via XStream/Debezium, documentada em dba-cdc-materializacao-views-adms.md (Ata 12) — não de uma sessão com a Energisa. Por isso vive em 030-artefatos/, fora de 100-to-be/: pelo plano de trabalho, a arquitetura alvo (Fase 4) só vira base oficial depois da validação de Fase 3 com Norberto e Rômulo, seguida da rodada técnica com as áreas — validação que ainda não ocorreu. Mesmo racional já aplicado em propostas-wfm-eforce/.

Não foi validada com a Energisa. Carrega premissas específicas que dependem de confirmação contratual e técnica antes de qualquer prova de conceito — ver a seção "Premissas e riscos não validados" no documento da proposta.

A proposta

# Proposta Resolve Não resolve
1 GoldenGate + Oracle na Azure como landing Volume/fan-out de tópicos Kafka por tabela×região (587 dos 835 tópicos de produção, ~70%, 25/08/2026 — era 621/930, ~67%, em 09/07) Achado do "elo único" sem enlace dedicado (mesmo tráfego de rede); retenção de 7 dias da Landing (R37)

Evidência que motivou a proposta

Levantamento nos relatórios reais de produção do Confluent (topicos_detalhado_latest.md, 09/07/2026; atualizado com relatorio_prd_20260825_165932.csv, 25/08/2026 — ver evidencias-producao-confluent-kafka.md, seção A.8): dos 835 tópicos em PRD (25/08/2026; eram 930 em 09/07), 587 (≈70%) seguem o padrão oracle_source_xst_<sistema>_<região>.<tabela> — captura XStream/Debezium multiplicada por ao menos 9 códigos de região (acr, mgr, mtn, mts, pab, ron, ser, spr, toc) e 5 prefixos de sistema (com, igs, sgd, sgm, itg). É um fan-out estrutural (região × sistema × tabela), não as "duas tabelas de altíssimo volume" citadas como nota pontual na Ata 12 — a proposta ataca esse fan-out, não apenas o caso citado na sessão.

Ver também