Seu próximo nível começa aqui
Seu desenvolvimento não pode ter limites. Garanta sua Assinatura Ilimitada e libere uma preparação completa com os melhores professores do Brasil.
Uma Secretaria da Fazenda projeta um Data Lake para suportar fiscalização eletrônica, c...
Uma Secretaria da Fazenda projeta um Data Lake para suportar fiscalização eletrônica, com ingestão diária de notas fiscais eletrônicas, conhecimentos eletrônicos de transporte de cargas, registros fiscais digitais entregues ao fisco, declarações do SIMPLES Nacional e recolhimentos. A equipe adota uma arquitetura em zonas (ramibronze, refined/silver, curated/gold), com processos de ELT. Para à uso por auditores fiscais e cientistas de dados, a descrição mais adequada é que a Zona raw/bronze
A
recebe apenas dados já deduplicados, a refined/silver armazena somente dados de terceiros; e a curated/gold contém exclusivamente dados operacionais de sistemas OLTP otimizadas para Bl e análises avançadas.
B
contêm apenas dados agregados históricos, a refined/silver guarda somente dados em tempo real; e a curaled/gold armazena principalmente logs de auditoria de acesso.
C
é usada apenas para dados não estruturados; a refined/silver apenas para dados estruturados; e a curated/gold apenas para dados semiestruturados.
D
é onde os auditores executam as consultas finais; a refined/silver é usada somente por times de infraestrutura, e a curated/gold funciona basicamente como área de backup de longo prazo.
E
armazena dados brutos conforme recebidos; a refinea/silver aplica padronização, enriquecimento e regras básicas de qualidade, a curated/gold disponibiliza modelos dimensionais ou views otimizadas para Bl e análises avançadas.