Questão FC369832
O ciclo de vida da engenharia de dados compreende estágios que transformam dados brutos em um produto final útil, pronto para consumo por analistas, cientistas de dados, engenheiro
Bancos de Dados Dimensionais
FGV · 2024
O ciclo de vida da engenharia de dados compreende estágios que transformam dados brutos em um produto final útil, pronto para consumo por analistas, cientistas de dados, engenheiros de machine learning etc. Um desses estágios é a etapa de Transformação.
A respeito da referida etapa, analise as afirmativas a seguir e assinale (V) para a verdadeira e (F) para a falsa.
( ) Enquanto uma consulta busca os dados de fontes diversas baseando-se em filtragem e junções, uma transformação persiste os resultados para posterior consumo.
( ) Shuffle hash joins requerem muito menos capacidade de processamento do que Broadcast joins.
( ) Pipelines de transformação comumente abrangem sistemas, não se limitando apenas a diversas tabelas e conjuntos de dados.
As afirmativas são, respectivamente,
- V – F – F.
- V – V – F.
- F – V – V.
- F – F – V.
- V – F – V.
Mostrar resposta e comentário
Gabarito
Errado
Comentário do professor
A primeira afirmativa é verdadeira porque a etapa de Transformação não se limita a leituras: ela processa, limpa e estrutura os dados e frequentemente persiste resultados intermediários ou finais (staging, tabelas materializadas, arquivos) para consumo por analistas e modelos.
A segunda é falsa: o Shuffle hash join envolve embaralhamento e redistribuição de dados entre nós do cluster, com custo elevado de rede e I/O; já o Broadcast join replica um conjunto pequeno para todos os nós, evitando shuffle e sendo mais eficiente quando uma das tabelas cabe em memória.
A terceira afirmativa é verdadeira porque Pipelines de transformação costumam orquestrar múltiplos sistemas (bancos, APIs, filas, streams, arquivos), não apenas operações entre tabelas, integrando e movendo dados entre ambientes.
Conteúdo do catálogo FC Concursos · Atualizado em