Descobrindo Zero ETL!
Levando Agilidade e Velocidade Para Suas Análises de Dados!
A cada novo dia em minha caminhada atuando com engenheira de dados, tenho mais certeza que parte do meu papel óbvio é possibilitar a integração das áreas, departamentos, diretorias e equipes por meio de dados visando proporcionar uma entrega de valor real e duradouro, não somente para solucionar uma demanda pré-estabelecida, mas promovendo e acelerando a transformação e inclusão digital.
Um dos pontos que lido diariamente é a criação de fluxo de dados, aonde tenho cada vez mais observado o termo “Zero ETL” e como esse conceito tem influenciado a entrega e o acesso de dados como produto em diferentes empresas e startups.
Esse post será um breve resumo ao conceito, seus benefícios, alguns casos de uso com tecnologias emergentes que já possuem grandes comunidades e muita gente utilizando, mas antes temos de entender o conceito de ETL.
Vamos à luta!
Afinal, o que é ETL?
“Extração, transformação e carregamento (ETL) correspondem ao processo de combinação de dados de várias fontes em um grande repositório central, chamado de data warehouse ou data lake. O processo de ETL usa um conjunto de regras de negócios para limpar e organizar dados brutos e prepará-los para…