#01 – [Projeto Data Pipeline] – Arquitetura

Faaaaalla Turma, Esse post é o primeiro de uma série que vamos aprender e construir juntos ao longo dos próximos meses. O Projeto A empresa fictícia GAR Motors precisa criar uma estrutura para analisar seus dados, proporcionando ao time de vendas alguns insights sobre os potenciais clientes. A ideia central é construir um pipeline de… Read More

Pack de aprendizagem para Engenharia de Dados

Faaalla Turma, Nesse mini post vou compartilhar com vocês alguns cursos/podcasts sobre o ecossistema de Big Data / Engenharia de dados. Alguns cursos eu já fiz e indico, outros eu recebi indicações de grandes amigos que considero referência para mim em meus estudos. Vamos lá então, separei por categoria para facilitar a visualização de vocês:… Read More

Tendências para Big Data em 2021

Faaaaala turma, tudo bem? Ontem (18/01/2021) publiquei um artigo no portal da Data Tuning e compartilho aqui com vocês também. Peguei alguns trechos do relatório anual da Gartner e somei com artigos nacionais e internacionais que venho lendo nos últimos dias, com o objetivo de entender o panorama do mercado de dados para 2021, diante… Read More

Já ouviu sobre Data Gravity ?

Falla Turma, Um tempo atrás escrevi sobre Data Lake e Virtualização de Dados, que juntos se complementam em uma visão de arquitetura Data Lake MultiCloud. Buut, um outro aspecto bem interessante em arquiteturas dessa magnitude e que impacta não só como será o Lift and Shift mas também toda a estratégia da empresa perante a… Read More

Data Virtualization: Uma das facetas do Big Data Clusters

Provavelmente você já ouviu falar o termo Virtualização de Dados por ai, em artigos ou conteúdo relacionado a Big Data ou Cloud. Virtualizar os dados não “tem muita” ligação com Maquina Virtual (VM) como já conhecemos e usamos a muitos anos em nossas arquiteturas. A Virtualização de Dados (VD) é uma abordagem de arquitetura para… Read More

Workshop Hands-On: Big Data no Azure com Big Data Clusters

Falla Turma, Dia 15 de Agosto, vamos fazer um Workshop do Big Data Clusters. O evento será online e gratuito. O escopo do Workshop terá tópicos do Kafka, Spark, HDFS, Python e claro o Big Data Clusters instanciado na Azure sob o AKS (Azure Kubernetes Services). O objetivo é promover um evento com muita prática.… Read More