Faaaala Turma, Compartilho com vocês um vídeo que muito bacana que tive a honra de participar ao lado de grandes nomes da area de Engenharia de Dados…. eu ainda sou um jovem aprendiz e uma oportunidade como essa me deixa muito feliz, pois é quase uma aula particular com grandes amigos e excelentes profissionais. O… Read More
#01 – [Projeto Data Pipeline] – Arquitetura
Faaaaalla Turma, Esse post é o primeiro de uma série que vamos aprender e construir juntos ao longo dos próximos meses. O Projeto A empresa fictícia GAR Motors precisa criar uma estrutura para analisar seus dados, proporcionando ao time de vendas alguns insights sobre os potenciais clientes. A ideia central é construir um pipeline de… Read More
Pack de aprendizagem para Engenharia de Dados
Faaalla Turma, Nesse mini post vou compartilhar com vocês alguns cursos/podcasts sobre o ecossistema de Big Data / Engenharia de dados. Alguns cursos eu já fiz e indico, outros eu recebi indicações de grandes amigos que considero referência para mim em meus estudos. Vamos lá então, separei por categoria para facilitar a visualização de vocês:… Read More
Tendências para Big Data em 2021
Faaaaala turma, tudo bem? Ontem (18/01/2021) publiquei um artigo no portal da Data Tuning e compartilho aqui com vocês também. Peguei alguns trechos do relatório anual da Gartner e somei com artigos nacionais e internacionais que venho lendo nos últimos dias, com o objetivo de entender o panorama do mercado de dados para 2021, diante… Read More
Já ouviu sobre Data Gravity ?
Falla Turma, Um tempo atrás escrevi sobre Data Lake e Virtualização de Dados, que juntos se complementam em uma visão de arquitetura Data Lake MultiCloud. Buut, um outro aspecto bem interessante em arquiteturas dessa magnitude e que impacta não só como será o Lift and Shift mas também toda a estratégia da empresa perante a… Read More
Data Virtualization: Uma das facetas do Big Data Clusters
Provavelmente você já ouviu falar o termo Virtualização de Dados por ai, em artigos ou conteúdo relacionado a Big Data ou Cloud. Virtualizar os dados não “tem muita” ligação com Maquina Virtual (VM) como já conhecemos e usamos a muitos anos em nossas arquiteturas. A Virtualização de Dados (VD) é uma abordagem de arquitetura para… Read More
Workshop Hands-On: Big Data no Azure com Big Data Clusters
Falla Turma, Dia 15 de Agosto, vamos fazer um Workshop do Big Data Clusters. O evento será online e gratuito. O escopo do Workshop terá tópicos do Kafka, Spark, HDFS, Python e claro o Big Data Clusters instanciado na Azure sob o AKS (Azure Kubernetes Services). O objetivo é promover um evento com muita prática.… Read More
Github é vida
Fala Turma, Nós de “Dados” e aqui incluo DBA, Cara do BI, Engenheiro de Dados e relacionados (rsrs) não temos muito o costume de utilizar versionamento de código certo? Nesse (e somente neste) caso os Devs estão na nossa frente hahah. Alguns amigos me pediram códigos do Big Data Clusters e Python para automações no… Read More
Data Lake
Falla Turma, Primeiro artigo de 2020 \o/ agora a porra ficou séria … ano começou definitivamente haha. Vamos quebrar a sequência dos posts sobre Big Data Clusters (semana que vem voltaremos com mais BDC) e conversar sobre um assunto que toda empresa em processo de transformação digital, ou que pensa em utilizar Big Data, ou… Read More
O que é MPP (Massively Parallel Processing) ?
MPP é uma forma de processamento colaborativo do mesmo programa por dois ou mais processadores (CPU) Read More
#YouSabia? – Big Data está impactando esportes
Esse post será menos técnico mas recheado de coisa boa 🙂 há algum tempo venho fazendo full table scan no Google, caçando eventos relacionados a Big Data no Brasil e no mundo Read More
TED: Big Data is Better Data
Um excelente TED, tive que assistir duas vezes para realmente compreender todo o conteúdo deste vídeo. Big Data, Machine Learning, IA já estão mudando o mundo em que vivemos Read More