#03 – [Projeto Data Pipeline] – Azure SQL Database

Falla Tuurma, Estamos progredindo com o projeto de Data Pipeline, para quem não entendeu… da um bisu nesse link aqui. No post anterior, aprendemos como subir rapidamente uma Azure VM e configurar um SFTP que posteriormente será utilizado como interface de integração entre um sistema e o Data Lake. No post de hoje, vamos continuar …

#01 – [Projeto Data Pipeline] – Arquitetura

Faaaaalla Turma, Esse post é o primeiro de uma série que vamos aprender e construir juntos ao longo dos próximos meses. O Projeto A empresa fictícia GAR Motors precisa criar uma estrutura para analisar seus dados, proporcionando ao time de vendas alguns insights sobre os potenciais clientes. A ideia central é construir um pipeline de …

Pack de aprendizagem para Engenharia de Dados

Faaalla Turma, Nesse mini post vou compartilhar com vocês alguns cursos/podcasts sobre o ecossistema de Big Data / Engenharia de dados. Alguns cursos eu já fiz e indico, outros eu recebi indicações de grandes amigos que considero referência para mim em meus estudos. Vamos lá então, separei por categoria para facilitar a visualização de vocês: …

Tendências para Big Data em 2021

Faaaaala turma, tudo bem? Ontem (18/01/2021) publiquei um artigo no portal da Data Tuning e compartilho aqui com vocês também. Peguei alguns trechos do relatório anual da Gartner e somei com artigos nacionais e internacionais que venho lendo nos últimos dias, com o objetivo de entender o panorama do mercado de dados para 2021, diante …

Play no Youtube

Faaaaaala Turma, Queria compartilhar com vocês que agora também temos um canal no Youtube 🙂 um complemento aqui do blog, onde vou compartilhar vídeos conceituais e também bem técnicos, além disso, estou preparando uma série de entrevistas com algumas pessoas bem legais, especialistas em diversas áreas pra gente aprender de uma maneira diferente. Espero que …

[Papo de Sexta] Eventos Internacionais a um click

Falla Guys, Esse ano fomos expostos a novas variáveis que impactaram diretamente e indiretamente nossas vidas, tanto no âmbito pessoal quanto profissional. Recentemente li um artigo onde dizia que a existência de alguns eventos acelera a evolução do mundo. Olhando para a história, a cada pós-guerra, varias evoluções aconteceram, novos veículos foram inventados, novas formas …

Workshop Hands-On: Big Data no Azure com Big Data Clusters

Falla Turma, Dia 15 de Agosto, vamos fazer um Workshop do Big Data Clusters. O evento será online e gratuito. O escopo do Workshop terá tópicos do Kafka, Spark, HDFS, Python e claro o Big Data Clusters instanciado na Azure sob o AKS (Azure Kubernetes Services). O objetivo é promover um evento com muita prática. …

Data Lake

Falla Turma, Primeiro artigo de 2020 \o/ agora a porra ficou séria … ano começou definitivamente haha. Vamos quebrar a sequência dos posts sobre Big Data Clusters (semana que vem voltaremos com mais BDC) e conversar sobre um assunto que toda empresa em processo de transformação digital, ou que pensa em utilizar Big Data, ou …