Curso de Go rolando!
Spark UI
Ontem foi o nosso primeiro dia de curso de Go. Fi incrível ter tantas pessoas afim de aprender uma ferramenta nova com a gente, ao vivo.
Hoje vamos colocar ainda mais a mão na massa com diversos exercícios. Nos vemos já já!
Se liga nos links das próximas lives!
Aproveite para conferir o vídeo de ontem e todo material disponível!
https://youtube.com/live/a1lLv5hR6rE?feature=share
Spark UI: Um Guia para Iniciantes
Live no dia 30/01, em parceria com a Nekt para você aprender a usar o Spark UI para monitorar e entender seus jobs Spark! Este workshop prático é ideal para engenheiros de dados que querem ir além do “funcionou” e realmente entender o que está acontecendo por baixo dos panos.
Se liga no que vamos focar:
Como acessar e navegar pelo Spark UI
As principais abas: Jobs, Stages, Executors e SQL
Como ler métricas básicas e identificar gargalos
O que são shuffles e por que eles importam
Como identificar quando algo está lento ou falhando
Sem o Spark UI, debugar é como adivinhar — “meu job está lento mas não sei por quê.”
Com o Spark UI, você consegue identificar exatamente qual stage é o gargalo, ver onde os recursos estão sendo usados e entender como o Spark executa suas queries. É a diferença entre torcer para o job funcionar e saber por que ele funciona (ou não).
Seja para otimizar custos, corrigir falhas ou simplesmente entender melhor seus pipelines, o Spark UI é a ferramenta que você vai usar.
Bora que vai ser sensacional. Dia 30/01, na twitch.tv/teomewhy.