Como detetar e corrigir skew em joins em Apache Spark: passo a passo
Como detetar e corrigir skew em joins em Apache Spark para acelerar joins grandes. Técnicas práticas: análise, broadcas…
4 min
30 Jul 2026
Como calcular percentis e mediana em Apache Spark (exemplo)
Como calcular percentis e mediana em Apache Spark: guia prático com exemplos em PySpark usando approxQuantile e percent…
5 min
18 Jul 2026
Como fazer pivot no PySpark: transformar linhas em colunas
Aprenda a fazer pivot no PySpark com groupBy, pivot e agg: transforme linhas em colunas, trate os nulos e reverta o piv…
5 min
13 Jul 2026
Como ler e escrever Parquet no PySpark: passo a passo
Aprende a ler e escrever ficheiros Parquet no PySpark passo a passo: partitionBy, modos de escrita, compressão e como e…
4 min
11 Jul 2026
Como usar explode no PySpark: expandir arrays em linhas
Aprende a usar a função explode no PySpark para transformar arrays em várias linhas, com um exemplo prático e o cuidado…
4 min
09 Jul 2026
Como tratar valores nulos no PySpark: passo a passo
Aprende a tratar valores nulos (NULL) no PySpark com na.drop, na.fill e coalesce. Guia passo a passo com exemplos práti…
4 min
07 Jul 2026
Funções de janela (Window) no PySpark: passo a passo
Aprenda a usar funções de janela (Window) no PySpark com row_number, sum acumulado e lag. Exemplo prático passo a passo…
4 min
06 Jul 2026
Como filtrar linhas no PySpark: filter e where com exemplos
Aprende a filtrar linhas no PySpark com filter() e where(): condições simples, combinadas com E/OU e filtros como isin,…
4 min
05 Jul 2026
Como adicionar colunas com withColumn no PySpark
Aprende a adicionar colunas a um DataFrame com withColumn no PySpark: colunas calculadas, constantes, condicionais e co…
4 min
04 Jul 2026
Como remover duplicados no PySpark: passo a passo
Aprende a remover duplicados no PySpark com dropDuplicates e distinct, em todas as colunas ou por chave, e a manter a l…
4 min
04 Jul 2026
Como agregar dados com groupBy no PySpark: exemplos
Aprende a agregar dados com groupBy no PySpark: conta, soma e calcula medias por grupo com exemplos simples e um result…
4 min
04 Jul 2026
Como fazer join de DataFrames no PySpark: passo a passo
Aprenda a fazer join de DataFrames no PySpark passo a passo: inner e left join, escolher o tipo certo e evitar colunas …
4 min
04 Jul 2026