Como carregar dados para SQL Server num ETL (pandas)
Aprende a carregar um DataFrame para SQL Server na fase de Load de um ETL, com pandas e SQLAlchemy: ligação, to_sql, ch…
Aprende a carregar um DataFrame para SQL Server na fase de Load de um ETL, com pandas e SQLAlchemy: ligação, to_sql, ch…
Aprende a tratar erros e retries num pipeline ETL em Python: backoff exponencial, quarentena de linhas más e falhas con…
Aprende a limpar e normalizar dados de texto num ETL com pandas: remover espaços, uniformizar maiúsculas, tirar acentos…
Aprenda a processar ficheiros CSV grandes em ETL com pandas e chunksize, sem esgotar a memória. Exemplo prático em Pyth…
Aprende a implementar SCD Tipo 2 num pipeline ETL para guardar o histórico das dimensões. Exemplo prático em SQL, passo…
Aprende a adicionar logging e monitorização a um pipeline ETL em Python: níveis de log, ficheiros, métricas e alertas p…
Aprende a tornar um pipeline ETL idempotente com chave de negócio e MERGE, para o poderes re-executar sem duplicar dado…
Aprende a validar a qualidade dos dados em ETL com Python e pandas: separa as linhas válidas das inválidas e põe as fal…
Aprende a fazer carga incremental num pipeline ETL com uma coluna watermark: carrega apenas os registos novos ou altera…
Aprende a construir um pipeline ETL em Python com pandas: extrai dados de um CSV, transforma-os e carrega-os numa base …
Percebe o que é ETL (Extract, Transform, Load) e como desenhar o teu primeiro pipeline de dados, passo a passo e com ex…
Este site usa cookies essenciais e, com o seu consentimento, cookies de estatística (Google Analytics) para melhorar a experiência. Política de Cookies