{"repo":"vbluuiza/pipeline_etl_weather_data_tutorial_youtube","free":true,"listed":false,"github":"https://github.com/vbluuiza/pipeline_etl_weather_data_tutorial_youtube","clone":"git clone https://github.com/vbluuiza/pipeline_etl_weather_data_tutorial_youtube.git","description":"📄 Tutorial prático de Engenharia de Dados para YouTube. Pipeline ETL completo com Airflow, Python e PostgreSQL que coleta dados meteorológicos de São Paulo, aplica transformações e persiste em banco de dados. Containerizado com Docker para fácil reprodução. @vbluuiza","language":"Python","stars":45,"topics":["airflow","dataengineer","docker","postgres","python","sql"],"license":null,"category":"databases-storage","readme_excerpt":"🌤️ Pipeline ETL - Dados Climáticos de São Paulo Pipeline ETL automatizado para coleta, transformação e armazenamento de dados meteorológicos em tempo real da cidade de São Paulo. --- 🔗 Links Importantes do Tutorial 📚 Recurso 🔗 Link ----------- -------- 📺 Vídeo no YouTube Assistir Tutorial Completo 📄 Documentação Completa Google Docs - Conceitos e Requisitos 💻 Repositório GitHub pipeline etl weather data tutorial youtube 🎨 Padrão de Commits Guia Completo com Emojis 📱 Instagram @vbluuiza 💼 LinkedIn @vbluuiza --- 📋 Índice - Sobre o Projeto - Arquitetura do Pipeline - Stack Tecnológica - Estrutura do Projeto - Pré-requisitos - Instalação e Configuração - Como Executar - Detalhamento das Etapas - Análise de Dados - Troubleshooting - Contribuindo --- 🎯 Sobre o Projeto Este projeto foi desenvolvido para o canal @vbluuiza com o objetivo de demonstrar a construção de um pipeline ETL completo utilizando as melhores práticas de Engenharia de Dados. O pipeline coleta dados meteorológicos da API OpenWeatherMap a cada hora, transforma os dados para um formato estruturado e os armazena em um banco de dados PostgreSQL para análises futuras. 🎥 Assista no YouTube 🔴 Assistir Tutorial Completo --- 🏗️ Arquitetura do Pipeline --- 🛠️ Stack Tecnológica Core - Python 3.14+ - Linguagem principal - Apache Airflow 3.1.7 - Orquestração do pipeline - PostgreSQL 14 - Banco de dados relacional - Docker & Docker Compose - Containerização Bibliotecas Python - pandas - Manipulação e transformaç","default_branch":null,"files":null,"tree":[],"storefront":"/r/vbluuiza","claimed":false,"request_supported":{"post":"https://gitbuyer.com/r/vbluuiza/pipeline_etl_weather_data_tutorial_youtube/request-supported","requests":0},"note":"indexed from public GitHub; nothing is for sale on this page. Clone it from GitHub. Paid listings live at /search."}