Construindo um pipeline de ingestão e transformação de dados | Airflow + Supabase + Streamlit скачать в хорошем качестве

Construindo um pipeline de ingestão e transformação de dados | Airflow + Supabase + Streamlit

#data #dataanalysis #engenhariadedados #project #tech #endtoend Um novo projeto de pipeline ETL usando Apache Airflow, Astronomer, Supabase, e Streamlit. Esse video vai mostrar o processo de criação de uma pipeline de dados, começando com uma definição do nossos processos, passando para a mão na massa, e terminando com uma criação de um Web App de previsão do tempo. Esse é o primeiro video de uma serie onde eu vou explicar e fazer junto com vocês projetos cada vez mais complexos. Timestamps: 00:00 - 02:19 - Intro 02:20 - 06:41 - Quais são os requerimentos 06:42 - 12:47 - Configurações Iniciais 12:48 - 33:05 - Construindo a DAG 33:06 - 36:03 - Rodando Airflow 36:04 - 45:22 - Criando o Streamlit 45:23 - 46:32 - Final Para conteúdo mais aprofundados sobre o mundo de dados, se inscreva na minha newsletter. Substack: https://substack.com/@forcelius Medium:   / forceliuss   Resources: [PT] Python Install -    • Como instalar Python em 2024 + VSCode, Git...   [EN] Conda Env -    • My Python Development Environment Setup - ...   [EN] Supabase Config -    • Supabase in 100 Seconds   [EN] Start with Astronomer -    • How to Get Started with Astro!   [EN] Anaconda Guide - https://www.anaconda.com/docs/getting... [EN] Astronomer Doc - https://www.astronomer.io/docs/home/a... [EN] Openweather Doc - https://openweathermap.org/current [EN] Streamlit Doc - https://docs.streamlit.io/ GitHub: https://github.com/forceliuss/af-weat... Soundtracks: Epidemic Sound - https://share.epidemicsound.com/82aru1