Basic Data Pipeline Demonstration Using Apache Airflow (Python)

Publicado em: 11 Março 2022
no canal de: Pattarapon Buathong

Basic Data Pipeline Demonstration Using Apache Airflow (Python)
Convert rows in CSV file to JSON, every 5 minutes (scheduled in Airflow)
File paths are according to Docker Container path.

Check by
1. Login to the Airflow container with docker exec -it [ContainerName] /bin/bash (or type it in cmd)
2. List the files in that directory with ls /opt/airflow/data/
In this case, I put my data.csv file in /opt/airflow/dags folder so I won't have to edit the yaml file.

Nesta página do site você pode assistir ao vídeo on-line Basic Data Pipeline Demonstration Using Apache Airflow (Python) duração hora minuto segundo em boa qualidade , que foi baixado pelo usuário Pattarapon Buathong 11 Março 2022, compartilhe o link com seus amigos e conhecidos, no youtube este vídeo já foi visto 70 vezes e gostou 0 espectadores. Boa visualização!

12,553