Basic Data Pipeline Demonstration Using Apache Airflow (Python)

Publicado el: 11 marzo 2022
en el canal de: Pattarapon Buathong

Basic Data Pipeline Demonstration Using Apache Airflow (Python)
Convert rows in CSV file to JSON, every 5 minutes (scheduled in Airflow)
File paths are according to Docker Container path.

Check by
1. Login to the Airflow container with docker exec -it [ContainerName] /bin/bash (or type it in cmd)
2. List the files in that directory with ls /opt/airflow/data/
In this case, I put my data.csv file in /opt/airflow/dags folder so I won't have to edit the yaml file.

En esta página del sitio puede ver el video en línea Basic Data Pipeline Demonstration Using Apache Airflow (Python) de Duración hora minuto segunda en buena calidad , que subió el usuario Pattarapon Buathong 11 marzo 2022, comparta el enlace con amigos y conocidos, en youtube este video ya ha sido visto 70 veces y le gustó 0 a los espectadores. Disfruta viendo!

12,553