Basic Data Pipeline Demonstration Using Apache Airflow (Python)

Veröffentlicht am: 11 März 2022
auf dem Kanal: Pattarapon Buathong

Basic Data Pipeline Demonstration Using Apache Airflow (Python)
Convert rows in CSV file to JSON, every 5 minutes (scheduled in Airflow)
File paths are according to Docker Container path.

Check by
1. Login to the Airflow container with docker exec -it [ContainerName] /bin/bash (or type it in cmd)
2. List the files in that directory with ls /opt/airflow/data/
In this case, I put my data.csv file in /opt/airflow/dags folder so I won't have to edit the yaml file.

Auf dieser Seite können Sie das Online-Video Basic Data Pipeline Demonstration Using Apache Airflow (Python) mit der Dauer stunde minuten sekunde in guter Qualität ansehen, das der Benutzer Pattarapon Buathong 11 März 2022 hochgeladen hat, den Link mit Freunden und Bekannten teilen, dieses Video wurde auf Youtube bereits 70 Mal angesehen und es wurde von 0 den Zuschauern gefallen. Viel Spaß beim Betrachtenden Zuschauern gefallen!

12,553