Basic Data Pipeline Demonstration Using Apache Airflow (Python)

Pubblicato il: 11 marzo 2022
sul canale di: Pattarapon Buathong

Basic Data Pipeline Demonstration Using Apache Airflow (Python)
Convert rows in CSV file to JSON, every 5 minutes (scheduled in Airflow)
File paths are according to Docker Container path.

Check by
1. Login to the Airflow container with docker exec -it [ContainerName] /bin/bash (or type it in cmd)
2. List the files in that directory with ls /opt/airflow/data/
In this case, I put my data.csv file in /opt/airflow/dags folder so I won't have to edit the yaml file.

In questa pagina del sito puoi guardare il video online Basic Data Pipeline Demonstration Using Apache Airflow (Python) della durata di ore minuti seconda in buona qualità , che l'utente ha caricato Pattarapon Buathong 11 marzo 2022, condividi il link con amici e conoscenti, su youtube questo video è già stato visto 70 volte e gli è piaciuto 0 spettatori. Buona visione!

12,553