Basic Data Pipeline Demonstration Using Apache Airflow (Python)

Опубликовано: 11 Март 2022
на канале: Pattarapon Buathong

Basic Data Pipeline Demonstration Using Apache Airflow (Python)
Convert rows in CSV file to JSON, every 5 minutes (scheduled in Airflow)
File paths are according to Docker Container path.

Check by
1. Login to the Airflow container with docker exec -it [ContainerName] /bin/bash (or type it in cmd)
2. List the files in that directory with ls /opt/airflow/data/
In this case, I put my data.csv file in /opt/airflow/dags folder so I won't have to edit the yaml file.

На этой странице сайта вы можете посмотреть видео онлайн Basic Data Pipeline Demonstration Using Apache Airflow (Python) длительностью часов минут секунд в хорошем качестве, которое загрузил пользователь Pattarapon Buathong 11 Март 2022, поделитесь ссылкой с друзьями и знакомыми, на youtube это видео уже посмотрели 70 раз и оно понравилось 0 зрителям. Приятного просмотра!

12,553