The ExternalPythonOperator: No more dependency conflicts in Apache Airflow

Опубликовано: 06 Сентябрь 2023
на канале: Data with Marc

8,112

100

The ExternalPythonOperator: No more dependency conflicts in Apache Airflow

🏆 BECOME A PRO WITH AIRFLOW: https://www.udemy.com/course/the-comp...

Airflow has many options to avoid dependency conflicts.
If you have a Kubernetes cluster, you can use the KubernetesPodOperator to run a task in a Kubernetes Pod.
If you have Docker, then the DockerOperator helps to run a task in a Docker Container.
An easier, though, is the ExternalPythonOperator which requires a pre-created Python virtual environment.

На этой странице сайта вы можете посмотреть видео онлайн The ExternalPythonOperator: No more dependency conflicts in Apache Airflow длительностью часов минут секунд в хорошем качестве, которое загрузил пользователь Data with Marc 06 Сентябрь 2023, поделитесь ссылкой с друзьями и знакомыми, на youtube это видео уже посмотрели 8,112 раз и оно понравилось 100 зрителям. Приятного просмотра!

718,563

10 тыс