Distributed Computing Workflows with FugueSQL | Orlando Python

Veröffentlicht am: 23 März 2021
auf dem Kanal: Orlando Python
332
10

In recent years, the role of data analysts working on big data has been expanding. Hive allows analysts to manipulate big datasets. DBT allows data analysts to take ownership of some data engineering processes. More and more tools are coming out that extend the capabilities of SQL, and allow it to be applied in other parts of the data ecosystem. In this interactive workshop, we'll introduce the partitipants to FugueSQL, a lanaguage that allows analysts to work on distributed computing problems. FugueSQL allows users to express computation workflows with a SQL-like language. This allows users to operate on Pandas, Spark, and Dask DataFrames with a language that they are familiar with. We'll demo in Jupyter Notebook how to use FugueSQL along with native Python for end-to-end Extract, Transform, Load (ETL) pipelines.

Project demo: https://www.kaggle.com/kvnkho/thinkfu...

Fugue: https://github.com/fugue-project/fugue
Fugue Docs: https://fugue-tutorials.readthedocs.i...


Auf dieser Seite können Sie das Online-Video Distributed Computing Workflows with FugueSQL | Orlando Python mit der Dauer stunde minuten sekunde in guter Qualität ansehen, das der Benutzer Orlando Python 23 März 2021 hochgeladen hat, den Link mit Freunden und Bekannten teilen, dieses Video wurde auf Youtube bereits 332 Mal angesehen und es wurde von 10 den Zuschauern gefallen. Viel Spaß beim Betrachtenden Zuschauern gefallen!