”“”

使用Apache氣流創建數據管道的實踐

使用Python中的Apache氣流開發，安排和監視數據管道

評估：520條評論中的4.0
總持續時間：3小時
班級數：59
難度級別：所有級別

使用Python氣流Apache氣流開發，安排和監視數據管道。本課程將提供有效管理數據收集，轉換和消費所需的技能。數據工程是結合商業智能，數據倉庫和軟件工程元素的領域，對於從大量數據中提取價值至關重要。 Apache氣流最初由Airbnb開發，由於其有效編排管道的能力，已成為許多技術樁的關鍵組成部分。

在本課程中，您將學習如何使用Real -World示例來配置環境並創建工作管道。我們將介紹諸如DAG，操作員，任務，依賴關係，鉤子，連接和不同性能的主題，例如位置，芹菜和順序。此外，您將對氣流的建築和高級概念（例如XCOM，分支，變量和DAGS主席）有深刻的了解。我們還將利用S3上日誌的身份驗證和存儲。

不要錯過掌握Apache氣流並提高數據工程技能的機會。今天就註冊，並使用這種強大的編排工具開始您的旅程，以完成資源的完整性。我們希望在本課程中擁有它！

您將學到什麼：
– 空氣流動
– 數據管道的開發
– Python
– 貓熊
– 數據管道的實際開發以及與其他技術的比較
– 氣流的安裝和配置
-DAG，創建工作流程，運營商，任務和依賴關係的管理
– 不同的執行者：本地，芹菜和順序
– 對氣流架構的詳細理解
– 高級概念：XCOM，分支，變量和DAG
– S3上的日誌的身份驗證和存儲
– 在Docker進行氣流