Apache Airflow 完整实践入门
通过实际示例学习如何使用 Apache Airflow 编写、调度和监控数据管道
讲师:Marc Lamberti
双语IT资源独家Udemy付费课程,独家中英文字幕,配套资料齐全!
用不到1/10的价格,即可享受同样的高品质课程,且可以完全拥有,随时随地都可以任意观看和分享。
您将学到什么
- 创建插件以向 Apache Airflow 添加功能。
- 将 Docker 与 Airflow 和不同的执行程序结合使用
- 掌握 DAG、操作符、任务、工作流等核心功能
- 理解并应用 Apache Airflow 的高级概念,例如 XCOM、Branching 和 SubDAG。
- 顺序执行器、本地执行器和 Celery 执行器之间的区别、它们如何工作以及如何使用它们。
- 在大数据生态系统中将 Apache Airflow 与 Hive、PostgreSQL、Elasticsearch 等结合使用。
- 安装并配置 Apache Airflow
- 思考、回答并实施使用 Airflow 解决实际数据处理问题的解决方案
探索相关主题
- Apache Airflow
- 软件工程
- 发展
要求
- 至少 8 GB 内存
- 一些编程或脚本编写经验。Python 经验会对你有很大帮助,但由于它是一种非常容易学习的语言,所以即使你不熟悉也不会太难。
描述
Apache Airflow 是一个开源平台,用于以编程方式编写、安排和监控工作流。如果您需要管理许多 ETL,Airflow 是必备工具。
在本课程中,您将通过理论和实践视频学习开始使用 Apache Airflow 所需的一切。从最基本的概念开始,例如,什么是 Airflow 以及它如何工作,我们将深入探讨高级概念,例如,如何创建插件和制作真正的动态管道。
本课程适合哪些人:
- 人们对数据工程感到好奇。
- 想要学习 Apache Airflow 的基本和高级概念的人。
- 喜欢亲自动手的人。
如果你有能力,请务必支持课程的原创作者,这是他们应得的报酬!
本站收取的费用,仅用来维持网站正常运行的必要支出,从本站下载任何内容,说明你已经知晓并同意此条款。