Python中的数据工程基础

数据工程是当前数据和技术领域中最热门的需求方向之一。它融合了软件工程、DataOps、数据架构、数据管理和安全等多个领域。数据工程师为分析师、数据科学家等数据使用者提供数据支持，奠定数据服务的基础。 本课程将带你掌握数据工程的核心知识，涵盖数据全生命周期的各个环节：数据仓库、数据摄取、数据转换、任务编排等。你还将通过实践项目，学习使用 Python、Kafka、PySpark、Airflow、dbt 等多种技术构建数据管道。 完成本课程后，你将全面理解数据工程的体系，并具备构建数据管道的能力，以满足各类数据消费者的需求。