课程简介

在现在的数据平台架构上，学习行业领先的数据架构，升级中心数据治理架构环境，提升数据建模应用能力。

课程周期

1天（6H）

课程大纲

1. 高性能数据采集ETL方案与实践分析

a) ETL到底有什么用？

b) 离线ETL与实时ETL

c) ETL架构与分析

d) 调度器与调度任务管理

e) 实时计算任务管理

f) 阿里ETL架构实践案例

g) 美团ETL架构实践案例

2. 实时数据构架开发方案与实践分析

a) 实时数据架构分析

b) 构建实时数仓的要点

c) Kafka架构与实践

d) LinkedIn Kafka实践案例

e) Flink架构与实践

f) 阿里Flink架构与使用案例

g) Hudi实践

h) Hudi在Uber的使用实践

3. 数据湖架构方案与实践分析

a) 数据湖是什么湖

b) 数据湖架构方案实践分析

c) Delta Lake架构与分析

d) Ice Berg架构与分析

e) Snow Flake数据湖案例解析

f) 亚马逊数据湖案例解析

g) 阿里云湖仓一体案例解析

4. 数据质量方案与实践分析

a) 数据质量实践

b) 数据资产管理实践

c) 元数据管理实践

d) 实时和离线元数据统一

e) 非结构化数据元数据管理

f) 阿里飞天数据质量案例与分析

5. 数据安全方案与实践分析

a) 数据安全的标准与规范

b) Kerbos认证与授予权

c) 公有云数据安全与专有云数据安全

d) 数据加密方案

e) 亚马逊数据安全案例解析

f) 阿里云数据安全案例解析

6. 数据建模实践分析

a) 离线数据建模

b) 流式数据建模

c) 面向非结构化数据与算法

d) Zeppelin架构与使用

e) 电商场景案例设计思路

f) 阿里数据开发流程案例

g) 利用中台和数据市场的模型应用与管理方案