课程简介
基于互联网超大规模应用为基础的真实架构案例驱动教学；
超大规模分布式数据库架构设计与真实案例实践
构筑顶级能力维度模型，带你快速成长为数据化转型所需的复合型人才
培养大数据架构师从技术本质向技术管理本质的迁移能力
目标收益
培训对象
系统架构师，业务架构师，云原生架构师，大数据架构师，运维架构师，DBA架构师，解决方案架构师。对分布式数据库知识和应用感兴趣的IT工作者。
课程大纲
| 大数据平台架构介绍和数据处理流程（2小时） |
1.大数据架构发展从过去到现在以及未来技术演进 2.HDFS总体架构设计 3.MapReduce执行流程 4.分布式资源调度器YARN深度剖析 5.Zookeeper总体设计 6.HBase生态体系结构 7.Hive体系结构 8.Spark核心知识 9.Flink核心知识 分布式内存实时分析系统-Driud |
| 数据仓库技术选型（5小时） |
1. Oracle Oracle数据库体系结构 Oracle高可用架构 Oracle必须掌握的性能优化工具 应用场景 案例详解 2. MongoDB MongoDB体系结构 MongoDB高可用架构 MongoDB诊断及优化实践 应用场景 案例详解 3. Hadoop Lambda架构 Kappa架构 Lambda和Kappa架构优缺点对比 4. 建设OLAP技术可行性分析和应用场景(实时数仓和批量数仓技术选型) Kylin ClickHouse Doris Impala Presto Driuid |
| ELK |
. Talend 2. DateStage 3. Solix 4. Sqoop 5. Flum 6. DataPipeline |
| 数据湖 |
. 数据湖理念介绍 2. 数据湖解决数仓痛点 3. 数据“入湖”，让资源变资产 |
| 金融大数据场景案例 |
1. OLAP平台建设和场景实践 2. 用户画像与实时数仓 3. 用户理财购买产品行为 4. Hudi湖仓一体技术实践 5. …… |
|
大数据平台架构介绍和数据处理流程（2小时） 1.大数据架构发展从过去到现在以及未来技术演进 2.HDFS总体架构设计 3.MapReduce执行流程 4.分布式资源调度器YARN深度剖析 5.Zookeeper总体设计 6.HBase生态体系结构 7.Hive体系结构 8.Spark核心知识 9.Flink核心知识 分布式内存实时分析系统-Driud |
|
数据仓库技术选型（5小时） 1. Oracle Oracle数据库体系结构 Oracle高可用架构 Oracle必须掌握的性能优化工具 应用场景 案例详解 2. MongoDB MongoDB体系结构 MongoDB高可用架构 MongoDB诊断及优化实践 应用场景 案例详解 3. Hadoop Lambda架构 Kappa架构 Lambda和Kappa架构优缺点对比 4. 建设OLAP技术可行性分析和应用场景(实时数仓和批量数仓技术选型) Kylin ClickHouse Doris Impala Presto Driuid |
|
ELK . Talend 2. DateStage 3. Solix 4. Sqoop 5. Flum 6. DataPipeline |
|
数据湖 . 数据湖理念介绍 2. 数据湖解决数仓痛点 3. 数据“入湖”，让资源变资产 |
|
金融大数据场景案例 1. OLAP平台建设和场景实践 2. 用户画像与实时数仓 3. 用户理财购买产品行为 4. Hudi湖仓一体技术实践 5. …… |
近期公开课推荐