从0到1整合业务数据,构建企业可复用的数据中台 数据中台实战课,市场稀缺,早学早受益,本课程基于SpringBoot3.0最新技术栈,从0到1整合业务数据,构建企业可复用的数据中台,带你掌握数据中台核心技能体系,具备数据中台架构设计能力,收获真实的企业数据中台开发经验。 适合人群 Java 开发者 想要提升数据中台开发能力的开发者 对数据中台感兴趣人员 技术储备 Java语法基础 了解Spring Boot框架 了解Mybatis-Plus框架 环境参数 SpringBoot 3.0.5 RocketMq 5.0.0 ElasticJob 3.0.3 JDK 17.0.6 IDEA 2022.3 试看链接:https://pan.baidu.com/s/1_TKteev4MnA_qVd6pBIBRw?pwd=z5vo 目录章节: 第1章 课程引言 3 节|21分钟 收起 视频: 1-1 课程导学 试看 12:03 视频: 1-2 数据中台项目展示及技术栈梳理 试看 04:32 视频: 1-3 学习建议 04:09 第2章 认知数据中台 4 节|27分钟 收起 视频: 2-1 数据中台的应用及发展趋势 07:52 视频: 2-2 数据中台必备核心能力 06:02 视频: 2-3 对于数据中台的认知误区 05:25 视频: 2-4 可落地的中台建设经验总结 07:04 第3章 数据中台建设 - 前置理论基础 7 节|60分钟 收起 视频: 3-1 本章介绍 01:57 视频: 3-2 元数据:构建数据中台的组件 05:32 视频: 3-3 数据血缘 11:41 视频: 3-4 理解数据生命周期 13:14 视频: 3-5 数据安全策略、数据资产管理、组织架构整合 18:25 视频: 3-6 统一的数据服务体系与数据运营管控 05:47 视频: 3-7 本章总结 02:29 第4章 构建数据模型 - 数据处理的原材料 26 节|330分钟 收起 视频: 4-1 本章介绍 02:42 视频: 4-2 【需求分析】数据中台项目需求分析 06:21 视频: 4-3 【项目架构】项目架构深入剖析与技术解决方案讲解 07:11 视频: 4-4 【数据标准】编写元数据结构 SQL,定义数据使用标准 16:25 视频: 4-5 【数据采集】编写数据采集 SQL,定义采集原始数据方法 06:20 视频: 4-6 【数据计算】编写数据计算规则 SQL,定义指标计算逻辑 06:45 视频: 4-7 【数据存储】编写数据存储规则定义 SQL,定义个性化存储方式 06:00 视频: 4-8 【组织结构】编写组织结构定义 SQL,赋予数据组织形态 04:22 视频: 4-9 【业务规则】编写应用业务规则定义 SQL,连通业务与规则 06:00 视频: 4-10 【环境安装】JDK17安装与IDEA 06:37 视频: 4-11 【环境安装】Maven安装及配置 07:36 视频: 4-12 【项目搭建】项目初始化及测试(一) 20:57 视频: 4-13 【项目搭建】项目初始化及测试(二) 22:02 视频: 4-14 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(一) 17:30 视频: 4-15 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(二) 21:20 视频: 4-16 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(三) 21:10 视频: 4-17 【模型构建】应用规则充血模型编写,将数据库实体转变成数据模型(四) 18:20 视频: 4-18 【问题补充】遗留问题解答 10:26 视频: 4-19 【问题抛出】数据库实体与数据模型映射存在什么问题? 04:11 视频: 4-20 【基础补充】构建MapStruct示例,深入理解其高性能原理 15:25 视频: 4-21 【基础补充】定义MapStruct映射器(一) 13:54 视频: 4-22 【基础补充】定义MapStruct映射器(二) 13:10 视频: 4-23 【基础补充】MapStruct数据类型转换 25:52 视频: 4-24 【基础补充】MapStruct映射集合 17:36 视频: 4-25 【基础补充】MapStruct自定义映射 20:24 视频: 4-26 【解决方案】Spring Boot集成MapStruct,完美解决数据库与数据模型映射问题 10:39 第5章 数据查询之SpringBoot动态多数据源技术 - 数据处理的助推剂 25 节|339分钟 收起 视频: 5-1 本章介绍 01:12 视频: 5-2 【模型查询】用于承载数据的查询应用规则模型 22:44 视频: 5-3 【模型查询】用于承载数据的查询应用规则模型 20:42 视频: 5-4 【问题抛出及解决方案】为何要使用数据源查询?不同规则下的数据源查询问题? 02:51 视频: 5-5 【基础补充】动态多数据源原理 01:34 视频: 5-6 【基础补充】手撸原生动态多数据源代码(一) 17:37 视频: 5-7 【基础补充】手撸原生动态多数据源代码(二) 15:21 视频: 5-8 【基础补充】Mybatis-Plus实现动态多数据源 17:30 视频: 5-9 【源码分析与源码实战】源码分析Spring Boot动态多数据源原理与实战 20:12 视频: 5-10 【组件解析】动态多数据源结构讲解 02:42 视频: 5-11 【动态配置】动态多数据源配置引入starter机制--创建动态数据源框架(一) 24:58 视频: 5-12 【动态配置】动态多数据源配置引入starter机制--创建动态数据源框架(二) 01:18 视频: 5-13 【框架构建】自定义注解实现 Spring Boot动态多数据源--属性配置 12:09 视频: 5-14 【框架构建】自定义注解实现 Spring Boot动态多数据源--数据源创建(一) 15:17 视频: 5-15 【框架构建】自定义注解实现 Spring Boot动态多数据源--数据源创建(二) 11:13 视频: 5-16 【框架构建】自定义注解实现 Spring Boot动态多数据源--数据源加载 05:33 视频: 5-17 【框架构建】自定义注解实现Spring Boot动态多数据源 18:20 视频: 5-18 【框架构建】自定义注解实现Spring Boot动态多数据源--通知与增强 17:41 视频: 5-19 【框架构建】自定义注解实现Spring Boot动态多数据源--查找当前类及接口方法注解 23:52 视频: 5-20 【框架构建】自定义注解实现Spring Boot动态多数据源--自动装配 18:14 视频: 5-21 【框架构建】自定义注解实现Spring Boot动态多数据源--整合多数据源组件测试 21:05 视频: 5-22 【问题抛出】多数据源事务下事务失效问题? 08:38 视频: 5-23 【解决方案】源码深度适配解决多数据源事务问题(一) 13:45 视频: 5-24 【解决方案】源码深度适配解决多数据源事务问题(二) 13:38 视频: 5-25 【单元测试】多数据集成单元测试 10:35 第6章 分布式调度之ElasticJob - 数据处理的方向盘 18 节|218分钟 收起 视频: 6-1 本章介绍 01:36 视频: 6-2 【环境准备】介绍用户中心服务 04:49 视频: 6-3 【环境安装】Zookeeper安装及简单测试使用 07:12 视频: 6-4 【解决方案】Spring boot 集成 Dubbo完成分布式调用 10:09 视频: 6-5 【组织构建】组装组织结构数据:从组织层面依次进行数据处理(一) 15:55 视频: 6-6 【组织构建】组装组织结构数据:从组织层面依次进行数据处理(二) 17:27 视频: 6-7 【组织构建】组装组织结构数据:从组织层面依次进行数据处理(三) 16:50 视频: 6-8 【参数组装】组装维度及时间数据:准备数据处理的参数 22:36 视频: 6-9 【异步调用】引入异步能力 Spring Boot async 优化数据处理 19:24 视频: 6-10 【数据调度】分布式调度组件 ElasticJob 概述 03:53 视频: 6-11 【基础补充】ElasticJob 技术架构解析 03:27 视频: 6-12 【基础补充】ElasticJob 作业分片调度开发 17:17 视频: 6-13 【案例实现】Spring Boot集成 ElasticJob 案例实现(一) 14:12 视频: 6-14 【案例实现】Spring Boot集成 ElasticJob 案例实现(二) 15:14 视频: 6-15 【案例实现】Spring Boot集成 ElasticJob 案例实现(三) 15:10 视频: 6-16 【解决方案】Spring Boot集成 ElasticJob 进行数据处理调度(一) 16:20 视频: 6-17 【解决方案】Spring Boot集成 ElasticJob 进行数据处理调度(二) 15:05 视频: 6-18 本章总结 01:09 第7章 数据采集 - 数据处理的发动机 15 节|154分钟 收起 视频: 7-1 本章介绍 02:02 视频: 7-2 【数据校验】数据校验处理:统一拦截不符合计算标准的数据(一) 13:51 视频: 7-3 【数据校验】数据校验处理:统一拦截不符合计算标准的数据(二) 13:48 视频: 7-4 【模板构建】构建数据采集器模板 22:08 视频: 7-5 【参数组装】组装基础维度查询 SQL 参数(一) 13:39 视频: 7-6 【参数组装】组装基础维度查询 SQL 参数(二) 14:06 视频: 7-7 【SQL组装】构建基础维度查询 SQL 能力 09:13 视频: 7-8 【结果合并】合并指标查询结果 06:35 视频: 7-9 【异常处理】处理异常或者无意义指标数据值 06:33 视频: 7-10 【参数组装】组装高维度查询 SQL 参数 04:17 视频: 7-11 【SQL组装】处理高维度查询 SQL 能力(一) 14:40 视频: 7-12 【SQL组装】处理高维度查询 SQL 能力(二) 14:01 视频: 7-13 【结果合并】高维度数据指标结果合并 07:08 视频: 7-14 【单元测试】采集集成单元测试 10:23 视频: 7-15 本章总结 01:32 第8章 Google Aviator表达式引擎助力数据运算 - 数据处理的第二把火 15 节|162分钟 收起 视频: 8-1 本章介绍 00:52 视频: 8-2 【问题抛出】数据表达式运算面临的问题? 01:29 视频: 8-3 【解决方案】数据运算问题解决方案:Aviator表达式引擎概述 02:17 视频: 8-4 【基础补充】Google Aviator 引擎常用操作符(一) 15:48 视频: 8-5 【基础补充】Google Aviator 引擎常用操作符(二) 15:58 视频: 8-6 【基础补充】Google Aviator 内置函数(一) 15:02 视频: 8-7 【基础补充】Google Aviator 内置函数(二) 14:37 视频: 8-8 【基础补充】Google Aviator 自定义函数 20:31 视频: 8-9 【基础补充】Google Aviator 表达式引擎实战 12:49 视频: 8-10 【指标计算】数据指标表达式计算逻辑与实现(一) 15:28 视频: 8-11 【指标计算】数据指标表达式计算逻辑与实现(二) 13:52 视频: 8-12 【模板构建】构建数据存储器模板 15:06 视频: 8-13 【指标存储】数据指标存储业务处理 09:37 视频: 8-14 【单元测试】表达式引擎及存储器集成单元测试 06:25 视频: 8-15 本章总结 01:24 第9章 RocketMq助力数据维度升级计算 - 数据处理的最后一把火 15 节|155分钟 收起 视频: 9-1 本章介绍 01:48 视频: 9-2 【问题抛出】低维时间、低维空间如何向高维时间、高维空间升级计算? 02:54 视频: 9-3 【模板构建】构建维度事件升级模板 24:16 视频: 9-4 【解决方案】维度升级解决方案:消息中间件 RocketMq 概述 04:07 视频: 9-5 【架构剖析】RocketMq 架构剖析 04:46 视频: 9-6 【环境安装】RocketMq环境安装及简单测试 12:33 视频: 9-7 【案例实现】Spring Boot集成 RocketMq 案例实现 18:52 视频: 9-8 【基础补充】RocketMq 解决消费重复问题 13:49 视频: 9-9 【基础补充】RocketMq 解决消费事务问题(一) 15:12 视频: 9-10 【基础补充】RocketMq 解决消费事务问题(二) 09:35 视频: 9-11 【消息发送】构建 MQ 消息升级维度数据处理 13:55 视频: 9-12 【消息接收】RocketMq 消息接收器编码及参数封装 09:54 视频: 9-13 【维度升级】组装升级时间维度、空间维度参数 13:49 视频: 9-14 【单元测试】维度升级消息集成单元测试 06:39 视频: 9-15 本章总结 02:18 第10章 项目大成及中台展望 - 数据处理的终点站 13 节|152分钟 收起 视频: 10-1 本章介绍 07:55 视频: 10-2 【环境准备】考勤业务表结构及数据介绍 03:18 视频: 10-3 【接口编写】编写生成业务规则的接口(一) 27:18 视频: 10-4 【接口编写】编写生成业务规则的接口(二) 25:50 视频: 10-5 【接口测试】业务规则接口测试 19:18 视频: 10-6 【SQL校验】引入 SQL 校验能力 13:21 视频: 10-7 【中台赋能】使用数据中台快速对考勤业务赋能 12:30 视频: 10-8 【口径统一】提供统一标准的对外 api 之指标计算结果 15:42 视频: 10-9 【资产统一】提供统一标准的对外 api 之元数据资产目录 05:20 视频: 10-10 【项目总结】项目演示及流程梳理总结 11:01 视频: 10-11 【拓展思考】跨业务数据指标的联合运算拓展与思考 04:11 视频: 10-12 【拓展思考】数据中台权限设计思考 03:34 视频: 10-13 本章总结 02:34 第11章 课程总结 来源: SpringBoot3.0 + RocketMq 构建企业级数据中台 |