《基于flink+doris实战实时数仓》
覆盖全流程的实时数仓经典实战项目
理顺从0开始搭建实时数仓的全流程
高强度训练出色的sql、flink算子等编码能力
通过实战场景融汇贯通各组件的整合运用,如shell、hadoop、kafka、flink、doris、flume、flink-cdc等
入行拿offer的项目压舱石(对于初入行的朋友,本项目附带的“项目面试话术”模块让你如虎添翼)
基础设施:linux shell、hadoop
核心设施:flink
消息中间件:kafka
数据同步:flume(日志同步),flink-cdc(业务库同步)
实时OLAP查询:doris
资源平台:yarn

本项目从第1版以来,陆续帮助过上千人跳槽拿到过翻倍offer
毋庸多言,本项目整体就是亮点
项目融合实际企业开发中的大量优秀场景案例
全过程贯注各种场景下的调优,如sql调优,背压调优,倾斜调优,内存调优等
巧妙植入若干巧妙的优秀设计,如用插值法解决页面停留时长的实时计算,利用bitmap解决轻度聚合中信息损失及插入doris的问题等
项目要点举例
- 经典实时数仓架构对比
- 切合实际需求的架构设计
- 深度结合hbase解决维表关联问题
- hbase热点问题、rowkey设计实战
- 10+分析主题案例
- 5+巧妙计算方案设计案例
- 数据倾斜与背压优化实战
- 异步IO应用实战
- 特征工程加工及flink cep实战应用
- 轻度聚合与维度、粒度选择实战
- 深度结合doris实现实时olap支撑
- 无敌面试话术宝典
线下讲授共:5天,每天讲授时长平均:5小时
学习线上视频,可根据自己每天的可用学习时间和进度合理安排
添加客服微信详细咨询
购买课程后还有增值服务:
- 大咖交流群(涛哥群内亲自答疑)
- 课程配套文档
- 课程配套代码
-- day 01 --
01.实时数仓-市面上常见的技术架构介绍.ev4a
02.实时数仓-我们公司的实时数据需求.ev4a
03.实时数仓-我们公司的技术架构.ev4a
-- day 02 --
01.要点回顾.ev4a
02.用户注册信息表-同步到hbase-开发.ev4a
03.bug调试.ev4a
05.地理位置维表同步到hbase开发.ev4a
06.页面信息维表加工入库(hbase).ev4a
07.行为日志公共维度退维开发(1)-代码骨架梳理.ev4a
08.公共维度退维开发-代码实现.ev4a
09.行为日志ods到dwd加工需求开发的要点总结.ev4a
10.流量看板指标开发(1).ev4a
11.流量看板指标开发(2).ev4a
12.流量看板指标开发(3).ev4a
13.流量olap分析支撑-聚合表开发.ev4a
-- day 03 --
01.关于离线数仓的介绍套路-简介抱怨挑战转折到建模解决问题.ev4a
02.doris的物化视图复习-以及流量实时分析主题的物化视图实战演示.ev4a
03.页面停留时长分析-算法设计.ev4a
04.页面停留时长计算方案-再讨论-缓慢变化维问题.ev4a
05.页面停留时长计算-flinkcore代码开发-实现插值.ev4a
06.话术-访问时长分析olap主题的面试话术-在最后5分钟.ev4a
07.视频播放时长分析-完播,时长-olap支撑表开发.ev4a
-- day 04 --
01.搜索分析olap支撑表开发(1)聚合统计.ev4a
02.搜索分析olap支撑表开发(2).ev4a
03.搜索热词大屏看板指标开发示例.ev4a
04.推荐位分析olap支撑表逻辑讲解.ev4a
05.广告曝光点击分析olap支撑表逻辑解析.ev4a
06.热门榜单开发示例-各品类浏览量TOPN个商品.ev4a
07.广告点击率预估特征工程-特征数据的加工需求说明.ev4a
08.FLINK-CEP快速理解.ev4a
09.广告点击率预估特征工程-特征数据开发.ev4a
-- day 05 --
01.要点回顾-业务域看板案例开发(1).ev4a
02.订单日结看板指标开发(2).ev4a
03.品牌热销商品榜单开发.ev4a
04.flink作业中的各种场景的背压优化.ev4a
05.flink作业中checkpoint超时的优化.ev4a
06.doris的相关优化概念(1).ev4a
07.doris的相关优化概念(2).ev4a