尚硅谷大数据项目线上问诊数仓项目(采集+离线+实时)

视频资源大小：21.5 GB类型：大数据项目

尚硅谷线上问诊实时数仓项目延续了离线数仓的业务逻辑，以线上问诊开处方为基础业务逻辑，真实表现了线上问诊数据的实时分析统计。

线上问诊实时数仓项目共分三大部分：实时数仓架构介绍、数仓模型搭建、Suger可视化大屏展示。项目以线上问q W 5 4 T A诊采集项目为前置基础，使用采集项目中搭建的虚拟机环境，读取采集项目实时监控的业务数据，对数据进行实时的分析计算，最终得到指标需求结果。

项目中使用的框架包括：HadoopI a # } { h、Kafka、Flume、Maxwell7 D 0 ` ) ^ w、Flink、Phoenix、HBasQ R ge、Redis、Doris、Suger等。教程通过精炼的业务体系逻辑，带你快速掌握实时数仓所使用的技术手段！

课程目录：

├──尚硅谷大数据项目之a + )线上问诊离线数仓

| ├──视频

| | ├──01-数据采集课程内容介绍.mp4 6.86M

| | ├──02-数据仓% : i x库的概念.mp4 12.08M

| | ├──03-数据仓库的架构.mp4 12.60M

| | ├──04-项目需求分析.mp4 15.10M[ y Z

| | ├──05-技术选型I p n ; / s.mp4 22.98M

| | ├──06-系统数据流程设计.mp4 2c m j s g ] F I %0.56MP L 3 r + L . Y

| | ├──07-框架版本的选择.mp4 17.99M

| | ├──08-服务器^ J p z a 5的选型.mp4 16.10M

| | ├──09-集群规模.* ( e J }mp4 14.00M

| | ├──10-集群规模设计.mp4 22.48j w I y Y Q xM

| | ├──100-医生维度表建表.mpg o J4 4] 6 G4.31M

| | ├──101-医生维度表数据加载.mp4 34.94M

| | ├──102-医院维度表建表和数据加载.mp4 22.38M

| | ├──103-药品维度表建表和数据加载.mp4 14.47M

| | ├──104-患者维度表建表和数据加载.ml D i =p4 15.77M

| | ├──105-用户维度表W y a t A Y建表和数据加载.mp4 9.8: a O $ S Y M e }6M

| | ├──106-dim层数据加[ 3 ) +载脚本.mp4 44.24M

| | ├──107-事实表建模理论回顾.mp4 49.45M

| | ├──108-DWD层设计要点.mp4 9.22M

| | ├──1095 U % Q ] J-问诊事务型事实表建表.~ r o r Y Imp4 21.40M

| | ├──11-业务数据说明.mpY ^ ) j c \4 27.07M

| | ├──1w o @ f I10-问诊事实表首日数据加1 7 Y \ h 3 #载.mp4 38.00M

| | ├──111-问诊事实表每日数据加载.mp4 17.78v @ G J :M

| | ├──112-问诊支付成功事实表建表和首日v o } % c h加载.mp4 35.73M

| | ├──113-问诊支付成功事实表每日数据加载.mp4 39.69M

| | ├──114-处方开单事实表建表和首日数据加载.mp4 33.90M

| | ├──115-处方开单事实表每日数据加载.mp4 14.03M

|` . % ^ | ├──116-处方支付成功事实表建表和首日数据加载.mp4 41.69M

| | ├──117-处方支付成功事实表每] % [ % G E ?日数据加载.mp4I P M o v ~ N R 23.72M

| | ├──118-医生注册事实表建表和首日数据加载.& J b X fmp4 35.69M

| | ├──119-医生注册事实表r c R –每日数据加载.mp4 14.63M

| | ├──12-虚拟机安装配置.mp4 88.87M

| | ├──120-用户注册事实表建表和数据加载.mp4 32.78M

| | ├──121-患者登记事实表建表和数据加载.mp4 29.66M

| | ├──122-用户评价事实表建表和数据加载.mp4 25.37M

| | ├──123-dwd首日数据加载脚本.mp4 55.81M

| | ├──124-dwd每日数据加载脚本.mp@ ` 0 z 2 x B q W4 70.35M

| | ├──125-dws设计要点.mp4 22.11M

| | ├──126-医院患者性别年龄段问诊最近1日汇总表mp4.mp4 75.30M

| | ├──127-医院_ [ = G 3 +患者性别年龄段问诊支付成功最近1日汇总表.mp42 0 n t 2 % D % w 34.96M

| | ├──128-医院患者性别年龄段处方开单最近1日汇总表.mp4 33.55M

| | ├──129-医院患者性别年龄段处方开单支付成功最近1日汇总表.mp4# B S _ z E ; N : 26.31M

| | ├──13-集群分发脚本.mp4 57.47M

| | ├──130-医生粒度问诊最近1日汇总表.mp4 27.02M

| | ├──131-dws 1d首日数据加载脚本.mp4 44.64M: o = 0 P r 5

| | ├──132-dws 1d每日数据加载8 / A N脚本.mp4 35.97M

| | ├──133-交易域医院患者性别年龄段粒度问诊最近C [ Q I * X O Gn日汇总表.mpP ] + W q4 48.09M

| | ├──134-交易域医院患者性别年龄段粒度问诊支付成功最近n日G w l t汇总表.mp4 19.38M

| | ├──i ^ / k j k135-交易域医院患者性别年龄段粒度处方开单最近n日汇总表.mp4 14.57M

| | ├──136-交易域医院患者性别年龄段粒度处方开单支付成功最近n日汇总表.mp4 15.3C f + 0 :1M

| | ├──137-交易域医生粒度问诊最近n日汇总表.mp4 9.04M

| | ├──138-dws nd数据加载脚Y – H ` 3 z S e E本.mp4 48.20M

| | ├──139-交易域医生粒度问诊i f \历史至今汇总表.mp4 67.53M

| | ├──14-安装jdk.mp4 33.08M

| | ├──140-互动域医院用户粒度用户评价历史至今汇总表.mp4 76.54M

| | ├──141s x C !-互动域医院粒度用户评价历史至今汇总表.mp4 65.15M

| | ├──142-9 + E # } xdws td首日数据加载脚本.mp4 32.30M

| | ├──143-dws td每日数据加载脚本.mp4 20.66M

| | ├─V . t h G _ / B─144-ads层设计要点.mp4 14.00M

| | ├──145-交易综合统计.| 4 S `mp4 118.V ` Z50M

| |z j d } N X ├──146-各医院交易统计.mp4 62.41M

| | ├──147-各性别患者交易统计Y { T s f g & a.mp4 26.70M

| | ├──148-各年龄段患者交易统计.mp4s N | Y t Q I E 2Z T I C y x W G f4.09M

| | ├──149-医生变动统计.mp4 69.62M

| | ├──15-环境变量配置说明.mp4 12.34M

| | ├──150-用户变动统计.mp4 31.72M

| | ├──151-评价综合统计.mp4 26.92M

| | ├──152-各医院评价统计B p \ t J t 9 T !.mp4 19.58M

| | ├──153-ads数据加& ; $ A载脚本.mp4 63.10M

| | ├──154-mysql建库建表.mp4 20.52M

| | ├──155-将数据从hdfs导入到mysql演示.mp4 78.59M

| | ├─A C Z 6 5─156-生成datax配置文件.mp4 39.71M

| | ├──157-aV [ ? R ^ $ w , Vds导数据到Mysql脚本.mp4 59.80M

| | ├──158-dolphinschm = 5 D 8 E h aeduler简介.8 * 4 # : F i d _mp4 52.71M

| | ├──159-dolphinschL # Q A T = j R leduler部署说明.mp4 32.77M

| | ├──16-查看进程脚本.mp4 10.31M

| | ├──160-安装do_ U W ; ? blphinscheduler.mp4 152.25M

| | ├──161-安全中心配置.u l Bmp4 26.79M

| | ├──162t D F | M C 7-定义工作流与执行工作流.mp4 46.1 t C52M

| | ├──163-定时调度.mp4 8.77v l XM

| | ├──164-局部参数.mp4 24.36M

| | ├──165-全局参数.mp4 34.62M

| | ├──166-参数传递.mp4 17.17M

| | ├──167-参数的优先级.mp4 26.04M

| | ├──1e k [ Y R \ k G b68-内置参数| k I [ [ x D.mp4 29.01M

| | ├─X # [─169-引用依赖资源.mp4 13.9/ \ : ) j \ I3M

| | ├──17-安装hadoop-配置集群.mp4 61.42M

| | ├──170-告警通知.mp4 31.38M

| | ├──171-失败重试.mp4 9.33M

| | ├──172-生成新数据.mp4 21.59M

| | ├─U f p b─173t \ n x d /-数仓工作流调度.mp4 107.89M

| | ├──174-superset简介.mp4 8.22M

| | ├──175-安装supeq R + m $rset.mp4 155.02M

| | ├──176-superset启动脚本.mp4 40.13M

| | ├──177-superset可视化.mp4 73.26M

| | ├──17+ x h8-总结.mp4 44.73M

| | ├──1a X =8-安装hadoop-配置历史服务器.mp4 31.08M

| | ├──19-hadoop群起脚本1 c 0 @ t w | ) :.mp4 13.66M

| | ├──20-^ & T r @ 4hdf? $ Q Q ^ ( X ^s存储多目录.mp4 21.88M

| | ├─Y V ) h f h─21-集群数据均_ Y | D ;衡.mp4 30.58M

| | ├──22-hados K ` ( G K y * 0op参数调优.mp4 25.67M

| | ├──23-安^ h f t \ l ` + S装zookeeper.mp4 29.11M

| | ├──244 C i j J L ~-zookeeper启动脚本.mp4 14.92M

|q 1 ! & { |} Z x d I q ├──25-zookeeper常用指令.mp4 21.37M

|= u x / { [ k i { | ├──26-安装kafka.mp4 50.58M

| | ├──27-kafka群起脚本.mp4 24.62M

| | ├──t _ E 8 h28-kafka常用指令-topic相关.mp4 62.23M

| | ├──29-kafka常用指令-生产者和消费者相关.mp4 30.27M

| | ├─6 w ) g e 0 0 v A─30-flume安装与项目经验.mp4 20.57M

| | ├──31-安装mysql.mp4 25| & 5 _ | T q w.87M

| |y v 0 7 g { X ├──32-模拟生成数据.mp4 31.96M

| | ├──33-客户端连接异常问题.X t 4mp4 14.48M

| | ├──34-maxwell简介.mp4 18.64M

| | ├──35: [ k L l ` R 2 |-mysql原理.mp4 19.65M

| | ├──36-安装maxwell.mp4 63.09M

| | ├──37-maxwell启动脚本.mp4 32.37M

| | ├──u 8 M 538-maxwell数据同步.mp4 59.42M

| | ├──39-同步策略.mp4 26.87M

| | ├──40-数据同步工具.mp4 24.85M

| | ├──41-datax简介和框架设计.mp4 24.H f x L L U S63M

| | ├──42-datax运行流程.mp4 12.71M

| | ├──43-datax调度思路.mp4 11.22M

| | ├──44-datax与sqoop的对比.mp4 11.20MS W &

| | ├──45-datax安装.mp4 27.14M

| | ├──46-将数据从mysql导入到hdfs-tableMode模式.mp4 95.43M

| | ├──47-将数据从mysql导p } t入到hdfs-querysql模式.mp4 28.50M

| | ├──48-data\ P j ;x传参.mp4 20.10M

| | ├──49-将数据从` n x Ghdfs导入到mysql.mp4 7e t 75.48M

| | ├──50-datax优化.mp4 33.20M

| | ├──51-dataxY A I J k \ a %配置文件生成.mp4 69.06M

| | ├──52-全量表数据同步脚本.mp4 83.24M

| | ├──53N q g @ ! }-flume配置01.mp4 150.07M

| | ├──54-flume配置02.mp4 145.39M

| | ├──55-增量表首日同步l Z ^ s % h R.mp4 37.68M

| | ├──56-flume启动停止脚本.mp4 34.77M

| | ├──57-安装hive.mp4 94.31M

| | ├──58-在线就诊数仓项目简介.mp4 13.89M

| |f = – B g p p o j ├──59-数仓的概念.mp41 ^ l J – 27.24M

| |M \ W n ├──60-数仓架构.mp4 40.46M

| | ├──61-建模的意义.mp4 22 ` 7 B =7.74M# m 8 S 1 / r L c

| | ├──62-ER模型.mp4 75.09M

| | ├──63-维度模型.mp4 25.62M

| | ├──64-事实表介绍.mp4 13.95M= Z V [ T ( c 3

| | ├──65-事务型f Q M w 0 %事实表概述.mp4 18.53M

| | ├──66-事务型事实表的设计流程.mp4 51.60M

| | ├──67-事务型事实表的不足.mp4 2] C 9 E & 6 8 N M5.26M

| | ├──68-事务型事实i v f 2 d ` \ p表的不足.mp4 21.05M

| | ├──69-周期型快照事实表的概念.mp4 32.35M

| | ├──70-周期型快照事实表设计与事实类型.mp4 30.01M

| | ├──71-累积型快照事实表.mp4 55.92M

| | ├──72-维度表设计.mp4 71.61M

| | ├──73-规范化与反规范化.mp4 14? : T – d.54M

| | ├──74M n 9 5 Z-全量快照维度表.mp4 21.09M

| | ├──75-拉链表.mp4 24.41M

| | ├──76-多值维度.mp4 25.88M

| | ├──77-多值属性.mp4 9.03M

| | ├──78-数据仓库的分层.mp4 28.36M

| | ├──79-8 C % k K 3数仓的构建流程.mp4 30.14M

| | ├──80-数据调研` H V x S.mp4 22.06M

| | ├──81-明确数据域.mp4 6.14M

| | ├──82-业务总线矩阵.mp4 1U J Y R c N ~ k 59.58M

| | ├──83-明确统计指标.mp4 42.23M

| | ├──84-维度模型与汇总模型设计.mp4 12.98M

| | ├──85-hive引擎简介.mp4 12.67M

| | ├──86-hive on spark兼容性说明.mp4 13.51M

|w w P | ├──87-搭建hive on spark.mp4 52.16M

| | ├──88-ApplicationMaster资源比例调, 6 H b / F整.mp4 26.73M

| | ├──89-datagrip使用.mp4 34.78M

| | ├──90-模拟产生数据.mp4 92.59M

| | ├──91-hive常见问题和解决方案.mp4 45.86M

| | ├──92-ods层设计要点.mp4 20.28M

|C # ] 6 ? # | ├──Q q e S93-全量表建表.mp4 62.32M

| | ├──94-复杂数据类型回顾.mp4 54.65M

| | ├──95-json1 L ) C ^ 5 ^数据建表.mp4 38.48a P y S \ ^ jM

| | ├──96-增量表建表.mp4 41.55M

| | ├──97-ods数据加载脚本.mp4 101.52M

| | ├──98-维度表建模理论回顾.mp4 32.28M

| | └──99-dim层设计要点.mp4 17.20M

| ├──笔记.zip 36.61M

| ├──代码.zip 664.29kb

| └──资料.zip 2.87G

└──尚硅谷大数据项目之线上问诊实时数仓

| ├──视频

| | ├──01_线上问诊实时数仓尚硅谷W K V u C ^ $ R P大数据项目线上问诊数仓项目(采集D e N g Z i I r+离线+实时)课程介绍.mp4 24.32M

| | ├──02_采集项目数据采集回顾.mp4 96.37M

| | ├─V E & : b 9 j + v─03_线上问诊实时数仓概念介绍.mp4 10.53M

| | ├──04_线上问诊实时数仓核心架构介绍.mp4 17.15M

| | ├──05_实时数仓架构的具体操作流程.mp4 17.23M

| | ├──06_数仓建模ER模型介绍.mp4 17.47M

| | ├──07_数仓建模ER模型三范式介绍.mp4 40.77M

| | ├──08_数仓建模维度模型介绍.mp4 17.47M

| | ├──09_维度建模事实表简单概述.mp4 11.39M

| | ├──1S n ` P Z i0_维度建模事务型事实表介绍.mp4 24.82M

| | ├──11_维度建d X g o b = # p模周期快照事实表.mp4 19.23M

| | ├──12_维度建模累积快照事实表.mp4 12.82M

| | ├──13_维度建模维度表设计流程.mp4 18.20M

| | ├──14_维度表设计规范化和反规范化.mp4 12.15M

| | ├──15_m * 2 3 V \ .维度表设计维度变化的选择.mp4 15.73M

| | ├──16_维度表设计多值维度和多值属性.mp4 2| : R y V4.36M

| | ├──17_数仓分层规划.mp4 15.54M

| | ├──1W # b ^ ! v B i n8_数仓构建流程简单+ i 4 W D 9 p l b介绍.mp4 14.76M

| | ├──19_数仓D O e L ^ [ w ( .数据调研介绍.mp4 18.64M

| | ├──20_数仓分配数据域.mp4 7.35M

| | ├──21_数仓构建业务总线矩阵及维度模型设计.mp4 22.17M

| | ├──22_数仓指标| 5 ; E w 8体系分析.mp4 36.18M

| | ├──23_idV 7 B Sea开发环境准备.mp4 28.% [ Y ] = ?01M

| | ├──24_flia f d znk的环境准备.mp4 15.89M

| | ├──25_$ W 6 $ u n g i 1hbase的环境部署.mp4 52.29M

| | ├─P ! ) n M─26_redis的环境部署.mp4 43.83M

|Z X F + [ L | ├──27_doris的fe部署.mp4 66.93M

| | ├─4 s E * 8─28_do W ooris的be集群安装部署.m_ : 2 8 p +p4 36.32M

| | ├─P ) D z Z 6 =─29_doris的be集群bug解决.mp4 29.59M

| | ├──30_ods_使用kafr c fka存储原始数据.mp4 42.35M

| | ├──31_dim_实时监控实现动态配置维度表元数据信息原理介绍.mp4 50.36M

| | ├──32_flinkCDC测试代码编写.mp4 406.5D D V : f n1M

| | ├──33_dim_整体代码结构介绍.mp4 19.22M

| | ├──34_dim_流式环境创建的方法封装.mp4 57.78M

| | ├──35_dim_读取kafka主流ods层数据.mp4 371.17M

| | ├──36_dim_读取配置表数据.mp4 45.19M

| | ├──37_dim_封装P U : J Y + @hbase, j M r z j * 0获取同步连接.mp4 387.22M

| | ├──38_dimM i ; ` i q_创建hbase中的维度表.mp4 111.18M

| | ├──39_dim_处理合并流完成主流过滤维度表的操作.mp4 156.03M

| | ├──40_dim_写出维度表数据到hbase.mp4 95.91M

| | ├──41_dim_维度表代码测试及整体逻辑回顾.mp4 161.00M

| | ├──42_dI 2 5 ( lwd_flinkSQL的使用方法.mp4 43.+ A * v } J N92M

| | ├─k V a─43_dwd_使用flinkSQL读取ods层数据.mp4 37.03M

| | ├──44_dwd_问诊事实表筛选数据.mp4 36.57M

| | ├──45_dwd_问诊事务事实表数据写出.mp4 23.51M

| | ├──w E o ( 4 I y w g46_dwd_问诊支付成功事实表代码编写及演示.! ! o + r M S H 0mp4 266.71M

| | ├──47_dwd_处方事实表代码编写.mp4 75.08u j ] 8 / JM

| | ├──48_dwd_处方事实表数据测试.mp4 19.66M

| | ├──49_dwd_interval! * @_join的原理介绍.mp4 203.93M

|/ ( [ 6 8 # | ├──50_dwd_处方开单支付事务事实表编写及测试.mp4 99.98M

| | ├──51_dwd_用户注册事务事实表.mp4 40.20M

| | ├──52_dwd_新增患者@ 9 \ .事务事实表.mp4 27.19M

| | ├──53_dwd_医生注册事务事实表.mp4 150.98M

| | ├──54A B :_dws_医院性别年龄粒度问诊聚合需求介绍.mp4 33.35M

| | ├──55_dws_读取dwd层数据并转换结构.mp4 47.67M

| | ├─8 n 0 N v 5 t─56_ $ z = J R e n F_dws_使用异步连接优化维度关联.mp4 42.81M

| | ├──57_dws_旁路缓存优化介绍.mp4 18.41M

| | ├r * 1 [ L + } Y ;──58_dws_实现维度关联的抽象类设计.mp4 768.18M

| | ├──59u Z ( f ~ q G __dws_实现医院id和患者信息的维度关联C N d.mp4 58.25M

| | ├──60_dws_开窗聚合问诊次数及问诊金额代码及演示.m~ / S 8 u _ N S Yp4 86.18 x V , 7 ) m4M

| | ├──61_0 g Tdws_修复补全维度信息O t x ` x 7 E ].mp4 206.63M

| | ├──62_dws_o i T a将javaBean保留需@ R N n +要的字段转换为jsonString.mp4 72.34M

| | ├──63_dws_doriU p R [ f L * ( ps写出工具类编写.mp4 41.66M

| | ├──64_dws_写出数E Y Y 5 5据到doris演b H s . G 6 , _ &示.a g N q M i Dmpp ) * v b –4 69.97M

| | ├──65_dws_问诊支付成功窗口聚合.mp4 128.08M

| | ├──66_dws_处方开单窗口聚合.mp4 528.74M

| | ├──67_dws_处方开单支付窗口聚合.mp4 44.18M

| | ├──68_dws_用户注册的窗4 5 a Q \口聚合.mp4 54.81M

| | ├──69_dws_患者添加窗口聚合.mp4 52.68M

| | ├──70_dws_医生注册窗口汇总.mp4 209.27M

| | ├──71_dww ] _ F ; y D p rs_医院粒度评价表使用状态找出新增评价.mp4 451.60M

| | ├──72_dws_医院粒度评价导出数据.mp4 44.72M

| | ├──7_ 2 X3_大屏可视化流程介y y Y a u绍.mp4 50.23M

| | ├──74_大屏可视化内网穿透展示J x _ ? x {.mp4 27.51M

| | └──75_sugerBI实现可视化展示.mp4 28.07M

| ├──笔记.zY I w K X &ip 25.46M

| ├──代码.zip 74.88kb

| └──资料.zip 5.52G