瑞客论坛

 找回密码
 立即注册
查看: 32276|回复: 247

尚硅谷大数据项目之实时数仓项目13天(spark+clickhouse+es)

    [复制链接]

金币29452  第35名

248

主题

-14

回帖

2万

积分

论坛元老

Rank: 8Rank: 8

威望
126
贡献
162
热心值
4
金币
29452
注册时间
2020-8-31
发表于 2020-8-23 14:46 | 显示全部楼层 |阅读模式
课程目录:
├──笔记  
|   ├──为了看到双流丢失数据的现象发送低频数据配置  
|   |   ├──application.properties  1.47kb
|   |   └──BaseDbMaxwell 中发送频率增加500毫秒延迟,用户表只保留300个用户  
|   ├──clickhouse复习上.txt  1.83kb
|   ├──clickhouse复习下.txt  1.71kb
|   ├──dsl课堂.txt  5.00kb
|   ├──dsl课堂下.txt  3.28kb
|   ├──sql另两个答案.txt  2.09kb
|   ├──第八天复习.txt  0.87kb
|   ├──端午节作业(附答案说明).txt  2.38kb
|   ├──端午节作业.txt  0.54kb
|   ├──复习es上.txt  1.68kb
|   ├──复习es下.txt  1.59kb
|   └──课堂ppt.pptx  66.65kb
├──工具  
|   ├──1  
|   |   └──phoenix-5.1.0-SNAPSHOT-hbase-2.2.tar.gz  282.34M
|   ├──clickhouse  
|   |   ├──19版本  
|   |   ├──clickhouse-client-20.4.5.36-2.noarch.rpm  55.38kb
|   |   ├──clickhouse-cnmon-static-20.4.5.36-2.x86_64.rpm  111.79M
|   |   ├──clickhouse-cnmon-static-dbg-20.4.5.36-2.x86_64.rpm  1.09G
|   |   └──clickhouse-server-20.4.5.36-2.noarch.rpm  76.48kb
|   ├──elasticsearch相关  
|   |   ├──elasticsearch-6.6.0.tar.gz  108.82M
|   |   ├──elasticsearch-analysis-ik-6.6.0.zip  4.30M
|   |   └──kibana-6.6.0-linux-x86_64.tar.gz  172.33M
|   ├──hbase2.0.5  
|   |   ├──apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz  416.63M
|   |   ├──hbase-2.0.5-bin.tar.gz  127.37M
|   |   └──尚硅谷大数据技术之HBase.docx  9.97M
|   ├──apache-phoenix-4.14.2-HBase-1.3-bin.tar.gz  331.21M
|   ├──canal.deployer-1.1.4.tar.gz  49.38M
|   ├──maxwell-1.25.0.tar.gz  54.79M
|   ├──nginx-1.12.2.tar.gz  958.68kb
|   ├──phoenix-4.14.2-HBase-1.3-client.jar  98.96M
|   ├──squirrel-sql-3.9.1.zip  137.05M
|   └──squirrel驱动配置图.png  19.88kb
├──课件  
|   ├──clickhouse1.0.5.docx  1.30M
|   ├──ElasticSearch安装.docx  360.72kb
|   ├──ElasticSearch课件1.22.docx  472.83kb
|   ├──大数据实时项目(ads层) .docx  2.36M
|   ├──大数据实时项目(dws层)1.2.docx  154.43kb
|   ├──大数据实时项目(采集部分).docx  893.23kb
|   ├──大数据实时项目(交易额).docx  796.23kb
|   ├──大数据实时项目(日活)1.6.1.docx  738.12kb
|   ├──大数据实时项目(日活).docx  736.80kb
|   ├──课堂ppt.pptx  53.10kb
|   ├──总结 (2).jpeg  808.93kb
|   └──总结.mmap  86.24kb
├──视频  
|   ├──第八天上午  
|   |   ├──1、复习.wmv  26.08M
|   |   ├──2、phoenix工具.wmv  71.87M
|   |   ├──3、查询用户状态.wmv  196.07M
|   |   └──4、维护用户状态.wmv  96.74M
|   ├──第八天下午  
|   |   ├──1、同批次标志修正.wmv  75.87M
|   |   ├──2、维表写入思路.wmv  24.65M
|   |   ├──3、维表的写入.wmv  81.60M
|   |   └──4、维表的关联.wmv  123.34M
|   ├──第二天上午  
|   |   ├──1、采集部署的问题.wmv  122.54M
|   |   ├──2、es介绍.wmv  33.76M
|   |   ├──3、几种数据库的比较.wmv  83.66M
|   |   ├──4、特性与索引.wmv  48.75M
|   |   └──5、安装es.wmv  117.97M
|   ├──第二天下午  
|   |   ├──1、kibana安装.wmv  53.76M
|   |   ├──2、 es数据对象的介绍.wmv  49.67M
|   |   ├──3、 es的数据结构.wmv  32.13M
|   |   ├──4、 es插删改.wmv  41.27M
|   |   └──5、 查询dsl.wmv  146.50M
|   ├──第九天上午  
|   |   ├──1、完成省市热力图.wmv  162.53M
|   |   ├──2、订单明细dwd流准备.wmv  171.56M
|   |   └──3、双流join的问题.wmv  101.30M
|   ├──第九天下午  
|   |   ├──双流join缓存版视频  
|   |   ├──1、验证双流join的处理.wmv  100.21M
|   |   ├──2、双流join的另一种处理方法.wmv  46.26M
|   |   ├──3、join优化.wmv  21.20M
|   |   ├──4、计算实付分摊值思路.wmv  75.30M
|   |   ├──5、思路总结.wmv  37.83M
|   |   └──7、作业.wmv  14.33M
|   ├──第六天上午  
|   |   ├──1、复习.wmv  63.85M
|   |   ├──2、发布数据接口功能.wmv  31.29M
|   |   ├──3、发布查询接口_总数.wmv  148.47M
|   |   └──4、发布查询接口_分时值.wmv  117.02M
|   ├──第六天下午  
|   |   ├──1、canal简介.wmv  52.31M
|   |   └──2、canal的安装.wmv  206.33M
|   ├──第七天上午  
|   |   ├──1、复习.wmv  39.85M
|   |   ├──2、canal的高可用实现.wmv  58.86M
|   |   ├──3、ods层数据分流.wmv  116.35M
|   |   └──4、maxwell的安装及ods层数据分流.wmv  122.02M
|   ├──第七天下午  
|   |   ├──1、关于canal和maxwell发送多分区.wmv  19.84M
|   |   ├──2、需求二分析.wmv  68.61M
|   |   └──3、sql题1.wmv  54.01M
|   ├──第三天上午  
|   |   ├──1、es复习.wmv  53.81M
|   |   ├──2、自定义词库.wmv  100.12M
|   |   ├──3、mapping.wmv  41.80M
|   |   ├──4、别名.wmv  68.17M
|   |   └──5、索引模板.wmv  53.83M
|   ├──第三天下午  
|   |   ├──1、数据保存操作.wmv  100.46M
|   |   └──2、数据查询操作.wmv  150.17M
|   ├──第十二天上午  
|   |   ├──1、clickhouse复习.wmv  44.79M
|   |   ├──2、查询接口开发1.wmv  78.58M
|   |   ├──3、查询接口开发2.wmv  173.15M
|   |   └──4、ads层思路选型.wmv  64.42M
|   ├──第十二天下午  
|   |   ├──1、ads层写入1.wmv  149.15M
|   |   └──2、ads层写入2.wmv  122.85M
|   ├──第十三天上午  
|   |   ├──1、包冲突问题.wmv  25.80M
|   |   ├──2、接口开发.wmv  121.25M
|   |   ├──3、datav可视化配置.wmv  151.09M
|   |   └──4、总结上.wmv  54.05M
|   ├──第十三天下午  
|   |   ├──1、总结2.wmv  84.87M
|   |   ├──2、总结3.wmv  71.50M
|   |   ├──3、总结4.wmv  114.34M
|   |   ├──4、sql1.wmv  70.79M
|   |   └──5、sql3.wmv  85.79M
|   ├──第十天上午  
|   |   ├──1、作业-维度关联.wmv  132.94M
|   |   ├──2、作业-维度关联-调试.wmv  96.37M
|   |   ├──3、作业-分摊金额.wmv  164.73M
|   |   └──4、clickhouse安装.wmv  64.47M
|   ├──第十天下午  
|   |   ├──1、clickhouse特性、数据类型.wmv  110.45M
|   |   └──2、clickhouse表引擎.wmv  191.48M
|   ├──第十一天上午  
|   |   ├──1、复习clickhouse.wmv  75.04M
|   |   ├──2、replacingMergeTree.wmv  56.17M
|   |   ├──3、summingMergeTree.wmv  64.74M
|   |   ├──4、基本操作.wmv  96.84M
|   |   └──5、副本.wmv  84.90M
|   ├──第十一天下午  
|   |   ├──1、分片集群.wmv  182.52M
|   |   └──2、数据写入.wmv  139.21M
|   ├──第四天上午  
|   |   ├──1、复习1.wmv  8.37M
|   |   ├──2、复习2.wmv  38.05M
|   |   ├──3、架构.wmv  55.70M
|   |   ├──4、消费数据.wmv  156.15M
|   |   └──5、格式转换redis工具.wmv  45.75M
|   ├──第四天下午  
|   |   ├──1、redis去重.wmv  158.49M
|   |   └──2、es的批量保存.wmv  110.98M
|   ├──第五天上午  
|   |   ├──1、简单回顾.wmv  15.42M
|   |   ├──2、精确一次消费的概念.wmv  93.72M
|   |   ├──3、相关问题解答.wmv  37.06M
|   |   ├──4、手动偏移量的处理思路.wmv  82.29M
|   |   └──5、手动读取偏移量.wmv  23.21M
|   ├──第五天下午  
|   |   ├──1、手动保存偏移量.wmv  113.44M
|   |   ├──2、幂等性处理.wmv  44.42M
|   |   └──3、kibana可视化配置.wmv  61.81M
|   ├──第一天上午  
|   |   ├──1、项目介绍.wmv  27.82M
|   |   ├──2、离线+实时框架.wmv  90.31M
|   |   ├──3、模拟数据发送.wmv  52.52M
|   |   └──4、springboot日志接收.wmv  158.58M
|   └──第一天下午  
|   |   ├──1、logback落盘日志.wmv  105.59M
|   |   ├──2、git导入的问题.wmv  30.97M
|   |   ├──3、发送kafka.wmv  140.84M
|   |   ├──4、部署到linux.wmv  111.74M
|   |   ├──5、群启脚本.wmv  13.23M
|   |   └──6、nginx部署.wmv  133.91M
└──资料  
|   ├──SQL题  
|   |   ├──ali面试题.png  308.84kb
|   |   ├──sql1答案.txt  1.17kb
|   |   ├──sql另两个答案.txt  2.09kb
|   |   ├──面试sql.docx  19.70kb
|   |   ├──数据样本.txt  1.98kb
|   |   └──微信图片_20181229132920.jpg  61.70kb
|   ├──模拟器-用户行为  
|   |   ├──application.properties  0.60kb
|   |   ├──gmall2020-mock-log-2020-05-10.jar  10.60M
|   |   ├──logback.xml  3.13kb
|   |   └──path.json  0.48kb
|   ├──模拟器_数据库  
|   |   ├──application.properties  1.47kb
|   |   ├──gmall2020-mock-db-2020-05-18.jar  14.40M
|   |   └──记得修改mysql地址,建议用户个数只保留100个  
|   ├──base_province表数据.sql  5.23kb
|   ├──gmall0105.sql  163.17kb
|   ├──gmall2020-mock.zip  58.62M
|   └──log4j.properties  0.38kb
游客,如果您要查看本帖隐藏内容请回复

回复

使用道具 举报

金币7722  第139名

0

主题

2018

回帖

1万

积分

永久会员

Rank: 8Rank: 8

威望
5852
贡献
6182
热心值
0
金币
7722
注册时间
2019-9-4
发表于 2020-8-23 14:53 | 显示全部楼层
尚硅谷大数据项目之实时数仓项目13天
回复

使用道具 举报

金币530  第2954名

0

主题

4372

回帖

1万

积分

论坛元老

Rank: 8Rank: 8

威望
7338
贡献
5667
热心值
0
金币
530
注册时间
2019-10-13
发表于 2020-8-23 15:01 | 显示全部楼层
感谢分享感谢分享感谢分享感谢分享感谢分享感谢分享感谢分享感谢分享感谢分享感谢分享感谢分享
回复

使用道具 举报

金币3680  第416名

0

主题

2670

回帖

8283

积分

论坛元老

Rank: 8Rank: 8

威望
2410
贡献
2193
热心值
0
金币
3680
注册时间
2019-5-25

活跃会员灌水之王一年荣誉奖章在线达人

发表于 2020-8-23 15:16 | 显示全部楼层
66666666666666
回复

使用道具 举报

金币1787  第958名

0

主题

1140

回帖

1万

积分

论坛元老

Rank: 8Rank: 8

威望
4418
贡献
5018
热心值
0
金币
1787
注册时间
2020-7-4
发表于 2020-8-23 15:30 | 显示全部楼层
支持一下这个
回复

使用道具 举报

金币62  第12566名

6

主题

2148

回帖

9653

积分

论坛元老

Rank: 8Rank: 8

威望
4119
贡献
5472
热心值
0
金币
62
注册时间
2019-11-18
发表于 2020-8-23 15:32 | 显示全部楼层
Thanks♪(・ω・)ノ
回复

使用道具 举报

金币38  第13915名

7

主题

1304

回帖

5447

积分

论坛元老

Rank: 8Rank: 8

威望
2537
贡献
2872
热心值
0
金币
38
注册时间
2020-7-16
发表于 2020-8-23 15:40 | 显示全部楼层

尚硅谷大数据项目之实时数仓项目13天
回复

使用道具 举报

金币4545  第308名

0

主题

2338

回帖

1万

积分

论坛元老

Rank: 8Rank: 8

威望
5623
贡献
6272
热心值
0
金币
4545
注册时间
2019-6-29
发表于 2020-8-23 15:42 | 显示全部楼层
666666666666666666
回复

使用道具 举报

金币6397  第175名

32

主题

3071

回帖

1万

积分

论坛元老

Rank: 8Rank: 8

威望
6296
贡献
6440
热心值
1
金币
6397
注册时间
2020-7-19

活跃会员灌水之王一年荣誉奖章最佳新人在线达人

发表于 2020-8-23 15:46 | 显示全部楼层

尚硅谷大数据项目之实时数仓项目13天(spark+clickhouse+es)
回复

使用道具 举报

金币1125  第1476名

0

主题

739

回帖

1141

积分

禁止发言

威望
4
贡献
12
热心值
0
金币
1125
注册时间
2020-8-2
发表于 2020-8-23 15:51 | 显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|瑞客论坛 |网站地图

GMT+8, 2024-11-24 21:26

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表