当前位置:首页 > 全部课程 > 计算平台 > 大数据云计算 > 《大数据综合电商数仓项目(2020)
大数据综合电商数仓项目(2020)

已完结 大数据综合电商数仓项目(2020)

11人已学习 收藏 分享赚 ¥44.9元
价 格
89.00 ~ 449.00
打开微信扫描二维码
点击右上角进行分享

开通以下任意VIP等级即可免费学习本课程

我已阅读并同意《VIP服务协议》
开通 取消

详情

目录

资料(1)

评价(0)

【课程详情】

  • Day01

    • 01_课程介绍

    • 02_用户行为课程介绍

    • 03_数仓概念

    • 04_项目需求

    • 05_技术选型

    • 06_数仓架构

    • 07_框架版本选型

    • 08_服务器选型

    • 09_集群规模

    • 10_集群具体规划

    • 11_埋点数据基本格式

    • 12_事件日志1

    • 13_事件日志2

    • 14_启动日志

    • 15_日志生成

    • 16_虚拟机准备

    • 17_hadoop和jdk安装

    • 18_hadoop启动及ssh

    • 19_项目经验之hdfs配置多目录

    • 20_项目经验之LZO压缩及创建索引

    • 21_项目经验之HDFS写测试

    • 22_项目经验之HDFS读测试


  • Day02

    • 01_回顾

    • 02_项目经验之hadoop参数调优

    • 03_Zookeeper安装

    • 04_Zookeeper启动停止脚本

    • 05_登录式shell和非登录式shell

    • 06_日志启动

    • 07_集群日志生成启动脚本

    • 08_集群时间同步修改脚本

    • 09_集群所有进程查看脚本

    • 10_flume安装

    • 11_项目经验之flume组成

    • 12_flume采集配置

    • 13_flume的ETL拦截器

    • 14_flume的分类型拦截器

    • 15_flume启动停止脚本

    • 16_生成日志到flume采集通道打通

    • 17_kafka安装

    • 18_kafka启动停止脚本

    • 19_kafka通道打通

    • 20_kafka压力测试

    • 21_项目经验之Kafka机器数量计算


  • Day03

    • 01_回顾

    • 02_flume消费Kafka配置

    • 03_项目经验之Flume组件

    • 04_日志消费Flume启动停止脚本

    • 05_项目经验之Flume内存优化

    • 06_采集通道启动停止脚本

    • 07_知识回顾linux_shell_hadoop

    • 08_知识点回顾_zk_flume

    • 09_知识点回顾_kafka(上)

    • 10_知识点回顾_kafka(下)

    • 11_业务数仓课程简介

    • 12_业务数仓_电商业务流程

    • 13_业务数仓_电商常识(SKU、SPU)


  • Day04

    • 01_业务数仓_电商表结构

    • 02_业务数仓_电商表介绍

    • 03_业务数仓_mysql安装

    • 04_业务数仓_sqoop安装

    • 05_业务数仓_业务数据生成

    • 06_业务数仓_同步策略

    • 07_业务数仓_分析表同步策略

    • 08_业务数仓_脚本中前一天时间获取

    • 09_业务数仓_sqoop参数说明

    • 10_业务数仓_sqoop脚本完成

    • 11_业务数仓_20200310数据导入过程

    • 12_业务数仓_20200311数据导入过程

    • 13_业务数仓_数据导入成功后查看

    • 14_业务数仓_hive安装

    • 15_业务数仓_tez安装


  • Day05

    • 01_今日回顾

    • 02_数仓项目_课程介绍

    • 03_数仓项目_数仓分层及好处

    • 04_数仓项目_数据集市与数据仓库概念

    • 05_数仓项目_命名规范

    • 06_数仓项目_范式概念

    • 07_数仓项目_函数依赖

    • 08_数仓项目_三范式

    • 09_数仓项目_关系建模和维度建模

    • 10_数仓项目_维度表

    • 11_数仓项目_事实表

    • 12_数仓建模_ODS层

    • 13_数仓建模_DWD层

    • 14_数仓建模_DWS_DWT_ADS层

    • 15_数仓建模_总结建模

    • 16_数仓搭建_创建数据库

    • 17_数仓搭建_ods层_启动日志处理

    • 18_数仓搭建_ods层_事件日志处理

    • 19_数仓搭建_ods层_单引号和双引号区别

    • 20_数仓搭建_ods层_用户行为脚本

    • 21_数仓搭建_ods层_业务数据脚本


  • Day06

    • 01_每日回顾

    • 02_数仓搭建_dwd层_启动日志表

    • 03_数仓搭建_dwd层_启动日志表脚本

    • 04_数仓搭建_dwd层_事件日志表解析分析

    • 05_数仓搭建_dwd层_事件日志表建表

    • 06_数仓搭建_dwd层_自定义UDF函数

    • 07_数仓搭建_dwd层_自定义UDTF函数

    • 08_数仓搭建_dwd层_解析事件日志基础明细表

    • 09_数仓搭建_dwd层_解析脚本

    • 10_数仓搭建_dwd层_事件日志(3月10日完成)

    • 11_数仓搭建_dwd层_事件日志脚本(3月11日完成)

    • 12_数仓搭建_dwd层_业务_商品维度

    • 13_数仓搭建_dwd层_业务_优惠卷维度

    • 14_数仓搭建_dwd层_业务_活动维度


  • Day07

    • 01_每日回顾

    • 03_数仓建模_dwd层_时间维度

    • 04_数仓建模_dwd层_订单明细事实表

    • 05_数仓建模_dwd层_支付事实表

    • 06_数仓建模_dwd层_退款事实表

    • 07_数仓建模_dwd层_评论事实表

    • 08_数仓建模_dwd层_加购事实表

    • 09_数仓建模_dwd层_收藏事实表

    • 10_数仓建模_dwd层_优惠卷事实表分析

    • 11_数仓建模_dwd层_优惠卷事实表完成

    • 12_数仓建模_dwd层_基本函数

    • 13_数仓建模_dwd层_订单事实表分析

    • 14_数仓建模_dwd层_订单事实表完成

    • 15_数仓建模_dwd层_拉链表理论

    • 16_数仓建模_dwd层_拉链表实操


  • Day08

    • 01_每日回顾

    • 02_数仓建模_dwd层_脚本编写

    • 03_数仓建模_dws层_业务术语

    • 04_数仓建模_dws层_基本函数

    • 05_数仓建模_dws层_dws_dwt_ads介绍

    • 06_数仓建模_dws层_每日设备行为宽表

    • 07_数仓建模_dwt层_设备主题

    • 08_数仓建模_dws层_会员行为宽表

    • 09_数仓建模_dwt层_会员主题宽表

    • 10_数仓建模_dws层_商品主题宽表

    • 11_数仓建模_dwt层_商品主题

    • 12_数仓建模_dws层_优惠卷及活动宽表

    • 13_数仓建模_dws层_每日购买行为宽表


  • Day09

    • 00_数据仓库_数仓架构回顾

    • 01_数据仓库_ADS_活跃设备数

    • 02_数据仓库_ADS_沉默用户

    • 02_数据仓库_ADS_新增设备数

    • 04_数据仓库_ADS_活跃设备讲解

    • 05_数据仓库_ADS_新增设备讲解

    • 06_数据仓库_ADS_沉默设备讲解

    • 08_数据仓库_ADS_流失设备需求分析

    • 09_数据仓库_ADS_留存率需求分析

    • 10_数据仓库_ADS_连续需求分析


  • Day10

    • 00_数仓搭建_dwt_sku_topic_纠错

    • 01_数仓搭建_ADS_本周回流用户

    • 02_数仓搭建_ADS_流失用户

    • 03_数仓搭建_ADS_留存率_思路分析

    • 04_数仓搭建_ADS_留存率_编码

    • 05_数仓搭建_ADS_连续三周活跃

    • 06_数仓搭建_ADS_本周回流_补充

    • 07_数仓搭建_ADS_最近7天连续3天

    • 08_数仓搭建_ADS_最近7天连续3天_思路二

    • 09_数仓搭建_ADS_会员主题信息_需求分析

    • 10_数仓搭建_ADS_漏斗分析_需求分析

    • 11_数仓搭建_ADS_商品销量TopN_需求分析

    • 12_数仓搭建_ADS_商品收藏TopN_需求分析

    • 13_数仓搭建_ADS_会员信息统计

    • 14_数仓搭建_ADS_漏斗分析

    • 15_数仓搭建_ADS_商品个数统计

    • 16_数仓搭建_ADS_销量_收藏_topN

    • 17_数仓搭建_ADS_商品加购_需求分析

    • 18_数仓搭建_ADS_商品退款率_需求分析

    • 19_数仓搭建_ADS_商品差评率_需求分析

    • 20_数仓搭建_ADS_下单数目统计_需求分析

    • 21_数仓搭建_ADS_支付信息统计_需求分析

    • 22_数仓搭建_ADS_复购率_需求分析


  • Day11

    • 00_数仓搭建_画图软件

    • 01_数仓搭建_ADS_商品加购排行

    • 02_数仓搭建_ADS_商品退款率排行

    • 03_数仓搭建_ADS_商品差评率排行

    • 04_数仓搭建_ADS_下单信息统计

    • 05_数仓搭建_ADS_支付信息统计

    • 06_数仓搭建_ADS_复购率

    • 07_数仓搭建_ADS_azkaban_工作流程分析

    • 08_数仓搭建_ADS_azkaban_部署_准备

    • 09_数仓搭建_ADS_azkaban_部署_配置

    • 10_数仓搭建_ADS_azkaban_Mysql建库建表

    • 11_数仓搭建_ADS_Sqoop导出脚本

    • 12_数仓搭建_ADS_Azkaban数据准备

    • 13_数仓搭建_ADS_Azkaban_job文件

    • 14_数仓搭建_ADS_Azkaban_shell脚本准备

    • 15_数仓搭建_ADS_Azkaban_定时调度

    • 16_数仓搭建_ADS_Azkaban_调度结果


  • Day12

    • 01_拉链表复习

    • 02_商品主题宽表纠错

    • 03_Azkaban任务重跑问题

    • 04_数仓搭建_数据可视化_superset

    • 05_数仓搭建_数据可视化_superset_miniconda介绍

    • 06_数仓搭建_数据可视化_superset_miniconda安装

    • 07_数仓搭建_数据可视化_superset_Python环境创建

    • 08_数仓搭建_数据可视化_superset_安装

    • 09_数仓搭建_数据可视化_superset_配置

    • 10_数仓搭建_数据可视化_superset_启停

    • 11_数仓搭建_数据可视化_superset_对接mysql_安装依赖

    • 12_数仓搭建_数据可视化_superset_对接mysql_数据源配置

    • 13_数仓搭建_数据可视化_superset_对接mysql_配置仪表盘_图形

    • 14_数仓搭建_数据可视化_superset_对接mysql_配置仪表盘

    • 15_数仓搭建_数据可视化_superset_使用补充

    • 16_数仓搭建_即席查询_概述

    • 17_数仓搭建_即席查询_Kylin_概述

    • 17_数仓搭建_即席查询_Kylin_前置知识

    • 19_数仓搭建_即席查询_Kylin_机构_特点

    • 20_数仓搭建_即席查询_Kylin_部署_解压

    • 21_数仓搭建_即席查询_Kylin_部署_Hbase

    • 22_数仓搭建_即席查询_Kylin_部署_环境变量

    • 23_数仓搭建_即席查询_Kylin_部署_启动准备

    • 24_数仓搭建_即席查询_Kylin_部署_启动

    • 24_数仓搭建_即席查询_Kylin_部署_启动错误_解决方案

    • 26_数仓搭建_即席查询_Kylin_使用_定义model

    • 27_数仓搭建_即席查询_Kylin_使用_定义cube

    • 28_数仓搭建_即席查询_Kylin_使用_重复key问题解决


  • Day13

    • 00_hadoop_历史服务器问题原因

    • 01_数仓搭建_即席查询_kylin_查询

    • 02_数仓搭建_即席查询_kylin_定时调度脚本

    • 03_数仓搭建_即席查询_kylin_cube存储原理

    • 04_数仓搭建_即席查询_kylin_cube构建原理

    • 05_数仓搭建_即席查询_kylin_cube_优化_聚合组

    • 06_数仓搭建_即席查询_kylin_cube_优化_衍生维度

    • 07_数仓搭建_即席查询_kylin_cube_优化_Rowkey设计

    • 08_数仓搭建_即席查询_kylin_cube_优化_并发粒度优化

    • 09_数仓搭建_即席查询_kylin_cube_BI对接_JDBC

    • 10_数仓搭建_即席查询_kylin_cube_BI对接_Zeppelin

    • 11_数仓搭建_即席查询_Presto_概念

    • 12_数仓搭建_即席查询_Presto_部署_server

    • 13_数仓搭建_即席查询_Presto_启动_Server

    • 14_数仓搭建_即席查询_Presto_部署_命令行客户端

    • 15_数仓搭建_即席查询_Presto_部署_可视化客户端

    • 16_数仓搭建_即席查询_Presto_使用注意事项

    • 17_数仓搭建_即席查询_Druid_概述

    • 18_数仓搭建_即席查询_Druid_对比

    • 19_数仓搭建_即席查询_Druid_架构

    • 20_数仓搭建_即席查询_Druid_数据结构

    • 21_数仓搭建_即席查询_Druid_部署

    • 22_数仓搭建_即席查询_Druid_使用


  • Day14

    • 01_数仓搭建_集群监控_Zabbix_概述

    • 02_数仓搭建_集群监控_Zabbix_架构

    • 03_数仓搭建_集群监控_Zabbix_部署_说明

    • 04_数仓搭建_集群监控_Zabbix_部署_server节点_准备

    • 05_数仓搭建_集群监控_Zabbix_部署_server节点_创建用户_建库建表

    • 06_数仓搭建_集群监控_Zabbix_部署_server节点_编译环境准备

    • 06_数仓搭建_集群监控_Zabbix_部署_server节点_编译及安装

    • 07_数仓搭建_集群监控_Zabbix_部署_server节点_配置

    • 08_数仓搭建_集群监控_Zabbix_部署_server节点_系统服务脚本编写

    • 09_数仓搭建_集群监控_Zabbix_部署_server节点_web部署

    • 10_数仓搭建_集群监控_Zabbix_部署_server节点_启动

    • 11_数仓搭建_集群监控_Zabbix_部署_server节点_web

    • 12_数仓搭建_集群监控_Zabbix_部署_agent_节点部署

    • 13_数仓搭建_集群监控_Zabbix_使用_术语

    • 14_数仓搭建_集群监控_Zabbix_使用_创建主机

    • 15_数仓搭建_集群监控_Zabbix_使用_创建监控项

    • 16_数仓搭建_集群监控_Zabbix_使用_创建触发器

    • 17_数仓搭建_集群监控_Zabbix_使用_创建动作

    • 18_数仓搭建_集群监控_Zabbix_使用_通知媒介配置

    • 19_数仓搭建_集群监控_Zabbix_使用_全流程测试

    • 20_数仓搭建_集群监控_Zabbix_使用_创建模板


  • Day15

    • 01_课程背景

    • 02_atlas_课程介绍

    • 03_atlas_架构原理

    • 04_辅助框架安装

    • 05_atlas_集成外部组件及执行脚本

    • 06_atlas_执行效果


相关说明:

1、资源部分来源于网络公开发表文件,所有资料仅供学习交流。

2、所收取费用仅用来维系网站运营,性质为用户友情赞助,并非售卖文件费用。

3、如侵犯您的权益,请联系管理员处理。

Day12[28课时]

01_拉链表复习 (12:19)

02_商品主题宽表纠错 (07:12)

03_Azkaban任务重跑问题 (04:30)

04_数仓搭建_数据可视化_superset (07:06)

05_数仓搭建_数据可视化_superset_miniconda介绍 (06:28)

06_数仓搭建_数据可视化_superset_miniconda安装 (07:26)

07_数仓搭建_数据可视化_superset_Python环境创建 (04:35)

08_数仓搭建_数据可视化_superset_安装 (06:13)

09_数仓搭建_数据可视化_superset_配置 (04:27)

10_数仓搭建_数据可视化_superset_启停 (06:59)

11_数仓搭建_数据可视化_superset_对接mysql_安装依赖 (05:39)

12_数仓搭建_数据可视化_superset_对接mysql_数据源配置 (05:50)

13_数仓搭建_数据可视化_superset_对接mysql_配置仪表盘_图形 (10:26)

14_数仓搭建_数据可视化_superset_对接mysql_配置仪表盘 (02:40)

15_数仓搭建_数据可视化_superset_使用补充 (03:50)

16_数仓搭建_即席查询_概述 (06:54)

17_数仓搭建_即席查询_Kylin_概述 (06:08)

17_数仓搭建_即席查询_Kylin_前置知识 (29:50)

19_数仓搭建_即席查询_Kylin_机构_特点 (17:40)

20_数仓搭建_即席查询_Kylin_部署_解压 (05:26)

21_数仓搭建_即席查询_Kylin_部署_Hbase (11:19)

22_数仓搭建_即席查询_Kylin_部署_环境变量 (03:21)

23_数仓搭建_即席查询_Kylin_部署_启动准备 (04:41)

24_数仓搭建_即席查询_Kylin_部署_启动 (02:59)

24_数仓搭建_即席查询_Kylin_部署_启动错误_解决方案 (05:56)

26_数仓搭建_即席查询_Kylin_使用_定义model (17:07)

27_数仓搭建_即席查询_Kylin_使用_定义cube (14:49)

28_数仓搭建_即席查询_Kylin_使用_重复key问题解决 (16:55)

综合
好评
0%
  • 综合评分5.00
  • 内容实用5.00
  • 通俗易懂5.00
友情链接:

邮箱:didabiancheng@126.com

地址:厦门火炬高新区软件园创新大厦C区3F-A487

Android/IOS App

微信小程序

微信公众号

VIP特权
微信客服
微信扫一扫咨询客服