暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

实时离线数仓实战No.12 | Doris中搭建离线数仓ADS层 →

大数据技能圈 2024-06-11
49

实时离线数仓实战V2是在实时离线数仓实战V1的基础上进行扩展的系列文章。相比V1,V2主要的内容包括数据库表的调整、增加数仓建模的内容扩展、数仓性能调优等内容。

组件安装详细文档请访问:

建议收藏 | 《实时/离线数仓实战》配套组件安装文档 →

访问github及gitee获取代码及相关jar包:

https://github.com/Mrkuhuo/data-warehouse-learning

https://gitee.com/wzylzjtn/data-warehouse-learning

1. 业务数据库模拟数据生成

实时离线数仓实战No.5 | 业务数据生成实战及数据模型梳理 →

2. ods层数仓创建

实时离线数仓实战No.9 | Doris中搭建离线数仓ODS层 →

3. dwd层数仓建设

实时离线数仓实战No.10 | Doris中搭建离线数仓DWD层 →

4. dws层数仓建设

实时离线数仓实战No.11 | Doris中搭建离线数仓DWS层 →

5. ads层数仓建设

流量主题
    1.各渠道流量统计
    ads_traffic_stats_by_channel
    2.路径分析
      ads_page_path
    用户主题
      1.用户变动统计
      ads_user_change
      2.用户留存率
      ads_user_retention
      3.用户新增活跃统计
      ads_user_stats
      4.用户行为漏斗分析
      ads_user_action
      5.新增交易用户统计
      ads_new_buyer_stats


      商品主题
        1.最近7/30日各品牌复购率
        ads_repeat_purchase_by_tm
        2.各品牌商品交易统计
        ads_trade_stats_by_tm
        3.各品类商品交易统计
        ads_trade_stats_by_cate
        4.各分类商品购物车存量Top10
        ads_sku_cart_num_top3_by_cate
        交易主题
          1.交易综合统计
          ads_trade_stats
          2.各省份交易统计
          ads_order_by_province
          优惠券主题
            1.最近30天发布的优惠券的补贴率
              ads_coupon_stats
            活动主题
              1.最近30天发布的活动的补贴率
              ads_activity_stats
              建表语句详情查看目录
                 org/bigdatatechcir/warehousev2/doris/dml/ads

                计算逻辑代码请看目录

                  org/bigdatatechcir/warehousev2/doris/logical/ads

                  配置数据源:

                  dolphinscheduler配置DorisSQL ads计算任务:

                  添加作者加入交流群并获取大数据资料包:

                  精彩推荐

                  实时离线数仓实战No.10 | Doris中搭建离线数仓DWD层 →

                  实时离线数仓实战No.9 | Doris中搭建离线数仓ODS层 →

                  实时离线数仓实战No.8 | 数据仓库开发规范 →

                  实时离线数仓实战No.7 | 数据仓库建模实战 →

                  实时离线数仓实战No.6 | 雪花模型、星形模型与星座模型详解 →

                  深度解析!Hbase核心面试题集锦 →

                  请各位读者动动手指点赞、收藏、在看,您的支持是我持续创作的动力,感谢。

                  文章转载自大数据技能圈,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

                  评论