IT博客汇
  • 首页
  • 精华
  • 技术
  • 设计
  • 资讯
  • 扯淡
  • 权利声明
  • 登录 注册

    聊聊数据仓库

    liuzhoulong发表于 2022-10-17 17:21:23
    love 0
    ] 传统数仓的解决方案,行为分析的解决方案 1. 使用数据的底表和表的字段 2. 定义中间表的创建逻辑(过滤条件,分组条件,指标计算) 3. 最终结果的业务逻辑 4. 查询优化 (过滤前置,数据倾斜,shuffle,关联方式…[] 实时数仓解决方案:1,通过模型字段扩展,预先定义用户新增日期,当日活跃状态,设备类型等状态, 2,实时更新用户的属性 3,通过where条件过滤的方式。模型定义后,对模型生成效率的优化至关重要,不一样的解决方式,会影响模型的查询生成效率,模型的复用度,影响用户使用体验。


沪ICP备19023445号-2号
友情链接