大数据数仓项目--知行教育_访问咨询主题_全量流程

AIMaynor

于 2020-12-25 16:17:27 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏： # 大数据教育数仓项目

本文链接：https://blog.csdn.net/xianyu120/article/details/111686465

大数据教育数仓项目专栏收录该内容

30 篇文章 ¥79.90 ¥99.00

订阅专栏

文章目录

4.6 全量流程

OLTP原始数据(mysql)——》数据采集(ODS)——》清洗转换(DWD)——》统计分析(DWS)——》导出至OLAP(Mysql)，如图：
在这里插入图片描述

4.6.1 数据采集

4.6.1.1 web_chat_ems表
4.6.1.1.1 SQL：

select id,
       create_date_time,
       session_id,
       sid,
       create_time,
       seo_source,
       seo_keywords,
       ip,
       area,
       country,
       province,
       city,
       origin_channel,
       user         as user_match,
       manual_time,
       begin_time,
       end_time,
       last_customer_msg_time_stamp,
       last_agent_msg_time_stamp,
       re

了解本专栏