数据准备与建模:开启数据分析之旅

立即解锁
发布时间: 2025-09-02 01:54:02 阅读量: 10 订阅数: 16 AIGC
PDF

Power BI商业智能入门

### 数据准备与建模:开启数据分析之旅 #### 数据准备的总结与实践 在数据准备阶段,我们从整理和清洗的角度学到了很多处理数据的方法。需要知道的是,使用 Power Query 我们只是触及了其功能的表面。当你发现仅通过用户界面无法满足需求时,可以在高级编辑器中修改 M 查询代码以深入挖掘其潜力。现在,你已经具备了自行准备数据的能力。 完成数据准备后,我们可以用电影数据在报告中添加一个可视化图表来为这项工作画上句号。具体操作步骤如下: 1. 使用“关闭并应用”按钮关闭 Power Query,然后保存更改。 2. 在报告视图中,向画布添加一个簇状柱形图(位于顶部行的第四个图标)。 3. 在 X 轴属性中,添加“流派名称”字段(来自新的“流派”表)和“原始标题”字段(来自“电影”表)。 4. 在 Y 轴属性中添加“收入”字段(默认会显示为“收入总和”,这是没问题的)。 完成上述操作后,你将得到一个类似图 5.32 的可视化图表,它显示出冒险电影是收入最高的流派。如果你点击右上角的向下钻取箭头,然后点击“冒险”列,就可以深入查看构成该高收入类别的不同冒险电影。 #### 数据建模的引入 在前面的内容中,我们讨论了表、列、数据类型和关系。在完成数据准备以用于报告之后,可能会有一些疑问:如何知道哪些数据应该放在哪些表中?是直接从数据源引入数据并将它们混合在一起,还是有更好的混合方式?这就是数据建模发挥作用的地方。 数据建模是一种组织数据的方式,使其与真实实体的属性相对应。例如,我们可以创建一个代表真实天气事件的数据模型。这些天气事件具有类型、发生时间、持续时间和地点等属性。数据模型可以将所有这些数据存储在一个表中,也可以存储在多个表中,这取决于数据模型的用途。 如果要创建一个通过从区域内的多个传感器收集数据来实时记录天气事件的系统,该系统需要具备非常快的性能。在这种情况下,数据模型必须能够以毫秒甚至纳秒的级别处理数据录入。在这个场景中,我们更关注不丢失数据并尽可能快地捕获数据。通常,这样的数据模型可能在气象学家看来与现实不太相符,表可能只是传感器数据的简单汇总,每行只有一两个字段,对分析的作用不大。实际上,收集的数据甚至可能不以类似表的格式存储,此时数据模型与真实实体的对应程度较低。 然而,一旦收集到数据,我们可能希望创建一个更符合气象学家分析需求的不同模型。当他们查看这个模型时,它应该与他们对天气的理解方式相对应,可能包含天气事件、事件类型、地点、持续时间等方面。这样的模型与真实实体的对应程度就会很高。 #### 维度建模的概念 在众多数据建模方法中,最适合 Power BI 且能为报告使用者构建最易理解模型的方法是维度建模。它由 Ralph Kimball 开发,并在他 1996 年的《The Data Warehouse Toolkit: The Definitive Guide to Dimensional Modeling》(现已推出第三版)一书中首次进行了描述。虽然在 Power BI 中创建数据模型时不一定要遵循维度建模(DM)方法,但要知道 Power BI 在设计上是为了在数据符合这种建模方式时能最有效地运行。 维度建模本质上有两种类型的表:一种用于衡量业务流程、活动或事件,称为事实表;另一种用于描述业务流程、活动或事件,称为维度表。 事实表包含与业务活动相关的事实值,这些值几乎总是用于衡量活动某个方面的数值。维度表则包含用于描述业务或组织活动的相关信息。 在数据仓库的早期,数据库有时被称为立方体。这是因为被衡量的活动可以被可视化为一个具有三个维度的立方体,这可能就是维度概念的来源。尽管被称为立方体,但实际上通常会有多个维度。为了便于学习,从三个维度开始有助于我们理解维度建模。 下面通过一个零售交易的例子来说明维度和事实的区别: | 产品 | 商店 | 日历 | | ---- | ---- | ---- | | M&Ms | Ardmore, PA | Mar. 2013 | | Diet Coke | Templ
corwn 最低0.47元/天 解锁专栏
买1年送3月
继续阅读 点击查看下一篇
profit 400次 会员资源下载次数
profit 300万+ 优质博客文章
profit 1000万+ 优质下载资源
profit 1000万+ 优质文库回答
复制全文

相关推荐

勃斯李

大数据技术专家
超过10年工作经验的资深技术专家,曾在一家知名企业担任大数据解决方案高级工程师,负责大数据平台的架构设计和开发工作。后又转战入互联网公司,担任大数据团队的技术负责人,负责整个大数据平台的架构设计、技术选型和团队管理工作。拥有丰富的大数据技术实战经验,在Hadoop、Spark、Flink等大数据技术框架颇有造诣。
最低0.47元/天 解锁专栏
买1年送3月
百万级 高质量VIP文章无限畅学
千万级 优质资源任意下载
千万级 优质文库回答免费看

最新推荐

打造零食推送机器人:从代码实现到硬件采购指南

# 打造零食推送机器人:从代码实现到硬件采购指南 ## 1. 创建零食推送应用 在构建零食推送应用时,我们已经完成了部分代码编写,以下是相关代码: ```html {% for item in items %} <button formaction="{{ item['code'] }}"> {{ item['icon'] }}<br> {{ item['code'] }} </button> {% end %} </form> </body> </html> ``` 现在,应用的大部分功能已就绪,可以开始运行并测试其部分功能。操作步骤如下:

数据处理与非关系型数据库应用指南

### 数据处理与非关系型数据库应用指南 #### 1. 数据转换与处理 在数据处理过程中,有时需要将 CSV 文件转换为 XML 文档,且 XML 文档可能需符合 XML 模式,甚至要遵循用于商业报告的 XBRL 标准(https://en.wikipedia.org/wiki/XBRL )。 数据转换可以涉及两个或更多数据源,以创建一个新的数据源,其属性需符合所需格式。以下是仅涉及两个数据源 A 和 B 的四种数据转换场景,A、B 数据合并生成数据源 C,且 A、B、C 可以有不同的文件格式: - 包含 A 的所有属性和 B 的所有属性。 - 包含 A 的所有属性和 B 的部分属性。

Linux终端实用工具与技巧

# Linux 终端实用工具与技巧 ## 1. gnuplot 绘图与导出 ### 1.1 绘制方程图形 任何方程都可以用特定方式绘制图形。例如,一个斜率为 5、y 轴截距为 3 的直线方程,可使用以下命令生成图形: ```bash plot 5*x + 3 ``` ### 1.2 导出图形为图像文件 虽然能在终端显示图表,但多数情况下,我们希望将图表导出为图像,用于报告或演示。可按以下步骤将 gnuplot 设置为导出图像文件: 1. 切换到 png 模式: ```bash set terminal png ``` 2. 指定图像文件的输出位置,否则屏幕将显示未处理的原始 png 数据:

时间序列、因果关系与文本挖掘:从理论到实践

# 时间序列、因果关系与文本挖掘:从理论到实践 ## 1. 时间序列与因果关系 时间在机器学习和分析领域至关重要。在分析时间序列时,我们需要注意常见的陷阱,并掌握相应的解决方法。以全球温度异常和人类二氧化碳排放为例,我们进行了单变量和双变量时间序列分析。同时,运用格兰杰因果检验来判断大气中二氧化碳水平是否会导致地表温度异常。结果发现,从二氧化碳到温度的格兰杰因果检验的 p 值大于 0.05 但小于 0.10,这表明格兰杰因果检验是研究机器学习问题中因果关系的有效工具。 此外,时间序列分析还有很多值得深入探索的领域,如变化点检测、时间序列分解、非线性预测等,这些方法虽不常被视为机器学习的常用

Vim与Source命令的高效使用指南

### Vim与Source命令的高效使用指南 #### 1. Vim代码片段管理 在Vim中,我们可以创建代码片段文件,以便在编辑时快速插入常用代码。以下是具体步骤: 1. **创建代码片段存储目录**: ```sh [me@linuxbox ~]$ mkdir ~/.vim/snippets [me@linuxbox ~]$ exit ``` 2. **复制文本并创建代码片段文件**: - 在可视模式下高亮并复制文本。 - 打开新缓冲区创建代码片段文件: ``` :e ~/.vim/snippets/gpl.

PHP编程基础与常用操作详解

### PHP编程基础与常用操作详解 #### 1. 变量运算与操作符 在PHP中,变量的运算和操作符的使用是基础且重要的部分。例如: ```php $i += 10; // $i is 110 $i = $i / 2; // $i is 55 $j = $i; // both $j and $i are 55 $i = $j % 11; // $i is 0 ``` 最后一行使用了取模运算符 `%`,它的作用是将左操作数除以右操作数并返回余数。这里 `$i` 为 55,55 除以 11 正好 5 次,没有余数,所以结果为 0。 字符串连接运算符是一个句点 `.`,它的作用是将字符串连接在

深入理解块层I/O处理与调度及SCSI子系统

### 深入理解块层 I/O 处理与调度及 SCSI 子系统 #### 1. I/O 调度器概述 I/O 调度是块层的关键功能。当读写请求经过虚拟文件系统的各层后,最终会到达块层。块层有多种 I/O 调度器,不同调度器适用于不同场景。 #### 2. 常见 I/O 调度器及其适用场景 | 使用场景 | 推荐的 I/O 调度器 | | --- | --- | | 桌面 GUI、交互式应用和软实时应用(如音频和视频播放器) | BFQ,可保证对时间敏感应用的良好系统响应性和低延迟 | | 传统机械驱动器 | BFQ 或 MQ - deadline,两者都适合较慢的驱动器,Kyber/none

利用Terraform打造完美AWS基础设施

### 利用 Terraform 打造完美 AWS 基础设施 #### 1. 建立设计框架 在明确基础设施需求后,下一步是建立一个设计框架来指导开发过程。这包括定义用于构建基础设施的架构原则、标准和模式。使用诸如 Terraform 之类的基础设施即代码(IaC)工具,有助于建立一致的设计框架,并确保基础设施达到高标准。 建立设计框架时,有以下重要考虑因素: - 为应用程序或工作负载选择合适的架构风格,如微服务、无服务器或单体架构。 - 根据已定义的需求和设计原则,选择合适的 AWS 服务和组件来构建基础设施。 - 定义基础设施不同组件之间的关系和依赖,以确保它们能平稳高效地协同工作。 -

x64指令集部分指令详解

# x64指令集部分指令详解 ## 1. ROL/ROR指令 ### 1.1 影响的标志位 |标志位|含义| | ---- | ---- | |O|溢出标志(OF)| |D|方向标志(DF)| |I|中断标志(IF)| |T|陷阱标志(TF)| |S|符号标志(SF)| |Z|零标志(ZF)| |A|辅助进位标志(AF)| |P|奇偶标志(PF)| |C|进位标志(CF)| 其中,ROL和ROR指令会影响OF和CF标志位,具体如下: - ROL:每次移位操作时,最左边的位会复制到CF。 - ROR:每次移位操作时,最右边的位会复制到CF。 - OF:只有按1位移位的形式会修改OF,按CL移

VisualStudioCode与Git的源代码控制

# Visual Studio Code与Git的源代码控制 ## 1. 软件开发中的协作与Visual Studio Code的支持 软件开发通常离不开协作,无论你是开发团队的一员、参与开源项目,还是与客户有交互的独立开发者,协作都是必不可少的。微软大力支持协作和开源,因此Visual Studio Code提供了一个基于Git的集成源代码控制系统,并且可以扩展到其他版本控制服务提供商。 这个系统不仅包含了Visual Studio Code中开箱即用的用于源代码协作的集成工具,还可以通过使用一些扩展来提升工作效率。这些扩展能帮助你更好地审查代码,并将工作成果推送到基于Git的服务,如A