Spark基础知识16-Scala模式匹配、类型匹配、守卫、case、option的基本使用

已于 2024-10-22 14:38:27 修改
阅读量200 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： # Scala 文章标签： scala spark 开发语言
于 2023-06-07 16:45:02 首次发布
本文为博主原创文章，未经博主允许，不得转载！！
本文链接：https://blog.csdn.net/qq_52128187/article/details/131090059
文章介绍了Scala语言中的模式匹配机制，包括简单的匹配示例、如何处理更多信息，以及在List中的类型匹配问题。同时，文章强调了Option类型的重要角色，Option分为Some和None，提供了getOrElse方法来处理可能存在的空值情况，特别适用于处理可能缺失的上游数据。在Spark流计算中，Option也有特殊的应用。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

 简单匹配示例

 可以获取匹配的值

我想可以用到项目中，而不是DAXQ都是if else ，具体还没想好怎么写

如果想获取更多信息呢，4 is not allowed,如果能获取到4呢，加一个变量名称例如unexpected 

 

Scala可以对表达式的类型进行匹配

注：如果后面再来看我可能会有点小疑问，List里面应该都是相同类型数据，而下面Int,Double,String,都有呢。

最好的解释是如果创建不同类型的List,则列表会变成List[Any],元素都变成Any类型而失去原来的类型信息，在匹配时在判断类型。

 守卫

在模式匹配中加入处理逻辑

for循环中的模式

 case类匹配（样例类）

Option类型

 返回值有值时some

返回值无值时none

 option具体例子

把5封装在some子类中返回，

some（有值）,none（值不存在）是Pption[Int]的子类

 好处：getOrElse方法

太好用了！基本上写项目代码时都会用到，获取上游数据，在平台DA的3.1.9上游有应用，返回有意义的结果

特殊的处理，spark流计算时。

 option注意点

foreach

大数据开发-Scala-类型检查与模式匹配详解
Hoult丶吴邪
12-20 324
0.前言 类型检查和类型转换在每个语言里面都有对应实现，比如Java中的instanceof 和 isInstance，当然Scala语言也有，但是相对于其他语言，Scala为了简化开发，产生了强大的模式匹配，其原理和Java中的switch-case很类似，但是其匹配能力更强，不仅仅可以匹配值，匹配类型，也可以进行类匹配，还可以进行前缀类匹配，而且在Spark源码中大量使用了模式匹配，另外的就是隐式转换，在另外一篇文章讲解，本文从类型检查和类型转换入手，引入Scala常见的几种模式匹配及其使用。 1.类型
6、Scala模式匹配
最新发布
天涯雨的博客
05-26 770
Scala模式匹配
spark模式匹配使用
weixin_47699191的博客
05-27 431
package com.kaishu.warehouse.ks.ads import com.kaishu.tools.{DateUtils, SparkManager} import org.apache.spark.SparkConf import org.apache.spark.sql.{SaveMode, SparkSession} /** * 创建人: xiaotao * 创建日期: Created on 2022-05-26 * 数据开发功能描述: 新用户收入日报表2 * 目标
一次说清scala-spark中的模式匹配，样例类以及option
m0_54476097的博客
12-12 3330
目录目录 前言 一、模式匹配是什么？ 二、模式匹配案例 1.简单模式匹配 2.类型模式匹配 3.样例类模式匹配 样例类是什么？ 样例类的模式匹配 4.option类 前言 在spark中scala的模式匹配是重要的功能，它大量体现在spark的源码之中，它的作用与Java中的switch语句相似 一、模式匹配是什么？ 模式匹配就是Java中的switch语句，如果能够匹配的上，就会执行case的语句，如果匹配不上，就会默认匹配case_，相当于Java中的默认值，与switc.
spark笔记之模式匹配和样例类
weixin_34310369的博客
08-02 259
阶有一个十分强大的模式匹配机制，可以应用到很多场合：如开关语句，类型检查等并且阶还提供了样例类，对模式匹配进行了优化，可以快速进行匹配。1.1。匹配字符串 package cn.itcast.cases import scala.util.Random object CaseDemo01 extends App{ val arr = Array("hadoop", "zookeeper", ...
spark Scala模式匹配
星光不负赶路人
03-26 227
点此
scala模式匹配之守卫
m0_58535137的博客
02-07 272
object 守卫 { def main(args: Array[String]): Unit = { println("请输入一个整数：") val a = StdIn.readInt() a match { // 格式：case 变量名 if 判断条件 => 表达式 // 如果a>=0且a<=3，打印[0-3] case x if x >= 0 && x <= 3 => println
Scala学习笔记-方便查找使用 为Spark学习打基础
楠楠好难
02-05 4863
Scala学习伊始为什么是Scala网课环境电脑环境安装IDEA插件安装IDEA关联Scala源码基础部分文档注释和生成字符串的三种输出变量和常量数据类型数据类型体系图小结具体数据类型 伊始 为什么是Scala 毕业设计所逼，我课题是《基于spark的实时音乐推荐系统》，而Spark是用Scala开发的，使用Scala必然最合适。虽然Spark提供了Java、Python等的API，但貌似效果不如Scala。 网课 自己找了个网课，开干
spark进阶（三）：scala基础
泛泛之素
10-05 1438
spark进阶（三）：scala基础 Spark本身就是使用Scala语言开发的，spark和flink的底层通讯都是基于的高并发架构akka开发，然而akka是用scala开发的，Scala与Spark可以实现无缝结合，因此，Scala顺理成章地成为了开发Spark应用的首选语言，大多数spark教程都是基于scala编写，学习一下scala也是很必要的。 这里只对scala在spark中使用的部分进行记录，不涉及一些复杂的scala使用，只保证能正常使用spark即可。 对于scale的话，学过kotl
3. Scala 高阶语法之面向对象和模式匹配
wlyang666的博客
01-12 960
上一节，介绍了scala中常见的数据结构：集合和元组。我们知道，scala既是面向对象，又是面向过程的，本文，我会介绍scala对于面向对象的支持以及scala中非常强大的功能模式匹配
Scala模式匹配：条件守卫
学亮编程手记
04-18 736
Spark基础-Scala模式匹配
Xlucas的博客
08-21 1048
核心 1、scala中的模式匹配package com.xlucas/** * Created by xlucas on 2017/8/20 0020. */ class data case class data1(name:String) extends data case class data2(name:String) extends data object MatchOop
spark中使用Ordered自定义排序规则-模式匹配
会飞的鱼
02-22 775
定义一个数组 val girl: Array[String] = Array(“reba,18,80”,“mimi,22,70”,“liya,30,80”,“jingtian,18,85”) 按照年龄和体重进行排序 年龄小的排前面，如果年龄相同，体重大的排前面，有两个排序条件 定义样例类实现排序方式 当一个类被定义成为case类后，Scala会自动帮你创建一个伴生对象 实例化不需要new关键字 c...
Scala模式匹配详解(第八章:基本语法、模式守卫、模式匹配类型)(尚硅谷笔记)
Argonaut_的博客
02-22 1246
➢ val user = User(“zhangsan”,11)，该语句在执行时，实际调用的是 User 伴生对象中的。➢ case 中对象的 unapply 方法(提取器)返回 Some，且所有属性均一致，才算匹配成功,该偏函数的输入类型为 List[Int]，而我们需要的是第一个元素是 0 的集合，这就是通过模式。要匹配时，会从第一个 case 分支开始，如果匹配成功，那么执行对应的逻辑代码，如果匹。Scala 中，模式匹配可以匹配所有的字面量，包括字符串，字符，数字，布尔值等等。
大数据Saprk----Spark基础--Scala的样例类和模式匹配
qq_39923024的博客
11-14 822
first Codec public class Friend { public static void main(String[] args){ System.out.println(&amp;amp;quot;BigData：&amp;amp;quot;+&amp;amp;quot;--&amp;amp;quot;+&amp;amp;quot;947967114&amp;amp;quot;); } } 1、简单示例 首先我们先做一
Spark学习笔记4-Scala模式匹配
Xianming的专栏
01-26 2474
1. 模式匹配Scala中的模式匹配用的关键字是match－case。类似java中的switch－case语句。 1.1 值的模式匹配代码如下： 定义一个函数bigData。对传入的参数做模式匹配。 scala> def bigData(data: String){ | data match{ | case “Spark” => println(“Wow”)
Scala学习(十二)---模式匹配
weixin_47109902的博客
06-04 950
1.样例类仍然是类，和普通类相比，只是其自动生成了伴生对象，并且伴生对象中自动提供了一些常用的方法，比如：apply,unapply,toString,equals,hashCode和copy方法2.样例类是为模式匹配而优化的类，因为默认提供了unapply方法，因此样例类可以直接使用模式匹配，无需自己实现unapply方法3.构造器中每一个参数都是val。
scala基础语法-match模式匹配
sparkjvm的专栏
01-04 2648
package org.xj.scala.spark /**  * 模式匹配  */ class Basic5 { } //样例类，不可变性，val定义，不建议var ||-->常用于模式匹配 /**  * case class(多用在匹模式匹配中)  * 构造器中的每一个类型都为val，不建议使用var  *   不用new就可以直接产生对象(为什么?
Scala学习笔记_3 case语句与偏函数
scala&lift技术博客
07-04 575
Scala通过case语句提供了形式简单、功能强大的模式匹配功能。但是也许你不知道，Scala还具有一个与case语句相关的语言特性，那就是：在Scala中，被“{}”包含的一系列case语句可以被看成是一个函数字面量，它可以被用在任何普通的函数字面量适用的地方，例如被当做参数传递。 [code="scala"] scala> val defaultValue:Option[Int] => I...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

BigData_老李

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值