- 博客(6)
- 收藏
- 关注
RSS订阅原创 关于大数据生态与Spark简介（一）
大数据生态与Spark 1. 大数据技术概述 大数据不仅仅是数据的“大量化”，而是包含“快速化”、“多样化”和“价值化”等多重属性。 大数据是由结构化和非结构化数据组成的 10%的结构化数据，存储在数据库中 90%的非结构化数据，它们与人类信息密切相关 在思维方式方面，大数据完全颠覆了传统的思维方式： 全样而非抽样 效率而非精确 相关而非因果 大数据技术的不同层面及其功能 两大核心技术为分布式存储和分布式处理 GFS\HDFS BigTable\HBase NoSQL（键值、列族、图形、文档数据
2021-03-01 10:23:26
399
原创 Python笔记（四）
模块，包 模块 Python中的模块是一个 .py 文件 内部可以包含定义好的函数、变量、类、数据、执行的功能 可以用作内置模块，自定义模块，第三方模块 调用模块可以简化开发，减少代码量(使用原因) （怎么使用）使用“import 模块名”或“from 模块名 import 函数名，变量名，类名”: “import 模块名”: import sys print(sys.version) input() “from 模块名 import 函数名,变量名，类名”: m1: def hello():
2020-11-18 11:06:12
245
原创 Python笔记（三）
python文件 **文本文件：**持久化字符串到磁盘空间的数据 python使用open函数操作数据 open函数的返回值是一个file对象 路径: open("D:\\Python\\test\\a.txt") # \\ open(r"E:\java\jdbc\mysql-5.10.11.jar") # r\ open("/home/stu/test/a.txt") # / linux写法 open("test/a.txt") # / 相对路径 mode:“r”,“w”,
2020-11-18 10:21:59
203
1
原创 Python笔记(二)
匿名函数：定义时没有函数名的函数，临时只使用一次的简单函数，一般用于给高阶函数传参 递归函数：在函数内部调用自己的函数 递归函数要有结束条件，用于退出递归 在生成器函数中用yield关键字来返回数据 yield返回数据后，函数没有结束，只是暂停 生成器对象：生成器函数执行后的结果 生成器的值是一个一个返回的 使用场景：处理大量数据，节省内存空间 高阶函数 其中一个或多个是函数对象 返回值是函数对象 让代码编写异常灵活 函数加()执行函数，结果是函数的返回值 定义好的函数名，函数对象 将函数作为高阶函数时，不
2020-11-17 10:11:11
222
原创 Python笔记（一）
函数:是一个被封装起来的具有特定功能的代码段，可以被重复调用执行 参数: 形参:函数的局部变量，用于接收函数外部的数据 实参:调用执行函数时，给它传递的外部的数据 传参:将实参的值赋值给形参 返回值:将函数内部的数据复制到函数外部 return 返回值1,返回值2… 参数的类型有 1.位置参数:实参的赋值和形参定义的位置一致 2.命名参数:实参的顺序可以和形参不一致，执行函数时使用 (形参=实参) 3.默认值参数:定义函数时，给形参默认值，当没有实参时执行函数会使用默认值，没有默认值时会报错 默认值形参必须
2020-11-03 20:59:43
752
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人