- 博客(5)
- 收藏
- 关注
原创 Java阶段复习
Java基础 数组 一组连续空间,存储多个相同类型的值 特点 数据类型相同 长度固定 数组的扩容 创建一个新数组,使用For循环将元素逐一赋值 System.arraycopy(原数组名,原数组起始下标,新数组名,新数组起始下标,复制的长度) Java.util.Arrays.copyOf(原数组名,新数组名) 排序 冒泡(相邻两个元素两两比较,互换位置) 选择(固定值和其他值依次比...
2020-04-09 22:03:35
2612
原创 大数据阶段资料巩固
大数据复习 概念 巨量数据集合,指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 特点 大量化Volume 、 价值化Value 、 多样化Variety 、 真实性Veracity Linux操作系统 版本 CentOS7.2 指令 文件操作相关 ls 、ll、mk...
2020-04-09 21:36:57
1595
原创 Apache Flink Standalone or HA搭建
Apache Flink(三) Standalone模式 前提条件 JDK1.8+安装完成 HDFS正常启动(SSH免密认证) 设置CentOS进程数和文件数(重启生效) -可选 [root@HadoopNode00 ~]# vi /etc/security/limits.conf * soft nofile 204800 * hard nofile 204800 * soft nproc 2...
2019-12-31 09:28:22
245
原创 Apache Flink构架
Apache Flink(二) 架构剖析 推荐阅读:https://ci.apache.org/projects/flink/flink-docs-release-1.9/concepts/runtime.html Tasks&Operator Chains “Oprator Chain”:将多个操作符合并到一个Task中,减少不必要的任务间网络通信。 “Task”:类似于Spark...
2019-12-24 09:19:20
216
原创 Apache Flink
Apache Flink(一) Flink发展史 第一代大数据处理方案:2006年Hadoop的MapReduce-批/HDFS, 2014年9月份 apache Storm-流 第二代大数据处理方案:2014年2 Spark RDD -批处理 ,DStream - 流 (批模拟流 )延迟高 第三代大数据处理方案:2014年12 Flink DataStream-流,Dataset- 批...
2019-12-24 09:07:05
221
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人