spark
关注
分享
扫一扫
本专栏讲解spark中各组件的使用，架构原理、实战案例，源码解剖等内容
橙子园
落地生根，长成参天大树
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
java中spark中map、flatmap等算子需要implement的接口，以及使用情况的简单说明
1、spark 的JavaRDD使用map、flatmap、filter等算子时，统一需要implement接口 org.apache.spark.api.java.function.Function使用方法：JavaRDD<CmaCoreMongoSpark> cma = cmaMongo .filter(new FilterCnMedicalPaperFunc()) .filter(new TimeFilterFunc(startTime, endTime原创 2021-09-10 17:08:17 · 1055 阅读 · 0 评论 -
mac中localhost: ssh: connect to host localhost port 22: Connection refused
在学习spark时启动时：./start-all.sh出现错误：localhost: ssh: connect to host localhost port 22: Connection refused解决方法是选择系统偏好设置->选择共享->点击远程登录退出解决...原创 2018-10-31 17:08:17 · 2900 阅读 · 0 评论