四、spark常用函数说明学习 - 走看看

zoukankan html css js c++ java

四、spark常用函数说明学习

1、parallelize

并行集合，切片数。默认为这个程序所分配到的资源的cpu核的个数。

查看大小：rdd.partitions.size

sc.paralielize(1 to 100,2)

2、rdd持久化

persist()

cache()

http://www.cnblogs.com/ylcoder/

查看全文

相关阅读:
疯狂Java讲义读书笔记（一）
Android5.0开发范例大全读书笔记（六）
Android5.0开发范例大全读书笔记（五）
Android5.0开发范例大全读书笔记（四）
Android5.0开发范例大全读书笔记（三）
Android5.0开发范例大全读书笔记（二）
Android5.0开发范例大全读书笔记（一）
Java基础总结（三）
Java基础总结（二）
Java基础总结（一）

原文地址：https://www.cnblogs.com/ylcoder/p/5730958.html

Copyright © 2011-2022 走看看