spark的accumulator值保存在哪里？ - 走看看

zoukankan html css js c++ java

spark的accumulator值保存在哪里？

　答案：保存在driver端。因此需要对收集的信息的规模要加以控制，不宜过大。避免 driver端的outofmemory问题！！！

查看全文

相关阅读:
AtomicIntegerFieldUpdater 源码分析
 AtomicIntegerArray 源码分析
 AtomicInteger 源码分析
 ArrayBlockingQueue 源码分析
 ReentrantReadWriteLock 源码分析
 ReentrantLock 源码分析
 <Chapter 2>2-2-2.开发Java应用（Developing a Java App）
<Chapter 2>2-2-2.开发Python应用（Developing a Python App）
<Chapter 2>2-2-1.用户偏好模式（The User Preferences Pattern）
<Chapter 2>2-2.开发应用（developing the Application）

原文地址：https://www.cnblogs.com/runnerjack/p/8693568.html

Copyright © 2011-2022 走看看