Spark|Spark core源码分析--shuffle管理器
1、shuffleManager其实本身就依赖于存储体系，但是功能与计算非常紧密，姑且认为它是计算引擎的一部分。
ShuffleManager的实现类目前只有SortShuffleManager，因此现对它进行分析：
spark2.4-490 【Spark|Spark core源码分析--shuffle管理器】1.1 ShuffleWriter详解
ShuffleWriter 是一个抽象类，包含一个write和stop方法，定义了map阶段的中间结果写到磁盘的规范。他包含了如下三个子类的实现。
文章图片
123 1.2 MapStatus
未完。。。。蛋疼的编辑器
推荐阅读
- Android事件传递源码分析
- Spark|Spark 数据倾斜及其解决方案
- Quartz|Quartz 源码解析(四) —— QuartzScheduler和Listener事件监听
- [源码解析]|[源码解析] NVIDIA HugeCTR，GPU版本参数服务器---(3)
- ffmpeg源码分析01（结构体）
- Java程序员阅读源码的小技巧，原来大牛都是这样读的，赶紧看看！
- 关于Core|关于Core Image
- Vue源码分析—响应式原理(二)
- ASP.NET|ASP.NET Core应用开发思维导图
- SwiftUI|SwiftUI iOS 瀑布流组件之仿CollectionView不规则图文混合(教程含源码)