Spark计算环境中的中间数据均衡放置算法研究

Spark是基于内存计算的分布式并行计算框架,Spark通过引入RDD数据模型及基于内存的 运算模式,使其能很好地适应大数据的数据挖掘这中场景,并且在迭代计算方面 优于Hadoop,迅速成为了广大企业、学者的研究重点。此外,很多科研单位和企 业开始在海量数据的处理和研究中开始应用Spark。