超级会员免费看
1. 简介
Spark 的身世
Spark 是一个通用的并行计算框架，由加州伯克利大学(UC Berkeley)的 AMP 实验室开发于 2009 年，并于 2010 年开源，2013 年成长为 Apache 旗下在大数据领域最活跃的开源项目之一。
目前 Spark 的版本已经更新到了 2.4.5，并且预上线了 3.0 版本，相信未来会有更精彩的地方值得我们期待。
Spark 是一个通用的并行计算框架，由加州伯克利大学开发，支持 Java, Scala, Python 和 R 等语言。相比 Hadoop-MR，Spark 提供了更高的性能，减少磁盘 I/O，增加并行度，避免重复计算。其运行组件包括 Driver, Master, Worker 和 Executor，提供了 DAG 调度和灵活的内存管理。Spark 的编程模型包括 SparkContext, RDD, DAGScheduler 等，支持批量和流处理，广泛应用于大数据领域。"
113608758,10293952,MySQL数据库导出与导入命令详解,"['MySQL', '数据库管理', '数据备份', '数据恢复']
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
