Spark入门

📅 2026/7/19 13:56:25
Spark入门
MapReduce只支持mapreduce为了节约内存大量与磁盘交互主要用于大规模离线批处理运算。spark最大的特定是快。Spark Core核心Spark SQLSpark Streaming都是转换为sparkCore的代码去运行。streaming是通过比如500ms跑一个小批次从而实现类似的实时流处理。spark能实现多种场景都是转换为sparkCore的。