Spark – 春马与夏

WeChat

发布于 2024-07-01

111 热度无~ 大数据346 字2 分钟

Spark on yarn的作业提交流程

摘要

一、YarnClient 二、YarnCluster 三、详细描述

发布于 2024-05-14

222 热度无~ 大数据814 字4 分钟

Spark为什么比MapReduce快

摘要

误区两者都是基于内存计算的，任何计算框架都是基于内存计算的，不会把数据在磁盘中运算。 DAG计算模型减少的是不必要的中间结果的计 …