极客观点
项目管理
HarmonyOS
好多MapReduce On Yarn ， Spark On Yarn
可是没有yarn， MapReduce Spark 不是一样跑
Yarn的出现到底给MapReduce、Spark等带来了什么？
阅读 3.4k
撰写回答
你尚未登录，登录后可以
- 和开发者交流问题的细节
- 关注并接收问题和回答的更新提醒
- 参与内容的编辑和改进，让解决方法与时俱进
推荐问题
vue3项目yarn install 安装依赖时报错怎么解决？
vue3项目yarn install 安装依赖时报错 {代码...} 删除了node_modules,清除了yarn缓存，重新安装也不行2 回答2.6k 阅读✓ 已解决
yarn安装包后报错，怎么解决？
vue3,node版本14yarn add @vant/g6 执行命令行后页面报错如下： {代码...} 解决报错5 回答1.9k 阅读
二进制文件或者视频、音频、文档文件如何写入数据湖，如何使用？
关于数据湖的存储数据都说支持各类型数据，如结构化、非结构化、二进制等等但是很多案例或者demo都是做实时数据或者离线数据处理，感觉和以前用kafka，hive用法差不多没有看到具体怎么将视频或者图片或者pdf文件等等这类数据写入数据湖有没有大佬有相关示例或者介绍下这类数据入湖的思路hudi、iceberg都可以，有具体示例...1 回答3.6k 阅读
scala栈溢出的问题？
代码： {代码...} 错误： {代码...} 一直会报栈溢出我尝试增大栈的大小： {代码...} 但是时好时坏好像也不是代码的问题我想根治这个问题谢谢大神！！！补充：redisDAO {代码...}1 回答543 阅读✓ 已解决
spark mlib堆栈溢出错误 谢谢？
每次运行ALS.train(ratings,rank,numIterations,lambda)都会报错我尝试了把类序列化/移出config/检查4个变量的输入 都不行谢谢大神1 回答471 阅读✓ 已解决
这是为了统一资源管理,假如我集群同时装了spark与hadoop,spark是不知道mapreduce任务占了多少内核,多少内存的,分配任务的时候,以为这个节点是空闲的,其实已经被mapreduce占满了,就会导致spark任务运行失败,同时资源不统一管理也会涉及到相互锁住资源的问题.