Spark:如何附加到缓存的rdd? [英] Spark : How to append to cached rdd?

查看:48
本文介绍了Spark:如何附加到缓存的rdd?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!

问题描述

  • 不同的值随每批流数据一起缓存.
  • 如何通过将下一批中的下一个不同值添加到已缓存的RDD中来构建缓存?

推荐答案

您不能直接将数据与Rdd附加,因为它是不可变的.使用联合创建新的Rdd,然后对其进行缓存.

You can not directly append your data with Rdd because its immutable. Using union to create new Rdd and then cache it.

这篇关于Spark:如何附加到缓存的rdd?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持IT屋!

查看全文
登录 关闭
扫码关注1秒登录
发送“验证码”获取 | 15天全站免登陆