我想把RDD中的新数据追加到一个HDFS目录中
每次有新数据来都做这个操作
但是直接用RDD.saveAsTextFile会覆盖整个目录 旧的数据就不在了
因为我不能控制RDD.saveAsTextFile的输出文件名
所以不能通过取不同名字来分开保存
FileUtil.copyMerge也不行
首先它好像是根据文件名来覆盖的 但是我要根据内容来覆盖
其次hadoop3不再支持它了
如何做？
撰写回答
推荐问题
一通道的图片都是灰色的吗？
最近在做一个图片算法遇到一个问题，就是下面这个图片使用 python 的 PIL 图监测是一通道的但是这个图片是彩色的，而且背景是透明的，但却是一个 jpg 图片为什么？我一直以为，只有 png 可以有透明图层，jpg 是不行的？一通道不是灰色图片的意思吗？这个老虎图明显是彩色的呀我使用 python 的 PIL 库，将老虎图转成 RGB ...3 回答840 阅读✓ 已解决
请教一个数据库安全的问题？
之前的做法是删除接口只传 id 过去就可以删除了调用一个 del 接口 -[链接]但是这样子发现用户在控制台可以看到请求回来的列表数据，能够看到所有的 id因为知道请求接口，这样子发现会被用户用接口来攻击了，全部给删除了7 回答1.9k 阅读✓ 已解决
请问这种sql能够优化吗？
{代码...}3 回答874 阅读✓ 已解决
后端是否应该主动用cors?
我们公司的是前后端分离的,我感觉往往后端程序员会给 生产环境开cors,但是不给我本地的前端请求开cors,这个是某种最佳实践吗?在这种前后段分离的模式的情况下,后端程序员是否应该主动给我门前端开 本地的和部署环境开cors?我是不是本来应该理直气壮的这么去要求,而不是花时间自己设置proxy?4 回答771 阅读✓ 已解决
redis在本地存数据不乱码,部署的服务器上乱码?
本地mac环境运行,跑起来存数据key和value不乱码,在win上测试了也不乱但是到了线上环境,key前缀出现乱码 value 也全是前缀这种乱码redisConfig已替换原JdkSerializationRedisSerializer:4 回答1.5k 阅读✓ 已解决
动态字典的国际化有什么好的方案？
之前设计动态字典国际化的时候，只考虑了 中/英 两种语言，但是最近有提出计划的需求，就是需要添加一些小语种的本地化，比如说可能会有法语、西班牙语...4 回答1.1k 阅读
这个url解码后为什么还是原来的样子？
https:\u002F\u002Fv2.kwaicdn.com\u002Fupic\u002F2022\u002F11\u002F05\u002F17\u002FBMjAyMjExMDUxNzA2MzdfMjE4MTY4MV84ODAyNDY5MDQ4OF8xXzM=_hd15_B35267cb0a2657012c374e632b1c42829.mp4?pkey=AAW7inBi05mLoR8Z8lVLndNS3SKgjHYxf7hx-my4ntkXZOsejWLkcQSuchTtwOqfkFebQFfPMnT59OFooAUeBmuQDyQRIg-pocqILQp1qV0c0IKoZ...4 回答641 阅读
宣传栏