Hadoop 我们可以使用sync()或syncFs()方法追加到现有文件中吗?

Hadoop 我们可以使用sync()或syncFs()方法追加到现有文件中吗?,hadoop,mapreduce,hadoop-streaming,Hadoop,Mapreduce,Hadoop Streaming,我在hadoop中制作了自己的jar,也有自己的shell脚本运行我的jar 我的hadoop jar工作正常,删除上一个。因为hadoop不支持追加和创建新目录,所以目录已经存在 但问题是,我的服务每运行一秒就会继续运行,而我在HDFS上看不到任何目录,因为作业正在运行 我只想附加我现有的目录。我不确定我是否理解您的问题,但为什么不使您的目录名唯一,例如每次运行作业时在目录中添加unix时间戳?谢谢您的答复,先生,实际上,先生,我想开发运行时机制。。我的hadoop jar是LogAnalyz

我在hadoop中制作了自己的jar,也有自己的shell脚本运行我的jar

我的hadoop jar工作正常,删除上一个。因为hadoop不支持追加和创建新目录,所以目录已经存在

但问题是,我的服务每运行一秒就会继续运行,而我在HDFS上看不到任何目录,因为作业正在运行


我只想附加我现有的目录。

我不确定我是否理解您的问题,但为什么不使您的目录名唯一,例如每次运行作业时在目录中添加unix时间戳?谢谢您的答复,先生,实际上,先生,我想开发运行时机制。。我的hadoop jar是LogAnalyzer jar,所以一旦生成日志,我就必须映射它们,减少它们,这样我就必须查看日志运行时,但问题是我不能在hadoop中附加到现有文件中