Java 如何附加ORC文件
我们有一个要求,我们需要显示dJava 如何附加ORC文件,java,hadoop,hive,orc,Java,Hadoop,Hive,Orc,我们有一个要求,我们需要显示dORC文件。我试着用谷歌搜索,但没有结果。另外,orc的org.apache.hadoop.hive.ql.io.orc.WriterImpl没有附加API。还有附加ORC文件的方法吗?(更具体地说,使用JAVA)ORC数据文件被细分为独立的条带;每个条带都可以在单个原子步骤中创建。有关详细信息,请参阅 我不相信您可以动态地直接附加到现有文件。这意味着在写入时留下一个损坏的条带(因此是一个损坏的文件),以防作业崩溃 但是你可以 创建一个新的ORC数据文件(将包含1
ORC
文件。我试着用谷歌搜索,但没有结果。另外,orc
的org.apache.hadoop.hive.ql.io.orc.WriterImpl
没有附加API。还有附加ORC文件的方法吗?(更具体地说,使用JAVA)ORC数据文件被细分为独立的条带;每个条带都可以在单个原子步骤中创建。有关详细信息,请参阅
我不相信您可以动态地直接附加到现有文件。这意味着在写入时留下一个损坏的条带(因此是一个损坏的文件),以防作业崩溃
但是你可以
- 创建一个新的ORC数据文件(将包含1..N条带,具体取决于
在实际数据卷上,每个减速机的
propertyorc.stripe.size
- 然后使用