Amazon s3 在同一位置具有不同文件结构的配置单元外部表(非分区)

Amazon s3 在同一位置具有不同文件结构的配置单元外部表(非分区),amazon-s3,hive,external-tables,Amazon S3,Hive,External Tables,我的配置单元外部表(非分区)在S3存储桶中包含数据。这是一个增量表 直到今天,通过Informatica流程到达此位置的所有文件都具有相同的结构,并且所有字段都包含在我的增量表结构中的列中 现在我有一个要求,一个新文件在现有文件的基础上加入到同一个存储桶中,但要有额外的列 我已经用附加列重新创建了表 但是,当我查询表时,我看到新添加的列对于那些不应该是空的特定行项目仍然是空的 我真的可以有一个指向S3位置的外部表,该表具有不同的文件结构吗?“我看到新添加的列对于那些不应该是“>>的特定行项目仍然

我的配置单元外部表(非分区)在S3存储桶中包含数据。这是一个增量表

直到今天,通过Informatica流程到达此位置的所有文件都具有相同的结构,并且所有字段都包含在我的增量表结构中的列中

现在我有一个要求,一个新文件在现有文件的基础上加入到同一个存储桶中,但要有额外的列

我已经用附加列重新创建了表

但是,当我查询表时,我看到新添加的列对于那些不应该是空的特定行项目仍然是空的


我真的可以有一个指向S3位置的外部表,该表具有不同的文件结构吗?

“我看到新添加的列对于那些不应该是“>>的特定行项目仍然是空的,但是您没有提供任何关于(a)输入文件格式的有用信息,即CSV、AVRO、JSON、,不管怎样——文件结构(b)表结构(c)文件中的示例记录(d)与配置单元显示的完全相同的记录。您需要有支持模式演变的下划线数据,如拼花地板、ORC或Avro,具体取决于用例。