Hive 如何将数据从配置单元表复制到已加载某些数据的HBase表
我们有一个在日期（yyyy-MM-dd）进行分区的配置单元表，该表每天都加载最新日期分区的新数据。此外，该表还包含过去2年的数据（已分区） 现在我们正在将系统迁移到HBase，我们希望将数据从配置单元表中逐分区复制到HBase。还有另一个过程，它每天使用新数据将数据加载到HBase表中（如hive中的日期划分）。我们将行键设计为bucket（pkid%16）、schema（md5的几个字节）、date（字符串到字节数组）、pkid（长到字节数组）值的组合Hive 如何将数据从配置单元表复制到已加载某些数据的HBase表,hive,hbase,sqoop,Hive,Hbase,Sqoop,我们有一个在日期（yyyy-MM-dd）进行分区的配置单元表，该表每天都加载最新日期分区的新数据。此外，该表还包含过去2年的数据（已分区） 现在我们正在将系统迁移到HBase，我们希望将数据从配置单元表中逐分区复制到HBase。还有另一个过程，它每天使用新数据将数据加载到HBase表中（如hive中的日期划分）。我们将行键设计为bucket（pkid%16）、schema（md5的几个字节）、date（字符串到字节数组）、pkid（长到字节数组）值的组合 我们想将数据从Hive复制到HBase，
我们想将数据从Hive复制到HBase，是否有更好的方法来实现这一点，并且解决方案不应对我们每天带来的数据产生任何影响（从oracle db到HBase的Sqoop）。请务必让我知道您对此的建议或想法。。。