Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop 带合并键的sqoop增量导入_Hadoop_Merge_Increment_Sqoop - Fatal编程技术网

Hadoop 带合并键的sqoop增量导入

Hadoop 带合并键的sqoop增量导入,hadoop,merge,increment,sqoop,Hadoop,Merge,Increment,Sqoop,带有--merge键的sqoop增量导入作业似乎有以下两个主要限制 不支持嵌套的目标目录 两个阶段不是原子的,即即使第二阶段失败,第一阶段的最后一个值也会更新 在1上,如果目标目录具有嵌套的目录,则会抛出一个错误,说明该路径不是文件 有什么想法吗 sqoop合并似乎也有上述限制1。这需要解决。两个阶段不是原子的,即即使第二阶段失败,第一阶段的最后一个值也会更新。找到解决办法了吗?我的合并工作一直失败@这需要解决。两个阶段不是原子的,即即使第二阶段失败,第一阶段的最后一个值也会更新。找到解决办法了

带有--merge键的sqoop增量导入作业似乎有以下两个主要限制

  • 不支持嵌套的目标目录
  • 两个阶段不是原子的,即即使第二阶段失败,第一阶段的最后一个值也会更新
  • 在1上,如果目标目录具有嵌套的目录,则会抛出一个错误,说明该路径不是文件

    有什么想法吗


    sqoop合并似乎也有上述限制1。

    这需要解决。两个阶段不是原子的,即即使第二阶段失败,第一阶段的最后一个值也会更新。找到解决办法了吗?我的合并工作一直失败@这需要解决。两个阶段不是原子的,即即使第二阶段失败,第一阶段的最后一个值也会更新。找到解决办法了吗?我的合并工作一直失败@学习人类