Import 从Mysql数据库导入Sqoop需要花费大量时间才能完成_Import_Hive_Hdfs_Sqoop

Import 从Mysql数据库导入Sqoop需要花费大量时间才能完成

import hive

Import 从Mysql数据库导入Sqoop需要花费大量时间才能完成,import,hive,hdfs,sqoop,Import,Hive,Hdfs,Sqoop,我正在尝试从MySQL表“employees”导入大约5条记录，并通过在Sqoop import命令中创建一个配置单元表将其导入hdfs。但是查询运行了很长时间，我看不到任何结果我已经启动了Hadoop服务，它已经启动并运行。我也可以在配置单元中手动创建表 sqoop import --connect jdbc:mysql://localhost:3306/DBName --username UserID --password Pwd --split-by EMPLOYEE_ID

我正在尝试从MySQL表“employees”导入大约5条记录，并通过在Sqoop import命令中创建一个配置单元表将其导入hdfs。但是查询运行了很长时间，我看不到任何结果

我已经启动了Hadoop服务，它已经启动并运行。我也可以在配置单元中手动创建表

sqoop import --connect jdbc:mysql://localhost:3306/DBName 
  --username UserID --password Pwd --split-by EMPLOYEE_ID 
  -e "select EMPLOYEE_ID,FIRST_NAME from employees where EMPLOYEE_ID <=105 and $CONDITIONS" 
  --target-dir /user/hive/warehouse/mysqldb.db/employees 
  --fields-terminated-by ","   
  --hive-import  
  --create-hive-table 
  --hive-table mysqldb.employees -m2

sqoop导入--连接jdbc:mysql://localhost:3306/DBName 
--用户名UserID--密码Pwd--按员工ID拆分
-e“从员工ID…等待分配AM容器的员工中选择员工ID，第一个姓名…”。。。您的Thread配置有问题，因为ResourceManager无法分配容器来运行ApplicationMaster。谢谢……这是Thread节点管理器的问题，权限问题如下。。。。。。为dir/tmp/hadoop samsh/nm local dir/usercache错误设置的权限应为rwxr-xr-x，实际值=rwxr-x