无法通过Java应用程序连接到配置单元
我正试图通过Java应用程序连接到Hive2,但出现以下错误-无法通过Java应用程序连接到配置单元,java,hadoop,jdbc,hive,Java,Hadoop,Jdbc,Hive,我正试图通过Java应用程序连接到Hive2,但出现以下错误- Exception in thread "main" java.sql.SQLException: [Simba][HiveJDBCDriver](500310) Invalid operation: Peer indicated failure: Unsupported mechanism type PLAIN; at com.cloudera.hive.hivecommon.api.HiveServer2Cli
Exception in thread "main" java.sql.SQLException: [Simba][HiveJDBCDriver](500310) Invalid operation: Peer indicated failure: Unsupported mechanism type PLAIN;
at com.cloudera.hive.hivecommon.api.HiveServer2ClientFactory.createTransport(HiveServer2ClientFactory.java:224)
at com.cloudera.hive.hive.api.ExtendedHS2Factory.createClient(ExtendedHS2Factory.java:38)
at com.cloudera.hive.hivecommon.core.HiveJDBCConnection.connect(HiveJDBCConnection.java:597)
at com.cloudera.hive.jdbc.common.BaseConnectionFactory.doConnect(BaseConnectionFactory.java:219)
at com.cloudera.hive.jdbc.common.AbstractDriver.connect(AbstractDriver.java:216)
at java.sql.DriverManager.getConnection(DriverManager.java:664)
at java.sql.DriverManager.getConnection(DriverManager.java:247)
Caused by: com.cloudera.hive.support.exceptions.GeneralException: [Simba][HiveJDBCDriver](500310) Invalid operation: Peer indicated failure: Unsupported mechanism type PLAIN;
... 7 more
Caused by: org.apache.thrift.transport.TTransportException: Peer indicated failure: Unsupported mechanism type PLAIN
at org.apache.thrift.transport.TSaslTransport.receiveSaslMessage(TSaslTransport.java:190)
at org.apache.thrift.transport.TSaslTransport.open(TSaslTransport.java:288)
at org.apache.thrift.transport.TSaslClientTransport.open(TSaslClientTransport.java:37)
at com.cloudera.hive.hivecommon.api.HiveServer2ClientFactory.createTransport(HiveServer2ClientFactory.java:210)
at com.cloudera.hive.hive.api.ExtendedHS2Factory.createClient(ExtendedHS2Factory.java:38)
at com.cloudera.hive.hivecommon.core.HiveJDBCConnection.connect(HiveJDBCConnection.java:597)
at com.cloudera.hive.jdbc.common.BaseConnectionFactory.doConnect(BaseConnectionFactory.java:219)
at com.cloudera.hive.jdbc.common.AbstractDriver.connect(AbstractDriver.java:216)
at java.sql.DriverManager.getConnection(DriverManager.java:664)
at java.sql.DriverManager.getConnection(DriverManager.java:247)
at hive2.hive.main(hive.java:30)
我使用了cloudera提供的以下文档:
任何帮助都将不胜感激。我正在尝试以下连接字符串:-connection con=DriverManager.getConnection(“jdbc:hive2://server.com:12345/default;principal=hive/_org.com”、“user\u id”、“pwd”)代码>
完整代码:
package hive2;
import java.sql.SQLException;
import java.sql.Connection;
import java.sql.ResultSet;
import java.sql.Statement;
import java.sql.DriverManager;
public class hive {
private static String driverName = "com.cloudera.hive.jdbc4.HS2Driver";
public static void main(String[] args) throws SQLException {
try {
Class.forName(driverName);
} catch (ClassNotFoundException e) {
// TODO Auto-generated catch block
e.printStackTrace();
System.exit(1);
}
Connection con = DriverManager.getConnection("jdbc:hive2://server.com:12345/default;principal=hive/_org.COM","user_id","pwd");
Statement stmt = con.createStatement();
String tableName = "testHiveDriverTable";
stmt.executeQuery("drop table " + tableName);
ResultSet res = stmt.executeQuery("create table " + tableName + " (key int, value string)");
// show tables
String sql = "show tables '" + tableName + "'";
System.out.println("Running: " + sql);
res = stmt.executeQuery(sql);
if (res.next()) {
System.out.println(res.getString(1));
}
// describe table
sql = "describe " + tableName;
System.out.println("Running: " + sql);
res = stmt.executeQuery(sql);
while (res.next()) {
System.out.println(res.getString(1) + "\t" + res.getString(2));
}
// load data into table
// NOTE: filepath has to be local to the hive server
// NOTE: /tmp/a.txt is a ctrl-A separated file with two fields per line
String filepath = "/tmp/a.txt";
sql = "load data local inpath '" + filepath + "' into table " + tableName;
System.out.println("Running: " + sql);
res = stmt.executeQuery(sql);
// select * query
sql = "select * from " + tableName;
System.out.println("Running: " + sql);
res = stmt.executeQuery(sql);
while (res.next()) {
System.out.println(String.valueOf(res.getInt(1)) + "\t" + res.getString(2));
}
// regular hive query
sql = "select count(1) from " + tableName;
System.out.println("Running: " + sql);
res = stmt.executeQuery(sql);
while (res.next()) {
System.out.println(res.getString(1));
}
}
}
代码中的驱动程序类是ODBC驱动程序,不能用于JDBC到hiveserver2的连接。有关JDBC连接,请参阅下面的apache配置单元url
下面是Hiveserver2 JDBC连接的示例代码段
文档中也给出了依赖jar,您可以在配置单元库路径中找到这些依赖jar。(/opt/cloudera/CDH/hive/lib/*)代码中的驱动程序类是ODBC驱动程序,它不能用于JDBC连接到hiveserver2。有关JDBC连接,请参阅下面的apache配置单元url
下面是Hiveserver2 JDBC连接的示例代码段
文档中也给出了依赖jar,您可以在配置单元库路径中找到这些依赖jar。(/opt/cloudera/CDH/hive/lib/*)您在cloudera驱动程序上使用了apachejdbc驱动程序的语法!!您链接的(过时的)Cloudera文档很清楚:如果您有Kerberos身份验证,那么您的URL必须类似于jdbc:hive2://server.domain:10000;AuthMech=1;KrbRealm=域;KrbHostFQDN=server.domain;KrbServiceName=hive
>您使用的URL对于具有Kerberos身份验证的Apache驱动程序是有效的。此外,在使用Kerberos身份验证时,用户/Pwd参数完全被忽略。您需要在默认缓存中使用有效的Kerberos票证,或者一些原始JAAS配置和密钥表文件,请参阅。我的答案取决于。有关不使用票证缓存但显式提供要使用的主体及其键表的JAAS配置,请参见我的答案。您也可以交互式地提示输入关键字,但这需要覆盖一些核心Java安全属性,我想您还没有准备好。@Mr.Tea代码是一样的。因为它是一个安全的集群,所以它使用Kerberos身份验证。因此,在缓存中使用正确的用户凭据创建一个票证解决了我的问题。您在Cloudera驱动程序上使用了Apache JDBC驱动程序的语法!!您链接的(过时的)Cloudera文档很清楚:如果您有Kerberos身份验证,那么您的URL必须类似于jdbc:hive2://server.domain:10000;AuthMech=1;KrbRealm=域;KrbHostFQDN=server.domain;KrbServiceName=hive
>您使用的URL对于具有Kerberos身份验证的Apache驱动程序是有效的。此外,在使用Kerberos身份验证时,用户/Pwd参数完全被忽略。您需要在默认缓存中使用有效的Kerberos票证,或者一些原始JAAS配置和密钥表文件,请参阅。我的答案取决于。有关不使用票证缓存但显式提供要使用的主体及其键表的JAAS配置,请参见我的答案。您也可以交互式地提示输入关键字,但这需要覆盖一些核心Java安全属性,我想您还没有准备好。@Mr.Tea代码是一样的。因为它是一个安全的集群,所以它使用Kerberos身份验证。因此,在缓存中创建一个具有正确用户凭据的票证为我解决了问题。我已经尝试了此代码。它给出了一个错误。另外,如果我的本地系统上没有安装hive,我在哪里可以获得所需的JAR?我已经尝试过这段代码。它给出了一个错误。另外,如果本地系统上没有安装hive,我在哪里可以获得所需的JAR?