Sqoop报错记录

最新推荐文章于 2024-09-08 19:00:00 发布

原创最新推荐文章于 2024-09-08 19:00:00 发布 · 1.2k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#sqoop #mysql

hadoop 专栏收录该内容

5 篇文章

订阅专栏

本文解决了一个常见的问题：从MySql导入数据到Hive时遇到的连接未关闭错误。错误提示表明MySql不允许同时存在多个活跃的流式结果集。文章提供了具体的错误堆栈跟踪并推荐将mysql-connector-java的版本从5.0.8更新到5.1.33以解决问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1，在进行从MySql到hive的数据导入时，出现如下错误：

Streaming result set com.mysql.jdbc.RowDataDynamic@7c30e29c is still active.No statements may be issued when any streaming result sets are open and in use on a given connection. Ensure that you have called .close() on any active streaming result sets before attempting more queries.
	at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:934)
	at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:931)
	at com.mysql.jdbc.MysqlIO.checkForOutstandingStreamingData(MysqlIO.java:2735)
	at com.mysql.jdbc.MysqlIO.sendCommand(MysqlIO.java:1899)
	at com.mysql.jdbc.MysqlIO.sqlQueryDirect(MysqlIO.java:2151)
	at com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2619)
	at com.mysql.jdbc.ConnectionImpl.execSQL(ConnectionImpl.java:2569)
	at com.mysql.jdbc.StatementImpl.executeQuery(StatementImpl.java:1521)
	at com.mysql.jdbc.ConnectionImpl.getMaxBytesPerChar(ConnectionImpl.java:3003)
	at com.mysql.jdbc.Field.getMaxBytesPerCharacter(Field.java:602)
	at com.mysql.jdbc.ResultSetMetaData.getPrecision(ResultSetMetaData.java:445)

这好像是MySql的问题，挺多人在写代码时没有把之前的连接close掉，但是MySql一次只允许一个连接，所以出现错误。

解决办法：把$SQOOP_HOME/lib下面原来的mysql-connector-java-5.0.8-bin.jar替换为mysql-connector-java-5.1.33-bin.jar